P T 	 A U 	 B A 	 B E 	 G P 	 A F 	 B F 	 C A 	 T I 	 S O 	 S E 	 B S 	 L A 	 D T 	 C T 	 C Y 	 C L 	 S P 	 H O 	 D E 	 I D 	 A B 	 C 1 	 R P 	 E M 	 R I 	 O I 	 F U 	 F X 	 C R 	 N R 	 T C 	 Z 9 	 U 1 	 U 2 	 P U 	 P I 	 P A 	 S N 	 E I 	 B N 	 J 9 	 J I 	 P D 	 P Y 	 V L 	 I S 	 P N 	 S U 	 S I 	 M A 	 B P 	 E P 	 A R 	 D I 	 D 2 	 P G 	 W C 	 S C 	 G A 	 U T 	 P M 
 
 J 	 B o r n m a n n ,   L ;   D a n i e l ,   H D 	 	 	 	 B o r n m a n n ,   L u t i ;   D a n i e l ,   H a n s - D i e t e r 	 	 	 W h a t   d o   c i t a t i o n   c o u n t s   m e a s u r e ?   A   r e v i e w   o f   s t u d i e s   o n   c i t i n g   b e h a v i o r 	 J O U R N A L   O F   D O C U M E N T A T I O N 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 r e f e r e n c e   s e r v i c e s ;   b i b l i o g r a p h i c   s y s t e m s 	 A S S E S S M E N T   E X E R C I S E   R A T I N G S ;   C I T E D   O L D   P A P E R S ;   2 7   S C I E N C E   A R E A S ;   S O C I A L - S C I E N C E S ;   B I B L I O M E T R I C   I N D I C A T O R S ;   M E T H O D O L O G I C A L   P R O B L E M S ;   C U M U L A T I V E   A D V A N T A G E ;   S C I E N T O M E T R I C   W E I G H T ;   I N F O R M A T I O N - S C I E N C E ;   S C I E N T I F I C - R E S E A R C H 	 P u r p o s e   -   T h e   p u r p o s e   o f   t h i s   p a p e r   i s   t o   p r e s e n t   a   n a r r a t i v e   r e v i e w   o f   s t u d i e s   o n   t h e   c i t i n g   b e h a v i o r   o f   s c i e n t i s t s ,   c o v e r i n g   m a i n l y   r e s e a r c h   p u b l i s h e d   i n   t h e   l a s t   1 5   y e a r s .   B a s e d   o i l   t h e   r e s u l t s   o f   t h e s e   s t u d i e s ,   t h e   p a p e r   s e e k s   t o   a n s w e r   t h e   q u e s t i o n   O f   t h e   e x t e n t   t o   w h i c h   s c i e n t i s t s   a r e   m o t i v a t e d   t o   c i t e   a   p u b l i c a t i o n   n o t   o n l y   t o   a c k n o w l e d g e   i n t e l l e c t u a l   m i d   c o g n i t i v e   i n f l u e n c e s   o f   s c i e n t i f i c   p e e r s ,   b u t   a l s o   f o r   o t h e r ,   p o s s i b l y   n o n - s c i e n t i f i c ,   r e a s o n s .   D e s i g n / m e t h o d o l o g y / a p p r o a c h   -   T h e   r e v i e w   c o v e r s   r e s e a r c h   p u b l i s h e d   f r o m   t h e   e a r l y   1 9 6 0 ;   u p   t o   m i d - 2 0 0 5   ( a p p r o x i m a t e l y   3 0   s t u d i e s   o n   c i t i n g   b e h a v i o r - r e p o r t i n g   r e s u l t s   i n   a b o u t   4 0   p u b l i c a t i o n s ) .   F i n d i n g s   -   T h e   g e n e r a l   t e n d e n c y   o f   t h e   r e s u l t s   o f   t h e   e m p i r i c a l   s t u d i e s   m a k e s   i t   c l e a r   t h a t   c i t i n g   b e h a v i o r   i s   n o t   m o t i v a t e d   s o l e l y   b y   t h e   w i s h   t o   a c k n o w l e d g e   i n t e l l e c t u a l   a n d   c o g n i t i v e   i n f l u e n c e s   o f   C o l l e a g u e   s c i e n t i s t s ,   s i n c e   t h e   i n d i v i d u a l   s t u d i e s   r e v e a l   a l s o   o t h e r ,   i n   p a r t   n o n - s c i e n t i f i c ,   f a c t o r s   t h a t   p l a y   a   p a r t   i n   t h e   d e c i s i o n   t o   c i t e .   H o w e v e r ,   t h e   r e s u l t s   o f   t h e   s t u d i e s   m u s t   a l s o   b e   d e e m e d   s c a r c e l y   r e l i a b l e :   t h e   s t u d i e s   v a r y   w i d e l y   i n   d e s i g n ,   a n d   t h e i r   r e s u l t s   c a n   h a r d l y   b e   r e p l i c a t e d .   M a n y   o f   t h e   s t u d i e s   h a v e   m e t h o d o l o g i c a l   w e a k n e s s e s .   F u r t h e r m o r e ,   t h e r e   i s   e v i d e n c e   t h a t   f i l e   d i f f e r e n t   m o t i v a t i o n s   o f   c i t e r s   a r e   " n o t   s o   d i f f e r e n t   o r   ' r a n d o m l y   g i v e n '   t o   s u c h   a n   e x t e n t   t h a t   t h e   p h e n o m e n o n   o f   c i t a t i o n   w o u l d   l o s e   i t s   r o l e   a s   a   r e l i a b l e   m e a s u r e   o f   i m p a c t " .   O r i g i n a l i t y / v a l u e   -   G i v e n   t h e   i n c r e a s i n g   i m p o r t a n c e   o f   e v a l u a t i v e   b i b l i o m e t r i c s   i l l   t h e   w o r l d   o f   s c h o l a r s h i p ,   t h e   q u e s t i o n   " W h a t   d o   c i t a t i o n   c o u n t s   m e a s u r e ? "   i s   a   p a r t i c u l a r l y   r e l e v a n t   a n d   t o p i c a l   i s s u e . 	 [ B o r n m a n n ,   L u t i ;   D a n i e l ,   H a n s - D i e t e r ]   E T H ,   Z u r i c h ,   S w i t z e r l a n d 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   E T H ,   Z u r i c h ,   S w i t z e r l a n d . 	 b o r n m a n n @ g e s s . e t h z . c h 	 D a n i e l ,   H a n s - D i e t e r / A - 2 4 1 9 - 2 0 1 3 ;   B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 	 	 	 A B T   H A ,   1 9 9 3 ,   P U B L   A S T R O N   S O C   P A C ,   V 1 0 5 ,   P 7 9 4 ,   D O I   1 0 . 1 0 8 6 / 1 3 3 2 3 2 ;   A h m e d   T ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 1 6 4 5 . 6 0 9 0 7 . 5 7 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   * A M   P S Y C H   A S S ,   2 0 0 4 ,   P U B L   M A N   A M   P S Y C H   A S ;   A N D E R S O N   A ,   1 9 8 8 ,   N A T U R E ,   V 3 3 5 ,   P 3 8 9 ;   A N D E R S O N   R C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 2 0 8 ;   A R C H A M B A U L T   E ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ;   A y r e s   I ,   2 0 0 0 ,   J   L E G A L   S T U D ,   V 2 9 ,   P 4 2 7 ,   D O I   1 0 . 1 0 8 6 / 4 6 8 0 8 1 ;   B a l d i   S ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 4 ;   B A Y E R   A E ,   1 9 6 6 ,   S O C I O L   E D U C ,   V 3 9 ,   P 3 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 1 9 2 0 ;   B a z e r m a n   C h a r l e s ,   1 9 8 8 ,   S H A P I N G   W R I T T E N   K N O W ;   B e a v e r   D D ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 3 9 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 2 . 8 5 3 6 0 . c d ;   B O N Z I   S ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 7 1 ;   B O R G M A N   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 7 2 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 4 - 2 ;   B o t t   D .   M . ,   1 9 9 1 ,   A M   S O C I O L ,   V 2 2 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 7 = B F 0 2 6 9 1 8 7 4 ;   B O W K E R   R R ,   2 0 0 5 ,   U L R I C H S   P E R I O D I C A L S ;   B o y a c k   K . W . ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ;   B R A U N   T ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 2 ;   B R A U N   T ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 4 2 1 ;   B R O A D U S   R N ,   1 9 7 1 ,   I N T   S O C   S C I   J ,   V 2 3 ,   P 2 3 6 ;   B R O A D U S   R N ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 6 ;   B R O O K S   T A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 4 ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 4 0 2 ;   B u r r e l l   Q L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 3 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 0 7 ;   C A N O   V ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 8 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 8 4 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - Z ;   C A N O   V ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 0 3 ;   C A R P E N T E R   M P ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 4 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 6 0 6 ;   C a s e   D O ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 7 < 6 3 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - H ;   C A W K E L L   A E ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 5 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 5 ;   C A W K E L L   A E ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 9 9 ;   C H R I S T E N S E N S Z A L A N S K I   J J J ,   1 9 8 4 ,   A M   P S Y C H O L ,   V 3 9 ,   P 7 5 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 3 9 . 1 . 7 5 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C o l e   D N ,   2 0 0 0 ,   U S   F O R   S E R V   R M R S - P ,   V 1 ,   P 1 ;   C O L E   J ,   1 9 7 1 ,   A M   S O C I O L ,   V 6 ,   P 2 3 ;   C O L E   J R ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 3 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 5 9 . 3 6 8 ;   C o l e   J .   R . ,   1 9 7 3 ,   S O C I A L   S T R A T I F I C A T I O ;   C O L E   S ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 5 ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 9 ;   C O L E   S ,   1 9 7 0 ,   A M   J   S O C I O L ,   V 7 6 ,   P 2 8 6 ,   D O I   1 0 . 1 0 8 6 / 2 2 4 9 3 4 ;   C O L E   S ,   1 9 6 8 ,   A M   S O C I O L   R E V ,   V 3 3 ,   P 3 9 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 9 1 4 ;   C o l e   S t e p h e n ,   1 9 7 5 ,   I D E A   S O C I A L   S T R U C T U R ;   C O L E   S ,   1 9 9 1 ,   O U T E R   C I R C L E   W O M E N   S ;   C o l e   S . ,   1 9 9 2 ,   M A K I N G   S C I   N A T U R E   S O ;   C O L L I N S   H ,   2 0 0 1 ,   G R A V I T Y S   S H A D O W   S E A R ;   C o l l i n s   H M ,   2 0 0 0 ,   A M   S O C I O L   R E V ,   V 6 5 ,   P 8 2 4 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 1 5 ;   C o l l i n s   H M ,   1 9 9 9 ,   S O C   S T U D   S C I ,   V 2 9 ,   P 1 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 9 0 2 9 0 0 2 0 0 1 ;   C O Z Z E N S   S E ,   1 9 8 5 ,   S O C   S T U D   S C I ,   V 1 5 ,   P 1 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 5 0 1 5 0 0 1 0 0 5 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L ;   C r o n i n   B ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 0 5 ;   C r o n i n   B ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 0 6 . 3 0 1 3 8 . 4 9 ;   C R O N I N   B ,   1 9 8 2 ,   S O C   S C I   I N F O R M   S T U D ,   V 2 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 2 ) 9 0 0 0 1 - 1 ;   C R O N I N   B ,   1 9 8 1 ,   J   I N F O R M   S C I ,   V 3 ,   P 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 1 0 0 3 0 0 1 0 4 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C r o n i n   B l a i s e ,   2 0 0 5 ,   H A N D   S C I   A C A D   W R I T I N ;   C R O N I N   B ,   1 9 8 1 ,   S O C   S C I   I N F O R M ,   V 2 4 ,   P 4 8 ;   D a n i e l   H .   D . ,   2 0 0 4 ,   G U A R D I A N S   S C I   F A I R N E ;   E I C H O R N   P ,   1 9 8 7 ,   A M   J   P U B L I C   H E A L T H ,   V 7 7 ,   P 1 0 1 1 ,   D O I   1 0 . 2 1 0 5 / A J P H . 7 7 . 8 . 1 0 1 1 ;   E V A N S   D C ,   1 9 9 0 ,   J   B I O P H A R M   S C I ,   V 1 ,   P 3 5 3 ;   F i n n e y   B . ,   1 9 7 9 ,   T H E S I S   C I T Y   U   L O N D O N ;   F R O S T   C O ,   1 9 8 9 ,   L I B R   R E S O U R   T E C H   S E R ,   V 3 3 ,   P 3 4 4 ;   F R O S T   C O ,   1 9 7 9 ,   L I B R   Q U A R T ,   V 4 9 ,   P 3 9 9 ;   G A R F I E L D   E ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 4 2 4 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 4 2 4 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 6 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G a r f i e l d   E ,   2 0 0 2 ,   S C I E N T I S T ,   V 1 6 ,   P 1 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 7 8 ,   C U R R   C O N T E N T S ,   P 5 ;   G a r f i e l d   E . ,   1 9 6 2 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 1 ,   P 8 4 ;   G A R F I E L D   E ,   1 9 8 1 ,   C U R R E N T   C O N T E N T S ,   P 5 ;   G a r z o n e   M ,   2 0 0 0 ,   L E C T   N O T E S   A R T I F   I N T ,   V 1 8 2 2 ,   P 3 3 7 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G l a s e r   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 1 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 4 3 8 3 2 0 8 4 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H A G S T R O M   W O ,   1 9 7 1 ,   S O C I O L   E D U C ,   V 4 4 ,   P 3 7 5 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 0 2 9 ;   H a n n e y   S ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 7 9 - y ;   H a n n e y   S . ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ;   H A N N E Y   S ,   2 0 0 3 ,   3 1   B R U N   U   H L T H   E C   R E ;   H a r g e n s   L L ,   2 0 0 0 ,   A M   S O C I O L   R E V ,   V 6 5 ,   P 8 4 6 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 1 6 ;   H e m l i n   S v e n ,   1 9 9 6 ,   S O C I A L   E P I S T E M O L O G Y ,   V 1 0 ,   P 2 0 9 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 9 1 7 2 9 6 0 8 5 7 8 8 1 5 ;   H E R L A C H   G ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 3 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 6 0 8 ;   H I C K S   D ,   1 9 9 1 ,   S O C   S T U D   S C I ,   V 2 1 ,   P 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 1 0 2 1 0 0 3 0 0 3 ;   H j o r l a n d   B ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 2 0 9 : : A I D - A S I 1 4 > 3 . 3 . C O ; 2 - 2 ;   H O L D E N   C ,   1 9 8 7 ,   S C I E N C E ,   V 2 3 5 ,   P 1 5 6 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 8 1 3 5 5 ;   H O O T E N   P A ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 7 ) 4 2 : 6 < 3 9 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - N ;   H U R T   C D ,   1 9 8 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 7 ) 9 0 0 3 3 - 1 ;   I N H A B E R   H ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 1 0 2 ;   J E N S E N   A R ,   1 9 6 9 ,   H A R V A R D   E D U C   R E V ,   V 3 9 ,   P 1 ;   J O H A N S S O N   C M A ,   1 9 7 6 ,   T H E S I S   C I T Y   U   L O N D O N ;   K e l l s e y   C ,   2 0 0 4 ,   C O L L   R E S   L I B R ,   V 6 5 ,   P 1 9 4 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K l a m e r   A . ,   2 0 0 2 ,   J   E C   M E T H O D O L O G Y ,   V 9 ,   P 2 8 9 ,   D O I   [ 1 0 . 1 0 8 0 / 1 3 5 0 1 7 8 0 2 2 0 0 0 0 1 5 1 0 4 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 0 1 7 8 0 2 2 0 0 0 0 1 5 1 0 4 ] ;   K n o r r - C e t i n a   K . ,   1 9 9 1 ,   C O N T E M P   S O C I O L ,   V 2 0 ,   P 5 2 2 ;   K n o r r - C e t i n a   K . K . ,   1 9 8 1 ,   M A N U F A C T U R E   K N O W L E D G ;   K O C H A N   C A ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 8 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 8 ) 4 3 : 7 < 4 8 8 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 7 ;   K O C H E N   M ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   K r a m p e n   G . ,   2 0 0 2 ,   W I S S E N S C H A F T S F O R S C H U ;   K u r t z   M J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 9 6 ;   L A B A N D   D N ,   1 9 9 0 ,   Q   J   E C O N ,   V 1 0 5 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 9 3 7 7 9 0 ;   L A B A N D   D N ,   1 9 9 4 ,   J   P O L I T   E C O N ,   V 1 0 2 ,   P 1 9 4 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 9 2 7 ;   L a t o u r   B . ,   1 9 7 9 ,   L A B   L I F E   S O C I A L   C O N S ;   L A W A N I   S M ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 1 0 9 ;   L A W A N I   S M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 4 ;   L a w a n i   S .   M . ,   1 9 7 7 ,   J   A G R O N O M I C   E D ,   V 6 ,   P 4 1 ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L e w i s o n   G ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 3 ;   L e w i s o n   G ,   1 9 9 8 ,   G U T ,   V 4 3 ,   P 2 8 8 ;   L I P E T Z   B A ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 2 0 7 ;   L I U   M X ,   1 9 9 3 ,   J   I N F O R M   S C I ,   V 1 9 ,   P 1 3 ;   L I U   M X ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 3 7 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 2 0 ;   L i u   Z M ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 1 ) 4 8 : 1 < 8 0 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Y ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / 0 9 6 8 - 0 0 0 4 ( 8 9 ) 9 0 0 7 7 - 7 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M A C R O B E R T S   M H ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 4 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 1 1 ) 3 9 : 6 < 4 3 2 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 2 ;   M A C R O B E R T S   M H ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 3 0 5 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - I ;   M A C R O B E R T S   M H ,   1 9 8 6 ,   S O C   S T U D   S C I ,   V 1 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 6 0 1 6 0 0 1 0 0 8 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M a c R o b e r t s   M H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 7 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 7 4 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - U ;   M a h l c k   P ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 1 2 0 8 8 1 0 ;   M a r i c i c   S ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 3 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 5 0 1 ) 4 9 : 6 < 5 3 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 8 ;   M C C A I N   K W ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 2 9 ;   M C C A I N   K W ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ;   M e a d o w s   A .   J . ,   1 9 9 8 ,   C O M M U N I C A T I N G   R E S ;   M E N O U   M J ,   1 9 8 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 3 ) 9 0 0 6 5 - 1 ;   M E R C E R   R E ,   2 0 0 4 ,   B I O L I N K   2 0 0 4   L I N K I N G ;   M E R T O N   R K ,   1 9 5 7 ,   A M   S O C I O L   R E V ,   V 2 2 ,   P 6 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 8 9 1 9 3 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M E R T O N   R K ,   1 9 8 8 ,   I S I S ,   V 7 9 ,   P 6 0 6 ,   D O I   1 0 . 1 0 8 6 / 3 5 4 8 4 8 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M o e d   H F ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 9 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 7 5 . 3 9 3 8 5 . 8 4 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   M O R A V C S I K   M J ,   1 9 8 8 ,   S O C   S T U D   S C I ,   V 1 8 ,   P 5 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 8 0 1 8 0 0 3 0 0 5 ;   M U R U G E S A N   P ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 0 7 ;   M Y E R S   C R ,   1 9 7 0 ,   A M   P S Y C H O L ,   V 2 5 ,   P 1 0 4 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 3 0 1 4 9 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N i c o l a i s e n   J ,   2 0 0 3 ,   P   A S I S T   A N N U ,   V 4 0 ,   P 1 2 ;   N i c o l a i s e n   J ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 3 8 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 3 1 1 1 8 ;   O C O N N O R   J ,   1 9 8 0 ,   P   A M   S O C   I N F O R M   S C I ,   V 1 7 ,   P 1 7 7 ;   O P P E N H E I M   C ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 0 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O P P E N H E I M   C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 4 ;   P E R I T Z   B C ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 6 ;   P E T E R S   H P F ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 9 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Q ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   R a b o w   H . ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ;   R a f f   M C ,   2 0 0 4 ,   S C I E N C E ,   V 3 0 5 ,   P 9 4 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 0 5 . 5 6 8 6 . 9 4 5 ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   S A N D S T R O M   U ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ;   S E G L E N   P O ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / 0 9 6 8 - 0 0 0 4 ( 8 9 ) 9 0 1 6 3 - 1 ;   S H A D I S H   W R ,   1 9 9 5 ,   S O C   S T U D   S C I ,   V 2 5 ,   P 4 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 5 0 2 5 0 0 3 0 0 3 ;   S H A W   J G ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 9 2 ;   S I L V E R M A N   R J ,   1 9 8 5 ,   R E S   H I G H   E D U C ,   V 2 3 ,   P 1 5 0 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 9 7 6 8 2 5 ;   S I M O N T O N   D K ,   1 9 9 2 ,   J   P E R S   S O C   P S Y C H O L ,   V 6 2 ,   P 5 ,   D O I   1 0 . 1 0 3 7 / 0 0 2 2 - 3 5 1 4 . 6 2 . 1 . 5 ;   S m a l l   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 7 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 0 . 6 8 3 9 3 . b c ;   S m a l l   H ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 0 3 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M A L L   H G ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ;   W a l d f o g e l   J . ,   1 9 9 6 ,   5 4 6 0   N B E R ;   S m i t h   A . ,   2 0 0 2 ,   C O R R E L A T I O N   R A E   R A T I ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   S O P E R   M E ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 3 9 7 ;   S P I E G E L R O S I N G   I ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 9 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 1 1 1 ;   S t a c k   S ,   2 0 0 4 ,   R E S   H I G H   E D U C ,   V 4 5 ,   P 8 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 6 2 - 0 0 4 - 5 9 5 3 - z ;   S T E W A R T   J A ,   1 9 8 3 ,   S O C   F O R C E S ,   V 6 2 ,   P 1 6 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 8 3 5 4 ;   S t e w a r t   J .   A . ,   1 9 9 0 ,   D R I F T I N G   C O N T I N E N T S ;   S w i n b a n k s   D ,   1 9 9 7 ,   N A T U R E ,   V 3 8 9 ,   P 1 1 3 ;   T A I N E R   J A ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 1 4 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 0 0 6 4 1 4 ;   T i j s s e n   R .   J .   W . ,   2 0 0 2 ,   M A P P I N G   S C I   P E R F O R M A ;   v a n   D a l e n   H P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 8 - 5 ;   V a n   D a l e n   H P ,   2 0 0 4 ,   P O P U L   D E V   R E V ,   V 3 0 ,   P 4 8 9 ;   B a r k e r   N ,   2 0 0 3 ,   C U R R   O P I N   G E N E   D E V ,   V 1 3 ,   P 2 8 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 . 8 2 4 4 1 . f 1 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   V A N R A A A N   A F J ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   v a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 5 0 ,   D O I   [ 1 0 . 1 2 0 7 / s 1 5 3 6 6 3 5 9 m e a 0 3 0 1 _ 7 ,   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 7 ] ;   V I N K L E R   P ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 9 ;   V o o s   H . ,   1 9 7 6 ,   J   A C A D   L I B R ,   V 1 ,   P 1 9 ;   W a l t e r   G ,   2 0 0 3 ,   M E D   J   A U S T R A L I A ,   V 1 7 8 ,   P 2 8 0 ;   W A T S O N   J D ,   1 9 5 3 ,   N A T U R E ,   V 1 7 1 ,   P 7 3 7 ,   D O I   1 0 . 1 0 3 8 / 1 7 1 7 3 7 a 0 ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   W h i t e   H D ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 4 2 > 3 . 3 . C O ; 2 - K ;   W h i t e   H D ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 3 . 9 1 4 0 1 . 9 b ;   W h i t e   M D ,   1 9 9 7 ,   L I B R   Q U A R T ,   V 6 7 ,   P 1 2 2 ;   W o o l g a r   S t e v e ,   1 9 9 1 ,   S C I   P U B L   P O L I C Y ,   V 1 8 ,   P 3 1 9 ;   Y u e   W P ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 3 1 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 7 7 . 9 3 4 3 7 . 1 8 ;   Z i m a n   J ,   2 0 0 0 ,   R E A L   S C I   W H A T   I T   I S ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   N A T U R E ,   V 4 3 5 ,   P 1 0 0 3 	 1 9 0 	 3 3 1 	 3 3 9 	 4 1 	 2 7 5 	 E M E R A L D   G R O U P   P U B L I S H I N G   L I M I T E D 	 B I N G L E Y 	 H O W A R D   H O U S E ,   W A G O N   L A N E ,   B I N G L E Y   B D 1 6   1 W A ,   W   Y O R K S H I R E ,   E N G L A N D 	 0 0 2 2 - 0 4 1 8 	 1 7 5 8 - 7 3 7 9 	 	 J   D O C 	 J .   D o c . 	 	 2 0 0 8 	 6 4 	 1 	 	 	 	 	 4 5 	 8 0 	 	 1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 	 	 3 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 4 1 R V 	 W O S : 0 0 0 2 5 8 7 3 3 4 0 0 0 0 4 	 	 
 
 J 	 R a d i c c h i ,   F ;   F o r t u n a t o ,   S ;   C a s t e l l a n o ,   C 	 	 	 	 R a d i c c h i ,   F i l i p p o ;   F o r t u n a t o ,   S a n t o ;   C a s t e l l a n o ,   C l a u d i o 	 	 	 U n i v e r s a l i t y   o f   c i t a t i o n   d i s t r i b u t i o n s :   T o w a r d   a n   o b j e c t i v e   m e a s u r e   o f   s c i e n t i f i c   i m p a c t 	 P R O C E E D I N G S   O F   T H E   N A T I O N A L   A C A D E M Y   O F   S C I E N C E S   O F   T H E   U N I T E D   S T A T E S   O F   A M E R I C A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   a n a l y s i s ;   h   i n d e x 	 S C I E N T O M E T R I C   I N D I C A T O R S ;   F I E L D - N O R M A L I Z A T I O N ;   C R O S S - F I E L D ;   H - I N D E X ;   S C I E N C E ;   P U B L I C A T I O N ;   P E R F O R M A N C E ;   O U T P U T ;   P O W E R ;   M O D E L 	 W e   s t u d y   t h e   d i s t r i b u t i o n s   o f   c i t a t i o n s   r e c e i v e d   b y   a   s i n g l e   p u b l i c a t i o n   w i t h i n   s e v e r a l   d i s c i p l i n e s ,   s p a n n i n g   b r o a d   a r e a s   o f   s c i e n c e .   W e   s h o w   t h a t   t h e   p r o b a b i l i t y   t h a t   a n   a r t i c l e   i s   c i t e d   c   t i m e s   h a s   l a r g e   v a r i a t i o n s   b e t w e e n   d i f f e r e n t   d i s c i p l i n e s ,   b u t   a l l   d i s t r i b u t i o n s   a r e   r e s c a l e d   o n   a   u n i v e r s a l   c u r v e   w h e n   t h e   r e l a t i v e   i n d i c a t o r   c ( f )   =   c / c ( 0 )   i s   c o n s i d e r e d ,   w h e r e   c ( 0 )   i s   t h e   a v e r a g e   n u m b e r   o f   c i t a t i o n s   p e r   a r t i c l e   f o r   t h e   d i s c i p l i n e .   I n   a d d i t i o n   w e   s h o w   t h a t   t h e   s a m e   u n i v e r s a l   b e h a v i o r   o c c u r s   w h e n   c i t a t i o n   d i s t r i b u t i o n s   o f   a r t i c l e s   p u b l i s h e d   i n   t h e   s a m e   f i e l d ,   b u t   i n   d i f f e r e n t   y e a r s ,   a r e   c o m p a r e d .   T h e s e   f i n d i n g s   p r o v i d e   a   s t r o n g   v a l i d a t i o n   o f   c f   a s   a n   u n b i a s e d   i n d i c a t o r   f o r   c i t a t i o n   p e r f o r m a n c e   a c r o s s   d i s c i p l i n e s   a n d   y e a r s .   B a s e d   o n   t h i s   i n d i c a t o r ,   w e   i n t r o d u c e   a   g e n e r a l i z a t i o n   o f   t h e   h   i n d e x   s u i t a b l e   f o r   c o m p a r i n g   s c i e n t i s t s   w o r k i n g   i n   d i f f e r e n t   f i e l d s . 	 [ C a s t e l l a n o ,   C l a u d i o ]   U n i v   R o m a   L a   S a p i e n z a ,   C N R ,   N a t l   I n s t   P h y s   M a t t e r ,   C t r   S t a t   M e c h   &   C o m p l e x ,   I - 0 0 1 8 5   R o m e ,   I t a l y ;   [ C a s t e l l a n o ,   C l a u d i o ]   U n i v   R o m a   L a   S a p i e n z a ,   D i p a r t i m e n t o   F i s ,   I - 0 0 1 8 5   R o m e ,   I t a l y ;   [ R a d i c c h i ,   F i l i p p o ;   F o r t u n a t o ,   S a n t o ]   I n s t   S c i   I n t e r c h a n g e d   F d n ,   C o m p l e x   N e t w o r k s   L a g r a n g e   L a b ,   I - 1 0 1 3 3   T u r i n ,   I t a l y 	 C a s t e l l a n o ,   C   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   L a   S a p i e n z a ,   C N R ,   N a t l   I n s t   P h y s   M a t t e r ,   C t r   S t a t   M e c h   &   C o m p l e x ,   P i a z z a l e   A   M o r o   2 ,   I - 0 0 1 8 5   R o m e ,   I t a l y . 	 c l a u d i o . c a s t e l l a n o @ r o m a l . i n f n . i t 	 C a s t e l l a n o ,   C l a u d i o / B - 6 9 4 6 - 2 0 0 8 ;   R a d i c c h i ,   F i l i p p o / B - 4 4 0 7 - 2 0 0 9 ;   F o r t u n a t o ,   S a n t o / C - 3 5 8 6 - 2 0 0 9 	 C a s t e l l a n o ,   C l a u d i o / 0 0 0 0 - 0 0 0 2 - 3 7 7 3 - 3 8 0 1 ;   	 	 	 A d l e r   R . ,   2 0 0 8 ,   C I T A T I O N   S T A T ;   A L T H O U S E   B M ,   2 0 0 8 ,   A R X I V 0 8 0 4 3 1 1 6 V 1 ;   B a l l   P ,   2 0 0 5 ,   N A T U R E ,   V 4 3 6 ,   P 9 0 0 ,   D O I   1 0 . 1 0 3 8 / 4 3 6 9 0 0 a ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B R O O K S   T A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 4 ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M   Q U A N T I T ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E v i d e n c e   L t d ,   2 0 0 7 ,   U S   B I B L   M E A S   R E S   Q U A ;   F o r t u n a t o   S ,   2 0 0 7 ,   P H Y S   R E V   L E T T ,   V 9 9 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 9 9 . 1 3 8 7 0 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I g l e s i a s   J E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 0 5 - x ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K i n n e y   A L ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 7 9 4 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 4 4 1 6 1 0 4 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   N A R A N A N   S ,   1 9 7 1 ,   J   D O C ,   V 2 7 ,   P 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 1 0 ;   P l e r o u   V ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 4 3 3 ;   R e d n e r   S ,   2 0 0 5 ,   P H Y S   T O D A Y ,   V 5 8 ,   P 4 9 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 9 9 6 4 7 5 ;   R e d n e r   S ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 3 5 9 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 7 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 0 1 8 2 0 3 9 3 ;   v a n   R a a n   A .   F .   J . ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 1 ,   D O I   [ 1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 ] ;   V i n k l e r   P ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 6 8 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 8 . 6 9 1 4 6 . 2 4 ;   V i n k l e r   P ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 1 5 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y 	 2 9 	 2 5 6 	 2 5 8 	 1 7 	 1 2 9 	 N A T L   A C A D   S C I E N C E S 	 W A S H I N G T O N 	 2 1 0 1   C O N S T I T U T I O N   A V E   N W ,   W A S H I N G T O N ,   D C   2 0 4 1 8   U S A 	 0 0 2 7 - 8 4 2 4 	 	 	 P   N A T L   A C A D   S C I   U S A 	 P r o c .   N a t l .   A c a d .   S c i .   U .   S .   A . 	 N O V   1 1 	 2 0 0 8 	 1 0 5 	 4 5 	 	 	 	 	 1 7 2 6 8 	 1 7 2 7 2 	 	 1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 	 	 5 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 3 7 3 O P 	 W O S : 0 0 0 2 6 0 9 8 1 8 0 0 0 2 0 	 1 8 9 7 8 0 3 0 	 
 
 J 	 D a i m ,   T U ;   R u e d a ,   G ;   M a r t i n ,   H ;   G e r d s r i ,   P 	 	 	 	 D a i m ,   T u g r u l   U . ;   R u e d a ,   G u i l l e n n o ;   M a r t i n ,   H i l a r y ;   G e r d s r i ,   P i s e k 	 	 	 F o r e c a s t i n g   e m e r g i n g   t e c h n o l o g i e s :   U s e   o f   b i b l i o m e t r i c s   a n d   p a t e n t   a n a l y s i s 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 M O D E L S 	 I t   i s   r a t h e r   d i f f i c u l t   t o   f o r e c a s t   e m e r g i n g   t e c h n o l o g i e s   a s   t h e r e   i s   n o   h i s t o r i c a l   d a t a   a v a i l a b l e .   I n   s u c h   c a s e s ,   t h e   u s e   o f   b i b l i o m e t r i c s   a n d   p a t e n t   a n a l y s i s   h a v e   p r o v i d e d   u s e f u l   d a t a .   T h i s   p a p e r   p r e s e n t s   t h e   f o r e c a s t s   f o r   t h r e e   e m e r g i n g   t e c h n o l o g y   a r e a s   b y   i n t e g r a t i n g   t h e   u s e   o f   b i b l i o m e t r i c s   a n d   p a t e n t   a n a l y s i s   i n t o   w e l l - k n o w n   t e c h n o l o g y   f o r e c a s t i n g   t o o l s   s u c h   a s   s c e n a r i o   p l a n n i n g ,   g r o w t h   c u r v e s   a n d   a n a l o g i e s .   S y s t e m   d y n a m i c s   i s   a l s o   u s e d   t o   b e   a b l e   t o   m o d e l   t h e   d y n a m i c   e c o s y s t e m   o f   t h e   t e c h n o l o g i e s   a n d   t h e i r   d i f f u s i o n .   T e c h n o l o g i e s   b e i n g   f o r e c a s t e d   a r e   f u e l   c e l l ,   f o o d   s a f e t y   a n d   o p t i c a l   s t o r a g e   t e c h n o l o g i e s .   R e s u l t s   f r o m   t h e s e   t h r e e   a p p l i c a t i o n s   h e l p   u s   t o   v a l i d a t e   t h e   p r o p o s e d   m e t h o d s   a s   a p p r o p r i a t e   t o o l s   t o   f o r e c a s t   e m e r g i n g   t e c h n o l o g i e s .   ( c )   2 0 0 6   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 P o r t l a n d   S t a t e   U n i v ,   M a s e e h   C o l l   E n g n   &   C o m p   S c i ,   D e p t   E n g n   &   T e c h n o l   M a n a g e m e n t ,   P o r t l a n d ,   O R   9 7 2 0 7   U S A 	 D a i m ,   T U   ( r e p r i n t   a u t h o r ) ,   P o r t l a n d   S t a t e   U n i v ,   M a s e e h   C o l l   E n g n   &   C o m p   S c i ,   D e p t   E n g n   &   T e c h n o l   M a n a g e m e n t ,   P O B   7 5 1 ,   P o r t l a n d ,   O R   9 7 2 0 7   U S A . 	 t u g r u l @ e t m . p d x . e d u 	 M a f u t s a n a ,   M o p e d i / C - 5 1 5 7 - 2 0 1 5 ;   K u m a r ,   A j i t / J - 1 6 1 7 - 2 0 1 5 	 K u m a r ,   A j i t / 0 0 0 0 - 0 0 0 3 - 3 2 5 5 - 5 0 5 4 	 	 	 A b r a h a m   B P ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 0 ) 0 0 0 4 0 - 7 ;   A L A N   S W C ,   2 0 0 4 ,   E X A M P L E   P R O C E S S   T E C H ,   P 3 2 1 ;   A S H T O N   W ,   1 9 8 8 ,   R E S   T E C H N O L   M A N A G E ,   V 3 2 ,   P 3 6 ;   A S S I C I A T I O N   C E ,   2 0 0 5 ,   F A C T O R Y   S A L E S   D V D   P L ;   B A S B E R G   B L ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 7 - 8 ;   B E N G I S U   M ,   I N   P R E S S   T E C H N O L   F O R ;   B R I N N   M ,   2 0 0 3 ,   P   2 0 0 3   S Y S T   I N F   E N G ;   C A R R I L L O   M ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   P 6 9 ;   * C E C ,   2 0 0 1 ,   P R O J   A U T   F U E L   C E L L   U ;   D e m o s   T ,   2 0 0 5 ,   F O R T U N E ,   V 1 5 2 ,   P 3 2 ;   * E I A ,   2 0 0 3 ,   A N N   E N   R E V ;   E n e r g y   I n f o r m a t i o n   A d m i n i s t r a t i o n   ( E I A ) ,   2 0 0 4 ,   A N N   E N   R E V ;   E I S E N M A N N   T ,   F U E L   C E L L S   H Y D R O G E N ,   P 1 8 ;   * F D A ,   2 0 0 0 ,   H L T H   P E O P L   2 0 0 0   S T A T ;   F o r r e s t e r   J .   W . ,   1 9 6 1 ,   I N D   D Y N A M I C S ;   G I L L E N   M A ,   1 9 9 5 ,   B I L L B O A R D ,   V 1 0 7 ,   P 1 0 7 ;   K A P L A N   J ,   2 0 0 4 ,   P C   M A G A Z I N E ,   V 2 3 ,   P 1 0 9 ;   K A P S T E I N   J ,   1 9 9 0 ,   B U S   W E E K ,   P 4 4 ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   L A B R I O L A   D ,   2 0 0 4 ,   P C   M A G A Z I N E ,   V 2 3 ,   P 3 0 ;   L a s h i n s k y   A ,   2 0 0 5 ,   F O R T U N E ,   V 1 5 1 ,   P 3 6 ;   L E V I N   C ,   1 9 9 8 ,   P C   M A G A Z I N E ,   V 1 7 ,   P 1 0 ;   L i n s t o n e   H . ,   1 9 9 9 ,   D E C I S I O N   M A K I N G   T E C H ;   L i n s t o n e   H ,   1 9 8 4 ,   M U L T I P L E   P E R S P E C T I V E ;   L i u   S J ,   1 9 9 7 ,   I N T   J   T E C H N O L   M A N A G E ,   V 1 3 ,   P 6 6 1 ,   D O I   1 0 . 1 5 0 4 / I J T M . 1 9 9 7 . 0 0 1 6 8 9 ;   M A R T I N O   J ,   2 0 0 3 ,   T E C H N O L   F O R E C A S T   S O C ,   P 7 1 9 ;   M a r t i n o   J . ,   1 9 8 3 ,   T E C H N O L O G I C A L   F O R E C A ;   M a r t i n o   J . P . ,   1 9 9 3 ,   T E C H N O L O G I C A L   F O R E C A ;   M E A D   P ,   2 0 0 2 ,   F O O D   R E L A T E D   I L L N E S S ;   M e a d e   N ,   1 9 9 8 ,   M A N A G E   S C I ,   V 4 4 ,   P 1 1 1 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 4 . 8 . 1 1 1 5 ;   M i l l e t t   S .   M . ,   1 9 9 1 ,   M A N A G E R S   G U I D E   T E C H N ;   M i s h r a   S ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 2 3 - 8 ;   M O D I S   T ,   1 9 9 9 ,   T E C H N O L   F O R E C A S T   S O C ,   P 1 7 3 ;   M o r r i s   S ,   2 0 0 2 ,   C O M P U T   I N D   E N G ,   V 4 3 ,   P 8 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 1 4 3 - 2 ;   N o r t o n   M .   J . ,   2 0 0 1 ,   I N T R O   C O N C E P T S   I N F O R ;   P I L K I N G T O N   A ,   2 0 0 0 ,   P I C M E T   0 5   P O R T L   O R ;   P I L K I N G T O N   A ,   2 0 0 3 ,   P I C M E T   0 3   P O R T L N S ;   P O R T E R   A ,   1 9 9 8 ,   I N N O V A T I O N   F O R E C A S T ;   P O R T E R   A ,   2 0 0 3 ,   T I   M I N   C   P   C O R P   T E C H ;   P o r t e r   A . L . ,   2 0 0 5 ,   P O R T L   I N T   C   M A N   E N G ;   P o r t e r   A .   L . ,   1 9 9 1 ,   F O R E C A S T I N G   M A N A G E M E ;   P O R T E R   A L ,   2 0 0 3 ,   M I N I N G   P I C M E T   1 9 9 7   2 ;   R i c h a r d s o n   G .   P . ,   1 9 8 1 ,   I N T R O   S Y S T E M   D Y N A M I C ;   R U E D A   G ,   2 0 0 3 ,   P O R T L   I N T   C   M A N   E N G ;   S a g e r   B ,   2 0 0 3 ,   T E C H N O L   F O R E C A S T   S O C ,   P 1 0 9 ;   S C H A E F F E R   G ,   1 9 9 6 ,   F U E L   C E L L S   F U T U R E   C O ;   S h a r p l e y   A .   M . ,   1 9 8 1 ,   C O L L E C T E D   O R I G I N A L   R ,   V 5 ,   P 7 ;   S i l b e r g l i t t   R ,   2 0 0 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 0 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 2 ) 0 0 2 5 4 - 8 ;   S t e r m a n   J .   D . ,   2 0 0 0 ,   B U S I N E S S   D Y N A M I C S   S Y ;   V E Z I R O G L U   N ,   P I C M E T   0 5   H Y D R   C I V   P ;   W A K E L A N D   W ,   2 0 0 6 ,   W E B C T   S Y S T E M   D Y N A M I C ;   W a n g   Y X ,   1 9 9 8 ,   I N O R G   C H E M   C O M M U N ,   V 1 ,   P 2 7 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 7 - 7 0 0 3 ( 9 8 ) 0 0 0 0 8 - 2 ;   W A N T A N A B E   C ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 7 8 3 ;   W A R R   B ,   I N   P R E S S   R E X S   F O R E C A ;   W a t t s   R J ,   1 9 9 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 6 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 ;   W I N E B R A K E   J J ,   2 0 0 3 ,   T E C H N O L   F O R E C A S T   S O C ,   P 3 5 9 ;   Y O U N G   P ,   1 9 9 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 4 ,   P 3 7 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 3 ) 9 0 0 4 2 - 6 	 5 7 	 2 4 3 	 2 5 5 	 2 7 	 2 4 8 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 O C T 	 2 0 0 6 	 7 3 	 8 	 	 	 	 	 9 8 1 	 1 0 1 2 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 4 . 0 0 4 	 	 3 2 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 0 8 9 E S 	 W O S : 0 0 0 2 4 0 8 6 3 7 0 0 0 0 6 	 	 
 
 J 	 R o d r i g u e z ,   A ;   L a i o ,   A 	 	 	 	 R o d r i g u e z ,   A l e x ;   L a i o ,   A l e s s a n d r o 	 	 	 C l u s t e r i n g   b y   f a s t   s e a r c h   a n d   f i n d   o f   d e n s i t y   p e a k s 	 S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 a   C l u s t e r   a n a l y s i s   i s   a i m e d   a t   c l a s s i f y i n g   e l e m e n t s   i n t o   c a t e g o r i e s   o n   t h e   b a s i s   o f   t h e i r   s i m i l a r i t y .   I t s   a p p l i c a t i o n s   r a n g e   f r o m   a s t r o n o m y   t o   b i o i n f o r m a t i c s ,   b i b l i o m e t r i c s ,   a n d   p a t t e r n   r e c o g n i t i o n .   W e   p r o p o s e   a n   a p p r o a c h   b a s e d   o n   t h e   i d e a   t h a t   c l u s t e r   c e n t e r s   a r e   c h a r a c t e r i z e d   b y   a   h i g h e r   d e n s i t y   t h a n   t h e i r   n e i g h b o r s   a n d   b y   a   r e l a t i v e l y   l a r g e   d i s t a n c e   f r o m   p o i n t s   w i t h   h i g h e r   d e n s i t i e s .   T h i s   i d e a   f o r m s   t h e   b a s i s   o f   a   c l u s t e r i n g   p r o c e d u r e   i n   w h i c h   t h e   n u m b e r   o f   c l u s t e r s   a r i s e s   i n t u i t i v e l y ,   o u t l i e r s   a r e   a u t o m a t i c a l l y   s p o t t e d   a n d   e x c l u d e d   f r o m t h e   a n a l y s i s ,   a n d   c l u s t e r s   a r e   r e c o g n i z e d   r e g a r d l e s s   o f   t h e i r   s h a p e   a n d   o f   t h e   d i m e n s i o n a l i t y   o f   t h e   s p a c e   i n w h i c h   t h e y   a r e   e m b e d d e d .   W e   d e m o n s t r a t e   t h e   p o w e r   o f   t h e   a l g o r i t h m   o n   s e v e r a l   t e s t   c a s e s . 	 [ R o d r i g u e z ,   A l e x ;   L a i o ,   A l e s s a n d r o ]   S I S S A ,   I - 3 4 1 3 6   T r i e s t e ,   I t a l y 	 R o d r i g u e z ,   A   ( r e p r i n t   a u t h o r ) ,   S I S S A ,   V i a   B o n o m e a   2 6 5 ,   I - 3 4 1 3 6   T r i e s t e ,   I t a l y . 	 a l e x r o d @ s i s s a . i t ;   l a i o @ s i s s a . i t 	 L a i o ,   A l e s s a n d r o / K - 2 1 1 7 - 2 0 1 2 	 L a i o ,   A l e s s a n d r o / 0 0 0 0 - 0 0 0 1 - 9 1 6 4 - 7 9 0 7 	 g r a n t   A s s o c i a z i o n e   I t a l i a n a   p e r   l a   R i c e r c a   s u l   C a n c r o   5   p e r   m i l l e   [ 1 2 2 1 4 ] ;   F o n d o   p e r   g l i   I n v e s t i m e n t i   d e l l a   R i c e r c a   d i   B a s e - A c c o r d o   d i   p r o g r a m m a   [ R B A P 1 1 E T K A ] 	 W e   t h a n k   E .   T o s a t t i ,   D .   A m a t i ,   F .   L a i o ,   F .   M a r i n e l l i ,   A .   M a r i t a n ,   R .   A l l e n ,   J .   N a s i c a ,   a n d   M .   d ' E r r i c o   f o r   s t i m u l a t i n g   d i s c u s s i o n .   W e   a c k n o w l e d g e   f i n a n c i a l   s u p p o r t   f r o m   t h e   g r a n t   A s s o c i a z i o n e   I t a l i a n a   p e r   l a   R i c e r c a   s u l   C a n c r o   5   p e r   m i l l e ,   R i f .   1 2 2 1 4 ,   a n d   F o n d o   p e r   g l i   I n v e s t i m e n t i   d e l l a   R i c e r c a   d i   B a s e - A c c o r d o   d i   p r o g r a m m a ,   R i f .   R B A P 1 1 E T K A . 	 C h a n g   H ,   2 0 0 8 ,   P A T T E R N   R E C O G N ,   V 4 1 ,   P 1 9 1 ,   D O I   1 0 . 1 0 1 6 / j . p a t c o g . 2 0 0 7 . 0 4 . 0 1 0 ;   C h a r y t a n o w i c z   M ,   2 0 1 0 ,   A D V   I N T E L   S O F T   C O M P U ,   V 6 9 ,   P 1 5 ;   C H E N G   Y Z ,   1 9 9 5 ,   I E E E   T   P A T T E R N   A N A L ,   V 1 7 ,   P 7 9 0 ,   D O I   1 0 . 1 1 0 9 / 3 4 . 4 0 0 5 6 8 ;   D u e c k   D e i b e r t ,   2 0 0 7 ,   I E E E   1 1   I N T   C   C O M P   V ,   P 1 ;   E s t e r   M . ,   1 9 9 6 ,   P   2   I N T   C   K N O W L   D I S C ,   P 2 2 6 ;   F r a n t i   P ,   2 0 0 6 ,   P A T T E R N   R E C O G N ,   V 3 9 ,   P 7 6 1 ,   D O I   1 0 . 1 0 1 6 / j . p a t c o g . 2 0 0 5 . 0 9 . 0 1 2 ;   F r a n t i   P ,   2 0 0 6 ,   I E E E   T   P A T T E R N   A N A L ,   V 2 8 ,   P 1 8 7 5 ,   D O I   1 0 . 1 1 0 9 / T P A M I . 2 0 0 6 . 2 2 7 ;   F r e y   B J ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 5 ,   P 9 7 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 3 6 8 0 0 ;   F u   L M ,   2 0 0 7 ,   B M C   B I O I N F O R M A T I C S ,   V 8 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 1 0 5 - 8 - 3 ;   F U K U N A G A   K ,   1 9 7 5 ,   I E E E   T   I N F O R M   T H E O R Y ,   V 2 1 ,   P 3 2 ,   D O I   1 0 . 1 1 0 9 / T I T . 1 9 7 5 . 1 0 5 5 3 3 0 ;   G i o n i s   A . ,   2 0 0 7 ,   A C M   T   K N O W L   D I S C O V   D ,   V 1 ,   P 4 ,   D O I   1 0 . 1 1 4 5 / 1 2 1 7 2 9 9 . 1 2 1 7 3 0 3 ;   H o p p n e r   F . ,   1 9 9 9 ,   F U Z Z Y   C L U S T E R   A N A L   M ;   H o r e n k o   I ,   2 0 0 6 ,   M U L T I S C A L E   M O D E L   S I M ,   V 5 ,   P 8 0 2 ,   D O I   1 0 . 1 1 3 7 / 0 5 0 6 2 3 3 1 0 ;   J a i n   A K ,   2 0 1 0 ,   P A T T E R N   R E C O G N   L E T T ,   V 3 1 ,   P 6 5 1 ,   D O I   1 0 . 1 0 1 6 / j . p a t r e c . 2 0 0 9 . 0 9 . 0 1 1 ;   K a u f m a n   L ,   2 0 0 9 ,   F I N D I N G   G R O U P S   D A T A ,   V 3 4 4 ;   M a c q u e e n   J .   B . ,   1 9 6 7 ,   P   5   B E R K   S   M A T H   S T A T ,   P 2 8 1 ,   D O I   D O I   1 0 . 1 2 3 4 / 1 2 3 4 5 6 7 8 ;   M a r i n e l l i   F ,   2 0 0 9 ,   P L O S   C O M P U T   B I O L ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p c b i . 1 0 0 0 4 5 2 ;   M c L a c h l a n   G . ,   2 0 0 7 ,   W I L E Y   S E R I E S   P R O B A B I ,   V 3 8 2 ;   S a m a r i a   F .   S . ,   1 9 9 4 ,   P r o c e e d i n g s   o f   t h e   S e c o n d   I E E E   W o r k s h o p   o n   A p p l i c a t i o n s   o f   C o m p u t e r   V i s i o n   ( C a t .   N o . 9 4 T H 0 6 7 4 2 ) ,   P 1 3 8 ,   D O I   1 0 . 1 1 0 9 / A C V . 1 9 9 4 . 3 4 1 3 0 0 ;   S a m p a t   M P ,   2 0 0 9 ,   I E E E   T   I M A G E   P R O C E S S ,   V 1 8 ,   P 2 3 8 5 ,   D O I   1 0 . 1 1 0 9 / T I P . 2 0 0 9 . 2 0 2 5 9 2 3 ;   W A R D   J H ,   1 9 6 3 ,   J   A M   S T A T   A S S O C ,   V 5 8 ,   P 2 3 6 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 2 9 6 7 ;   X u   R ,   2 0 0 5 ,   I E E E   T   N E U R A L   N E T W O R ,   V 1 6 ,   P 6 4 5 ,   D O I   1 0 . 1 1 0 9 / T N N . 2 0 0 5 . 8 4 5 1 4 1 	 2 2 	 2 2 8 	 2 7 7 	 9 8 	 4 7 0 	 A M E R   A S S O C   A D V A N C E M E N T   S C I E N C E 	 W A S H I N G T O N 	 1 2 0 0   N E W   Y O R K   A V E ,   N W ,   W A S H I N G T O N ,   D C   2 0 0 0 5   U S A 	 0 0 3 6 - 8 0 7 5 	 1 0 9 5 - 9 2 0 3 	 	 S C I E N C E 	 S c i e n c e 	 J U N   2 7 	 2 0 1 4 	 3 4 4 	 6 1 9 1 	 	 	 	 	 1 4 9 2 	 1 4 9 6 	 	 1 0 . 1 1 2 6 / s c i e n c e . 1 2 4 2 0 7 2 	 	 5 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 A J 7 P Z 	 W O S : 0 0 0 3 3 7 8 8 9 9 0 0 0 4 4 	 2 4 9 7 0 0 8 1 	 
 
 J 	 K o s t o f f ,   R N ;   S c a l l e r ,   R R 	 	 	 	 K o s t o f f ,   R N ;   S c a l l e r ,   R R 	 	 	 S c i e n c e   a n d   t e c h n o l o g y   r o a d m a p s 	 I E E E   T R A N S A C T I O N S   O N   E N G I N E E R I N G   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n ;   c o - c i t a t i o n ;   c o - o c c u r r e n c e ;   c o - w o r d ;   d e c i s i o n   a i d s ;   p a t e n t   c i t a t i o n ;   r e t r o s p e c t i v e   a n a l y s e s ;   r o a d m a p p i n g ;   r o a d m a p s ;   s c i e n c e   a n d   t e c h n o l o g y ;   t e c h n o l o g y   i n s e r t i o n ;   t e c h n o l o g y   s t r a t e g y ;   t e c h n o l o g y   t r a n s f e r 	 T E C H N I C A L   I N T E L L I G E N C E ;   D A T A B A S E   T O M O G R A P H Y 	 S c i e n c e   a n d   t e c h n o l o g y   ( S & T )   r o a d m a p s   a r e   u s e d   i n   i n d u s t r y ,   g o v e r n m e n t ,   a n d   a c a d e m i a   t o   p o r t r a y   t h e   s t r u c t u r a l   r e l a t i o n s h i p s   a m o n g   s c i e n c e ,   t e c h n o l o g y   a n d   a p p l i c a t i o n s .   R o a d m a p s   a r e   e m p l o y e d   a s   d e c i s i o n   a i d s   t o   i m p r o v e   c o o r d i n a t i o n   o f   a c t i v i t i e s   a n d   r e s o u r c e s   i n   i n c r e a s i n g l y   c o m p l e x   a n d   u n c e r t a i n   e n v i r o n m e n t s .   S p e c i f i c   u s e s   o f   r o a d m a p s   i n c l u d e :   S & T   m a n a g e m e n t   i n c l u d i n g   s t r a t e g y ,   p l a n n i n g ,   e x e c u t i n g ,   r e v i e w i n g ,   a n d   t r a n s i t i o n i n g ;   S & T   m a r k e t i n g ;   e n h a n c i n g   c o m m u n i c a t i o n s   a m o n g   r e s e a r c h e r s ,   t e c h n o l o g i s t s ,   p r o d u c t   m a n a g e r s ,   s u p p l i e r s ,   u s e r s ,   a n d   o t h e r   s t a k e h o l d e r s ;   i d e n t i f y i n g   g a p s   a n d   o p p o r t u n i t i e s   i n   S & T   p r o g r a m s ;   a n d   i d e n t i f y i n g   o b s t a c l e s   t o   r a p i d   a n d   l o w - c o s t   p r o d u c t   d e v e l o p m e n t .   S & T   m a n a g e r s   a l s o   u s e   r o a d m a p s   t o   h e l p   i d e n t i f y   t h o s e   S & T   a r e a s   t h a t   h a v e   h i g h   p o t e n t i a l   p r o m i s e ,   a n d   t o   a c c e l e r a t e   t h e   t r a n s f e r   o f   t h e   S & T   t o   e v e n t u a l   p r o d u c t s ,   H o w e v e r ,   t h e r e   h a s   b e e n   l i t t l e   a t t e n t i o n   p a i d   t o   t h e   p r a c t i c e   o f   r o a d m a p p i n g   i n   t h e   p u b l i s h e d   l i t e r a t u r e .   T h i s   p a p e r   i s   a   f i r s t   a t t e m p t   t o   b r i n g   s o m e   c o m m o n   d e f i n i t i o n   t o   r o a d m a p p i n g   p r a c t i c e s   a n d   d i s p l a y   t h e   u n d e r l y i n g   u n i t y   o f   s e e m i n g l y   f r a g m e n t e d   r o a d m a p   a p p r o a c h e s .   T h e   p a p e r   b e g i n s   w i t h   g e n e r i c   r o a d m a p   d e f i n i t i o n s ,   i n c l u d i n g   a   t a x o n o m y   o f   r o a d m a p s   t h a t   a t t e m p t s   t o   b e t t e r   c l a s s i f y   a n d   u n i f y   t h e   b r o a d   s p e c t r u m   o f   r o a d m a p   o b j e c t i v e s   a n d   u s e s .   C h a r a c t e r i s t i c s   o f   r e t r o s p e c t i v e   a n d   p r o s p e c t i v e   r o a d m a p s   a r e   t h e n   i d e n t i f i e d   a n d   a n a l y z e d ,   a s   w e l l   a s   s u m m a r y   c h a r a c t e r i s t i c s   o f   b i b l i o m e t r i c - b a s e d   S & T   m a p p i n g   t e c h n i q u e s .   T h e   r o a d m a p   c o n s t r u c t i o n   p r o c e s s ,   i n c l u d i n g   f u n d a m e n t a l   p r i n c i p l e s   f o r   c o n s t r u c t i n g   h i g h - q u a l i t y   r o a d m a p s ,   i s   p r e s e n t e d   i n   d e t a i l . 	 U S   D e p t   N a v y ,   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   G e o r g e   M a s o n   U n i v ,   S c h   P u b l   P o l i c y ,   F a i r f a x ,   V A   2 2 0 3 0   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   U S   D e p t   N a v y ,   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 A L B R I G H T   R E ,   1 9 9 8 ,   P   T E C H N   R O A D M   W O R K S H ,   P 2 2 ;   B A R K E R   D ,   1 9 9 5 ,   L O N G   R A N G E   P L A N N ,   V 2 8 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 4 - 6 3 0 1 ( 9 5 ) 9 8 5 8 6 - H ;   B E R M A N   M ,   1 9 9 6 ,   S A N D 9 6 1 6 2 7 ;   B R O W N   K H ,   1 9 9 5 ,   P R O C   S P I E ,   V 2 4 4 0 ,   P 3 3 ,   D O I   1 0 . 1 1 1 7 / 1 2 . 2 0 9 2 4 6 ;   C A L L O N   M ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S   T ;   C A R P E N T E R   M P ,   1 9 8 1 ,   W O R L D   P A T   I N F ,   V 3 ;   C A R P E N T E R   M P ,   1 9 8 3 ,   W O R L D   P A T   I N F ,   V 5 ;   C A R P E N T E R   M P ,   1 9 8 2 ,   P   O E C D   P A T   I N N   S T A T ;   * D E P   D E F ,   1 9 6 9 ,   P R O J   H I N D S ;   E I R M A ,   1 9 9 7 ,   5 2   E I R M A ;   E N G E L S M A N   E C ,   1 9 9 1 ,   C W T S 9 1 0 2   C T R   S   T   S T U ;   G a l v i n   R ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 8 0 3 ;   G A R C I A   M L ,   1 9 9 8 ,   S A N D 9 7 0 6 6 5 ;   G a r g i n i   P ,   1 9 9 8 ,   S O L I D   S T A T E   T E C H N O L ,   V 4 1 ,   P 7 3 ;   G r o e n v e l d   P ,   1 9 9 7 ,   R E S   T E C H N O L   M A N A G E ,   V 4 0 ,   P 4 8 ;   H U M M O N   N P ,   1 9 8 9 ,   S O C   N E T W O R K S ,   V 1 1 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 9 ) 9 0 0 1 7 - 8 ;   * I   D E F   A N ,   1 9 9 0 ,   P 2 1 9 2   I D A ;   * I D A ,   1 9 9 1 ,   P 2 4 2 9   I D A ;   * I D A ,   1 9 9 1 ,   P 2 5 3 8   I D A ;   * I I T R I ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ;   K a p p e l   T . A . ,   1 9 9 8 ,   T H E S I S   N W   U   E V A N S T O N ;   K O R C Y N S K I   T A ,   1 9 9 7 ,   S O L I D   S T A T E   T E C H N O L ,   V 4 0 ,   P 3 6 3 ;   K O R C Y N S K I   T A ,   1 9 9 7 ,   S O L I D   S T A T E   T E C H N O L ,   V 4 0 ,   P 3 6 1 ;   K O R C Y N S K I   T A ,   1 9 9 7 ,   S O L I D   S T A T E   T E C H N O L ,   V 4 0 ,   P 3 5 9 ;   K O S T O F F   R N ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 4 . x ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K O S T O F F   R N ,   1 9 9 7 ,   S   T   R O A D M A P S ;   L E W I S   K N ,   1 9 9 5 ,   R A N D M R 4 8 0 A F ;   M e l i n   G . ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   M o r o n e   J . ,   1 9 9 3 ,   W I N N I N G   H I G H   T E C H   M A ;   N A R I N   F ,   1 9 8 8 ,   S R S 8 5 0 7 3 0 6   N S F ;   N A R I N   F ,   1 9 9 1 ,   P   J O I N T   E C   C   S   T   I N D ;   N A R I N   F ,   1 9 8 4 ,   I E E E   T   E N G   M A N A G E ,   V 3 1 ;   N A R I N   F ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   N a r i n   F . ,   1 9 8 8 ,   S C I   I N D I C A T O R S   T H E I R ;   N A R I N   F ,   1 9 8 7 ,   S C I   P U B L   P O L I C Y ,   V 1 4 ,   P 1 7 2 ;   * N A T   E L   M A N   I ,   1 9 9 8 ,   N A T   E L   M A N   T E C H N   R O A ,   P 5 3 7 ;   N e s d o r e   P ,   1 9 9 7 ,   S O L I D   S T A T E   T E C H N O L ,   V 4 0 ,   P 4 2 ;   N E S D O R E   P ,   1 9 9 7 ,   S O L I D   S T A T E   T E C H N O L ,   V 4 0 ,   P 4 5 ;   * N G M   R O A D M   T A S K   F O ,   D I G   U S   I N D   R O A D M   N E X ,   V 3 ;   * O I D A ,   1 9 9 4 ,   O P T   T E C H N   R O A D M   C O N C ,   P 5 9 ;   P E E T   C S ,   1 9 9 8 ,   T H E S I S   U   M A N C H E S T E R ;   P r o b e r t   D ,   1 9 9 9 ,   I N T   J   T E C H N O L   M A N A G E ,   V 1 7 ,   P 6 4 6 ,   D O I   1 0 . 1 5 0 4 / I J T M . 1 9 9 9 . 0 0 2 7 4 2 ;   R A D N O R   M ,   1 9 9 8 ,   P   1 9 9 8   N C M S   C   E X P   O R ,   P 1 4 ;   R A D N O R   M ,   1 9 9 8 ,   P   T E C H N   R O A D M   W O R K S H ,   P 1 2 ;   S c h a l l e r   R R ,   1 9 9 7 ,   I E E E   S P E C T R U M ,   V 3 4 ,   P 5 2 ,   D O I   1 0 . 1 1 0 9 / 6 . 5 9 1 6 6 5 ;   S C H A L L E R   R R ,   1 9 9 9 ,   M A S T E R   R O A D M A P   B I B L I ;   S C H N E I D E R   D L ,   1 9 9 3 ,   T H E S I S   A I R   F O R C E   I   T ;   S e m i c o n d u c t o r   I n d u s t r y   A s s o c i a t i o n ,   1 9 9 9 ,   I N T   T E C H N   R O A D M   S E M ;   S e m i c o n d u c t o r   I n d u s t r y   A s s o c i a t i o n ,   I N T   T E C H N   R O A D M   S E M ;   S m a l l   H ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 4 ;   T I J S S E N   R J W ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 1 0 ;   V a n   R a a n   A n t h o n y   F .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   W I L L Y A R D   C H ,   1 9 8 7 ,   R E S   M A N A G E ,   V 3 0 ,   P 1 3 ;   1 9 9 8 ,   P   T E C H N   R O A D M   W O R K S H ;   1 9 9 1 ,   C T N T R 9 1 0 4 0 ;   1 9 9 7 ,   D I G E S T   U S   I N D   R O A D M A ,   V 3 ;   1 9 7 3 ,   I N T E R A C T I O N S   S   T   I N N 	 5 9 	 2 2 3 	 2 3 6 	 9 	 1 8 9 	 I E E E - I N S T   E L E C T R I C A L   E L E C T R O N I C S   E N G I N E E R S   I N C 	 P I S C A T A W A Y 	 4 4 5   H O E S   L A N E ,   P I S C A T A W A Y ,   N J   0 8 8 5 5 - 4 1 4 1   U S A 	 0 0 1 8 - 9 3 9 1 	 	 	 I E E E   T   E N G   M A N A G E 	 I E E E   T r a n s .   E n g .   M a n a g e . 	 M A Y 	 2 0 0 1 	 4 8 	 2 	 	 	 	 	 1 3 2 	 1 4 3 	 	 1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 	 	 1 2 	 B u s i n e s s ;   E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   E n g i n e e r i n g 	 4 3 1 F G 	 W O S : 0 0 0 1 6 8 6 2 0 7 0 0 0 0 2 	 	 
 
 J 	 H A R T E R ,   S P 	 	 	 	 H A R T E R ,   S P 	 	 	 P S Y C H O L O G I C A L   R E L E V A N C E   A N D   I N F O R M A T I O N - S C I E N C E 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 R E T R I E V A L   E F F E C T I V E N E S S ;   S E A R C H   P R O C E S S ;   C I T A T I O N ;   S E E K I N G ;   U S E R S ;   M O T I V A T I O N S ;   S Y S T E M S ;   D E S I G N ;   M O D E L 	 T h i s   a r t i c l e   s u m m a r i z e s   t h e   t h e o r y   o f   p s y c h o l o g i c a l   r e l e v a n c e   p r o p o s e d   b y   D a n   S p e r b e r   a n d   D e i r d r e   W i l s o n   ( 1 9 8 6 ) ,   t o   e x p l i c a t e   t h e   r e l e v a n c e   o f   s p e e c h   u t t e r a n c e s   t o   h e a r e r s   i n   e v e r y d a y   c o n v e r s a t i o n .   T h e   t h e o r y   i s   t h e n   i n t e r p r e t e d   a s   t h e   c o n c e p t   o f   r e l e v a n c e   i n   i n f o r m a t i o n   r e t r i e v a l ,   a n d   a n   e x t e n d e d   e x a m p l e   i s   p r e s e n t e d .   I m p l i c a t i o n s   o f   p s y c h o l o g i c a l   r e l e v a n c e   f o r   r e s e a r c h   i n   i n f o r m a t i o n   r e t r i e v a l ;   e v a l u a t i o n   o f   i n f o r m a t i o n   r e t r i e v a l   s y s t e m s ;   a n d   t h e   c o n c e p t s   o f   i n f o r m a t i o n ,   i n f o r m a t i o n   n e e d ,   a n d   t h e   i n f o r m a t i o n - s e e k i n g   p r o c e s s   a r e   e x p l o r e d .   C o n n e c t i o n s   o f   t h e   t h e o r y   t o   i d e a s   i n   b i b l i o m e t r i c s   a r e   a l s o   s u g g e s t e d . 	 	 H A R T E R ,   S P   ( r e p r i n t   a u t h o r ) ,   I N D I A N A   U N I V ,   S C H   L I B   &   I N F O R M A T   S C I ,   L I B   0 1 3 ,   B L O O M I N G T O N ,   I N   4 7 4 0 5   U S A . 	 	 	 	 	 	 B A T E S   M J ,   1 9 8 9 ,   O N L I N E   R E V ,   V 1 3 ,   P 4 0 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 3 2 0 ;   B E L K I N   N J ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 6 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 2 2 ;   B L A I R   D C ,   1 9 9 0 ,   L A N G U A G E   R E P R E S E N T A E ;   B O N Z I   S ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 7 1 ;   B o r g m a n   C h r i s t i n e   L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 1 0 ;   B O Y C E   B ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 1 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 3 3 - 4 ;   B R O O K S   T A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 4 ;   B U C K L A N D   M ,   1 9 9 1 ,   I N F O R M A T I O N   I N F O R M A T ;   B U C K L A N D   M K ,   1 9 8 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 9 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 3 ) 9 0 0 2 0 - 1 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C l e v e r d o n   C .   W . ,   1 9 6 6 ,   F A C T O R S   D E T E R M I N I N G ,   V 2 ;   C l e v e r d o n   C .   W . ,   1 9 6 6 ,   F A C T O R S   D E T E R M I N I N G ,   V 1 ;   C O O P E R   W S ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 2 0 4 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   C R O N I N   B ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 3 ;   D E R V I N   B ,   1 9 8 6 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 1 ,   P 3 ;   D o y l e   L .   B . ,   1 9 6 3 ,   A U T O M A T I O N   S C I   C O M   2 ,   P 1 9 9 ;   E I S E N B E R G   M ,   1 9 8 8 ,   A S I S   P ,   P 1 6 4 ;   E L L I S   D ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 1 7 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 4 3 ;   E L L I S   D ,   1 9 8 4 ,   J   I N F O R M   S C I ,   V 8 ,   P 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 4 0 0 8 0 0 1 0 5 ;   F O S K E T T   D J ,   1 9 7 2 ,   I N F O R M   S T O R A G E   R E T ,   V 8 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 2 ) 9 0 0 0 9 - 5 ;   H A R T E R   S P ,   1 9 7 1 ,   L I B R   Q U A R T ,   V 4 1 ,   P 2 2 9 ;   K A T Z E R   J ,   1 9 8 7 ,   C A N   J   I N F O R M   S C I ,   V 1 2 ,   P 1 5 ;   K A T Z E R   J ,   1 9 9 0 ,   P   A S I S ,   P 8 0 ;   K E M P   D A ,   1 9 7 4 ,   I N F O R M   S T O R A G E   R E T ,   V 1 0 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 4 ) 9 0 0 0 2 - 3 ;   K U H L T H A U   C C ,   1 9 8 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 0 ,   P 2 5 7 ;   K U H L T H A U   C C ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 5 ;   L A N C A S T E R   F W ,   1 9 6 9 ,   A M   D O C ,   V 2 0 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 0 0 2 0 4 ;   L A N C A S T E R   F W ,   1 9 6 8 ,   I N F O R M A T I O N   R E T R I E V A ;   M A R K E Y   K ,   1 9 8 4 ,   L I B R   I N F O R M   S C I   R E S ,   V 6 ,   P 1 5 5 ;   M C C A I N   K W ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 1 1 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 3 ) 4 0 : 2 < 1 1 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - T ;   M E A D O W   C T ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 5 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 1 6 ;   N e u f e l d t   V . ,   1 9 8 8 ,   W E B S T E R S   N E W   W O R L D   D ;   N I S O N G E R   T E ,   1 9 9 2 ,   P   A S I S ;   P A O   M L ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 2 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 2 6 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 6 ;   P a r k   T . K . ,   1 9 9 2 ,   T H E S I S   I N D I A N A   U   B L O ;   P E R I T Z   B C ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 6 ;   S A R A C E V I C   T ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 5 ) 3 9 : 3 < 1 6 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 0 ;   S A R A C E V I C   T ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 1 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 5 ) 3 9 : 3 < 1 9 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - A ;   S A R A C E V I C   T ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 5 ) 3 9 : 3 < 1 7 7 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - F ;   S A R A C E V I C   T ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 6 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 6 0 6 0 4 ;   S C H A M B E R   L ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 7 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 0 5 0 - C ;   S p e r b e r   D . ,   1 9 8 6 ,   R E L E V A N C E   C O M M U N I C A T ;   S T I E L O W   F ,   1 9 8 8 ,   R Q ,   V 2 7 ,   P 3 5 8 ;   S W A N S O N   D R ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 1 2 8 ;   S W A N S O N   D R ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 9 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 3 ) 3 9 : 2 < 9 2 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - P ;   S W A N S O N   D R ,   1 9 8 6 ,   L I B R   Q U A R T ,   V 5 6 ,   P 3 8 9 ;   W e i n b e r g   B e l l a   H a s s ,   1 9 8 8 ,   I N D E X E R ,   V 1 6 ,   P 3 ;   W I L S O N   P ,   1 9 7 3 ,   I N F O R M   S T O R A G E   R E T ,   V 9 ,   P 4 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 3 ) 9 0 0 9 6 - X 	 4 9 	 2 2 1 	 2 2 0 	 4 	 6 4 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 O C T 	 1 9 9 2 	 4 3 	 9 	 	 	 	 	 6 0 2 	 6 1 5 	 	 1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 J N 1 4 2 	 W O S : A 1 9 9 2 J N 1 4 2 0 0 0 0 3 	 	 
 
 J 	 G l a n z e l ,   W ;   M o e d ,   H F 	 	 	 	 G l a n z e l ,   W ;   M o e d ,   H F 	 	 	 J o u r n a l   i m p a c t   m e a s u r e s   i n   b i b l i o m e t r i c   r e s e a r c h 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 8 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s 	 J U L       1 7 ,   2 0 0 1 	 S Y D N E Y ,   A U S T R A L I A 	 	 	 	 S C I E N T I F I C   L I T E R A T U R E ;   S T O C H A S T I C - M O D E L ;   C I T A T I O N ;   I N D I C A T O R S ;   P R O D U C T I V I T Y ;   I N D E X 	 T h e   I m p a c t   F a c t o r   i n t r o d u c e d   b y   E u g e n e   G a r f i e l d   i s   a   f u n d a m e n t a l   c i t a t i o n - b a s e d   m e a s u r e   f o r   s i g n i f i c a n c e   a n d   p e r f o r m a n c e   o f   s c i e n t i f i c   j o u r n a l s .   I t   i s   p e r h a p s   t h e   m o s t   p o p u l a r   b i b l i o m e t r i c   p r o d u c t   u s e d   i n   b i b l i o m e t r i c s   i t s e l f ,   a s   w e l l   a s   o u t s i d e   t h e   s c i e n t i f i c   c o m m u n i t y .   F i r s t ,   a   c o n c i s e   r e v i e w   o f   t h e   b a c k g r o u n d   a n d   h i s t o r y   o f   t h e   I S I   i m p a c t   f a c t o r   a n d   t h e   b a s i c   i d e a s   u n d e r l y i n g   i t   a r e   g i v e n .   A   c r o s s - c i t a t i o n   m a t r i x   i s   u s e d   t o   v i s u a l i s e   t h e   c o n s t r u c t i o n   o f   t h e   I m p a c t   F a c t o r   a n d   s e v e r a l   r e l a t e d   j o u r n a l   c i t a t i o n   m e a s u r e s .   B o t h   s t r e n g t h s   a n d   f l a w s   o f   t h e   i m p a c t   f a c t o r   a r e   d i s c u s s e d .   S e v e r a l   a t t e m p t s   m a d e   b y   d i f f e r e n t   a u t h o r s   t o   i n t r o d u c e   m o r e   s o p h i s t i c a t e d   j o u r n a l   c i t a t i o n   m e a s u r e s   a n d   t h e   r e a s o n s   w h y   m a n y   i n d i c a t o r s   a i m i n g   a t   a   c o r r e c t i o n   o f   m e t h o d o l o g i c a l   l i m i t a t i o n s   o f   t h e   I m p a c t   F a c t o r   w e r e   n o t   s u c c e s s f u l   a r e   d e s c r i b e d .   T h e   n e x t   s e c t i o n   i s   d e v o t e d   t o   t h e   a n a l y s i s   o f   b a s i c   t e c h n i c a l   a n d   m e t h o d o l o g i c a l   a s p e c t s ,   I n   t h i s   c o n t e x t ,   t h e   m o s t   i m p o r t a n t   s o u r c e s   o f   p o s s i b l e   b i a s e s   a n d   d i s t o r t i o n s   f o r   c a l c u l a t i o n   a n d   u s e   o f   j o u r n a l   c i t a t i o n   m e a s u r e s   a r e   s t u d i e d .   T h e r e a f t e r ,   m a i n   c h a r a c t e r i s t i c s   o f   a p p l i c a t i o n   c o n t e x t s   a r e   s u m m a r i s e d .   T h e   l a s t   s e c t i o n   i s   c o n c e r n e d   w i t h   q u e s t i o n s   o f   s t a t i s t i c a l   r e l i a b i l i t y   o f   j o u r n a l   c i t a t i o n   m e a s u r e s .   I t   i s   s h o w n   t h a t   i n   c o n t r a s t   t o   a   c o m m o n   m i s b e l i e f   s t a t i s t i c a l   m e t h o d s   c a n   b e   a p p l i e d   t o   d i s c r e t e   ' s k e w e d '   d i s t r i b u t i o n s ,   a n d   t h a t   t h e   s t a t i s t i c a l   r e l i a b i l i t y   o f   t h e s e   s t a t i s t i c s   c a n   b e   u s e d   a s   a   b a s i s   f o r   a p p l i c a t i o n   o f   j o u r n a l   i m p a c t   m e a s u r e s   i n   c o m p a r a t i v e   a n a l y s e s .   F i n a l l y ,   t h e   q u e s t i o n   o f   s u f f i c i e n c y   o r   i n s u f f i c i e n c y   o f   a   s i n g l e ,   h o w s o e v e r   c o m p l e x   m e a s u r e   f o r   c h a r a c t e r i s i n g   t h e   c i t a t i o n   i m p a c t   o f   s c i e n t i f i c   j o u r n a l s   i s   d i s c u s s e d . 	 L i b   H u n g a r i a n   A c a d   S c i ,   B i b l i o m e t r   S e r v ,   H - 1 2 4 5   B u d a p e s t ,   H u n g a r y ;   R e s   A s s o c   S c i   C o m m u n   &   I n f o r m a t   E V ,   B e r l i n ,   G e r m a n y ;   L e i d e n   U n i v ,   C W T S ,   L e i d e n ,   N e t h e r l a n d s 	 G l a n z e l ,   W   ( r e p r i n t   a u t h o r ) ,   L i b   H u n g a r i a n   A c a d   S c i ,   B i b l i o m e t r   S e r v ,   P O B   1 0 0 2 ,   H - 1 2 4 5   B u d a p e s t ,   H u n g a r y . 	 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 A L L I S O N   P D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 3 ;   A S A I   I ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 3 ;   B R A U N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 7 ;   B R A U N   T ,   1 9 9 5 ,   C H E M   I N T E L L I G E N C   J A N ,   P 3 1 ;   G A R F I E L D   E ,   1 9 8 6 ,   C U R R   C O N T E N T S ,   P 3 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 8 7 ,   C U R R E N T   C O N T E N T   0 1 1 2 ;   G E L L E R   N L ,   1 9 7 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 4 ,   P 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 8 ) 9 0 0 6 6 - 3 ;   G L A N Z E L   W ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 1 0 4 ;   G L A N Z E L   W ,   1 9 9 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 1 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) E 0 0 1 2 - Q ;   G L A N Z E L   W ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 1 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 2 0 8 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 2 ;   H I R S T   G ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 4 0 3 ;   I n g w e r s e n   P ,   2 0 0 1 ,   C H I N E S E   S C I   B U L L ,   V 4 6 ,   P 5 2 4 ;   I N G W E R S E N   P ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 7 3 ;   L I N D S E Y   D ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 7 ;   M o e d   H F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 7 ;   M o e d   H F ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 3 8 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 7 5 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M o e d   H F ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 3 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P r i c e   D . J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 1 ;   R o u s s e a u   R . ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 2 4 9 ;   S C H U B E R T   A ,   1 9 8 6 ,   C Z E C H   J   P H Y S ,   V 3 6 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 5 9 9 7 4 3 ;   S C H U B E R T   A ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 4 ;   S C H U B E R T   A ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 7 1 7 8 ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S M A R T   J C ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 1 ;   T O D O R O V   R ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 5 ;   T O D O R O V   R ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 1 0 6 ;   T O M E R   C ,   1 9 8 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 2 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 6 ) 9 0 0 5 7 - 9 ;   V a n   L e e u w e n   T . N . ,   1 9 9 7 ,   C H E M   I N T E L L I G E N C   J U L ,   P 3 2 ;   W A L L A C E   D P ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 3 6 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - R ;   Y A N O V S K Y   V I ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 0 1 6 6 7 	 3 7 	 2 1 1 	 2 1 9 	 1 3 	 1 5 3 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 0 2 	 5 3 	 2 	 	 	 	 	 1 7 1 	 1 9 3 	 	 1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 	 	 2 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 3 1 G G 	 W O S : 0 0 0 1 7 4 4 0 7 2 0 0 0 0 2 	 	 
 
 J 	 B o r g m a n ,   C L ;   F u r n e r ,   J 	 	 	 	 B o r g m a n ,   C L ;   F u r n e r ,   J 	 	 	 S c h o l a r l y   c o m m u n i c a t i o n   a n d   b i b l i o m e t r i c s 	 A N N U A L   R E V I E W   O F   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 J O U R N A L   I M P A C T   F A C T O R S ;   W O R L D - W I D E - W E B ;   A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   D I G I T A L   L I B R A R Y   U S E ;   C I T A T I O N   A N A L Y S I S ;   I N F O R M A T I O N - S C I E N C E ;   S O C I A L - S C I E N C E S ;   S E L F - C I T A T I O N ;   P E R F O R M A N C E - M E A S U R E S ;   E L E C T R O N I C   J O U R N A L S 	 	 U n i v   C a l i f   L o s   A n g e l e s ,   L o s   A n g e l e s ,   C A   9 0 0 2 4   U S A 	 B o r g m a n ,   C L   ( r e p r i n t   a u t h o r ) ,   U n i v   C a l i f   L o s   A n g e l e s ,   L o s   A n g e l e s ,   C A   9 0 0 2 4   U S A . 	 	 	 F u r n e r ,   J o n a t h a n / 0 0 0 0 - 0 0 0 1 - 8 8 3 9 - 9 9 3 0 	 	 	 A l b e r t   R ,   1 9 9 9 ,   N A T U R E ,   V 4 0 1 ,   P 1 3 0 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   A l v a r e z   P ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 4 6 5 ;   A R U N A C H A L A M   S ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 1 5 ;   A T K I N S   H ,   2 0 0 0 ,   D   L I B   M A G A Z I N E     0 2 2 0 ,   V 6 ;   A T K I N S   H ,   1 9 9 9 ,   D   L I B   M A G A Z I N E     0 2 2 0 ,   V 5 ;   B A I R D   L M ,   1 9 9 4 ,   J   I N F O R M   S C I ,   V 2 0 ,   P 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 4 0 2 0 0 0 1 0 2 ;   B a l d i   S ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 4 ;   B a r a b a s i   A L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 0 9 ;   B a t e s   M J ,   1 9 9 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 0 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 9 8 ) 9 0 0 1 9 - 6 ;   B A Y E R   A E ,   1 9 6 6 ,   S O C I O L   E D U C ,   V 3 9 ,   P 3 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 1 9 2 0 ;   B E N I G E R   J R ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 2 5 4 ;   B i s h o p   A P ,   1 9 9 6 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 1 ,   P 3 0 1 ;   B i s h o p   A P ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 2 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 1 - 2 ;   B O N Z I   S ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 9 7 - J ;   B O N Z I   S ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 7 1 ;   B O R D O N S   M ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 1 9 7 ;   B o r g m a n   C h r i s t i n e ,   2 0 0 0 ,   G U T E N B E R G   G L O B A L   I N F ;   B O R G M A N   C L ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 1 ;   B O R G M A N   C L ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 2 ;   B o r g m a n   C L ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 1 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 1 ;   B O R G M A N   C L ,   2 0 0 0 ,   W E B   K N O W L E D G E ,   P 1 4 3 ;   B O R G M A N   C L ,   1 9 9 3 ,   I N T   S E R I A L S   I N D ,   P 4 5 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B O T A F O G O   R A ,   1 9 9 2 ,   A C M   T   I N F O R M   S Y S T ,   V 1 0 ,   P 1 4 2 ,   D O I   1 0 . 1 1 4 5 / 1 4 6 8 0 2 . 1 4 6 8 2 6 ;   B R A D L E Y   S J ,   1 9 9 2 ,   J   I N F O R M   S C I ,   V 1 8 ,   P 2 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 2 0 1 8 0 0 3 0 7 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B r o d e r   A . ,   2 0 0 0 ,   P   9   I N T   W O R L D   W I D   W E ;   B r o o k s   T A ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 4 8 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 5 < 4 8 5 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - F ;   B R O W N   J S ,   2 0 0 0 ,   S O C I A L   L I F E   I N F O R M A T ;   B R O W N   J S ,   1 9 9 5 ,   1   M O N D A Y ,   V 1 ;   B u c k l a n d   M K ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 0 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 9 ) 4 8 : 9 < 8 0 4 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - V ;   B u d d   J M ,   2 0 0 0 ,   L I B R   Q U A R T ,   V 7 0 ,   P 2 3 0 ;   B u d d   J M ,   1 9 9 6 ,   L I B R   Q U A R T ,   V 6 6 ,   P 1 ;   B U D D   J M ,   1 9 9 5 ,   C O L L   R E S   L I B R ,   V 5 6 ,   P 5 4 7 ;   B u d d   J M ,   1 9 9 9 ,   C O L L   R E S   L I B R ,   V 6 0 ,   P 3 0 8 ;   B U R R E L L   Q ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 3 ) 4 6 : 2 < 9 7 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - L ;   C A M E R O N   R D ,   2 0 0 1 ,   1   M O N D A Y ,   V 2 ;   C A P L A N   P ,   1 9 9 9 ,   D   L I B   M A G A Z I N E     0 2 2 0 ,   V 5 ;   C A R R   L ,   2 0 0 0 ,   A C M   J   C O M P U T E R   D O C U M ,   V 2 4 ,   P 5 4 ,   D O I   1 0 . 1 1 4 5 / 3 3 7 2 7 1 . 3 3 7 2 7 7 ;   C a s e   D O ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 7 < 6 3 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - H ;   C h a k r a b a r t i   S ,   1 9 9 9 ,   C O M P U T E R ,   V 3 2 ,   P 6 0 ,   D O I   1 0 . 1 1 0 9 / 2 . 7 8 1 6 3 6 ;   C H E N   C ,   1 9 9 9 ,   H Y P E R T E X T   9 9   R E T U R N I ;   C O L E   J R ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 8 1 ;   C O L E   S ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 5 ;   C O L E   S ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 1 4 3 ;   C o v i   L M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 2 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 3 - 6 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   C R O N I N   B ,   1 9 9 4 ,   J   D O C ,   V 5 0 ,   P 1 6 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 2 9 ;   C R O N I N   B ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 2 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 0 9 ;   C r o n i n   B ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 1 8 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 6 7 ;   C R O N I N   B ,   1 9 9 1 ,   J   D O C ,   V 4 7 ,   P 2 2 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 7 8 ;   C r o n i n   B ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 2 6 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 0 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C R O N I N   B ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 1 0 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 9 3 ;   C r o n i n   B ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 3 ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 3 ) 4 5 : 2 < 6 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - F ;   C r o n i n   B . ,   1 9 9 5 ,   S C H O L A R S   C O U R T E S Y   R O ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C R O N I N   B ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 1 ;   D A V E N P O R T   E ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 5 1 7 ;   D I A M O N D   A M ,   1 9 9 4 ,   E C O N   I N Q ,   V 3 2 ,   P 1 3 8 ;   D I A M O N D   A M ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 2 1 ;   D I M I T R O F F   A ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 4 4 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 2 ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   D i o d a t o   V .   P ,   1 9 9 4 ,   D I C T   B I B L I O M E T R I C S ;   D O R E I A N   P ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 2 1 - 3 ;   D O R E I A N   P ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 7 7 - 5 ;   D o y l e   M ,   2 0 0 0 ,   L E A R N   P U B L ,   V 1 3 ,   P 5 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 0 5 0 1 4 5 5 0 6 ;   E d g e   D ,   1 9 7 9 ,   H i s t   S c i ,   V 1 7 ,   P 1 0 2 ;   E g g h e   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 4 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 4 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 9 ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   E v a n s   L ,   2 0 0 0 ,   S E X   R O L E S ,   V 4 2 ,   P 2 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 0 4 3 3 2 3 9 0 6 ;   F U R N E R   J ,   1 9 9 6 ,   I N F O R M A T I O N   R E T R I E V A ,   P 7 5 ;   G A R F I E L D   E ,   1 9 7 3 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 9 3 ,   C A N   J   I N F O R M   L I B   S C I ,   V 1 8 ,   P 1 4 ;   G a r f i e l d   E ,   1 9 9 6 ,   L I B R   Q U A R T ,   V 6 6 ,   P 4 4 9 ;   G A R F I E L D   E ,   1 9 9 2 ,   T H E O R   M E D ,   V 1 3 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 6 3 6 2 5 ;   G A R F I E L D   E ,   1 9 7 5 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R   C O N T E N T S ,   V 7 ,   P 3 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G a r f i e l d   E . ,   1 9 9 2 ,   S C I   P U B L   P O L I C Y ,   V 1 9 ,   P 3 2 1 ;   G a r f i e l d   E ,   1 9 6 5 ,   S T A T   A S S   M E T H O D S   M E C ,   P 1 8 9 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G i n s p a r g   P . ,   1 9 9 4 ,   C o m p u t e r s   i n   P h y s i c s ,   V 8 ,   P 3 9 0 ;   G L A D W E L L   M ,   1 9 9 9 ,   N E W   Y O R K E R             0 1 1 1 ,   V 7 4 ,   P 5 2 ;   G R A Y   M ,   1 9 9 6 ,   I N T E R N E T   S T A T   W E B   G R ;   G u p t a   B M ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 1 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 8 1 ;   G u p t a   B M ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 2 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 3 7 ;   G U P T A   B M ,   1 9 9 6 ,   L I B   S C I   S L A N T   D O C U M E ,   V 3 3 ,   P 1 2 7 ;   H a r a r y   F . ,   1 9 6 5 ,   S T R U C T U R A L   M O D E L S ;   H A R G E N S   L L ,   1 9 9 3 ,   R E F E R E N C E   N E T W O R K S   S ;   H a r n a d   S . ,   1 9 9 5 ,   I n f o r m a t i o n   S o c i e t y ,   V 1 1 ,   P 2 8 5 ;   H A R N A D   S ,   1 9 9 0 ,   P S Y C H O L   S C I ,   V 1 ,   P 3 4 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 2 8 0 . 1 9 9 0 . t b 0 0 2 3 4 . x ;   H a r n a d   S ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 2 9 ;   H A R N A D   S ,   1 9 9 9 ,   D   L I B   M A G A Z I N E     0 2 2 0 ,   V 5 ;   H A R S A N Y I   M A ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 3 2 5 ;   H a r t e r   S P ,   1 9 9 6 ,   C O L L   R E S   L I B R ,   V 5 7 ,   P 4 4 0 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   H A R T E R   S P ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 5 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 1 0 ) 4 4 : 9 < 5 4 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - F ;   H a r t e r   S P ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 0 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 5 0 1 ) 4 9 : 6 < 5 0 7 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - X ;   H E R M A N   I L ,   1 9 9 1 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 3 ,   P 3 7 ;   H I T C H C O C K   S ,   2 0 0 1 ,   D   L I B   M A G A Z I N E     0 2 2 0 ,   V 4 ;   H I T C H C O C K   S ,   2 0 0 0 ,   D L   0 0   P   5   A C M   C   D I G ,   P 1 4 3 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   I N G W E R S E N   P ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 7 3 ;   J a c o b s   N ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 5 6 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 8 ;   K a l y a n e   V .   L . ,   1 9 9 7 ,   K E L P R O   B   S ,   V 1 ,   P 3 ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K l e i n b e r g   J .   M . ,   1 9 9 9 ,   C O M P U T I N G   C O M B I N A T O R ;   K l i n g   R ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 8 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 8 9 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 8 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 5 ;   K o s t o f f   R . N . ,   1 9 9 7 ,   H D B   R E S   I M P A C T   A S S E S ;   K R E T S C H M E R   H ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 9 5 ;   K r e t s c h m e r   H ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 3 0 2 ;   K u m a r   R ,   1 9 9 9 ,   P   8   I N T   W O R L D   W I D   W E ;   L A R S O N   R R ,   1 9 9 6 ,   G L O B A L   C O M P L E X I T Y   I N ,   P 7 1 ;   L a w r e n c e   S ,   1 9 9 9 ,   C O M P U T E R ,   V 3 2 ,   P 6 7 ,   D O I   1 0 . 1 1 0 9 / 2 . 7 6 9 4 4 7 ;   L a w r e n c e   S ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 9 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 0 . 5 3 6 0 . 9 8 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   L i s o v s k a y a   E ,   1 9 9 9 ,   C O M P   E D U C   R E V ,   V 4 3 ,   P 5 2 2 ,   D O I   1 0 . 1 0 8 6 / 4 4 7 5 8 2 ;   L I U   M X ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 3 7 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 2 0 ;   L u u k k o n e n   T ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 1 1 2 1 ;   L Y M A N   P ,   2 0 0 0 ,   M U C H   I N F O R M A T I O N   I N T ;   L y n c h   C . ,   1 9 9 8 ,   B u l l e t i n   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e ,   V 2 4 ,   D O I   1 0 . 1 0 0 2 / b u l t . 8 0 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M A C R O B E R T S   M H ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   M C K I E R N A N   G ,   1 9 9 6 ,   C I T E D S I T E S S M   C I T A T I O ;   M e a d o w s   A .   J . ,   1 9 9 8 ,   C O M M U N I C A T I N G   R E S ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M E R T O N   R K ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 4 3 5 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M e r t o n   R .   K . ,   1 9 6 8 ,   S O C I A L   T H E O R Y   S O C I A L ;   M I L G R A M   S ,   1 9 6 7 ,   P S Y C H O L   T O D A Y ,   V 1 ,   P 6 1 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M o e d   H F ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 3 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N a r i n   F . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 3 7 ;   N i s o n g e r   T E ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 1 0 0 4 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   N o y o n s   E C M ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 2 < 1 1 5 : : A I D - A S I 3 > 3 . 3 . C O ; 2 - A ;   O D L Y Z K O   A M ,   1 9 9 5 ,   I N T   J   H U M - C O M P U T   S T ,   V 4 2 ,   P 7 1 ,   D O I   1 0 . 1 0 0 6 / i j h c . 1 9 9 5 . 1 0 0 4 ;   O D L Y Z K O   A M ,   1 9 9 8 ,   T E C H N O L O G Y   S C H O L A R L Y ,   P 3 8 0 ;   O k e r s o n   A . ,   1 9 9 5 ,   S C H O L A R L Y   J   C R O S S R O A ;   P a i s l e y   W i l l i a m   J . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 2 8 1 ;   P A O   M L ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 9 6 - I ;   P E R I T Z   B C ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 6 ;   P E R I T Z   B C ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 4 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 4 4 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   P e r s s o n   O ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 9 1 ;   P e r s s o n   O ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 4 9 ;   P E R S S O N   O ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 6 ;   P E T E R S   H P F ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 9 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Q ;   P i e r c e   S J ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 2 7 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 3 < 2 7 1 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - M ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P R I C E   D J D ,   1 9 8 6 ,   L I T T L   S C I   B I G   S C I ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   Q i n   J ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 9 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 8 9 3 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - X ;   R A Y W A R D   W B ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 6 2 - 0 ;   R O B I N S O N   M D ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 0 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 3 0 8 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - M ;   R o u s s e a u   R ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 7 7 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 1 0 ) 4 7 : 1 0 < 7 7 5 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - # ;   R O U S S E A U   R ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 7 9 ;   R O U S S E A U   R ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 4 0 9 ;   R O U S S E A U   R ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 2 ) 4 3 : 1 0 < 6 4 5 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - X ;   R O U S S E A U   R ,   1 9 9 3 ,   C A N   J   I N F O R M   L I B   S C I ,   V 1 8 ,   P 5 1 ;   R O U S S E A U   R ,   1 9 9 7 ,   I N T   J   S C I   I N F O R M E T R I ,   V 1 ;   R o u s s e a u   S ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 5 0 1 3 ;   R O Y   R ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 7 2 8 5 7 ;   R U S S E L L   J M ,   I N   P R E S S   E N C Y   L I F E   S ;   R U S S E L L   J M ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 3 3 ;   S C H A M B E R   L ,   1 9 9 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 9 ,   P 3 ;   S C H A M B E R   L ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 7 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 0 5 0 - C ;   S C H A U D E R   D ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 7 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 3 ) 4 5 : 2 < 7 3 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 5 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   S e g l e n   P O ,   1 9 9 8 ,   A C T A   O R T H O P   S C A N D ,   V 6 9 ,   P 2 2 4 ,   D O I   1 0 . 3 1 0 9 / 1 7 4 5 3 6 7 9 8 0 9 0 0 0 9 2 0 ;   S e n   B K ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 6 2 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 8 4 ;   S e n   B K ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 2 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 4 9 ;   S E N G U P T A   I N ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 ;   S H A D I S H   W R ,   1 9 9 5 ,   S O C   S T U D   S C I ,   V 2 5 ,   P 4 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 5 0 2 5 0 0 3 0 0 3 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S m i t h   A G ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 5 7 7 ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   S N Y D E R   H ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 7 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 2 0 2 ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   T A B A H   A ,   2 0 0 1 ,   A N N   R E V   I N F O R M A T I O N ,   P 3 4 ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   V a n   H o o y d o n k   G ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 9 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 8 ) 4 9 : 1 0 < 9 3 2 : : A I D - A S I 8 > 3 . 3 . C O ; 2 - 0 ;   v a n   L e e u w e n   T N ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 1 5 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 0 7 8 1 7 7 7 3 5 9 ;   v a n   L e e u w e n   T N ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 4 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 6 0 5 ;   V a n   R a a n   A ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 4 1 7 ;   V A N D E S O M P E L   H ,   1 9 9 9 ,   D L I B   M A G A Z I N E ,   P 5 ;   V A N D E S O M P E L   H ,   2 0 0 1 ,   D   L I B   M A G A Z I N E     0 2 2 0 ,   P 6 ;   V a n R a a n   A F J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 0 5 ;   V a n   R a a n   A n t h o n y   F .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   v a n   R a a n   A . F . J . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 0 1 ;   V i n k l e r   P ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 8 ;   V i n k l e r   P ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 0 2 ;   W A G N E R D O B L E R   R ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 2 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 1 ;   W a t t s   D J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 3 ,   P 4 4 0 ,   D O I   1 0 . 1 0 3 8 / 3 0 9 1 8 ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W h i t e   H D ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 4 2 > 3 . 3 . C O ; 2 - K ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W h i t e   H . D . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 4 7 5 ;   W h i t e   M D ,   1 9 9 7 ,   L I B R   Q U A R T ,   V 6 7 ,   P 1 2 2 ;   W I L S O N   C S ,   2 0 0 1 ,   A N N   R E V   I N F O R M A T I O N ,   P 3 4 ;   W o o l g a r   S t e v e ,   1 9 9 1 ,   S C I   P U B L   P O L I C Y ,   V 1 8 ,   P 3 1 9 ;   W o r m e l l   I ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 5 8 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 8 2 ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ;   W O U T E R S   P ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 6 5 ;   Y i t z h a k i   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 8 1 ;   Y o u n g e n   G K ,   1 9 9 8 ,   C O L L   R E S   L I B R ,   V 5 9 ,   P 4 4 8 	 2 2 0 	 2 1 0 	 2 1 6 	 1 7 	 1 3 8 	 I N F O R M A T I O N   T O D A Y   I N C 	 M E D F O R D 	 1 4 3   O L D   M A R L T O N   P I K E ,   M E D F O R D ,   N J   0 8 0 5 5 - 8 7 5 0   U S A 	 0 0 6 6 - 4 2 0 0 	 	 	 A N N U   R E V   I N F O R M   S C I 	 A n n u .   R e v .   I n f o r m .   S c i .   T e c h n o l . 	 	 2 0 0 2 	 3 6 	 	 	 	 	 	 3 	 7 2 	 	 	 	 7 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 3 3 W H 	 W O S : 0 0 0 1 7 4 5 5 2 9 0 0 0 0 2 	 	 
 
 J 	 W H I T E ,   H D ;   M C C A I N ,   K W 	 	 	 	 W H I T E ,   H D ;   M C C A I N ,   K W 	 	 	 B I B L I O M E T R I C S 	 A N N U A L   R E V I E W   O F   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 	 	 	 W H I T E ,   H D   ( r e p r i n t   a u t h o r ) ,   D R E X E L   U N I V , C O L L   I N F O R M A T   S T U D I E S , P H I L A D E L P H I A , P A   1 9 1 0 4 ,   U S A . 	 	 	 	 	 	 A N D E R S O N   R C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 2 0 8 ;   A S A I   I ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 2 0 6 ;   A T K I N S O N   R ,   1 9 8 4 ,   L I B R   R E S O U R   T E C H   S E R ,   V 2 8 ,   P 1 0 9 ;   A V E R S A   E S ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 6 ;   B A S T I L L E   J D ,   1 9 8 0 ,   B   M E D   L I B R   A S S O C ,   V 6 8 ,   P 3 5 7 ;   B E A V E R   D D ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 2 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 0 8 ;   B E G H T O L   C ,   1 9 8 6 ,   J   D O C ,   V 4 2 ,   P 8 4 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 8 8 ;   B e l l a r d o   T . ,   1 9 8 0 ,   L I B R   R E S ,   V 2 ,   P 2 3 1 ;   B E N S M A N   S J ,   1 9 8 5 ,   C O L L   R E S   L I B R ,   V 4 6 ,   P 1 3 ;   B e n s m a n   S .   J . ,   1 9 8 2 ,   L I B R   R E S ,   V 4 ,   P 2 7 9 ;   B o l l i n g e r   W .   A . ,   1 9 8 4 ,   8 t h   I n t e r n a t i o n a l   O n l i n e   I n f o r m a t i o n   M e e t i n g ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B O O K S T E I N   A ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 2 0 6 ;   B O O K S T E I N   A ,   1 9 7 9 ,   C O L L E C T I O N   M A N A G E M E N ,   V 3 ,   P 1 5 1 ;   B O T T L E   R T ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 1 0 9 ;   B O Y C E   B R ,   1 9 8 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 0 ,   P 1 5 3 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   B R O A D U S   R N ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 3 ) 3 8 : 2 < 1 2 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   B R O A D U S   R N ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 ;   B r o o k e s   B .   C . ,   1 9 7 0 ,   J o u r n a l   o f   D o c u m e n t a t i o n ,   V 2 6 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 0 0 ;   B R O O K E S   B C ,   1 9 8 4 ,   J   I N F O R M   S C I ,   V 8 ,   P 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 4 0 0 8 0 0 1 0 4 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 8 1 ,   J   I N F O R M   S C I ,   V 3 ,   P 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 1 0 0 3 0 0 1 0 2 ;   B R O O K E S   B C ,   1 9 8 0 ,   C A N   J   I N F O R M   S C I ,   V 5 ,   P 1 9 9 ;   B R O O K E S   B C ,   1 9 8 0 ,   J   I N F O R M   S C I ,   V 2 ,   P 1 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 0 0 0 2 0 0 3 0 2 ;   B R O O K E S   B C ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 2 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 4 0 4 ;   B R O O K E S   B C ,   1 9 8 4 ,   J   D O C ,   V 4 0 ,   P 1 2 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 6 1 ;   B R O O K E S   B C ,   1 9 8 0 ,   J   I N F O R M   S C I ,   V 2 ,   P 2 6 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 0 0 0 2 0 0 6 0 2 ;   B R O O K E S   B C ,   1 9 8 0 ,   J   I N F O R M   S C I ,   V 2 ,   P 2 0 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 0 0 0 2 0 0 5 0 2 ;   B R O O K E S   B C ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 1 8 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 4 1 ;   B R O O K E S   B C ,   1 9 8 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 0 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 4 ) 9 0 0 3 8 - 4 ;   B R O O K E S   B C ,   1 9 6 9 ,   N A T U R E ,   V 6 ,   P 2 2 4 ;   B R O O K E S   B C ,   1 9 8 2 ,   Q U A N T I T A T I V E   L I N G U I S ,   V 1 6 ,   P 6 5 ;   B R O O K S   T A ,   1 9 8 7 ,   B I B L I O M E T R I C S   T O O L B O ;   B R O W N   T ,   1 9 7 9 ,   I N T   J   A L L   Q U A N T I T A T I ;   B U D D   J ,   1 9 8 6 ,   L I B R   I N F O R M   S C I   R E S ,   V 8 ,   P 1 8 9 ;   B U R T O N   H D ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 7 6 - 3 ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C a l l o n   M . ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ;   C A R P E N T E R   M P ,   1 9 7 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 0 ,   P 1 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 0 0 2 1 0 ;   C A R P E N T E R   M P ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 2 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 7 6 ;   C A R P E N T E R   M P ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 4 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 6 0 6 ;   C A W K E L L   A E ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 1 0 7 ;   C H A P M A N   J ,   1 9 8 1 ,   1 9 8 1   P   N A T   O N L   M   N E W ,   P 9 7 ;   C H E N   Y S ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 5 9 1 ;   C H E N   Y S ,   1 9 8 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 7 ) 9 0 0 0 2 - 1 ;   C H E N   Y S ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 9 ) 3 7 : 5 < 3 0 7 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 8 ;   C H R I S T O V A O   H T ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 4 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 8 ;   C H U B I N   D E ,   1 9 8 7 ,   K N O W L E D G E ,   V 9 ,   P 2 5 4 ;   C L E V E L A N D   D B ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 1 1 ;   C O C K S   T M ,   1 9 8 6 ,   J   I N F O R M   S C I ,   V 1 2 ,   P 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 6 0 1 2 0 0 1 0 8 ;   C O I L E   R C ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 3 6 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 6 1 0 ;   C o l e   S t e p h e n ,   1 9 7 8 ,   M E T R I C   S C I ,   P 2 0 9 ;   C O W A R D   H ,   1 9 8 4 ,   A R B C   S C I   P O L I C Y   S T U D ;   C O Z Z E N S   S E ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 9 ;   C O Z Z E N S   S E ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 3 3 ;   C O Z Z E N S   S E ,   1 9 8 5 ,   S O C   S T U D   S C I ,   V 1 5 ,   P 1 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 5 0 1 5 0 0 1 0 0 5 ;   C R A N E   D ,   1 9 7 0 ,   I N T   S O C   S C I   J ,   V 2 2 ,   P 2 8 ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   C R A W F O R D   S ,   1 9 7 9 ,   4 2 N D   P   A M   S O C   I N F   S C ,   V 1 6 ,   P 2 6 3 ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   C R O U C H   D ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 7 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   D E G L A S   F ,   1 9 8 6 ,   L I B R I ,   V 3 6 ,   P 4 0 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 8 6 . 3 6 . 1 . 4 0 ;   D e   M e y   M ,   1 9 8 2 ,   C O G N I T I V E   P A R A D I G M ;   D E Q U E I R O Z   G G ,   1 9 8 1 ,   J   R E S   C O M M U N   S T U D ,   V 2 ,   P 2 0 3 ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 ;   D O R E I A N   P ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 7 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 3 ) 3 9 : 2 < 7 9 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - C ;   D O R E I A N   P ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 7 7 - 5 ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 4 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 6 1 1 ;   D o u   H . ,   1 9 8 3 ,   7 t h   I n t e r n a t i o n a l   O n l i n e   I n f o r m a t i o n   M e e t i n g ;   D R O T T   M C ,   1 9 7 9 ,   A S L I B   P R O C ,   V 3 1 ,   P 2 9 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 0 6 8 7 ;   D R O T T   M C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 4 1 ;   D R O T T   M C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 3 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 6 ;   E d g e   D ,   1 9 7 9 ,   H i s t   S c i ,   V 1 7 ,   P 1 0 2 ;   E G G H E   L ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 2 8 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 2 8 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Q ;   E G G H E   L ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 2 4 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 7 ) 3 7 : 4 < 2 4 6 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - D ;   E G G H E   L ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 1 0 3 - 3 ;   E G G H E   L ,   1 9 8 8 ,   J   D O C ,   V 4 4 ,   P 5 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 1 9 ;   E G G H E   L ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 7 ) 3 9 : 4 < 2 8 1 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 9 ;   E G G H E   L ,   1 9 8 5 ,   J   D O C ,   V 4 1 ,   P 1 7 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 8 0 ;   E l k a n a   Y . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   E s c a r p i t   R o b e r t ,   1 9 7 0 ,   L I T   S O C I A L   E L E M E N T S ;   F E D O R O W I C Z   J ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 2 3 ;   F E D O R O W I C Z   J ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 8 5 ;   F O X   M F ,   1 9 8 3 ,   S O C   S T U D   S C I ,   V 1 3 ,   P 2 8 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 3 0 1 3 0 0 2 0 0 5 ;   F R A M E   J D ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 4 8 1 ;   F R A N K L I N   J J ,   1 9 8 8 ,   S O C   S T U D   S C I ,   V 1 8 ,   P 3 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 8 0 1 8 0 0 2 0 0 7 ;   G A P E N   D K ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 1 0 7 ;   G A R F I E L D   E ,   1 9 8 5 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 7 ,   P 3 1 3 ;   G A R F I E L D   E ,   1 9 8 3 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 5 ,   P 4 7 3 ;   G a r f i e l d   E ,   1 9 8 1 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 4 ,   P 4 7 6 ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 8 4 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 6 ,   P 3 5 4 ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 4 ,   P 6 3 4 ;   G a r f i e l d   E . ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 2 ,   P 3 9 6 ;   G a r f i e l d   E . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 7 9 ;   G A R F I E L D   E ,   1 9 8 5 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 7 ,   P 2 1 8 ;   G A T R E L L   A C ,   1 9 8 4 ,   P R O F   G E O G R ,   V 3 6 ,   P 3 0 0 ,   D O I   1 0 . 1 1 1 1 / j . 0 0 3 3 - 0 1 2 4 . 1 9 8 4 . 0 0 3 0 0 . x ;   G E L L E R   N L ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 3 ;   G O F F M A N   W ,   1 9 8 5 ,   S E L E C T I V I T Y   I N F O R M A T ,   P 1 1 7 ;   G O R D O N   M D ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 9 7 ;   G R I F F I T H   B C ,   1 9 7 9 ,   J   D O C ,   V 3 5 ,   P 1 7 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 7 9 ;   G R I F F I T H   B C ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 0 8 ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   G R I F F I T H   B C ,   1 9 8 8 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 3 ,   P 3 5 1 ;   G R I F F I T H   B C ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 8 5 ;   G R I F F I T H   B C ,   1 9 8 3 ,   S T R U C T U R E   S O C I A L   B E H ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 8 0 0 3 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 0 5 9 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 4 8 ;   H A R G E N S   L L ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 1 0 3 ;   H A R G E N S   L L ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 8 ;   H A R P E R   D J ,   1 9 7 8 ,   J   D O C ,   V 3 4 ,   P 1 8 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 5 9 ;   H a r t e r   S .   P . ,   1 9 8 6 ,   O N L I N E   I N F O R M A T I O N   R ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H A W K I N S   D T ,   1 9 7 9 ,   4 2 N D   P   A M   S O C   I N F   S C ,   V 1 6 ,   P 2 2 9 ;   H E   C P ,   1 9 8 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 2 ,   P 4 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 6 ) 9 0 0 7 5 - 0 ;   H E A L E Y   P ,   1 9 8 6 ,   R E S   P O L I C Y ,   V 1 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 6 ) 9 0 0 2 4 - 7 ;   H E F F N E R   A G ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 8 6 0 ;   H E I N E   M H ,   1 9 7 8 ,   J   D O C ,   V 3 4 ,   P 1 7 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 5 8 ;   H E I N Z K I L L   R ,   1 9 8 0 ,   L I B R   Q U A R T ,   V 5 0 ,   P 3 5 2 ;   H e r d a n   G u s t a v ,   1 9 6 6 ,   A D V   T H E O R Y   L A N G U A G E ;   H e r t z e l   D .   H ,   1 9 8 7 ,   E N C Y   L I B R A R Y   I N F O   S 7 ,   P 1 4 4 ;   H I B B S   J E ,   1 9 8 4 ,   O N L I N E ,   V 8 ,   P 5 9 ;   H I C K S   D ,   1 9 8 7 ,   S O C   S T U D   S C I ,   V 1 7 ,   P 2 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 7 0 1 7 0 0 2 0 0 4 ;   H I R S T   G ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 4 0 3 ;   H I R S T   G ,   1 9 7 8 ,   I E E E   T   P R O F E S S I O N A L ,   V 2 0 ,   P 2 3 3 ;   H J E R P P E   R ,   1 9 8 0 ,   B I B L I O   B I B L I O M E T R I C S ;   H O D O W A N E C   G V ,   1 9 8 3 ,   C O L L   R E S   L I B R ,   V 4 4 ,   P 4 2 1 ;   H O P K I N S   F L ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 1 2 ;   H U B E R T   J J ,   1 9 8 0 ,   S O C   I N D I C   R E S ,   V 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 2 8 6 4 7 8 ;   H U B E R T   J J ,   1 9 7 7 ,   S O C   I N D I C   R E S ,   V 4 ,   P 4 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 5 3 1 4 4 ;   H U B E R T   J J ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 1 1 ;   H U B E R T   J J ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 6 5 ;   H U R T   C D ,   1 9 8 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 1 ,   P 1 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 5 ) 9 0 1 0 3 - 7 ;   H U R T   C D ,   1 9 8 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 9 ,   P 1 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 3 ) 9 0 0 6 8 - 7 ;   I K P A A H I N D I   L ,   1 9 8 5 ,   L I B R I ,   V 3 5 ,   P 1 6 3 ;   I N G W E R S E N   P ,   1 9 8 4 ,   O N L I N E   R E V ,   V 8 ,   P 4 7 5 ;   I R V I N E   J ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 2 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 3 1 - X ;   I R V I N E   J ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 0 ;   I r v i n e   J . ,   1 9 8 4 ,   F O R E S I G H T   S C I   P I C K I N ;   K A N T O R   P B ,   1 9 8 1 ,   4 4 T H   P   A M   S O C   I N F   S C ,   P 2 8 2 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K I N G   J ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 2 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 8 1 ;   K l a p p   O .   E . ,   1 9 7 8 ,   O P E N I N G   C L O S I N G   S T R A ;   K N A P P   S D ,   1 9 8 4 ,   O N L I N E ,   V 8 ,   P 4 3 ;   K o c h e n   M . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 9 7 ;   K O E N I G   M E D ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 2 4 - 0 ;   K O E S T E R   D ,   1 9 8 2 ,   S O C   S T U D   S C I ,   V 1 2 ,   P 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 2 0 1 2 0 0 1 0 0 4 ;   L A N C A S T E R   F W ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 6 0 8 ;   L A W A N I   S M ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 1 0 9 ;   L A W A N I   S M ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 8 1 ;   L A W A N I   S M ,   1 9 8 1 ,   L I B R I ,   V 3 1 ,   P 2 9 4 ;   L A W A N I   S M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 4 ;   L A W S O N   J ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 0 0 ;   L E N K   P ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 4 ;   L E N O I R   T ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 4 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 9 0 0 9 0 0 4 0 4 ;   L E Y D E S D O R F F   L ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 2 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 7 9 3 5 1 ;   L E Y D E S D O R F F   L ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 5 ;   L I N D S E Y   D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 4 ;   L I N E   M B ,   1 9 8 6 ,   J   D O C ,   V 4 2 ,   P 4 6 ;   L I N E   M B ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 3 4 3 ;   L I N E   M B ,   1 9 7 4 ,   J   D O C ,   V 3 0 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 8 3 ;   L I N E   M B ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 3 0 7 : : A I D - A S I 1 4 > 3 . 0 . C O ; 2 - 7 ;   L i n e   M . ,   1 9 8 1 ,   S O C   S C I   I N F O R M ,   V 1 ,   P 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 1 ) 9 0 0 0 1 - 6 ;   L O G A N   E L ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 2 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 2 6 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - F ;   L O N G   J S ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 3 ;   M A R S H A K O V A   I V ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 8 6 1 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M A R T I N   W A ,   1 9 8 3 ,   J   I N F O R M   S C I ,   V 6 ,   P 1 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 3 0 0 6 0 0 5 0 5 ;   M A R T I N   W A ,   1 9 8 2 ,   6   I N T   O N L   M   L O N D   7   9 ,   P 6 7 ;   M A R T I N   W A ,   1 9 8 6 ,   1 9 8 6   P   N A T   O N L   M   N E W ,   P 2 9 5 ;   M A R T O N   J ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 2 ;   M A R T O N   J ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 2 4 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 4 0 3 ;   M C A L L I S T E R   P R ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 3 0 4 ;   M C A L L I S T E R   P R ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 5 ;   M C C A I N   K W ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 6 0 7 ;   M C C A I N   K W ,   1 9 8 6 ,   L I B R   Q U A R T ,   V 5 6 ,   P 2 5 8 ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M C C A I N   K W ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 4 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 1 1 ) 3 9 : 6 < 4 2 8 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - P ;   M C C A I N   K W ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 4 ;   M C C A I N   K W ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 2 9 ;   M C C A I N   K W ,   1 9 8 7 ,   C I T A T I O N   P A T T E R N S   H I ,   V 9 ,   P 4 1 ;   M C C R E E R Y   L S ,   1 9 8 4 ,   4 7 T H   P   A M   S O C   I N F   S C ,   P 2 1 2 ;   M C G H E E   P E ,   1 9 8 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 9 ,   P 2 8 5 ;   M E L I S C H E K   G ,   1 9 8 4 ,   P H I L O S   H I S T   S I T Z U N G S ,   V 4 1 6 ,   P 2 5 9 ;   M I C H E L E T   B ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 4 ;   M i k h a i l o v   A .   I . ,   1 9 8 4 ,   S C I   C O M M U N I C A T I O N S   I ;   M O E D   H F ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 5 7 ;   M O E D   H F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 5 ;   M O E D   H F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 3 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M O L L   J K ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ;   M O M B E R S   C ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 3 ;   M O R M A N   E T ,   1 9 8 0 ,   S O C   S O C I A L   S T U D I E S   S ,   V 5 ,   P 7 ;   M O T Y L E V   V M ,   1 9 8 1 ,   F O R U M   I N F O R M A T I O N   D O ,   V 6 ,   P 3 ;   M U L L I N S   N C ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 5 5 2 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 5 5 4 ;   M U L L I N S   N C ,   1 9 7 3 ,   T H E O R I E S   T H E O R Y   G R O U ;   M U N C H P E T E R S E N   E ,   1 9 8 1 ,   L I B R I ,   V 3 1 ,   P 1 ;   N A D E L   E ,   1 9 8 0 ,   S O C I O L O G Y ,   V 1 4 ,   P 4 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 3 8 0 3 8 5 8 0 0 1 4 0 0 3 0 3 ;   N A D E L   E ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 4 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 4 0 2 ;   N A D E L   E ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 2 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 0 1 6 6 6 ;   N A D E L   E ,   1 9 8 3 ,   S O C   S T U D   S C I ,   V 1 3 ,   P 2 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 3 0 1 3 0 0 2 0 0 4 ;   N A R I N   F ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 8 - X ;   N A R I N   F ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 5 ;   N A R I N   F ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 1 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 3 9 - X ;   N a r i n   F . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 4 6 5 ;   N A R I N   F ,   1 9 7 6 ,   P B 2 5 2 3 3 9 ;   N E E L E Y   J D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 8 ;   N E I L L   S D ,   1 9 8 2 ,   J   I N F O R M   S C I ,   V 4 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 2 0 0 4 0 0 1 0 5 ;   N E L S O N   M J ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 4 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 3 - 4 ;   N E L S O N   M J ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 2 ;   N I C H O L L S   P T ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 4 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 4 9 - 0 ;   N I C H O L L S   P T ,   1 9 8 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 2 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 6 ) 9 0 0 7 6 - 2 ;   N I C H O L L S   P T ,   1 9 8 7 ,   T H E S I S   U   W   O N T A R I O ;   N O M A   E ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 2 5 - 5 ;   N O M A   E ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 1 0 5 ;   O C O N N O R   D O ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 9 ;   O L I V E R   M R ,   1 9 7 1 ,   J   D O C ,   V 2 7 ,   P 1 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 0 6 ;   O p p e n h e i m   C . ,   1 9 8 5 ,   9 t h   I n t e r n a t i o n a l   O n l i n e   I n f o r m a t i o n   M e e t i n g ;   O P P E N H E I M   C ,   1 9 8 6 ,   W O R L D   P A T E N T   I N F O R M A ,   V 8 ,   P 9 8 ,   D O I   1 0 . 1 0 1 6 / 0 1 7 2 - 2 1 9 0 ( 8 6 ) 9 0 0 0 7 - 4 ;   * O R B   S E A R C H   S E R V ,   1 9 8 8 ,   O R B I T   S E A R C H L ,   V 1 6 ,   P 4 ;   P a i s l e y   W i l l i a m ,   1 9 8 6 ,   L I B R A R I E S   I N F O R M A T I O ,   P 1 2 2 ;   P a i s l e y   W .   J . ,   1 9 8 4 ,   P R O G R   C O M M U N I C A T I O N ,   V 5 ,   P 1 ;   P A O   M L ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 2 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 7 0 1 0 5 ;   P A O   M L ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 3 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 3 0 1 0 7 ;   P A O   M L ,   1 9 8 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 1 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 5 ) 9 0 0 5 5 - X ;   P a o   M .   L . ,   1 9 8 1 ,   L I B R   R E S ,   V 2 ,   P 3 2 7 ;   P E R I T Z   B C ,   1 9 8 3 ,   L I B R   R E S ,   V 3 ,   P 4 7 ;   P E R I T Z   B C ,   1 9 8 4 ,   I N T   L I B R   R E V ,   V 3 4 ,   P 2 3 3 ;   P E R S S O N   O ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 1 ;   P I C K E R I N G   A ,   1 9 8 7 ,   S O C   S T U D   S C I ,   V 1 7 ,   P 8 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 7 0 1 7 0 0 1 0 0 4 ;   P I N S K I   G ,   1 9 7 7 ,   J   C H E M   I N F   C O M P   S C I ,   V 1 7 ,   P 6 7 ,   D O I   1 0 . 1 0 2 1 / c i 6 0 0 1 0 a 0 0 3 ;   P I N S K I   G ,   1 9 7 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 0 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 0 0 3 0 8 ;   P O N T I G O   J ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 8 ;   P O R T E R   A L ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 7 8 ;   P O R T E R   A L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 4 ;   P O T T E R   W G ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 2 1 ;   P O T T E R   W G ,   1 9 8 1 ,   L I B R A R Y   T R E N D S ,   V 3 0 ;   P O T T E R   W G ,   1 9 8 8 ,   J   A C A D E M I C   L I B R A R I A N ,   V 1 4 ;   P R A T T   A D ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 2 8 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 5 0 8 ;   P R A V D I C   N ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 8 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 7 9 ,   P   A M   S O C   I N F O R M   S C I ,   V 1 6 ,   P 2 4 9 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   P r i t c h a r d   A . ,   1 9 8 1 ,   B I B L I O M E T R I C S   B I B L I O ,   V 1 ;   R A O   I K R ,   1 9 8 3 ,   Q U A N T I T A T I V E   M E T H O D S ;   R E E V E S   B ,   1 9 8 3 ,   H U M   C O M M U N   R E S ,   V 1 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 3 . t b 0 0 0 0 7 . x ;   R I C E   R ,   1 9 8 9 ,   H U M A N   C O M M U N I C A T I O N ,   V 1 5 ,   P 2 5 6 ;   R I C E   R E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 0 2 ;   R O S E N G R E N   K E ,   1 9 7 1 ,   G E N   S Y S T ,   V 1 6 ,   P 2 0 5 ;   R O S E N G R E N   K E ,   1 9 8 4 ,   C U L T U R A L   I N D I C A T O R S ,   P 2 3 7 ;   R O S E N G R E N   K E ,   1 9 8 1 ,   Z   L I T E R A T U R W I S S E N S   S ,   V 1 2 ,   P 5 2 ;   R o s e n g r e n   K .   E . ,   1 9 6 8 ,   S O C I O L O G I C A L   A S P E C T S ;   R O T H M A N   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 2 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 9 ;   R O U S E   S H ,   1 9 7 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 5 ,   P 2 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 9 ) 9 0 0 2 8 - 1 ;   R O U S S E A U   R ,   1 9 8 7 ,   J   D O C ,   V 4 3 ,   P 3 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 1 4 ;   S A I T O   Y ,   1 9 8 4 ,   L I B   I N F O R M A T I O N   S C I ,   V 2 2 ,   P 6 1 ;   S A L T O N   G ,   1 9 7 9 ,   I E E E   T   P R O F   C O M M U N ,   V 2 2 ,   P 1 4 6 ;   S A N D I S O N   A ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 3 4 2 ;   S A N D I S O N   A ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 3 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 6 0 9 ;   S A R A C E V I C   T ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 6 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 6 0 6 0 4 ;   S C H R A D E R   A M ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 1 5 1 ;   S C H R A D E R   A M ,   1 9 8 4 ,   L I B R   I N F O R M   S C I   R E S ,   V 6 ,   P 2 2 7 ;   S C H U B E R T   A ,   1 9 8 3 ,   Q U A N T I T A T I V E   S T U D I E S ;   S E N G U P T A   I N ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 9 ;   S H A W   J G ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 9 2 ;   S H A W   W M ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 8 ;   S I C H E L   H S ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 6 ;   S M A L L   H ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 3 ;   S M A L L   H ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 7 0 3 0 2 ;   S M A L L   H ,   1 9 8 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 7 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 1 ) 9 0 0 4 0 - 6 ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S M A L L   H ,   1 9 8 5 ,   S E L E C T I V I T Y   I N F O R M A T ,   P 8 3 ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M A L L   H G ,   1 9 7 6 ,   I N T   C L A S S I F ,   V 3 ,   P 6 7 ;   S M A L L   H G ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 2 ;   S M A L L   H G ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 4 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 1 ;   S M A L L   H G ,   1 9 7 9 ,   1 9 7 9   P   A M   S O C   I N F   S C ,   V 1 6 ,   P 2 7 0 ;   S M A L L   H G ,   1 9 7 3 ,   3 6 T H   P   A M   S O C   I N F   S C ,   V 1 0 ,   P 2 1 7 ;   S M A R T   J C ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 7 6 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S T E F A N I A K   B ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 9 ;   S T I N S O N   E R ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 2 0 1 ;   S U B R A M A N Y A M   K ,   1 9 8 3 ,   J   I N F O R M   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 3 0 0 6 0 0 1 0 5 ;   S U L L I V A N   D ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 3 0 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 5 1 ;   S U L L I V A N   D ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 5 ;   S U L L I V A N   M ,   1 9 8 0 ,   L I B R   R E S ,   V 2 1 ,   P 2 9 ;   S U M M E R S   E G ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 3 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 6 0 5 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S W A N S O N   D R ,   1 9 8 6 ,   L I B R   Q U A R T ,   V 5 6 ,   P 1 0 3 ;   S W A N S O N   D R ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 9 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 3 ) 3 9 : 2 < 9 2 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - P ;   S W A N S O N   D R ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 2 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 2 2 8 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   T A G L I A C O Z Z O   R ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 2 5 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 4 4 ;   T A G U E   J ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 1 2 5 ;   T A G U E   J ,   1 9 8 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 3 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 7 ) 9 0 0 0 1 - X ;   T A G U E   J ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 2 8 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 4 0 8 ;   T E R R A G N O   P J ,   1 9 8 4 ,   W O R L D   P A T E N T   I N F O R M A ,   V 6 ,   P 6 9 ;   T O D O R O V   R ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 2 8 8 ;   T O D O R O V   R ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 1 0 6 ;   T U R N E R   C F ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 0 1 6 6 4 ;   * U S   N A T   S C I   B O A R D ,   1 9 8 7 ,   S C I   E N G N   I N D   1 9 8 7 ;   * U S   N A T   S C I   F D N ,   1 9 8 2 ,   S T U D   S C I   D I S C   A N N   B I ;   V a n   R a a n   A n t h o n y   F .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   V I N K L E R   P ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 2 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 9 6 1 ;   V L A C H Y   J ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 5 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 6 4 ;   W A L L A C E   D P ,   1 9 8 5 ,   P   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 1 9 3 ;   W A L L A C E   D P ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 3 6 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - R ;   W A L L A C E   D P ,   1 9 8 7 ,   L I B R   J ,   V 1 1 2 ,   P 4 3 ;   W E I N B E R G   B H ,   1 9 8 3 ,   P   A M   S O C   I N F O R M   S C I ,   V 2 0 ,   P 3 2 ;   W E I N B E R G   B H ,   1 9 8 2 ,   4 5 T H   P   A M   S O C   I N F   S C ,   V 1 9 ,   P 3 2 4 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 1 ,   O N L I N E   R E V ,   V 5 ,   P 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 0 5 0 ;   W H I T E   H D ,   1 9 8 6 ,   I N F O R M   T E C H N O L   L I B R ,   V 5 ,   P 9 3 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 1 0 3 ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 ;   W H I T E   H D ,   1 9 8 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 3 ,   P 2 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 7 ) 9 0 0 0 5 - 7 ;   W H I T E   H D ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 5 0 2 ;   W H I T E   H D ,   1 9 8 1 ,   C O N C E P T S   J U D G E M E N T   D ,   P 2 6 1 ;   W O O D   J B ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 7 6 3 ;   W Y L L Y S   R E ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 5 3 ;   Y A B L O N S K Y   A I ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 5 9 7 ;   Z U C K E R M A N   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ;   Z U N D E   P ,   1 9 8 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 0 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 4 ) 9 0 0 3 6 - 0 ;   Z U N D E   P ,   1 9 8 1 ,   P B 8 2 1 2 5 9 9 8 	 3 3 6 	 2 0 3 	 2 1 1 	 1 8 	 9 8 	 I N F O R M A T I O N   T O D A Y   I N C 	 M E D F O R D 	 1 4 3   O L D   M A R L T O N   P I K E ,   M E D F O R D ,   N J   0 8 0 5 5 - 8 7 5 0 	 0 0 6 6 - 4 2 0 0 	 	 	 A N N U   R E V   I N F O R M   S C I 	 A n n u .   R e v .   I n f o r m .   S c i .   T e c h n o l . 	 	 1 9 8 9 	 2 4 	 	 	 	 	 	 1 1 9 	 1 8 6 	 	 	 	 6 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 D A 4 6 3 	 W O S : A 1 9 8 9 D A 4 6 3 0 0 0 0 4 	 	 
 
 J 	 R a m o s - R o d r i g u e z ,   A R ;   R u i z - N a v a r r o ,   J 	 	 	 	 R a m o s - R o d r i g u e z ,   A R ;   R u i z - N a v a r r o ,   J 	 	 	 C h a n g e s   i n   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   s t r a t e g i c   m a n a g e m e n t   r e s e a r c h :   A   b i b l i o m e t r i c   s t u d y   o f   t h e   S t r a t e g i c   M a n a g e m e n t   J o u r n a l ,   1 9 8 0 - 2 0 0 0 	 S T R A T E G I C   M A N A G E M E N T   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s t r a t e g i c   m a n a g e m e n t   r e s e a r c h ;   b i b l i o m e t r i c s ;   c o - c i t a t i o n   a n a l y s i s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   R E S O U R C E - B A S E D   V I E W ;   C O M P E T I T I V E   A D V A N T A G E ;   D I V E R S I F I C A T I O N   S T R A T E G Y ;   L O C A L   S E A R C H ;   F I R M ;   K N O W L E D G E ;   I N D U S T R Y ;   P E R F O R M A N C E ;   I M P A C T 	 T h e   a i m   o f   t h i s   p a p e r   i s   t o   i d e n t i f y   t h e   w o r k s   t h a t   h a v e   h a d   t h e   g r e a t e s t   i m p a c t   o n   s t r a t e g i c   m a n a g e m e n t   r e s e a r c h   a n d   t o   a n a l y z e   t h e   c h a n g e s   t h a t   h a v e   t a k e n   p l a c e   i n   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   t h i s   d i s c i p l i n e .   T h e   m e t h o d o l o g y   i s   b a s e d   o n   t h e   b i b l i o m e t r i c   t e c h n i q u e s   o f   c i t a t i o n   a n d   c o - c i t a t i o n   a n a l y s i s   w h i c h   a r e   a p p l i e d   t o   a l l   t h e   a r t i c l e s   p u b l i s h e d   i n   t h e   S t r a t e g i c   M a n a g e m e n t   J o u r n a l   f r o m   i t s   f i r s t   i s s u e   i n   1 9 8 0   t h r o u g h   2 0 0 0 .   C o p y r i g h t   ( C )   2 0 0 4   J o h n   W i l e y   S o n s ,   L t d . 	 U n i v   C a d i z ,   F a c   E c o n   &   M a n a g e m e n t   S c i ,   C a d i z   1 1 0 0 2 ,   S p a i n 	 R a m o s - R o d r i g u e z ,   A R   ( r e p r i n t   a u t h o r ) ,   U n i v   C a d i z ,   F a c   E c o n   &   M a n a g e m e n t   S c i ,   D u q u e   N a j e r a   8 ,   C a d i z   1 1 0 0 2 ,   S p a i n . 	 r a f a e l . r a m o s @ u c a . e s 	 R u i z - N a v a r r o ,   J o s e / B - 3 1 0 6 - 2 0 0 9 ;   R a m o s - R o d r i g u e z ,   A n t o n i o - R a f a e l / L - 6 9 0 4 - 2 0 1 4 ;   	 R a m o s - R o d r i g u e z ,   A n t o n i o - R a f a e l / 0 0 0 0 - 0 0 0 2 - 1 7 9 9 - 8 4 7 4 ;   R u i z   N a v a r r o ,   J o s e / 0 0 0 0 - 0 0 0 3 - 1 2 0 9 - 6 9 1 1 	 	 	 A c k o f f   R .   L . ,   1 9 7 0 ,   C O N C E P T   C O R P O R A T E   P L ;   A l d r i c k   H .   E . ,   1 9 7 9 ,   O R G   E N V ;   A l m e i d a   P ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 1 5 5 ;   A n d r e w s   K e n n e t h   R . ,   1 9 7 1 ,   C O N C E P T   C O R P O R A T E   S T ;   A n s o f f   H .   I . ,   1 9 6 5 ,   C O R P O R A T E   S T R A T E G Y ;   B A R N E Y   J ,   1 9 9 1 ,   J   M A N A G E ,   V 1 7 ,   P 9 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 1 0 1 7 0 0 1 0 8 ;   B a r n e y   J .   B . ,   1 9 8 6 ,   M a n a g e m e n t   S c i e n c e ,   V 3 2 ,   P 1 2 3 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 1 0 . 1 2 3 1 ;   B a u m   J A C ,   1 9 9 8 ,   A D V   S T R A T   M ,   V 1 5 ,   P 1 ;   B o w e r   J .   L . ,   1 9 7 0 ,   M A N A G I N G   R E S O U R C E   A L ;   B u r n s   T . ,   1 9 6 1 ,   M A N A G E M E N T   I N N O V A T I O ;   B U Z Z E L L   R D ,   1 9 7 5 ,   H A R V A R D   B U S   R E V ,   V 5 3 ,   P 9 7 ;   C a l l o n   M . ,   1 9 9 3 ,   C I E N C I O M E T R I A   M E D I C I ;   C A V E S   R E ,   1 9 7 7 ,   Q   J   E C O N ,   V 9 1 ,   P 2 4 1 ,   D O I   1 0 . 2 3 0 7 / 1 8 8 5 4 1 6 ;   C h a n d l e r   A .   D . ,   1 9 6 2 ,   S T R A T E G Y   S T R U C T U R E   C ;   C h i l d   J . ,   1 9 7 2 ,   S O C I O L O G Y ,   V 6 ,   P 2 ;   C H R I S T E N S E N   H K ,   1 9 8 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 2 0 4 0 2 ;   C O H E N   W M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 1 2 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 5 3 ;   C o u l t e r   N ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 2 0 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 3 < 1 2 0 6 : : A I D - A S I 7 > 3 . 3 . C O ; 2 - 6 ;   C U E R V O   A ,   1 9 9 9 ,   R E V   A S T U R I A N A   E C ,   V 1 6 ,   P 4 3 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   C y e r t   R . M . ,   1 9 6 3 ,   B E H A V   T H E O R Y   F I R M ;   D e C a r o l i s   D M ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 9 1 0 ) 2 0 : 1 0 < 9 5 3 : : A I D - S M J 5 9 > 3 . 0 . C O ; 2 - 3 ;   D I E R I C K X   I ,   1 9 8 9 ,   M A N A G E   S C I ,   V 3 5 ,   P 1 5 0 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 5 . 1 2 . 1 5 0 4 ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   D I O D A T O   V ,   1 9 9 4 ,   D I C T   B I B L I O ;   F r o s t   T S ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 0 2 6 6 ( 2 0 0 1 0 1 ) 2 2 : 2 < 1 0 1 : : A I D - S M J 1 5 5 > 3 . 0 . C O ; 2 - G ;   G A S S E T   J O Y ,   1 9 6 7 ,   M I S I O N   B I B L I O ;   H A M B R I C K   D C ,   1 9 8 4 ,   A C A D   M A N A G E   R E V ,   V 9 ,   P 1 9 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 4 3 4 ;   H A N N A N   M T ,   1 9 7 7 ,   A M   J   S O C I O L ,   V 8 2 ,   P 9 2 9 ,   D O I   1 0 . 1 0 8 6 / 2 2 6 4 2 4 ;   H A N N A N   M T ,   1 9 8 4 ,   A M   S O C I O L   R E V ,   V 4 9 ,   P 1 4 9 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 5 6 7 ;   H o f e r   C . ,   1 9 7 8 ,   S T R A T E G Y   F O R M U L A T I O N ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   H o s k i s s o n   R E ,   1 9 9 9 ,   J   M A N A G E ,   V 2 5 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 0 6 3 ( 9 9 ) 0 0 0 0 8 - 2 ;   J E N S E N   M C ,   1 9 7 6 ,   J   F I N A N C   E C O N ,   V 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 7 6 ) 9 0 0 2 6 - X ;   K e r l i n g e r   F . N ,   1 9 7 3 ,   F D N   B E H A V   R E S ;   K R U S K A L   J B ,   1 9 6 4 ,   P S Y C H O M E T R I K A ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 8 9 5 6 5 ;   L a w r e n c e   P . ,   1 9 6 7 ,   O R G   E N V   M A N A G I N G   D I F ;   L I P P M A N   S A ,   1 9 8 2 ,   B E L L   J   E C O N ,   V 1 3 ,   P 4 1 8 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 3 4 6 4 ;   M a r c h   J ,   1 9 5 8 ,   O R G A N I Z A T I O N S ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M c M i l l a n   G S ,   2 0 0 0 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 2 ,   P 4 6 5 ;   M i l e s   R .   E . ,   1 9 7 8 ,   O R G   S T R A T E G Y   S T R U C T U ;   M I N T Z B E R G   H ,   1 9 7 6 ,   A D M I N   S C I   Q U A R T ,   V 2 1 ,   P 2 4 6 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 0 4 5 ;   M I N T Z B E R G   H ,   1 9 7 8 ,   M A N A G E   S C I ,   V 2 4 ,   P 9 3 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 4 . 9 . 9 3 4 ;   M o w e r y   D C ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 7 7 ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N O Y O N S   E C M ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 5 1 ;   P A L E P U   K ,   1 9 8 5 ,   S T R A T E G I C   M A N A G E   J ,   V 6 ,   P 2 3 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 6 0 3 0 5 ;   P a s a d e o s   Y ,   1 9 9 8 ,   J   A D V E R T I S I N G ,   V 2 7 ,   P 5 3 ;   P e n r o s e   E . ,   1 9 5 9 ,   T H E O R Y   G R O W T H   F I R M ;   P E T E R A F   M A ,   1 9 9 3 ,   S T R A T E G I C   M A N A G E   J ,   V 1 4 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 4 0 3 0 3 ;   P f e f f e r   J . ,   1 9 7 8 ,   E X T E R N A L   C O N T R O L   O R G ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   P o n z i   L J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 1 9 8 2 4 8 5 0 ;   P o r t e r   M . ,   1 9 8 0 ,   C O M P E T I T I V E   S T R A T E G Y ;   P O R T E R   M E ,   1 9 8 7 ,   H A R V A R D   B U S   R E V ,   V 6 5 ,   P 4 3 ;   P o r t e r   M . E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V A N T A G ;   P R A H A L A D   C K ,   1 9 9 0 ,   H A R V A R D   B U S   R E V ,   V 6 8 ,   P 7 9 ;   Q u i n n   J . B . ,   1 9 8 0 ,   S T R A T E G I E S   C H A N G E   L O ;   R A M O S R O D R I G U E Z   A R ,   2 0 0 0 ,   1 0   C   N A C   A S   C I E N T   E C ;   R o s e n k o p f   L ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 2 8 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 6 0 ;   R u m e l t   R ,   1 9 9 4 ,   F U N D A M E N T A L   I S S U E S   S ;   R U M E L T   R P ,   1 9 9 1 ,   S T R A T E G I C   M A N A G E   J ,   V 1 2 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 2 0 3 0 2 ;   R U M E L T   R P ,   1 9 8 2 ,   S T R A T E G I C   M A N A G E   J ,   V 3 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 3 0 4 0 7 ;   R u m e l t   R . ,   1 9 8 4 ,   C O M P E T I T I V E   S T R A T E G I ,   P 5 5 6 ;   R u m e l t   R . P . ,   1 9 7 4 ,   S T R A T E G Y   S T R U C T U R E   E ;   S A E Z   J M ,   1 9 9 9 ,   R E V   E S P A N O L A   D O C U M E N ,   V 2 3 ,   P 3 4 8 ;   S c h e n d e l   D .   E . ,   1 9 7 9 ,   S T R A T E G I C   M A N A G E M E N T ;   S c h e r e r   F . M . ,   1 9 8 0 ,   I N D   M A R K E T   S T R U C T U R E ;   S C H O E F F L E R   S ,   1 9 7 4 ,   H A R V A R D   B U S   R E V ,   V 1 2 ,   P 1 3 7 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S t u a r t   T E ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 2 1 ;   T a h a i   A ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 2 7 9 ;   T E E C E   D J ,   1 9 8 2 ,   J   E C O N   B E H A V   O R G A N ,   V 3 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 2 6 8 1 ( 8 2 ) 9 0 0 0 3 - 8 ;   T h o m p s o n   J .   D . ,   1 9 6 7 ,   O R G   A C T I O N ;   T U S H M A N   M L ,   1 9 8 6 ,   A D M I N   S C I   Q U A R T ,   V 3 1 ,   P 4 3 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 8 3 2 ;   U S D I K E N   B ,   1 9 9 5 ,   O R G A N   S T U D ,   V 1 6 ,   P 5 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 5 0 1 6 0 0 3 0 6 ;   W e i c k   K .   E . ,   1 9 6 9 ,   S O C I A L   P S Y C H O L   O R G ;   W E R N E R F E L T   B ,   1 9 8 4 ,   S T R A T E G I C   M A N A G E   J ,   V 5 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 5 0 2 0 7 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W i l l i a m s o n   O .   E . ,   1 9 8 5 ,   E C   I   C A P I T A L I S M   F I R M ;   W i l l i a m s o n   O l i v e r   E . ,   1 9 7 5 ,   M A R K E T S   H I E R A R C H I E S ;   W r i g l e y   L e o n a r d ,   1 9 7 0 ,   T H E S I S   H A R V A R D   B U S I N 	 8 6 	 1 9 2 	 2 1 3 	 1 6 	 1 5 7 	 J O H N   W I L E Y   &   S O N S   L T D 	 C H I C H E S T E R 	 T H E   A T R I U M ,   S O U T H E R N   G A T E ,   C H I C H E S T E R   P O 1 9   8 S Q ,   W   S U S S E X ,   E N G L A N D 	 0 1 4 3 - 2 0 9 5 	 	 	 S T R A T E G I C   M A N A G E   J 	 S t r a t e g .   M a n a g e .   J . 	 O C T 	 2 0 0 4 	 2 5 	 1 0 	 	 	 	 	 9 8 1 	 1 0 0 4 	 	 1 0 . 1 0 0 2 / s m j . 3 9 7 	 	 2 4 	 B u s i n e s s ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 8 5 4 C H 	 W O S : 0 0 0 2 2 3 8 7 7 3 0 0 0 0 2 	 	 
 
 J 	 M e l i n ,   G 	 	 	 	 M e l i n ,   G 	 	 	 P r a g m a t i s m   a n d   s e l f - o r g a n i z a t i o n   -   R e s e a r c h   c o l l a b o r a t i o n   o n   t h e   i n d i v i d u a l   l e v e l 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 r e s e a r c h   c o l l a b o r a t i o n ;   s c i e n t i f i c   n e t w o r k s ;   c o - a u t h o r s h i p s ;   b i b l i o m e t r i c s ;   c o - p r o d u c t i o n ;   r e s e a r c h   p o l i c y 	 I N T E R N A T I O N A L   S C I E N T I F I C   C O L L A B O R A T I O N ;   S C I E N C E 	 W h a t   g o e s   o n   i n   t h e   s c i e n t i f i c   n e t w o r k s   a n d   t h e   r e s e a r c h   t e a m s ?   W h a t   i s   t h e   c o l l a b o r a t i v e   s i t u a t i o n   l i k e ?   W h y   d o   s c i e n t i s t s   c o l l a b o r a t e ?   T h i s   s t u d y   f o c u s e s   o n   t h e   m i c r o   l e v e l   o f   r e s e a r c h   c o l l a b o r a t i o n   a n d   i n v e s t i g a t e s   t h e   r e a s o n s   f o r   a n d   e f f e c t s   o f   c o l l a b o r a t i o n   f o r   t h e   i n d i v i d u a l   s c i e n t i s t   t h r o u g h   a   s u r v e y   a n d   a   n u m b e r   o f   i n t e r v i e w s .   T h e   i n t e r a c t i o n   w i t h i n   t h e   r e s e a r c h   t e a m   i s   h i g h l i g h t e d ,   s h o w i n g   t h e   f e e l i n g s   a n d   c o n d i t i o n s   w h i c h   e n c o m p a s s   t h e   t e a m w o r k .   T h e   e m p i r i c a l   f i n d i n g s   a r e   c o n c e p t u a l i z e d   i n   a   m o d e l   w h e r e   r e s e a r c h   c o l l a b o r a t i o n   i s   s u g g e s t e d   t o   b e   u n d e r s t o o d   a s   d e p e n d e n t   o n   h o w   t h e   r e a s o n s ,   f o r m s   a n d   e f f e c t s   r e s p e c t i v e l y   v a r y .   T h e   c o l l a b o r a t i o n s   a r e   c h a r a c t e r i z e d   b y   s t r o n g   p r a g m a t i s m   a n d   a   h i g h   d e g r e e   o f   s e l f - o r g a n i z a t i o n .   F i n a l l y ,   t h e   s c i e n c e   p o l i c y   i m p l i c a t i o n s   o f   t h i s   s t u d y   a r e   d i s c u s s e d .   I t   i s   s u g g e s t e d   t h a t   r e s e a r c h   p o l i c y   s h o u l d   p r o v i d e   f i n a n c i a l   a n d   o r g a n i z a t i o n a l   p o s s i b i l i t i e s   f o r   t h e   r e s e a r c h e r s   t o   e s t a b l i s h   j o i n t   v e n t u r e s   a n d   a l s o   f u n d   p r o j e c t s   o n   a   t e a m   o r   n e t w o r k   b a s i s .   ( C )   2 0 0 0   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 S T I N T ,   S w e d i s h   F d n   I n t   C o o p e r a t   R e s   &   H i g h e r   E d u c ,   S E - 1 1 4 5 2   S t o c k h o l m ,   S w e d e n 	 M e l i n ,   G   ( r e p r i n t   a u t h o r ) ,   S T I N T ,   S w e d i s h   F d n   I n t   C o o p e r a t   R e s   &   H i g h e r   E d u c ,   S k e p p a r g a t a n   8 ,   S E - 1 1 4 5 2   S t o c k h o l m ,   S w e d e n . 	 	 	 	 	 	 D E L A N G E   C ,   1 9 9 6 ,   E A S S T   4 S   C   B I E L ;   G l a s e r   B .   G . ,   1 9 6 7 ,   D I S C O V E R Y   G R O U N D E D   T ;   H i c k s   D M ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 3 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 4 0 1 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K y v i k   S ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 5 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 1 0 3 ;   L O G A N   E L ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 7 6 2 ;   L U U K K O N E N   T ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 2 ;   L U U K K O N E N   T ,   1 9 9 2 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 7 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 2 0 1 7 0 0 1 0 6 ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M E R T O N   R O B E R T   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I ;   M Y E R S   G ,   1 9 9 1 ,   S O C   S T U D   S C I ,   V 2 1 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 1 0 2 1 0 0 1 0 0 4 ;   N a r i n   F . ,   1 9 9 0 ,   M E A S U R E M E N T   S C I   C O O P ,   V 1 -   2 ;   O K U B O   Y ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 5 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 8 0 9 0 ;   P R I C E   D J D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 1 1 ;   S T E R N   P ,   1 9 9 6 ,   P R I S O N E R S   C H R Y S T A L   P ;   W e b s t e r   A ,   1 9 9 1 ,   S C I   T E C H N O L O G Y   S O C ;   Z i m a n   J . ,   1 9 9 4 ,   P R O M E T H E U S   B O U N D   S C I 	 1 7 	 1 8 9 	 1 9 4 	 1 3 	 6 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 J A N 	 2 0 0 0 	 2 9 	 1 	 	 	 	 	 3 1 	 4 0 	 	 1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 1 - 1 	 	 1 0 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 7 2 G H 	 W O S : 0 0 0 0 8 4 6 4 1 8 0 0 0 0 3 	 	 
 
 J 	 E y s e n b a c h ,   G 	 	 	 	 E y s e n b a c h ,   G u n t h e r 	 	 	 C a n   T w e e t s   P r e d i c t   C i t a t i o n s ?   M e t r i c s   o f   S o c i a l   I m p a c t   B a s e d   o n   T w i t t e r   a n d   C o r r e l a t i o n   w i t h   T r a d i t i o n a l   M e t r i c s   o f   S c i e n t i f i c   I m p a c t 	 J O U R N A L   O F   M E D I C A L   I N T E R N E T   R E S E A R C H 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b l o g g i n g ;   p e r i o d i c a l s   a s   t o p i c ;   p e e r - r e v i e w ;   p u b l i s h i n g ;   s o c i a l   m e d i a   a n a l y t i c s ;   s c i e n t o m e t r i c s ;   i n f o d e m i o l o g y ;   i n f o m e t r i c s ;   r e p r o d u c i b i l i t y   o f   r e s u l t s ;   m e d i c i n e   2 . 0 ;   p o w e r   l a w ;   T w i t t e r 	 4   S C I E N C E   D I S C I P L I N E S ;   P U B L I C - H E A L T H ;   S E A R C H ;   I N F O D E M I O L O G Y ;   I N T E R N E T ;   I N D E X 	 B a c k g r o u n d :   C i t a t i o n s   i n   p e e r - r e v i e w e d   a r t i c l e s   a n d   t h e   i m p a c t   f a c t o r   a r e   g e n e r a l l y   a c c e p t e d   m e a s u r e s   o f   s c i e n t i f i c   i m p a c t .   W e b   2 . 0   t o o l s   s u c h   a s   T w i t t e r ,   b l o g s   o r   s o c i a l   b o o k m a r k i n g   t o o l s   p r o v i d e   t h e   p o s s i b i l i t y   t o   c o n s t r u c t   i n n o v a t i v e   a r t i c l e - l e v e l   o r   j o u r n a l - l e v e l   m e t r i c s   t o   g a u g e   i m p a c t   a n d   i n f l u e n c e .   H o w e v e r ,   t h e   r e l a t i o n s h i p   o f   t h e   t h e s e   n e w   m e t r i c s   t o   t r a d i t i o n a l   m e t r i c s   s u c h   a s   c i t a t i o n s   i s   n o t   k n o w n .   O b j e c t i v e :   ( 1 )   T o   e x p l o r e   t h e   f e a s i b i l i t y   o f   m e a s u r i n g   s o c i a l   i m p a c t   o f   a n d   p u b l i c   a t t e n t i o n   t o   s c h o l a r l y   a r t i c l e s   b y   a n a l y z i n g   b u z z   i n   s o c i a l   m e d i a ,   ( 2 )   t o   e x p l o r e   t h e   d y n a m i c s ,   c o n t e n t ,   a n d   t i m i n g   o f   t w e e t s   r e l a t i v e   t o   t h e   p u b l i c a t i o n   o f   a   s c h o l a r l y   a r t i c l e ,   a n d   ( 3 )   t o   e x p l o r e   w h e t h e r   t h e s e   m e t r i c s   a r e   s e n s i t i v e   a n d   s p e c i f i c   e n o u g h   t o   p r e d i c t   h i g h l y   c i t e d   a r t i c l e s .   M e t h o d s :   B e t w e e n   J u l y   2 0 0 8   a n d   N o v e m b e r   2 0 1 1 ,   a l l   t w e e t s   c o n t a i n i n g   l i n k s   t o   a r t i c l e s   i n   t h e   J o u r n a l   o f   M e d i c a l   I n t e r n e t   R e s e a r c h   ( J M I R )   w e r e   m i n e d .   F o r   a   s u b s e t   o f   1 5 7 3   t w e e t s   a b o u t   5 5   a r t i c l e s   p u b l i s h e d   b e t w e e n   i s s u e s   3 / 2 0 0 9   a n d   2 / 2 0 1 0 ,   d i f f e r e n t   m e t r i c s   o f   s o c i a l   m e d i a   i m p a c t   w e r e   c a l c u l a t e d   a n d   c o m p a r e d   a g a i n s t   s u b s e q u e n t   c i t a t i o n   d a t a   f r o m   S c o p u s   a n d   G o o g l e   S c h o l a r   1 7   t o   2 9   m o n t h s   l a t e r .   A   h e u r i s t i c   t o   p r e d i c t   t h e   t o p - c i t e d   a r t i c l e s   i n   e a c h   i s s u e   t h r o u g h   t w e e t   m e t r i c s   w a s   v a l i d a t e d .   R e s u l t s :   A   t o t a l   o f   4 2 0 8   t w e e t s   c i t e d   2 8 6   d i s t i n c t   J M I R   a r t i c l e s .   T h e   d i s t r i b u t i o n   o f   t w e e t s   o v e r   t h e   f i r s t   3 0   d a y s   a f t e r   a r t i c l e   p u b l i c a t i o n   f o l l o w e d   a   p o w e r   l a w   ( Z i p f ,   B r a d f o r d ,   o r   P a r e t o   d i s t r i b u t i o n ) ,   w i t h   m o s t   t w e e t s   s e n t   o n   t h e   d a y   w h e n   a n   a r t i c l e   w a s   p u b l i s h e d   ( 1 4 5 8 / 3 3 1 8 ,   4 3 . 9 4 %   o f   a l l   t w e e t s   i n   a   6 0 - d a y   p e r i o d )   o r   o n   t h e   f o l l o w i n g   d a y   ( 5 2 8 / 3 3 1 8 ,   1 5 . 9 % ) ,   f o l l o w e d   b y   a   r a p i d   d e c a y .   T h e   P e a r s o n   c o r r e l a t i o n s   b e t w e e n   t w e e t a t i o n s   a n d   c i t a t i o n s   w e r e   m o d e r a t e   a n d   s t a t i s t i c a l l y   s i g n i f i c a n t ,   w i t h   c o r r e l a t i o n   c o e f f i c i e n t s   r a n g i n g   f r o m   . 4 2   t o   . 7 2   f o r   t h e   l o g - t r a n s f o r m e d   G o o g l e   S c h o l a r   c i t a t i o n s ,   b u t   w e r e   l e s s   c l e a r   f o r   S c o p u s   c i t a t i o n s   a n d   r a n k   c o r r e l a t i o n s .   A   l i n e a r   m u l t i v a r i a t e   m o d e l   w i t h   t i m e   a n d   t w e e t s   a s   s i g n i f i c a n t   p r e d i c t o r s   ( P   <   . 0 0 1 )   c o u l d   e x p l a i n   2 7 %   o f   t h e   v a r i a t i o n   o f   c i t a t i o n s .   H i g h l y   t w e e t e d   a r t i c l e s   w e r e   1 1   t i m e s   m o r e   l i k e l y   t o   b e   h i g h l y   c i t e d   t h a n   l e s s - t w e e t e d   a r t i c l e s   ( 9 / 1 2   o r   7 5 %   o f   h i g h l y   t w e e t e d   a r t i c l e   w e r e   h i g h l y   c i t e d ,   w h i l e   o n l y   3 / 4 3   o r   7 %   o f   l e s s - t w e e t e d   a r t i c l e s   w e r e   h i g h l y   c i t e d ;   r a t e   r a t i o   0 . 7 5 / 0 . 0 7   =   1 0 . 7 5 ,   9 5 %   c o n f i d e n c e   i n t e r v a l ,   3 . 4 - 3 3 . 6 ) .   T o p - c i t e d   a r t i c l e s   c a n   b e   p r e d i c t e d   f r o m   t o p - t w e e t e d   a r t i c l e s   w i t h   9 3 %   s p e c i f i c i t y   a n d   7 5 %   s e n s i t i v i t y .   C o n c l u s i o n s :   T w e e t s   c a n   p r e d i c t   h i g h l y   c i t e d   a r t i c l e s   w i t h i n   t h e   f i r s t   3   d a y s   o f   a r t i c l e   p u b l i c a t i o n .   S o c i a l   m e d i a   a c t i v i t y   e i t h e r   i n c r e a s e s   c i t a t i o n s   o r   r e f l e c t s   t h e   u n d e r l y i n g   q u a l i t i e s   o f   t h e   a r t i c l e   t h a t   a l s o   p r e d i c t   c i t a t i o n s ,   b u t   t h e   t r u e   u s e   o f   t h e s e   m e t r i c s   i s   t o   m e a s u r e   t h e   d i s t i n c t   c o n c e p t   o f   s o c i a l   i m p a c t .   S o c i a l   i m p a c t   m e a s u r e s   b a s e d   o n   t w e e t s   a r e   p r o p o s e d   t o   c o m p l e m e n t   t r a d i t i o n a l   c i t a t i o n   m e t r i c s .   T h e   p r o p o s e d   t w i m p a c t   f a c t o r   m a y   b e   a   u s e f u l   a n d   t i m e l y   m e t r i c   t o   m e a s u r e   u p t a k e   o f   r e s e a r c h   f i n d i n g s   a n d   t o   f i l t e r   r e s e a r c h   f i n d i n g s   r e s o n a t i n g   w i t h   t h e   p u b l i c   i n   r e a l   t i m e . 	 [ E y s e n b a c h ,   G u n t h e r ]   U n i v   H l t h   N e t w o r k ,   C t r   G l o b a l   e H l t h   I n n o v a t ,   T o r o n t o ,   O N   M 4 L   3 Y 7 ,   C a n a d a ;   [ E y s e n b a c h ,   G u n t h e r ]   T e c h n a   I n s t ,   T o r o n t o ,   O N ,   C a n a d a ;   [ E y s e n b a c h ,   G u n t h e r ]   U n i v   T o r o n t o ,   I n s t   H l t h   P o l i c y   M a n a g e m e n t   &   E v a l u a t ,   T o r o n t o ,   O N ,   C a n a d a ;   [ E y s e n b a c h ,   G u n t h e r ]   J M I R   P u b l i c a t   I n c ,   T o r o n t o ,   O N ,   C a n a d a 	 E y s e n b a c h ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   H l t h   N e t w o r k ,   C t r   G l o b a l   e H l t h   I n n o v a t ,   1 9 0   E l i z a b e t h   S t ,   T o r o n t o ,   O N   M 4 L   3 Y 7 ,   C a n a d a . 	 g e y s e n b a @ u h n r e s . u t o r o n t o . c a 	 	 	 	 	 A s u r   S ,   P R E D I C T I N G   F U T U R E   S O ;   C h e w   C ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 4 1 1 8 ;   E y s e n b a c h   G u n t h e r ,   2 0 0 6 ,   A M I A   A n n u   S y m p   P r o c ,   P 2 4 4 ;   E y s e n b a c h   G ,   2 0 0 6 ,   J   M E D   I N T E R N E T   R E S ,   V 8 ,   D O I   1 0 . 2 1 9 6 / j m i r . 8 . 2 . e 8 ;   E y s e n b a c h   G ,   2 0 1 1 ,   A M   J   P R E V   M E D ,   V 4 0 ,   p S 1 5 4 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 1 1 . 0 2 . 0 0 6 ;   E y s e n b a c h   G ,   2 0 0 9 ,   J   M E D   I N T E R N E T   R E S ,   V 1 1 ,   D O I   1 0 . 2 1 9 6 / j m i r . 1 1 5 7 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G i n s b e r g   J ,   2 0 0 9 ,   N A T U R E ,   V 4 5 7 ,   P 1 0 1 2 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 7 6 3 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H u b b a r d   D .   W ,   2 0 1 1 ,   P U L S E   N E W   S C I   H A R N E S ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   K o u s h a   K ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 0 . 0 0 3 ;   K o u s h a   K ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 5 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 5 ;   L e t i e r c e   J ,   2 0 1 0 ,   2 0 1 0   P   W E B   S C I   C   W E B ;   L i   X ,   2 0 1 1 ,   I S S I   2 0 1 1   C   4   7   J U L ;   N e w m a n   M E J ,   2 0 0 5 ,   C O N T E M P   P H Y S ,   V 4 6 ,   P 3 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 1 0 7 5 1 0 5 0 0 0 5 2 4 4 4 ;   N i e d e r k r o t e n t h a l e r   T ,   2 0 1 1 ,   B M C   P U B L I C   H E A L T H ,   V 1 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 5 8 - 1 1 - 5 8 8 ;   [ A n o n y m o u s ] ,   2 0 0 6 ,   P L O S   M E D ,   V 3 ,   p e 2 9 1 ,   D O I   [ D O I   1 0 . 1 3 7 1 / J O U R N A L . P M E D . 0 0 3 0 2 9 1 ,   1 0 . 1 3 7 1 / j o u r n a l . p m e d . 0 0 3 0 2 9 1 ] ;   C o s t e l l o   K .   L . ,   2 0 1 0 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / M E E T . 1 4 5 0 4 7 0 1 2 0 1 ;   P r i e m   J ,   2 0 1 1 ,   2 0 1 1   M E T R   S   I N F   S C I ;   P r i e m   J ,   2 0 1 0 ,   F I R S T   M O N D A Y ,   V 1 5 ,   P 7 ;   P r i e m   J ,   A L T   M E T R I C S   M A N I F E S T ;   R i p b e r g e r   J T ,   2 0 1 1 ,   P O L I C Y   S T U D   J ,   V 3 9 ,   P 2 3 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 1 - 0 0 7 2 . 2 0 1 1 . 0 0 4 0 6 . x ;   R i p b e r g e r   J T . ,   2 0 1 0 ,   P U B L I C   A T T E N T I O N   S E A ;   R o s s   C ,   2 0 1 1 ,   E N A B L E D   B A C K C H A N N E L ;   R o s s n e r   M ,   2 0 0 7 ,   J   C E L L   B I O L ,   V 1 7 9 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 8 3 / j c b . 2 0 0 7 1 1 1 4 0 ;   S m i t h   R ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 5 2 8 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 1 2 . 5 2 8 ;   T h e l w a l l   M . ,   2 0 0 9 ,   S Y N T H   L E C T   I N F   C O N C ;   T h e l w a l l   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 3 ;   V a u g h a n   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 9 9 ;   V a u g h a n   L ,   2 0 0 2 ,   P   A S I S T   A N N U ,   V 3 9 ,   P 4 3 6 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 3 9 0 1 4 8 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 3 8 ;   W e l l e r   K ,   2 0 1 1 ,   P   P O S T   S E S S   2 0 1 1   W E B ;   W e l l e r   K . ,   2 0 1 1 ,   1   W O R K S H   M A K   S E N S   M I 	 3 4 	 1 8 0 	 1 8 1 	 2 7 	 2 0 7 	 J O U R N A L   M E D I C A L   I N T E R N E T   R E S E A R C H 	 T O R O N T O 	 T O R O N T O   G E N E R A L   H O S P I T A L ,   R   F R A S E R   E L L I O T T   B L D G ,   4 T H   F L ,   R   4 S 4 3 5 ,   1 9 0   E L I Z A B E T H   S T ,   T O R O N T O ,   O N   M 5 G   2 C 4 ,   C A N A D A 	 1 4 3 8 - 8 8 7 1 	 	 	 J   M E D   I N T E R N E T   R E S 	 J .   M e d .   I n t e r n e t   R e s . 	 O C T - D E C 	 2 0 1 1 	 1 3 	 4 	 	 	 	 	 	 	 e 1 2 3 	 1 0 . 2 1 9 6 / j m i r . 2 0 1 2 	 	 2 0 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 8 7 9 E U 	 W O S : 0 0 0 2 9 9 3 1 3 3 0 0 0 0 1 	 2 2 1 7 3 2 0 4 	 
 
 J 	 W e i n g a r t ,   P 	 	 	 	 W e i n g a r t ,   P 	 	 	 I m p a c t   o f   b i b l i o m e t r i c s   u p o n   t h e   s c i e n c e   s y s t e m :   I n a d v e r t e n t   c o n s e q u e n c e s ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 C o n f e r e n c e   o n   B i b l i o m e t r i c   A n a l y s i s   i n   S c i e n c e   a n d   R e s e a r c h 	 N O V   0 5 - 0 7 ,   2 0 0 3 	 J u l i c h ,   G E R M A N Y 	 	 	 	 C I T A T I O N ;   I N D I C A T O R S ;   A U T H O R S ;   E D I T O R S ;   R A N K 	 T h e   i n t r o d u c t i o n   o f   b i b l i o m e t r i c   ( a n d   o t h e r )   r a n k i n g   i s   a n   a n s w e r   t o   l e g i t i m a t i o n   p r e s s u r e s   o n   t h e   h i g h e r   e d u c a t i o n   a n d   r e s e a r c h   s y s t e m .   A f t e r   y e a r s   o f   h e s i t a t i o n   b y   s c i e n t i s t s ,   s c i e n c e   a d m i n i s t r a t o r s   a n d   e v e n   p o l i t i c i a n s   i n   m a n y   o f   t h e   i n d u s t r i a l i z e d   c o u n t r i e s ,   t h e   i m p l e m e n t a t i o n   o f   b i b l i o m e t r i c s   b a s e d   ( a n d   o t h e r   t y p e s   o f )   r a n k i n g s   f o r   i n s t i t u t i o n s   o f   h i g h e r   e d u c a t i o n   a n d   r e s e a r c h   i s   n o w   b e i n g   i n t r o d u c e d   o n   a   f u l l   s c a l e .   W h a t   u s e d   t o   b e   a n   i r r i t a t i o n   t o   t h e   p a r t i e s   c o n c e r n e d   h a s   s u d d e n l y   b e c o m e   a   f a d .   I n   c o n t r a s t   t o   t h i s   r a t h e r   s u d d e n   e n t h u s i a s m ,   t h e r e   i s   v e r y   l i t t l e   r e f l e c t i o n   o n   t h e   i m p a c t s   o f   t h i s   p r a c t i c e   o n   t h e   s y s t e m   i t s e l f .   S o   f a r   e m p i r i c a l   d a t a   o n   t h e   i m p a c t   o f   b i b l i o m e t r i c   r a n k i n g s   s e e m   t o   b e   a v a i l a b l e   o n l y   f o r   t w o   c a s e s :   A u s t r a l i a   a n d   t h e   B r i t i s h   r e s e a r c h   a s s e s s m e n t   e x e r c i s e   ( R A - E ) .   T h u s ,   t h e   a c t u a l   s t e e r i n g   e f f e c t s   o f   b i b l i o m e t r i c   r a n k i n g s ,   t h e   r e a c t i o n s   o f   t h e   s y s t e m   a r e   l a r g e l y   u n k n o w n .   R a n k i n g s   a r e   i n   u r g e n t   d e m a n d   b y   p o l i t i c s .   T h e   i n t e n d e d   e f f e c t   i s   t o   c r e a t e   c o m p e t i t i o n   a m o n g   i n s t i t u t i o n s   o f   h i g h e r   l e a r n i n g   a n d   r e s e a r c h   a n d   t h e r e b y   t o   i n c r e a s e   t h e i r   e f f i c i e n c y .   T h e   r a n k i n g s   a r e   s u p p o s e d   t o   i d e n t i f y   e x c e l l e n c e   i n   t h e s e   i n s t i t u t i o n s   a n d   a m o n g   r e s e a r c h e r s .   U n i n t e n d e d   e f f e c t s   m a y   b e   ' o v e r s t e e r i n g ' ,   e i t h e r   b y   f o r c i n g   l e s s   c o m p e t i t i v e   i n s t i t u t i o n s   t o   b e   c l o s e d   d o w n   o r   b y   c r e a t i n g   o l i g o p o l i e s   w h o s e   o n c e   a c h i e v e d   p o s i t i o n   o f   s u p r e m a c y   c a n n o t   b e   c h a l l e n g e d   a n y m o r e   b y   c o m p e t i t o r s .   O n   t h e   i n d i v i d u a l   l e v e l   t h e   e m e r g e n c e   o f   a   k i n d   o f   ' c h a r t '   o f   h i g h l y   c i t e d   s t a r s   i n   s c i e n c e   c a n   a l r e a d y   b e   o b s e r v e d   ( I S I   H i g h l y C i t e d . c o m ) .   W i t h   t h e   s p r e a d   o f   r a n k i n g s   t h e   b u s i n e s s   a d m i n i s t r a t i o n   p a r a d i g m   a n d   c u l t u r e   i s   d i f f u s e d   t h r o u g h   t h e   a c a d e m i c   s y s t e m .   T h e   c o m m e r c i a l i z a t i o n   o f   r a n k i n g   i s   m o s t   p r o n o u n c e d   i n   t h e   d e p e n d e n c e   o f   t h e   e n t i r e   p r a c t i c e   o n   c o m m e r c i a l   p r o v i d e r s   o f   t h e   p e r t i n e n t   d a t a .   A s   p r o d u c t s   l i k e   I S T ' s   E s s e n t i a l   S c i e n c e   I n d i c a t o r s   b e c o m e   a v a i l a b l e ,   t h e i r   u s e   i n   t h e   c o n t e x t   o f   e v a l u a t i o n   t a s k s   i s   i n c r e a s i n g   r a p i d l y .   T h e   f u t u r e   o f   t h e   h i g h e r   e d u c a t i o n   a n d   r e s e a r c h   s y s t e m   r e s t s   o n   t w o   p i l l a r s :   t r a d i t i o n a l   p e e r   r e v i e w   a n d   r a n k i n g .   T h e   g o a l   m u s t   b e   t o   h a v e   a   s y s t e m   o f   i n f o r m e d   p e e r   r e v i e w   w h i c h   c o m b i n e s   t h e   t w o .   H o w e v e r ,   t h e   p o l i t i c i z e d   u s e   o f   n u m b e r s   ( c i t a t i o n s ,   i m p a c t   f a c t o r s ,   f u n d i n g   e t c . )   a p p e a r s   u n a v o i d a b l e . 	 U n i v   B i e l e f e l d ,   I n s t   S c i   &   T e c h n o l   S t u d i e s ,   D - 3 3 5 0 1   B i e l e f e l d ,   G e r m a n y 	 W e i n g a r t ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   B i e l e f e l d ,   I n s t   S c i   &   T e c h n o l   S t u d i e s ,   P O B   1 0 0 1 3 1 ,   D - 3 3 5 0 1   B i e l e f e l d ,   G e r m a n y . 	 w e i n g a r t @ u n i - b i e l e f e l d . d e 	 	 	 	 	 A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   B A K A N I C   V ,   1 9 8 9 ,   S O C I O L   Q U A R T ,   V 3 0 ,   P 6 3 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 3 - 8 5 2 5 . 1 9 8 9 . t b 0 1 5 4 0 . x ;   B r a u n   T . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 5 1 ;   B U T L E R   L ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 7 ,   P 3 9 ;   C a s e   D O ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 7 < 6 3 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - H ;   C I C H E T T I   D V ,   1 9 9 1 ,   B E H A V   B R A I N   S C I ,   V 1 4 ,   P 1 3 5 ;   C i c h e t t i   D V ,   1 9 9 1 ,   B E H A V   B R A I N   S C I ,   V 1 4 ,   P 1 1 9 ;   C O L E   S ,   1 9 8 1 ,   S C I E N C E ,   V 2 1 4 ,   P 8 8 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 3 0 2 5 6 6 ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   F e l l e r   I ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 9 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 0 7 ;   G a r f i e l d   E ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 1 7 6 5 ;   G l a s e r   J . ,   2 0 0 2 ,   I M P A C T   E V A L U A T I O N   B A ;   H I R S C H A U E R   S ,   2 0 0 2 ,   E X P E R T I S E   T H E M A   I N N E ;   J i m e n e z - C o n t r e r a s   E ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 8 - 2 ;   L a w r e n c e   P A ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 8 3 5 ,   D O I   1 0 . 1 0 3 8 / 4 1 5 8 3 5 a ;   L a w r e n c e   P A ,   2 0 0 3 ,   N A T U R E ,   V 4 2 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 2 2 2 5 9 a ;   M a r g i n s o n   S . ,   2 0 0 0 ,   E N T E R P R I S E   U   P O W E R   G ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M U L L E R   S ,   2 0 0 3 ,   D T S C H   U N I V E R S I T A T S Z E ,   V 2 1 ,   P 1 0 ;   R O B E R T S   G ,   2 0 0 3 ,   G U A R D I A N                 0 1 0 7 ;   R o e s s n e r   J D ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 8 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 8 8 0 ;   S m a l l   H ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 0 3 ;   S m i t h   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 6 3 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 2 9 ;   V A N R A A N   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 2 3 ;   W E I N G A R T   P ,   1 9 9 3 ,   B I L D   W I S S E N S C H A F T ,   V 5 ,   P 3 2 ;   W e i n g a r t   P ,   2 0 0 1 ,   S T U N D E   W A H R H E I T   V E R H ;   W i l l i a m s   N ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 1 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 2 9 6 . 1 8 ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 2 3 3 2 9 2 7 7 	 2 9 	 1 7 2 	 1 7 7 	 1 1 	 9 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 2 0 0 5 	 6 2 	 1 	 	 	 	 	 1 1 7 	 1 3 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 9 7 X P 	 W O S : 0 0 0 2 2 7 0 4 0 5 0 0 0 0 7 	 	 
 
 J 	 C r o n i n ,   B 	 	 	 	 C r o n i n ,   B 	 	 	 H y p e r a u t h o r s h i p :   A   p o s t m o d e r n   p e r v e r s i o n   o r   e v i d e n c e   o f   a   s t r u c t u r a l   s h i f t   i n   s c h o l a r l y   c o m m u n i c a t i o n   p r a c t i c e s ? 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 M U L T I P L E   A U T H O R S H I P ;   C O L L A B O R A T I O N ;   A R T I C L E S ;   S C I E N C E ;   O R D E R ;   A C K N O W L E D G M E N T S ;   B I B L I O M E T R I C S ;   D I S S E M I N A T I O N ;   C O A U T H O R S H I P ;   C O N T R I B U T O R S 	 C l a s s i c a l   a s s u m p t i o n s   a b o u t   t h e   n a t u r e   a n d   e t h i c a l   e n t a i l m e n t s   o f   a u t h o r s h i p   ( t h e   s t a n d a r d   m o d e l )   a r e   b e i n g   c h a l l e n g e d   b y   d e v e l o p m e n t s   i n   s c i e n t i f i c   c o l l a b o r a t i o n   a n d   m u l t i p l e   a u t h o r s h i p .   I n   t h e   b i o m e d i c a l   r e s e a r c h   c o m m u n i t y ,   m u l t i p l e   a u t h o r s h i p   h a s   i n c r e a s e d   t o   s u c h   a n   e x t e n t   t h a t   t h e   t r u s t w o r t h i n e s s   o f   t h e   s c i e n t i f i c   c o m m u n i c a t i o n   s y s t e m   h a s   b e e n   c a l l e d   i n t o   q u e s t i o n .   D o c u m e n t e d   a b u s e s ,   s u c h   a s   h o n o r i f i c   a u t h o r s h i p ,   h a v e   s e r i o u s   i m p l i c a t i o n s   i n   t e r m s   o f   t h e   a c k n o w l e d g m e n t   o f   a u t h o r i t y ,   a l l o c a t i o n   o f   c r e d i t ,   a n d   a s s i g n i n g   o f   a c c o u n t a b i l i t y .   W i t h i n   t h e   b i o m e d i c a l   w o r l d   i t   h a s   b e e n   p r o p o s e d   t h a t   a u t h o r s   b e   r e p l a c e d   b y   l i s t s   o f   c o n t r i b u t o r s   ( t h e   r a d i c a l   m o d e l ) ,   w h o s e   s p e c i f i c   i n p u t s   t o   a   g i v e n   s t u d y   w o u l d   b e   r e c o r d e d   u n a m b i g u o u s l y .   T h e   w i d e r   i m p l i c a t i o n s   o f   t h e   ' h y p e r a u t h o r s h i p '   p h e n o m e n o n   f o r   s c h o l a r l y   p u b l i c a t i o n   a r e   c o n s i d e r e d . 	 I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 C r o n i n ,   B   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 	 	 	 	 	 A h m e d   S   M ,   1 9 9 7 ,   F a m   M e d ,   V 2 9 ,   P 4 2 ;   * A M   L I B   A S S ,   1 9 9 8 ,   A N G L   C A T   R U L ;   A N D E R S O N   C ,   1 9 9 2 ,   N A T U R E ,   V 3 5 5 ,   P 1 0 1 ;   A N D E R S O N   C ,   1 9 9 1 ,   N A T U E ,   V 3 5 4 ,   P 3 ;   B A C A   M . ,   1 9 9 8 ,   I N T R O   M E T A D A T A   P A T H W ;   B a r t h e s   R . ,   1 9 7 7 ,   I M A G E   M U S I C   T E X T ,   P 1 4 2 ;   B a r t l e   S A ,   2 0 0 0 ,   P S Y C H O L   R E P ,   V 8 6 ,   P 7 7 1 ,   D O I   1 0 . 2 4 6 6 / P R 0 . 8 6 . 3 . 7 7 1 - 7 8 8 ;   B A Z E R M A N   C ,   1 9 8 4 ,   S O C   S T U D   S C I ,   V 1 4 ,   P 1 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 4 0 1 4 0 0 2 0 0 1 ;   B a z e r m a n   C h a r l e s ,   1 9 8 8 ,   S H A P I N G   W R I T T E N   K N O W ;   B e a v e r   D .   d e B . ,   1 9 7 8 ,   S c i e n t o m e t r i c s ,   V 1 ,   P 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 4 0 ;   B h o p a l   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 1 0 0 9 ;   B I R D   J E ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 1 9 ;   B i r k e r t s   S v e n ,   1 9 9 4 ,   G U T E N B E R G   E L E G I E S   F A ;   B o r d o n s   M ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 1 9 7 ;   B o u r d i e u   P . ,   1 9 9 1 ,   L A N G U A G E   S Y M B O L I C   P O ;   B r o d k e y   L . ,   1 9 8 7 ,   A C A D   W R I T I N G   S O C I A L ;   C A R B O N E   P P ,   1 9 9 2 ,   N E W   E N G L   J   M E D ,   V 3 2 6 ,   P 1 0 8 4 ;   C h u b i n   D .   R . ,   1 9 9 0 ,   P E E R L E S S   S C I   P E E R   R E ;   C o n s t a n t i a n   M B ,   1 9 9 9 ,   P L A S T   R E C O N S T R   S U R G ,   V 1 0 3 ,   P 2 0 6 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 5 3 4 - 1 9 9 9 0 6 0 0 0 - 0 0 0 4 4 ;   C O U C H   C J ,   1 9 8 4 ,   S Y M B   I N T E R A C T ,   V 8 ,   P 1 ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   C R O L L   R P ,   1 9 8 4 ,   P E R S P E C T   B I O L   M E D ,   V 2 7 ,   P 4 0 1 ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   C r o n i n   B ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 1 8 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 6 7 ;   C R O N I N   B ,   1 9 9 1 ,   J   D O C ,   V 4 7 ,   P 2 2 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 7 8 ;   C r o n i n   B . ,   1 9 9 5 ,   S C H O L A R S   C O U R T E S Y   R O ;   C R O N I N   B ,   1 9 9 2 ,   P   1 6   I N T   O N L   M   L O N D ,   P 2 8 1 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C R O N I N   B ,   I N   P R E S S   J   D O C U M E N T A ;   C R O N I N   B ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 1 2 1 ;   D a i l y   G C ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 9 ,   P 3 9 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 9 . 5 4 7 8 . 3 9 5 ;   D a r w i n   C . ,   1 9 1 9 ,   L I F E   L E T T   C   D A R W I N ;   D a v i d   P . ,   1 9 9 8 ,   C R E A T I O N   T R A N S F E R   K N ,   P 1 1 5 ;   D a v i d s o n   F ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 7 ,   P 9 2 7 ;   D e S o l l a   D . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   D r e n t h   J P H ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 9 ;   D u c o r   P ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 9 ,   P 8 7 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 9 . 5 4 8 1 . 8 7 3 ;   D u n c a n   A M ,   1 9 9 9 ,   A P P L   N U R S   R E S ,   V 1 2 ,   P 1 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 7 - 1 8 9 7 ( 9 9 ) 8 0 3 8 2 - 6 ;   D u n c a n   E . B . ,   1 9 8 1 ,   I N F O R M A T I O N   R E T R I E V A ,   P 7 0 ;   E n d e r s b y   J W ,   1 9 9 6 ,   S O C   S C I   Q U A R T ,   V 7 7 ,   P 3 7 5 ;   E y s e n c k   H J ,   1 9 9 9 ,   J   I N F O R M   E T H I C S ,   V 8 ,   P 2 7 ;   F I N E   G A ,   1 9 9 3 ,   A N N U   R E V   S O C I O L ,   V 1 9 ,   P 6 1 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . s o . 1 9 . 0 8 0 1 9 3 . 0 0 0 4 2 5 ;   F l a n a g i n   A ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 2 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 2 2 ;   F o u c a u l t   M i c h e l ,   1 9 7 7 ,   L A N G U A G E   C O U N T E R   M E M ,   P 1 1 3 ;   F r a n c k   G ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 7 . 5 3 ;   G a e t a   T J ,   1 9 9 9 ,   A C A D   E M E R G   M E D ,   V 6 ,   P 2 9 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 5 3 - 2 7 1 2 . 1 9 9 9 . t b 0 0 3 9 3 . x ;   G r a f t o n   A n t h o n y ,   1 9 9 7 ,   F O O T N O T E   C U R I O U S   H I S ;   G r o s s   A G ,   2 0 0 0 ,   S O C   S T U D   S C I ,   V 3 0 ,   P 3 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 0 0 0 3 0 0 0 3 0 0 2 ;   H A R S A N Y I   M A ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 3 2 5 ;   H E F F N E R   A G ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 8 6 0 ;   H E F F N E R   A G ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 3 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 9 0 0 9 0 0 3 0 5 ;   H o e n   W P ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 7 ;   H o r t o n   R ,   1 9 9 8 ,   L A N C E T ,   V 3 5 1 ,   P 6 8 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 8 ) 2 2 0 1 0 - 1 ;   H O U S T O N   P ,   1 9 9 6 ,   L A N C E T ,   V 3 4 7 ,   P 1 0 2 4 ;   H y l a n d   K ,   1 9 9 9 ,   A P P L   L I N G U I S T ,   V 2 0 ,   P 3 4 1 ,   D O I   1 0 . 1 0 9 3 / a p p l i n / 2 0 . 3 . 3 4 1 ;   K A H N   K S ,   1 9 9 9 ,   A M   J   O B S T E T   G Y N E C O L ,   V 1 8 1 ,   P 5 0 3 ;   K A S S I R E R   J P ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 5 ,   P 1 5 1 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 1 1 2 1 3 2 5 2 1 1 2 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K a t z e n   M F ,   1 9 8 0 ,   D E V   S C I   P U B L I S H I N G   E ,   P 1 7 7 ;   K e r n a n   A . ,   1 9 9 0 ,   D E A T H   L I T ;   K e v l e s   D a n i e l ,   1 9 9 8 ,   B A L T I M O R E   C A S E   T R I A L ;   K i n g   J T ,   2 0 0 0 ,   N E U R O S U R G E R Y ,   V 4 7 ,   P 4 3 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 2 3 - 2 0 0 0 0 8 0 0 0 - 0 0 0 3 2 ;   K i t c h e r   P . ,   1 9 9 3 ,   A D V   S C I   S C I   L E G E N D   O ;   K l e i n   C J ,   1 9 9 9 ,   J   A M   D I E T   A S S O C ,   V 9 9 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 8 2 2 3 ( 9 9 ) 0 0 0 2 0 - 6 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   K L I N G   R ,   1 9 9 9 ,   B I T   M O R E   I T   S C I   M U L T ;   K N I G H T   D ,   1 9 7 6 ,   N A T U R E   S C I   H I S T   S C I ;   K O E H L E R   W ,   1 9 9 9 ,   J   A M   S O C   I N F O R M A T I O N ;   K r o n i c k   D A ,   2 0 0 1 ,   L I B R   Q U A R T ,   V 7 1 ,   P 2 8 ;   K u n s t   F ,   1 9 9 7 ,   N A T U R E ,   V 3 9 0 ,   P 2 4 9 ,   D O I   1 0 . 1 0 3 8 / 3 6 7 8 6 ;   L a t o u r   B . ,   1 9 7 9 ,   L A B   L I F E   S O C I A L   C O N S ;   M a n g u e l   A . ,   1 9 9 7 ,   H I S T   R E A D I N G ;   M a n t e n   A .   A . ,   1 9 8 0 ,   D E V   S C I   P U B L I S H I N G   E ,   P 1 ;   M C C A I N   K W ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 4 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 4 0 4 ;   M c D o n a l d   K .   A . ,   1 9 9 5 ,   C H R O N I C L E   H I G H E   0 4 2 8 ,   p A 3 5   ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M U L L I N S   N C ,   1 9 7 3 ,   T H E O R I E S   T H E O R Y   G R O U ;   N e w m a n   D ,   1 9 9 6 ,   A R E A ,   V 2 8 ,   P 1 ;   N E W M A N   M E J ,   2 0 0 0 ,   W H O   I S   B E S T   C O N N E C T E ;   N o w a k   M A ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 8 ,   P 8 1 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 8 . 5 4 6 7 . 8 1 9 ;   P A T E L   N ,   1 9 7 3 ,   S O C   S C I   I N F O R M ,   V 1 2 ,   P 7 7 ;   P O S T E R   M ,   1 9 9 0 ,   M O D E   I N F O R M A T I O N   P O S ;   R A Y W A R D   W B ,   1 9 9 2 ,   C O N C E P T I O N S   O F   L I B R A R Y   A N D   I N F O R M A T I O N   S C I E N C E ,   P 5 0 ;   R E L M A N   A S ,   1 9 8 3 ,   N E W   E N G L   J   M E D ,   V 3 0 8 ,   P 1 4 1 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 8 3 0 6 0 9 3 0 8 2 3 1 1 ;   R E N N I E   D ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 1 ,   P 4 6 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 1 . 6 . 4 6 9 ;   R e n n i e   D ,   1 9 9 8 ,   A M   J   P U B L I C   H E A L T H ,   V 8 8 ,   P 8 2 8 ,   D O I   1 0 . 2 1 0 5 / A J P H . 8 8 . 5 . 8 2 8 ;   R e n n i e   D ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 8 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 8 . 7 . 5 7 9 ;   R I E S E N B E R G   D ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 4 ,   P 1 8 5 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 4 . 1 4 . 1 8 5 7 ;   S A F F R A N   M ,   1 9 8 9 ,   S C I E N T I S T ,   V 3 ,   P 9 ;   S h a p i n   S t e v e n ,   1 9 9 5 ,   S O C I A L   H I S T   T R U T H ;   S l o n e   R M ,   1 9 9 6 ,   A M   J   R O E N T G E N O L ,   V 1 6 7 ,   P 5 7 1 ;   S m i t h   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 5 ,   P 6 9 6 ;   S P I E G E L   D ,   1 9 7 0 ,   A M   P S Y C H O L ,   V 2 5 ,   P 7 3 8 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 9 7 6 9 ;   S q u i r e s   B P ,   1 9 9 6 ,   C A N   M E D   A S S O C   J ,   V 1 5 5 ,   P 8 9 7 ;   S t e r n   E B ,   2 0 0 0 ,   A M   J   O C C U P   T H E R ,   V 5 4 ,   P 2 1 4 ,   D O I   1 0 . 5 0 1 4 / a j o t . 5 4 . 2 . 2 1 4 ;   T r a w e e k   S . ,   1 9 9 2 ,   B E A M T I M E S   L I F E T I M E S ;   V E R N E R   D A ,   1 9 9 3 ,   M E S S E N G E R ,   V 7 1 ,   P 5 9 ;   W i l c o x   L J ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 6 	 9 8 	 1 6 6 	 1 6 7 	 1 2 	 6 4 	 J O H N   W I L E Y   &   S O N S   I N C 	 N E W   Y O R K 	 6 0 5   T H I R D   A V E ,   N E W   Y O R K ,   N Y   1 0 1 5 8 - 0 0 1 2   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A Y 	 2 0 0 1 	 5 2 	 7 	 	 	 	 	 5 5 8 	 5 6 9 	 	 1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 2 7 V P 	 W O S : 0 0 0 1 6 8 4 2 6 4 0 0 0 0 5 	 	 
 
 J 	 N A R I N ,   F 	 	 	 	 N A R I N ,   F 	 	 	 P A T E N T   B I B L I O M E T R I C S 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 4 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   B i b l i o m e t r i c s ,   I n f o r m e t r i c s   a n d   S c i e n t o m e t r i c s ,   i n   M e m o r y   o f   D e r e k   J o h n   d e   S o l l a   P r i c e   ( 1 9 2 2 - 1 9 8 3 ) 	 S E P   1 1 - 1 5 ,   1 9 9 3 	 B E R L I N ,   G E R M A N Y 	 M i n i s t e r   S c i   &   R e s   L a n d   B e r l i n 	 	 	 	 I n   o u r   1 9 7 5   m o n o g r a p h   ' ' E v a l u a t i v e   B i b l i o m e t r i c s ' '   w e   d i s c u s s e d   t h e   m a n y   u s e s   o f   p u b l i c a t i o n   a n d   c i t a t i o n   a n a l y s i s   i n   t h e   e v a l u a t i o n   o f   s c i e n t i f i c   a c t i v i t i e s ,   a n d   s o m e   o f   t h e   b a s i c   s t a t i s t i c a l   p r o p e r t i e s   o f   t h e   s c i e n t i f i c   l i t e r a t u r e ,   p a r t i c u l a r l y   t h e   s k e w n n e s s   o f   t h e   d i s t r i b u t i o n s   o f   p u b l i c a t i o n s   a n d   c i t a t i o n s ,   r e f e r e n c e   t i m e   d i s t r i b u t i o n s ,   a n d   v a r i o u s   a n o m a l i e s   i n   t h e   c i t a t i o n   p a t t e r n s   f r o m   o n e   c o u n t r y   t o   a n o t h e r .   O v e r   t h e   l a s t   t e n   y e a r s   w e   h a v e   d e v o t e d   m u c h   o f   o u r   e n e r g y   t o   t h e   d e v e l o p m e n t   o f   a n   a n a l o g o u s   r e s e a r c h   b a s e   a n d   i n f r a s t r u c t u r e   f o r   p a t e n t   b i b l i o m e t r i c s ,   t h a t   i s   f o r   t h e   u s e   o f   p a t e n t s ,   a n d   p a t e n t   c i t a t i o n s   i n   t h e   e v a l u a t i o n   o f   t e c h n o l o g i c a l   a c t i v i t i e s .   T h e r e   a r e   r e m a r k a b l e   s i m i l a r i t i e s   b e t w e e n   l i t e r a t u r e   b i b l i o m e t r i c s   a n d   p a t e n t   b i b l i o m e t r i c s ,   a n d   t h e y   a r e   b o t h   a p p l i c a b l e   t o   t h e   s a m e   w i d e   r a n g e s   o f   p r o b l e m s .   T h i s   p a p e r   w i l l   s h o w   t h a t   t h e r e   a r e   s t r i k i n g   s i m i l a r i t i e s   b e t w e e n   l i t e r a t u r e   a n d   p a t e n t   d i s t r i b u t i o n s   o f   n a t i o n a l   p r o d u c t i v i t y ,   i n v e n t o r   p r o d u c t i v i t y ,   r e f e r e n c i n g   c y c l e s ,   c i t a t i o n   i m p a c t   a n d   w i t h i n   c o u n t r y   c i t a t i o n   p r e f e r e n c e s . 	 	 N A R I N ,   F   ( r e p r i n t   a u t h o r ) ,   C H I   R E S   I N C , 1 0   W H I T E   H O R S E   P I K E , H A D D O N   H T S , N J   0 8 0 3 5 ,   U S A . 	 	 	 	 	 	 A L B E R T   M B ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 5 5 - U ;   C a r p e n t e r   M .   P . ,   1 9 8 1 ,   W O R L D   P A T E N T   I N F O R M A ,   V 3 ,   P 1 6 0 ,   D O I   1 0 . 1 0 1 6 / 0 1 7 2 - 2 1 9 0 ( 8 1 ) 9 0 0 9 8 - 3 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   N A R I N   F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 5 ;   N A R I N   F ,   1 9 9 1 ,   T E C H   L I N E   T M   S O U R C E ;   N A R I N   F ,   1 9 9 3 ,   I N   P R E S S   R E S   P O L I C Y ;   D e   S o l l a   P r i c e   D . ,   1 9 6 9 ,   P   I S R   A C   A C   S C I   H U M ,   P 1 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I 	 9 	 1 5 2 	 1 5 9 	 1 0 	 7 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A Y 	 1 9 9 4 	 3 0 	 1 	 	 	 	 	 1 4 7 	 1 5 5 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 9 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 N R 5 4 2 	 W O S : A 1 9 9 4 N R 5 4 2 0 0 0 1 2 	 	 
 
 J 	 W h i t e ,   H D 	 	 	 	 W h i t e ,   H D 	 	 	 P a t h f i n d e r   n e t w o r k s   a n d   a u t h o r   c o c i t a t i o n   a n a l y s i s :   A   r e m a p p i n g   o f   p a r a d i g m a t i c   i n f o r m a t i o n   s c i e n t i s t s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C H O L A R L Y   C O M M U N I C A T I O N ;   I N T E L L E C T U A L   S T R U C T U R E ;   C O - C I T A T I O N ;   S C I E N C E ;   R E T R I E V A L ;   B I B L I O M E T R I C S ;   T E C H N O L O G Y ;   O N L I N E ;   S P A C E 	 I n   t h e i r   1 9 9 8   a r t i c l e   " V i s u a l i z i n g   a   d i s c i p l i n e :   A n   a u t h o r   c o c i t a t i o n   a n a l y s i s   o f   i n f o r m a t i o n   s c i e n c e ,   1 9 7 2 - 1 9 9 5 , "   W h i t e   a n d   M c C a i n   u s e d   m u l t i d i m e n s i o n a l   s c a l i n g ,   h i e r a r c h i c a l   c l u s t e r i n g ,   a n d   f a c t o r   a n a l y s i s   t o   d i s p l a y   t h e   s p e c i a l t y   g r o u p i n g s   o f   1 2 0   h i g h l y - c i t e d   ( " p a r a d i g m a t i c " )   i n f o r m a t i o n   s c i e n t i s t s .   T h e s e   s t a t i s t i c a l   t e c h n i q u e s   a r e   t r a d i t i o n a l   i n   a u t h o r   c o c i t a t i o n   a n a l y s i s   ( A C A ) .   I t   i s   s h o w n   h e r e   t h a t   a   n e w e r   t e c h n i q u e ,   P a t h f i n d e r   N e t w o r k s   ( P F N E T s ) ,   h a s   c o n s i d e r a b l e   a d v a n t a g e s   f o r   A C A .   I n   P F N E T s ,   n o d e s   r e p r e s e n t   a u t h o r s ,   a n d   e x p l i c i t   l i n k s   r e p r e s e n t   w e i g h t e d   p a t h s   b e t w e e n   n o d e s ,   t h e   w e i g h t s   i n   t h i s   c a s e   b e i n g   c o c i t a t i o n   c o u n t s .   T h e   l i n k s   c a n   b e   d r a w n   t o   e x c l u d e   a l l   b u t   t h e   s i n g l e   h i g h e s t   c o u n t s   f o r   a u t h o r   p a i r s ,   w h i c h   r e d u c e s   a   n e t w o r k   o f   a u t h o r s   t o   o n l y   t h e   m o s t   s a l i e n t   r e l a t i o n s h i p s .   W h e n   t h e s e   a r e   m a p p e d ,   d o m i n a n t   a u t h o r s   c a n   b e   d e f i n e d   a s   t h o s e   w i t h   r e l a t i v e l y   m a n y   l i n k s   t o   o t h e r   a u t h o r s   ( i . e . ,   h i g h   d e g r e e   c e n t r a l i t y ) .   L i n k s   b e t w e e n   a u t h o r s   a n d   d o m i n a n t   a u t h o r s   d e f i n e   s p e c i a l t i e s ,   a n d   l i n k s   b e t w e e n   d o m i n a n t   a u t h o r s   c o n n e c t   s p e c i a l t i e s   i n t o   a   d i s c i p l i n e .   M a p s   a r e   m a d e   w i t h   o n e   r a t h e r   t h a n   s e v e r a l   c o m p u t e r   r o u t i n e s   a n d   i n   o n e   r a t h e r   t h a n   m a n y   c o m p u t e r   p a s s e s .   A l s o ,   P F N E T s   c a n ,   a n d   s h o u l d ,   b e   g e n e r a t e d   f r o m   m a t r i c e s   o f   r a w   c o u n t s   r a t h e r   t h a n   P e a r s o n   c o r r e l a t i o n s ,   w h i c h   r e m o v e s   a   c o m p u t a t i o n a l   s t e p   a s s o c i a t e d   w i t h   t r a d i t i o n a l   A C A .   W h i t e   a n d   M c C a i n ' s   r a w   d a t a   f r o m   1 9 9 8   a r e   r e m a p p e d   a s   a   P F N E T .   I t   i s   s h o w n   t h a t   t h e   s p e c i a l t y   g r o u p i n g s   c o r r e s p o n d   c l o s e l y   t o   t h o s e   s e e n   i n   t h e   f a c t o r   a n a l y s i s   o f   t h e   1 9 9 8   a r t i c l e .   B e c a u s e   P F N E T s   a r e   f a s t   t o   c o m p u t e ,   t h e y   a r e   u s e d   i n   A u t h o r L i n k ,   a   n e w   W e b - b a s e d   s y s t e m   t h a t   c r e a t e s   l i v e   i n t e r f a c e s   f o r   c o c i t e d   a u t h o r   r e t r i e v a l   o n   t h e   f l y . 	 D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 W h i t e ,   H D   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 	 	 	 	 	 B a l d i   S ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 4 ;   B A T A G E L J   V ,   2 0 0 2 ,   N E T W O R K S   P A J E K   P A C K A ;   B O Y A C K   K W ,   2 0 0 1 ,   D   L I B   M A G A Z I N E ,   V 7 ;   C H E N   C ,   1 9 9 9 ,   P   1 0   A C M   C   H Y P   H Y P   9 ;   C h e n   C M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 4 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 8 - 5 ;   C h e n   C M ,   1 9 9 8 ,   I N T E R A C T   C O M P U T ,   V 1 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 3 - 5 4 3 8 ( 9 8 ) 0 0 0 1 5 - 0 ;   C h e n   C M ,   1 9 9 8 ,   J   V I S U A L   L A N G   C O M P U T ,   V 9 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 6 / j v l c . 1 9 9 8 . 0 0 8 3 ;   C h e n   J F ,   2 0 0 0 ,   B R I T T O N I A ,   V 5 2 ,   P 3 1 5 ,   D O I   1 0 . 2 3 0 7 / 2 6 6 6 5 8 3 ;   C O T T R I L L   C A ,   1 9 8 9 ,   K N O W L E D G E ,   V 1 1 ,   P 1 8 1 ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   D o d g e   M a r t i n ,   2 0 0 1 ,   A T L A S   O F   C Y B E R S P A C E ;   F O W L E R   R H ,   1 9 9 5 ,   N A G 9 5 5 1   U   T E X   P A N   A M ;   F o w l e r   R .   H . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ,   P 1 6 5 ;   F o w l e s   J o h n ,   1 9 7 0 ,   A R I S T O S ;   * I N T   I N C ,   K N O T   T O O L S   P A T H F   N E T ;   K A M A D A   T ,   1 9 8 9 ,   I N F O R M   P R O C E S S   L E T T ,   V 3 1 ,   P 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 1 9 0 ( 8 9 ) 9 0 1 0 2 - 6 ;   K r e u z m a n   H ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 5 2 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 4 7 1 0 3 4 6 9 ;   L I N   X ,   2 0 0 1 ,   S S G R R   2 0 0 1   I N T   C   A D V ;   L I N   X ,   2 0 0 3 ,   R E A L   T I M E   A U T H O R   C O C ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   O l d   L J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 5 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 0 3 3 2 1 2 1 6 ;   O L D   L J ,   1 9 9 9 ,   S P A T I A L   R E P R E S E N T A T I ;   P e r r y   C A ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 2 ) 4 9 : 2 < 1 5 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - V ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P R I C E   D J D ,   1 9 6 1 ,   S C I   S I N C E   B A Y B L O N ;   S a n d s t r o m   P E ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 5 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 5 5 3 0 5 2 8 6 ;   S a r a c e v i c   T ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 0 5 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - Z ;   S c h v a n e v e l d t   R .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ;   S T A G G   D B ,   1 9 9 7 ,   T H E S I S   D R E X E L   U ;   T h a g a r d   P ,   1 9 9 2 ,   C O N C E P T U A L   R E V O L U T I O ;   T u f t e   E ,   1 9 9 0 ,   E N V I S I O N I N G   I N F O R M A T ;   T u f t e   E .   R . ,   1 9 9 7 ,   V I S U A L   E X P L A N A T I O N S ;   T u f t e   E .   R . ,   1 9 8 3 ,   V I S U A L   D I S P L A Y   Q U A N T ;   U R S   S R ,   1 9 9 5 ,   I S S I   9 5 ,   P 5 8 7 ;   W a s s e r m a n   S . ,   1 9 9 4 ,   S O C I A L   N E T W O R K S   A N A L ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W H I T E   H D ,   1 9 8 6 ,   I N F O R M   T E C H N O L   L I B R ,   V 5 ,   P 9 3 ;   W h i t e   H D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 0 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 0 7 5 2 2 1 2 5 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 1 0 3 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 ;   W H I T E   H D ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 9 5 9 ;   W H I T E   H D ,   2 0 0 1 ,   A C H   A L L C   2 0 0 1   2 0 0 1   J ,   P 1 2 7 ;   W h i t e   H . D . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 4 7 5 ;   W H I T E   H D ,   1 9 8 1 ,   C O N C E P T S   J U D G E M E N T   D ,   P 2 6 1 	 4 8 	 1 3 9 	 1 5 2 	 8 	 1 0 1 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A R 	 2 0 0 3 	 5 4 	 5 	 	 	 	 	 4 2 3 	 4 3 4 	 	 1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 4 9 Z R 	 W O S : 0 0 0 1 8 1 2 3 8 3 0 0 0 0 9 	 	 
 
 J 	 S a n t o s ,   D M F ;   S e q u e i r a ,   C A C 	 	 	 	 S a n t o s ,   D .   M .   F . ;   S e q u e i r a ,   C .   A .   C . 	 	 	 S o d i u m   b o r o h y d r i d e   a s   a   f u e l   f o r   t h e   f u t u r e 	 R E N E W A B L E   &   S U S T A I N A B L E   E N E R G Y   R E V I E W S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 S o d i u m   b o r o h y d r i d e ;   E l e c t r o s y n t h e s i s ;   O x i d a t i o n ;   H y d r o l y s i s ;   M o n i t o r i n g ;   D i r e c t   b o r o h y d r i d e   f u e l   c e l l s ;   B i b l i o m e t r i c s 	 P U L S E D - L A S E R   D E P O S I T I O N ;   A L K A L I N E   N A B H 4   S O L U T I O N ;   H Y D R O G E N   S T O R A G E   A L L O Y ;   A N O D E   M E T A L L I C   E L E C T R O C A T A L Y S T ;   P O L Y M E R   E L E C T R O L Y T E   M E M B R A N E ;   C O B A L T - P H O S P H O R U S   C A T A L Y S T S ;   A U   H O L L O W   N A N O S P H E R E S ;   B - 1 1   N M R   M E A S U R E M E N T S ;   H I G H - P O W E R   D E N S I T Y ;   P T - A G   E L E C T R O D E S 	 I n   a   t i m e   o f   u n p r e c e d e n t e d   c h a n g e   i n   e n v i r o n m e n t a l ,   g e o p o l i t i c a l   a n d   s o c i o - e c o n o m i c   w o r l d   a f f a i r s ,   t h e   s e a r c h   f o r   n e w   e n e r g y   m a t e r i a l s   h a s   b e c o m e   a   t o p i c   o f   g r e a t   r e l e v a n c e .   S o d i u m   b o r o h y d r i d e ,   N a B H 4 ,   s e e m s   t o   b e   a   p r o m i s i n g   f u e l   i n   t h e   c o n t e x t   o f   t h e   f u t u r e   h y d r o g e n   e c o n o m y .   N a B H 4   b e l o n g s   t o   a   c l a s s   o f   m a t e r i a l s   w i t h   t h e   h i g h e s t   g r a v i m e t r i c   h y d r o g e n   d e n s i t i e s ,   w h i c h   h a s   b e e n   d i s c o v e r e d   i n   t h e   1 9 4 0 s   b y   S c h l e s i n g e r   a n d   B r o w n .   I n   t h e   p r e s e n t   p a p e r ,   t h e   m o s t   r e l e v a n t   i s s u e s   c o n c e r n i n g   t h e   u s e   o f   N a B H 4   a r e   e x a m i n e d .   I t s   b a s i c   p r o p e r t i e s   a r e   s u m m a r i s e d   a n d   i t s   s y n t h e s i s   m e t h o d s   a r e   d e s c r i b e d .   T h e   g e n e r a l   p r o c e s s e s   o f   N a B H 4   o x i d a t i o n ,   h y d r o l y s i s ,   a n d   m o n i t o r i n g   a r e   r e v i e w e d .   A   c o m p r e h e n s i v e   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   N a B H 4   p u b l i c a t i o n s   i n   t h e   e n e r g y   f i e l d   o p e n s   t h e   d i s c u s s i o n   f o r   c u r r e n t   p e r s p e c t i v e s   a n d   f u t u r e   o u t l o o k   o f   N a B H 4   a s   a n   e f f i c i e n t   e n e r g y / h y d r o g e n   c a r r i e r .   D e s p i t e   t h e   o b s e r v e d   e x p o n e n t i a l   i n c r e a s e   i n   t h e   r e s e a r c h   o n   N a B H 4   i t   i s   c l e a r   t h a t   f u r t h e r   e f f o r t s   a r e   s t i l l   n e c e s s a r y   f o r   a c h i e v i n g   s i g n i f i c a n t   o v e r c h a n g e s .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ S a n t o s ,   D .   M .   F . ;   S e q u e i r a ,   C .   A .   C . ]   U n i v   T e c n   L i s b o a ,   I n s t   S u p e r   T e c n ,   I n s t   M a t   &   S u r f a c e s   S c i   &   E n g n ,   D e p t   C h e m   &   B i o l   E n g n ,   P - 1 0 4 9 0 0 1   L i s b o n ,   P o r t u g a l 	 S a n t o s ,   D M F   ( r e p r i n t   a u t h o r ) ,   U n i v   T e c n   L i s b o a ,   I n s t   S u p e r   T e c n ,   I n s t   M a t   &   S u r f a c e s   S c i   &   E n g n ,   D e p t   C h e m   &   B i o l   E n g n ,   P - 1 0 4 9 0 0 1   L i s b o n ,   P o r t u g a l . 	 d i o g o s a n t o s @ i s t . u t l . p t 	 S a n t o s ,   D i o g o / A - 8 2 9 9 - 2 0 1 0 ;   	 S a n t o s ,   D i o g o / 0 0 0 0 - 0 0 0 2 - 7 9 2 0 - 2 6 3 8 ;   S e q u e i r a ,   C e s a r / 0 0 0 0 - 0 0 0 1 - 7 5 5 6 - 2 8 5 8 	 	 	 A i e l l o   R ,   1 9 9 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 4 ,   P 1 1 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 9 9 ) 0 0 0 0 2 - 6 ;   A k d i m   O ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 9 4 4 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 9 . 0 8 5 ;   A k d i m   O ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 7 2 3 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 6 . 0 6 8 ;   A k d i m   O ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 4 7 8 0 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 4 . 0 0 9 ;   A k d i m   O ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 5 4 1 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 4 . 0 6 5 ;   A k d i m   O ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 2 6 3 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 1 . 0 7 7 ;   A m e n d o l a   S ,   1 9 9 9 ,   T A L A N T A ,   V 4 9 ,   P 2 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 9 - 9 1 4 0 ( 9 8 ) 0 0 3 8 7 - 7 ;   A m e n d o l a   S C ,   1 9 9 9 ,   J   P O W E R   S O U R C E S ,   V 8 4 ,   P 1 3 0 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 9 9 ) 0 0 2 5 9 - 1 ;   A m e n d o l a   S C ,   2 0 0 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 5 ,   P 9 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 0 0 ) 0 0 0 2 1 - 5 ;   A m e n d o l a   S C ,   2 0 0 0 ,   J   P O W E R   S O U R C E S ,   V 8 5 ,   P 1 8 6 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 9 9 ) 0 0 3 0 1 - 8 ;   A n d r i e u x   J ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 9 3 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 1 0 2 ;   A r a u j o   C M ,   2 0 0 8 ,   J   P H Y S - C O N D E N S   M A T ,   V 2 0 ,   D O I   1 0 . 1 0 8 8 / 0 9 5 3 - 8 9 8 4 / 2 0 / 1 2 / 1 2 2 2 0 2 ;   A r a u j o   C M ,   2 0 0 5 ,   P H Y S   R E V   B ,   V 7 2 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v B . 7 2 . 0 5 4 1 2 5 ;   A t i y e h   H K ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 0 6 . 0 0 3 ;   A t w a n   M H ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 2 1 2 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 2 . 0 1 5 ;   A t w a n   M H ,   2 0 1 0 ,   J   N E W   M A T   E L E C T R   S Y S ,   V 1 3 ,   P 2 1 ;   A t w a n   M H ,   2 0 0 5 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 0 ,   P 1 3 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 5 . 0 4 . 0 1 0 ;   A t w a n   M H ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 3 1 1 6 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 5 . 1 2 . 0 2 2 ;   A t w a n   M H ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 5 8 ,   P 3 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 0 9 . 0 5 4 ;   A y   M ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 5 7 ,   P 1 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 0 7 . 0 8 3 ;   B a b a n o v a   O A ,   2 0 1 0 ,   J   P H Y S   C H E M   C ,   V 1 1 4 ,   P 3 7 1 2 ,   D O I   1 0 . 1 0 2 1 / j p 9 1 1 9 6 0 6 ;   B a i   Y ,   2 0 0 6 ,   M A T E R   L E T T ,   V 6 0 ,   P 2 2 3 6 ,   D O I   1 0 . 1 0 1 6 / j . m a t l e t . 2 0 0 5 . 1 2 . 1 1 9 ;   B a i   Y ,   2 0 0 6 ,   X I A N D A I   H U A G O N G   M O D ,   V 2 6 ,   P 2 8 ;   B a r d   A .   J . ,   1 9 8 5 ,   S T A N D A R D   P O T E N T I A L S ;   B a r k h o r d a r i a n   G ,   2 0 0 7 ,   J   A L L O Y   C O M P D ,   V 4 4 0 ,   p L 1 8 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 6 . 0 9 . 0 4 8 ;   B A R O N E   V ,   1 9 8 1 ,   I N O R G   C H E M ,   V 2 0 ,   P 1 6 8 7 ,   D O I   1 0 . 1 0 2 1 / i c 5 0 2 2 0 a 0 1 4 ;   B a s u   S ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 2 0 6 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 1 2 . 1 5 9 ;   B e a i r d   A M ,   2 0 1 0 ,   I N D   E N G   C H E M   R E S ,   V 4 9 ,   P 9 5 9 6 ,   D O I   1 0 . 1 0 2 1 / i e 1 0 0 2 4 4 v ;   B e n n i c i   S ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 8 6 2 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 5 . 1 1 4 ;   B I E L L M A N N   J F ,   1 9 6 8 ,   B   S O C   C H I M   F R ,   P 1 1 5 9 ;   B O N A C C O R S I   R ,   1 9 7 9 ,   T H E O R   C H I M   A C T A ,   V 5 2 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 6 3 4 7 8 7 ;   B R O W N   C A ,   1 9 6 2 ,   J   A M   C H E M   S O C ,   V 8 4 ,   P 2 8 2 9 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 8 7 3 a 0 3 9 ;   B R O W N   H C ,   1 9 5 7 ,   J   A M   C H E M   S O C ,   V 7 9 ,   P 5 4 0 0 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 5 7 7 a 0 1 7 ;   B R O W N   H C ,   1 9 5 5 ,   A N A L   C H E M ,   V 2 7 ,   P 1 5 6 ,   D O I   1 0 . 1 0 2 1 / a c 6 0 0 9 7 a 0 5 5 ;   B R O W N   H C ,   1 9 6 6 ,   T E T R A H E D R O N ,   V S ,   P 1 4 9 ;   B R O W N   H C ,   1 9 5 5 ,   J   A M   C H E M   S O C ,   V 7 7 ,   P 6 2 0 9 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 6 2 8 a 0 4 4 ;   B R O W N   H C ,   1 9 5 6 ,   J   A M   C H E M   S O C ,   V 7 8 ,   P 2 5 8 2 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 5 9 2 a 0 7 0 ;   B R O W N   H C ,   1 9 6 2 ,   J   A M   C H E M   S O C ,   V 8 4 ,   P 2 8 2 7 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 8 7 3 a 0 3 7 ;   B R O W N   H C ,   1 9 6 1 ,   J   A M   C H E M   S O C ,   V 8 3 ,   P 4 3 7 2 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 4 8 2 a 0 1 8 ;   B r o w n   H .   C . ,   1 9 6 2 ,   J   A M   C H E M   S O C ,   V 8 4 ,   P 1 4 9 3 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 8 6 7 a 0 3 4 ;   B U C H N E R   W ,   1 9 7 7 ,   P U R E   A P P L   C H E M ,   V 4 9 ,   P 7 3 3 ,   D O I   1 0 . 1 3 5 1 / p a c 1 9 7 7 4 9 0 6 0 7 3 3 ;   C a k a n y i l d i r i m   C ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 4 6 3 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 5 . 0 8 4 ;   C a k a n y i l d i r i m   C ,   2 0 1 0 ,   R E N E W   E N E R G ,   V 3 5 ,   P 1 8 9 5 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 1 0 . 0 1 . 0 0 1 ;   C a k a n y i l d i r i m   C ,   2 0 1 0 ,   R E N E W   E N E R G ,   V 3 5 ,   P 8 3 9 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 0 9 . 0 8 . 0 3 4 ;   C a k a n y i l d i r i m   C ,   2 0 0 9 ,   R E N E W   E N E R G ,   V 3 4 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 0 9 . 0 2 . 0 2 8 ;   C a l a b r e t t a   D L ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 4 ,   P 7 8 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 1 1 . 0 2 3 ;   C a o   D X ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 8 0 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 1 1 . 0 2 6 ;   C a o   D X ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 9 0 ,   P 3 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 1 2 . 1 3 4 ;   G a l v e z - R u i z   J C ,   2 0 0 9 ,   J   M O L   S T R U C - T H E O C H E M ,   V 9 0 8 ,   P 1 1 4 ,   D O I   1 0 . 1 0 1 6 / j . t h e o c h e m . 2 0 0 9 . 0 5 . 0 1 0 ;   C e l i k   C ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 6 . 0 6 6 ;   C e l i k   C ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 8 6 7 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 4 . 1 5 0 ;   C e l i k   C ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 2 5 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 1 1 . 0 9 3 ;   C e l i k k a n   H ,   2 0 0 5 ,   T U R K   J   C H E M ,   V 2 9 ,   P 5 1 9 ;   C e l i k k a n   H ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 5 8 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 0 6 . 0 6 5 ;   C e n t o   C ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 4 5 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 7 . 0 8 8 ;   C H A I K I N   S W ,   1 9 5 3 ,   A N A L   C H E M ,   V 2 5 ,   P 8 3 1 ,   D O I   1 0 . 1 0 2 1 / a c 6 0 0 7 7 a 0 5 4 ;   C h a m o u n   R ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 6 5 8 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 4 . 1 0 7 ;   C h a m o u n   R ,   2 0 1 0 ,   A P P L   S U R F   S C I ,   V 2 5 6 ,   P 7 6 8 4 ,   D O I   1 0 . 1 0 1 6 / j . a p s u s c . 2 0 1 0 . 0 6 . 0 3 2 ;   C h a s e   T r   M W . ,   1 9 9 8 ,   J   P H Y S   C H E M   R E F   D A T A ,   V 9 ;   C h a t e n e t   M ,   2 0 0 9 ,   E L E C T R O C H I M   A C T A ,   V 5 4 ,   P 4 4 2 6 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 9 . 0 3 . 0 1 9 ;   C h a t e n e t   M ,   2 0 0 9 ,   E L E C T R O C H I M   A C T A ,   V 5 4 ,   P 1 6 8 7 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 8 . 0 9 . 0 6 0 ;   C h a t e n e t   M ,   2 0 0 6 ,   E L E C T R O C H I M   A C T A ,   V 5 1 ,   P 5 4 5 2 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 6 . 0 2 . 0 1 4 ;   C h a t e n e t   M ,   2 0 0 6 ,   E L E C T R O C H I M   A C T A ,   V 5 1 ,   P 5 4 5 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 6 . 0 2 . 0 1 5 ;   C h a t e n e t   M ,   2 0 1 0 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 7 ,   p B 6 9 7 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 3 2 8 1 7 9 ;   C h e n   C W ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 2 1 6 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 1 2 . 0 7 7 ;   C h e n   Y ,   2 0 0 8 ,   F U E L   P R O C E S S   T E C H N O L ,   V 8 9 ,   P 9 6 6 ,   D O I   1 0 . 1 0 1 6 / j . f u p r o c . 2 0 0 8 . 0 4 . 0 0 5 ;   C h e n   Y ,   2 0 0 8 ,   M A T E R   L E T T ,   V 6 2 ,   P 1 4 5 1 ,   D O I   1 0 . 1 0 1 6 / j . m a t l e t . 2 0 0 7 . 0 8 . 0 8 4 ;   C h e n g   H ,   2 0 0 6 ,   E L E C T R O C H I M   A C T A ,   V 5 1 ,   P 3 4 2 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 5 . 0 9 . 0 3 8 ;   C h e n g   H ,   2 0 0 6 ,   J   A P P L   E L E C T R O C H E M ,   V 3 6 ,   P 1 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 0 0 - 0 0 6 - 9 1 9 9 - 7 ;   C h e n g   H ,   2 0 0 7 ,   J   M E M B R A N E   S C I ,   V 2 8 8 ,   P 1 6 8 ,   D O I   1 0 . 1 0 1 6 / j . m e m s c i . 2 0 0 6 . 1 1 . 0 1 4 ;   C h e n g   H ,   2 0 0 6 ,   F U E L   C E L L S ,   V 6 ,   P 3 6 7 ,   D O I   1 0 . 1 0 0 2 / f u c e . 2 0 0 5 0 0 2 6 0 ;   C h e n g   H ,   2 0 0 6 ,   J   E L E C T R O A N A L   C H E M ,   V 5 9 6 ,   P 1 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j e l e c h e m . 2 0 0 6 . 0 7 . 0 3 1 ;   C h e n g   H ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 0 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 1 . 0 9 7 ;   C h e r n y s h o v   D ,   2 0 0 8 ,   P H Y S   R E V   B ,   V 7 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v B . 7 8 . 1 7 2 1 0 4 ;   C h o   K W ,   2 0 0 7 ,   C A T A L   T O D A Y ,   V 1 2 0 ,   P 2 9 8 ,   D O I   1 0 . 1 0 1 6 / j . c a t t o d . 2 0 0 6 . 0 9 . 0 0 4 ;   C h o u d h u r y   N A ,   2 0 0 9 ,   J   C H E M   S C I ,   V 1 2 1 ,   P 6 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 2 0 3 9 - 0 0 9 - 0 0 7 8 - 8 ;   C h o u d h u r y   N A ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 0 8 . 0 5 9 ;   C l o u t i e r   C R ,   2 0 0 7 ,   J   F U E L   C E L L   S C I   T E C H ,   V 4 ,   P 8 8 ,   D O I   1 0 . 1 1 1 5 / 1 . 2 3 9 3 3 1 0 ;   C l o u t i e r   C R ,   2 0 0 7 ,   A D V   M A T E R   R E S - S W I T Z ,   V 1 5 - 1 7 ,   P 2 6 7 ,   D O I   1 0 . 4 0 2 8 / w w w . s c i e n t i f i c . n e t / A M R . 1 5 - 1 7 . 2 6 7 ;   C o l o m i n a s   S ,   2 0 0 9 ,   E L E C T R O C H I M   A C T A ,   V 5 4 ,   P 3 5 7 5 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 9 . 0 1 . 0 2 1 ;   C o n c h a   B M ,   2 0 1 0 ,   P H Y S   C H E M   C H E M   P H Y S ,   V 1 2 ,   P 1 1 5 0 7 ,   D O I   1 0 . 1 0 3 9 / c 0 0 3 6 5 2 h ;   C o n c h a   B M ,   2 0 0 9 ,   E L E C T R O C H I M   A C T A ,   V 5 4 ,   P 6 1 1 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 9 . 0 5 . 0 2 7 ;   C o n c h a   B M ,   2 0 0 9 ,   E L E C T R O C H I M   A C T A ,   V 5 4 ,   P 6 1 3 0 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 9 . 0 4 . 0 7 4 ;   C o n c h a   B M ,   2 0 0 9 ,   E L E C T R O C H E M   C O M M U N ,   V 1 1 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 8 . 1 1 . 0 1 8 ;   C o o w a r   F A ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 5 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 9 . 0 6 3 ;   C U R R A N   D J ,   1 9 7 0 ,   A N A L   C H E M ,   V 4 2 ,   P 1 4 1 4 ,   D O I   1 0 . 1 0 2 1 / a c 6 0 2 9 4 a 0 3 6 ;   C z u j k o   T ,   2 0 0 7 ,   J   A L L O Y   C O M P D ,   V 4 2 7 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 6 . 0 3 . 0 2 0 ;   D a i   H B ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 4 4 0 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 5 . 0 8 0 ;   D a i   H B ,   2 0 0 8 ,   J   P H Y S   C H E M   C ,   V 1 1 2 ,   P 1 5 8 8 6 ,   D O I   1 0 . 1 0 2 1 / j p 8 0 5 1 1 5 m ;   D a i   H B ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 7 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 1 1 . 0 2 3 ;   D a m j a n o v i c   L ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 3 2 8 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 1 1 . 1 0 5 ;   D a s   J ,   2 0 0 9 ,   C H E M   C O M M U N ,   P 6 3 9 4 ,   D O I   1 0 . 1 0 3 9 / b 9 1 2 4 5 0 k ;   D A V I S   R E ,   1 9 6 2 ,   J   A M   C H E M   S O C ,   V 8 4 ,   P 8 8 5 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 8 6 5 a 0 0 1 ;   D A V I S   R E ,   1 9 6 2 ,   J   A M   C H E M   S O C ,   V 8 4 ,   P 8 9 2 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 8 6 5 a 0 0 2 ;   D A V I S   R E ,   1 9 6 0 ,   J   A M   C H E M   S O C ,   V 8 2 ,   P 5 9 5 0 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 5 0 7 a 0 4 0 ;   D A V I S   R E ,   1 9 6 2 ,   J   A M   C H E M   S O C ,   V 8 4 ,   P 8 9 5 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 8 6 5 a 0 0 3 ;   D A V I S   R E ,   1 9 6 4 ,   I N O R G   C H E M ,   V 3 ,   P 4 6 0 ,   D O I   1 0 . 1 0 2 1 / i c 5 0 0 1 3 a 0 3 9 ;   D A V I S   R E ,   1 9 6 0 ,   J   A M   C H E M   S O C ,   V 8 2 ,   P 5 9 4 9 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 5 0 7 a 0 3 9 ;   D A V I S   R L ,   1 9 8 5 ,   J   S O L I D   S T A T E   C H E M ,   V 5 9 ,   P 3 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 4 5 9 6 ( 8 5 ) 9 0 3 0 8 - 1 ;   D A V I S   W D ,   1 9 4 9 ,   J   A M   C H E M   S O C ,   V 7 1 ,   P 2 7 7 5 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 1 7 6 a 0 5 2 ;   d e   L e o n   C P ,   2 0 0 8 ,   E L E C T R O C H E M   C O M M U N ,   V 1 0 ,   P 1 6 1 0 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 8 . 0 8 . 0 0 6 ;   D e m i r c i   U B ,   2 0 0 8 ,   J   A L L O Y   C O M P D ,   V 4 6 3 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 7 . 0 8 . 0 7 7 ;   D e m i r c i   U B ,   2 0 0 8 ,   C A T A L   C O M M U N ,   V 9 ,   P 1 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . c a t c o m . 2 0 0 7 . 1 0 . 0 2 8 ;   D e m i r c i   U B ,   2 0 0 8 ,   I N T   J   G R E E N   E N E R G Y ,   V 5 ,   P 1 4 8 ,   D O I   1 0 . 1 0 8 0 / 1 5 4 3 5 0 7 0 8 0 2 1 0 6 9 2 8 ;   D e m i r c i   U B ,   2 0 0 8 ,   J   M O L   C A T A L   A - C H E M ,   V 2 7 9 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / j . m o l c a t a . 2 0 0 7 . 0 9 . 0 2 5 ;   D e m i r c i   U B ,   2 0 0 7 ,   E L E C T R O C H I M   A C T A ,   V 5 2 ,   P 5 1 1 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 6 . 1 2 . 0 2 4 ;   D e m i r c i   U B ,   2 0 1 0 ,   P H Y S   C H E M   C H E M   P H Y S ,   V 1 2 ,   P 1 4 6 5 1 ,   D O I   1 0 . 1 0 3 9 / c 0 c p 0 0 2 9 5 j ;   D e m i r c i   U B ,   2 0 1 0 ,   F U E L   C E L L S ,   V 1 0 ,   P 3 3 5 ,   D O I   1 0 . 1 0 0 2 / f u c e . 2 0 0 8 0 0 1 7 1 ;   D e m i r c i   U B ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 9 2 ,   P 3 1 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 3 . 0 1 5 ;   D e m i r c i   U B ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 2 6 3 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 1 . 0 3 8 ;   D e m i r c i   U B ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 2 1 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 2 . 0 1 4 ;   D e m i r c i   U B ,   2 0 0 8 ,   A C T U A L   C H I M I Q U E ,   P 2 2 ;   D e m i r c i   U B ,   2 0 0 7 ,   E L E C T R O C H I M   A C T A ,   V 5 3 ,   P 7 3 7 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 7 . 0 7 . 0 4 1 ;   D e m i r c i   U B ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 2 ,   P 6 7 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 5 . 0 0 9 ;   D e m i r c i   U B ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 9 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 3 . 0 5 0 ;   D e m i r c i   U B ,   2 0 1 0 ,   S C I   C H I N A   C H E M ,   V 5 3 ,   P 1 8 7 0 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 2 6 - 0 1 0 - 4 0 8 1 - 1 ;   D e m i r c i   U B ,   2 0 0 9 ,   E N E R G   E N V I R O N   S C I ,   V 2 ,   P 6 2 7 ,   D O I   1 0 . 1 0 3 9 / b 9 0 0 5 9 5 a ;   D e m i r c i   U B ,   2 0 0 9 ,   C R   C H I M ,   V 1 2 ,   P 9 4 3 ,   D O I   1 0 . 1 0 1 6 / j . c r c i . 2 0 0 8 . 0 8 . 0 0 2 ;   D e m i r c i   U B ,   2 0 0 7 ,   A C T U A L   C H I M I Q U E ,   P 1 9 ;   D E N U A U L T   G ,   1 9 9 1 ,   J   E L E C T R O A N A L   C H E M ,   V 3 0 8 ,   P 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 0 7 2 8 ( 9 1 ) 8 5 0 5 6 - U ;   D e s h m u k h   K ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 5 9 ,   P 1 0 8 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 1 2 . 0 4 9 ;   D e s h m u k h   K . S a n t h a n a m K S V ,   2 0 0 4 ,   F U E L   C E L L   S C I   E N G   T E ,   P 5 0 3 ;   D i a k o v   V ,   2 0 0 7 ,   C H E M   E N G   S C I ,   V 6 2 ,   P 5 5 8 6 ,   D O I   1 0 . 1 0 1 6 / j . c e s . 2 0 0 6 . 1 2 . 0 0 6 ;   D i n g   X L ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 1 0 7 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 7 . 0 3 0 ;   D o n g   H ,   2 0 0 9 ,   J   P H Y S   C H E M   C ,   V 1 1 3 ,   P 6 0 3 ,   D O I   1 0 . 1 0 2 1 / j p 8 0 8 6 6 0 7 ;   D u a n   D . ,   2 0 0 9 ,   H U A G O N G   X U E B A O   C I E S C ,   V 6 0 ,   P 2 8 6 2 ;   D u a n   D H ,   2 0 1 0 ,   P R O G   C H E M ,   V 2 2 ,   P 1 7 2 0 ;   D u t e a n u   N ,   2 0 0 7 ,   J   A P P L   E L E C T R O C H E M ,   V 3 7 ,   P 1 0 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 0 0 - 0 0 7 - 9 3 6 0 - y ;   D u t e a n u   N ,   2 0 0 8 ,   R E V   C H I M - B U C H A R E S T ,   V 5 9 ,   P 1 3 6 1 ;   E L A M I N   B ,   1 9 7 9 ,   A N A L   C H I M   A C T A ,   V 1 0 7 ,   P 4 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 3 - 2 6 7 0 ( 0 1 ) 9 3 2 3 7 - 4 ;   E L D E R   J P ,   1 9 6 2 ,   T   F A R A D A Y   S O C ,   V 5 8 ,   P 1 8 5 2 ,   D O I   1 0 . 1 0 3 9 / t f 9 6 2 5 8 0 1 8 5 2 ;   E M E R Y   A R ,   1 9 5 8 ,   J   C H E M   P H Y S ,   V 2 8 ,   P 1 0 2 9 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 7 4 4 3 3 9 ;   E o m   K ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 0 ,   P 4 8 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 1 . 0 9 5 ;   E o m   K ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 5 2 2 0 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 3 . 0 0 5 ;   E r s o z   Y ,   2 0 0 7 ,   C H E M   E N G   J ,   V 1 3 4 ,   P 2 8 2 ,   D O I   1 0 . 1 0 1 6 / j . c e j . 2 0 0 7 . 0 3 . 0 5 9 ;   F e n g   R X ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 4 5 4 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 8 . 0 0 1 ;   F e n g   R X ,   2 0 0 7 ,   A C T A   P H Y S - C H I M   S I N ,   V 2 3 ,   P 9 3 2 ,   D O I   1 0 . 3 8 6 6 / P K U . W H X B 2 0 0 7 0 6 2 7 ;   F e n g   R X ,   2 0 0 5 ,   E L E C T R O C H E M   C O M M U N ,   V 7 ,   P 4 4 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 5 . 0 2 . 0 2 3 ;   F e r n a n d e s   R ,   2 0 0 9 ,   A P P L   C A T A L   B - E N V I R O N ,   V 9 2 ,   P 6 8 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t b . 2 0 0 9 . 0 7 . 0 1 9 ;   F e r n a n d e s   R ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 2 8 9 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 2 . 0 0 7 ;   F e r n a n d e s   R ,   2 0 0 9 ,   J   M O L   C A T A L   A - C H E M ,   V 2 9 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . m o l c a t a . 2 0 0 8 . 0 9 . 0 1 4 ;   F e r n a n d e s   V R ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 9 8 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 1 1 . 0 6 4 ;   F e r r e i r a   M J F ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 1 4 5 6 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 7 . 0 7 9 ;   F e r r e i r a   M J F ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 9 8 6 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 2 . 1 2 1 ;   F e r r e i r a   M J F ,   2 0 0 9 ,   J   N E W   M A T   E L E C T R   S Y S ,   V 1 2 ,   P 1 5 3 ;   F i l i n c h u k   Y ,   2 0 0 8 ,   E U R   J   I N O R G   C H E M ,   P 3 1 2 7 ,   D O I   1 0 . 1 0 0 2 / e j i c . 2 0 0 8 0 0 0 5 3 ;   F i l i n c h u k   Y ,   2 0 1 0 ,   I N O R G   C H E M ,   V 4 9 ,   P 5 2 8 5 ,   D O I   1 0 . 1 0 2 1 / i c 1 0 0 3 5 9 v ;   F i l i n c h u k   Y ,   2 0 0 8 ,   Z   K R I S T A L L O G R ,   V 2 2 3 ,   P 6 4 9 ,   D O I   1 0 . 1 5 2 4 / z k r i . 2 0 0 8 . 1 0 2 1 ;   F i n k e l s t e i n   D A ,   2 0 0 9 ,   J   P H Y S   C H E M   C ,   V 1 1 3 ,   P 1 9 7 0 0 ,   D O I   1 0 . 1 0 2 1 / j p 9 0 0 9 3 3 c ;   F i s c h e r   P ,   2 0 0 4 ,   M A T E R   S C I   F O R U M ,   V 4 4 3 - 4 ,   P 2 8 7 ;   G a l l i   S ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 7 3 4 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 3 . 1 4 4 ;   G A R D I N E R   J A ,   1 9 6 5 ,   I N O R G   C H E M ,   V 4 ,   P 1 2 0 8 ,   D O I   1 0 . 1 0 2 1 / i c 5 0 0 3 0 a 0 2 6 ;   G A R D I N E R   J A ,   1 9 6 5 ,   J   A M   C H E M   S O C ,   V 8 7 ,   P 1 6 9 2 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 0 8 6 a 0 1 3 ;   G a r r o n   A ,   2 0 1 0 ,   A P P L   C A T A L   A - G E N ,   V 3 7 8 ,   P 9 0 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t a . 2 0 1 0 . 0 2 . 0 0 3 ;   G a r r o n   A ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 1 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 1 1 . 0 2 7 ;   G a r r o n i   S ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 5 4 3 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 3 . 0 0 4 ;   G e n g   X Y ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 1 5 8 3 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 9 . 0 3 6 ;   G e n g   X Y ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 6 2 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 9 . 0 1 0 ;   G e r v a s i o   D ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 9 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 0 1 . 0 5 4 ;   G i s l o n   P ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 9 2 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 1 0 5 ;   G o n c a l v e s   A ,   2 0 0 8 ,   C O M P U T - A I D E D   C H E M   E N ,   V 2 5 ,   P 7 5 7 ;   G o u d o n   J P ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 1 0 7 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 7 . 0 2 3 ;   G r o c h a l a   W ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 4 0 4 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 5 . 0 1 . 1 3 5 ;   G r o c h a l a   W ,   2 0 0 4 ,   C H E M   R E V ,   V 1 0 4 ,   P 1 2 8 3 ,   D O I   1 0 . 1 0 2 1 / c r 0 3 0 6 9 1 s ;   G u   L F ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 3 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 5 . 0 0 5 ;   G u e l l a   G ,   2 0 0 7 ,   J   P H Y S   C H E M   C ,   V 1 1 1 ,   P 1 8 7 4 4 ,   D O I   1 0 . 1 0 2 1 / j p 0 7 5 9 5 2 7 ;   G u e l l a   G ,   2 0 0 6 ,   J   P H Y S   C H E M   B ,   V 1 1 0 ,   P 1 7 0 2 4 ,   D O I   1 0 . 1 0 2 1 / j p 0 6 3 3 6 2 n ;   G u o   R ,   2 0 0 9 ,   X I Y O U   J I N S H U   C H I N   J ,   V 3 3 ,   P 5 6 9 ;   G y e n g e   E ,   2 0 0 4 ,   E L E C T R O C H I M   A C T A ,   V 4 9 ,   P 9 6 5 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a . 2 0 0 3 . 1 0 . 0 0 8 ;   G y e n g e   E ,   2 0 0 6 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 3 ,   p A 1 5 0 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 1 3 1 8 3 1 ;   G y e n g e   E L ,   1 9 9 8 ,   J   A P P L   E L E C T R O C H E M ,   V 2 8 ,   P 1 1 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 3 4 0 7 3 0 9 4 5 4 ;   G y e n g e   E L ,   2 0 0 7 ,   E L E C T R O C H I M   A C T A ,   V 5 2 ,   P 5 1 2 2 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 6 . 1 2 . 0 1 9 ;   H a g e m a n n   H ,   2 0 0 4 ,   J   A L L O Y   C O M P D ,   V 3 6 3 ,   P 1 2 6 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 8 3 8 8 ( 0 3 ) 0 0 4 6 8 - 7 ;   H a g e m a n n   H ,   2 0 1 0 ,   D A L T O N   T ,   V 3 9 ,   P 6 0 0 6 ,   D O I   1 0 . 1 0 3 9 / b 9 2 7 0 0 2 g ;   H a i j u n   W ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 2 6 4 8 ,   D O I   D O I   1 0 . 1 0 1 6 / J . I J H Y D E N E . 2 0 0 9 . 0 4 . 0 2 0 ;   H a n   M K ,   2 0 0 7 ,   M A T E R   S C I   F O R U M ,   V 5 3 9 - 5 4 3 ,   P 2 2 9 5 ;   H a n n a u e r   J ,   2 0 1 0 ,   E N E R G   E N V I R O N   S C I ,   V 3 ,   P 1 7 9 6 ,   D O I   1 0 . 1 0 3 9 / c 0 e e 0 0 0 2 3 j ;   H a o   W C ,   2 0 1 0 ,   C H E M   J   C H I N E S E   U ,   V 3 1 ,   P 1 2 1 3 ;   H a r t m a n   M R ,   2 0 0 7 ,   J   S O L I D   S T A T E   C H E M ,   V 1 8 0 ,   P 1 2 9 8 ,   D O I   [ 1 0 . 1 0 1 6 / j . j s s c . 2 0 0 7 . 0 1 . 0 3 1 ,   1 0 . 1 0 1 6 / j . j s s s c . 2 0 0 7 . 0 1 . 0 3 1 ] ;   H A R V E Y   K B ,   1 9 7 1 ,   J   C H E M   P H Y S ,   V 5 5 ,   P 4 3 9 6 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 6 7 6 7 6 5 ;   H a w k i n s   S ,   2 0 0 6 ,   2 1   U K S H E C   P O L   S T U D   I ;   H o n g   J ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 1 ,   P 7 5 3 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 5 . 0 1 8 ;   H r i s t o v   G ,   2 0 0 8 ,   B U L G   C H E M   C O M M U N ,   V 4 0 ,   P 3 0 6 ;   H s u e h   C L ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 7 ,   P 4 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 1 1 . 0 9 6 ;   H s u e h   C L ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 1 7 1 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 1 2 . 0 3 6 ;   H u a   D . ,   2 0 0 3 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 8 ,   P 1 0 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 0 2 ) 0 0 2 3 5 - 5 ;   H u a n g   Y Q ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 7 1 1 0 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 0 4 6 ;   H u n g   A J ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 6 2 0 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 7 . 1 0 9 ;   I N D I G   M E ,   1 9 6 2 ,   J   E L E C T R O C H E M   S O C ,   V 1 0 9 ,   P 1 1 0 4 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 4 2 5 2 4 7 ;   I n g e r s o l l   J C ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 3 ,   P 4 5 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 4 . 0 4 0 ;   [ A n o n y m o u s ] ,   2 0 0 2 ,   K E Y   W O R L D   E N   S T A T   I E ;   I n t e r n a t i o n a l   E n e r g y   A g e n c y ,   2 0 0 1 ,   W O R L D   E N   O U T L   2 0 0 1   I ;   [ A n o n y m o u s ] ,   2 0 0 3 ,   K E Y   W O R L D   E N   S T A T   I E ;   I o t o v   P I ,   2 0 0 9 ,   E L E C T R O C H I M   A C T A ,   V 5 4 ,   P 7 2 3 6 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 9 . 0 7 . 0 3 2 ;   J a m a l u d i n   A ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 1 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 7 . 0 3 7 ;   J a m a r d   R ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 6 ,   P 2 8 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 1 0 . 0 3 6 ;   J a m a r d   R ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 9 3 ,   P 7 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 3 . 0 5 7 ;   J a v e d   U ,   2 0 0 9 ,   E N E R G   F U E L ,   V 2 3 ,   P 4 0 8 ,   D O I   1 0 . 1 0 2 1 / e f 8 0 0 5 4 1 7 ;   J e n g   K T ,   2 0 0 7 ,   S E N S O R   A C T U A T   B - C H E M ,   V 1 2 5 ,   P 2 7 8 ,   D O I   1 0 . 1 0 1 6 / j . s n b . 2 0 0 7 . 0 2 . 0 2 0 ;   J e o n g   S U ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 1 7 4 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 1 1 . 0 3 6 ;   J e o n g   S U ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 4 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 1 2 . 0 4 6 ;   J i a n g   H L ,   2 0 1 0 ,   C H E M S U S C H E M ,   V 3 ,   P 5 4 1 ,   D O I   1 0 . 1 0 0 2 / c s s c . 2 0 1 0 0 0 0 2 3 ;   K a n t u r k   A ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 3 9 8 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 4 . 0 4 7 ;   K A U F M A N   C M ,   1 9 8 5 ,   J   C H E M   S O C   D A L T O N ,   P 3 0 7 ,   D O I   1 0 . 1 0 3 9 / d t 9 8 5 0 0 0 0 3 0 7 ;   K a w a s h i m a   Y ,   2 0 0 3 ,   M O L   P H Y S ,   V 1 0 1 ,   P 6 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 6 8 9 7 0 2 1 0 0 0 0 2 6 6 6 5 ;   K e c e l i   E ,   2 0 0 8 ,   J   M O L   C A T A L   A - C H E M ,   V 2 8 6 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / j . m o l c a t a . 2 0 0 8 . 0 2 . 0 0 8 ;   K e l l y   M T ,   2 0 0 5 ,   A C S   D I V   F U E L   C H E M   P R ,   V 5 0 ,   P 4 4 4 ;   K e m m i t t   T ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 5 7 2 6 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 5 . 1 0 8 ;   K E T E L A A R   J A A ,   1 9 6 1 ,   S P E C T R O C H I M   A C T A ,   V 1 7 ,   P 1 2 4 0 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 1 - 1 9 5 1 ( 6 1 ) 8 0 0 4 6 - 5 ;   K h a d k e   P S ,   2 0 0 9 ,   E N E R G I E S ,   V 2 ,   P 1 9 0 ,   D O I   1 0 . 3 3 9 0 / e n 2 0 2 0 0 1 9 0 ;   K i m   C ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 0 ,   P 1 5 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 1 . 0 4 2 ;   K i m   C ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 0 ,   P 1 1 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 1 . 0 8 2 ;   K i m   D R ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 2 6 2 2 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 1 2 . 0 9 7 ;   K i m   H J ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 2 2 3 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 8 . 0 2 7 ;   K i m   J H ,   2 0 0 4 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 1 ,   p A 1 0 3 9 ,   D O I   1 0 . 1 1 4 9 / 1 . 1 7 5 6 3 5 1 ;   K i m   J H ,   2 0 0 4 ,   J   A L L O Y   C O M P D ,   V 3 7 9 ,   P 2 2 2 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 4 . 0 2 . 0 0 9 ;   K i m   J H ,   2 0 0 4 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 9 ,   P 2 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 0 3 ) 0 0 1 2 8 - 9 ;   K i m   J H ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 4 0 1 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 2 . 0 2 1 ;   K i m   J H ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 8 8 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 8 . 1 0 2 ;   K i m   K C ,   2 0 1 0 ,   J   P H Y S   C H E M   C ,   V 1 1 4 ,   P 6 7 8 ,   D O I   1 0 . 1 0 2 1 / j p 9 0 9 1 2 0 p ;   K i m   S J ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 0 ,   P 4 1 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 3 . 0 8 3 ;   K i m   T ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 2 8 7 0 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 8 . 1 0 2 ;   K i r a n   V a n k a y a l a ,   2 0 0 9 ,   J o u r n a l   o f   t h e   I n d i a n   I n s t i t u t e   o f   S c i e n c e ,   V 8 9 ;   K i r a n   V ,   2 0 1 0 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 7 ,   p B 1 2 0 1 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 4 4 2 3 7 2 ;   K o j i m a   Y ,   2 0 0 4 ,   J   P O W E R   S O U R C E S ,   V 1 3 5 ,   P 3 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 0 3 . 0 7 9 ;   K o j i m a   Y ,   2 0 0 2 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 7 ,   P 1 0 2 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 0 2 ) 0 0 0 1 4 - 9 ;   K o j i m a   Y ,   2 0 0 4 ,   J   P O W E R   S O U R C E S ,   V 1 2 5 ,   P 2 2 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 3 ) 0 0 8 2 7 - 9 ;   K o j i m a   Y ,   2 0 0 3 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 8 ,   P 9 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 0 2 ) 0 0 1 7 3 - 8 ;   K o m o v a   O V ,   2 0 0 8 ,   C A T A L   T O D A Y ,   V 1 3 8 ,   P 2 6 0 ,   D O I   1 0 . 1 0 1 6 / j . c a t t o d . 2 0 0 8 . 0 6 . 0 3 0 ;   K o n g   L Y ,   2 0 0 9 ,   E N E R G   F U E L ,   V 2 3 ,   P 5 0 4 9 ,   D O I   1 0 . 1 0 2 1 / e f 9 0 0 6 1 9 y ;   K o n g   V C Y ,   1 9 9 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 4 ,   P 6 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 9 8 ) 0 0 1 1 3 - X ;   K o n o p l e v   V N ,   1 9 7 1 ,   R U S S   C H E M   B ,   V 2 0 ,   P 1 3 6 ;   K r i s h n a n   P ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 3 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 1 2 . 0 0 7 ;   K r i s h n a n   P ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 2 ,   P 1 0 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 3 . 0 6 4 ;   K r i s h n a n   P ,   2 0 0 9 ,   A P P L   C A T A L   B - E N V I R O N ,   V 8 6 ,   P 1 3 7 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t b . 2 0 0 8 . 0 8 . 0 0 5 ;   K r i s h n a n   P ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 7 0 9 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 0 2 6 ;   K r i s h n a n   P ,   2 0 0 7 ,   A P P L   C A T A L   B - E N V I R O N ,   V 7 7 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t b . 2 0 0 7 . 0 7 . 0 2 4 ;   K R Y N I T S K Y   J A ,   1 9 4 8 ,   A N A L   C H E M ,   V 2 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 2 1 / a c 6 0 0 1 6 a 0 1 0 ;   K u m a r   R S ,   2 0 0 5 ,   A P P L   P H Y S   L E T T ,   V 8 7 ,   D O I   1 0 . 1 0 6 3 / 1 . 2 1 5 8 5 0 5 ;   L a k e r n a n   J B ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 2 ,   P 7 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 0 7 . 0 2 2 ;   L a m   V W S ,   2 0 0 8 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 5 ,   p B 1 1 5 5 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 9 7 5 1 9 1 ;   L a m   V W S ,   2 0 0 9 ,   J   A P P L   E L E C T R O C H E M ,   V 3 9 ,   P 1 7 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 0 0 - 0 0 9 - 9 8 7 5 - 5 ;   L a n c a s t e r   M . ,   2 0 0 2 ,   G R E E N   C H E M   I N T R O   T E X ;   L a r i c h e v   Y V ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 6 5 0 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 4 . 0 4 8 ;   L a v e r s e n n e   L ,   2 0 0 8 ,   J   T H E R M   A N A L   C A L O R I M ,   V 9 4 ,   P 7 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 7 3 - 0 0 8 - 9 0 7 3 - 4 ;   L e e   H M ,   2 0 0 8 ,   R E S   C H E M   I N T E R M E D I A T ,   V 3 4 ,   P 7 8 7 ;   L e e   Y ,   2 0 0 8 ,   J   I N D   E N G   C H E M ,   V 1 4 ,   P 6 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j i e c . 2 0 0 8 . 0 2 . 0 1 2 ;   L E V Y   A ,   1 9 6 0 ,   I N D   E N G   C H E M ,   V 5 2 ,   P 2 1 1 ,   D O I   1 0 . 1 0 2 1 / i e 5 0 6 0 3 a 0 2 2 ;   L i   H W ,   2 0 0 7 ,   J   A L L O Y   C O M P D ,   V 4 4 6 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 7 . 0 2 . 1 5 6 ;   L i   L ,   2 0 1 0 ,   A C T A   P H Y S - C H I M   S I N ,   V 2 6 ,   P 1 5 7 5 ,   D O I   1 0 . 3 8 6 6 / P K U . W H X B 2 0 1 0 0 6 0 9 ;   L i   S ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 7 2 0 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 1 0 . 0 5 . 0 1 6 ;   L i   Z P ,   2 0 0 7 ,   J   A L L O Y   C O M P D ,   V 4 3 7 ,   P 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 6 . 0 7 . 1 1 9 ;   L i   Z P ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 3 ,   P 5 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 9 . 0 3 7 ;   L i   Z P ,   2 0 0 3 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 0 ,   p A 8 6 8 ,   D O I   1 0 . 1 1 4 9 / 1 . 1 5 7 6 7 6 7 ;   L i   Z P ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 4 0 4 ,   P 6 4 8 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 5 . 0 1 . 1 3 0 ;   L i   Z P ,   2 0 0 4 ,   J   P O W E R   S O U R C E S ,   V 1 2 6 ,   P 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 3 . 0 8 . 0 1 7 ;   L i   Z P ,   2 0 0 3 ,   J   A L L O Y   C O M P D ,   V 3 5 6 ,   P 4 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 8 3 8 8 ( 0 2 ) 0 1 2 4 1 - 0 ;   L i   Z P ,   2 0 0 3 ,   J   A L L O Y   C O M P D ,   V 3 4 9 ,   P 2 3 2 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 8 3 8 8 ( 0 2 ) 0 0 8 7 2 - 1 ;   L i a n g   J Y ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 4 0 4 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 5 . 0 8 2 ;   L i a n g   Y ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 3 0 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 7 . 0 0 8 ;   L i a n g   Y ,   2 0 1 0 ,   J   A L L O Y   C O M P D ,   V 4 9 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 9 . 1 0 . 1 8 3 ;   L i a n g   Y ,   2 0 0 9 ,   P R O G   C H E M ,   V 2 1 ,   P 2 2 1 9 ;   L i a n g   Z H ,   2 0 0 6 ,   C H I N E S E   J   A N A L   C H E M ,   V 3 4 ,   p S 1 4 5 ;   L I C H T E N S T E I N   I E ,   1 9 6 6 ,   J   F R A N K L I N   I ,   V 2 8 1 ,   P 4 8 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 0 0 3 2 ( 6 6 ) 9 0 4 3 5 - 2 ;   L i d e   D . R . ,   2 0 0 2 ,   C R C   H D B   C H E M   P H Y S   2 0 ;   L i u   B H ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 3 ,   P 1 5 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 4 . 0 7 9 ;   L i u   B H ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 0 ,   P 5 3 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 2 . 0 5 8 ;   L i u   B H ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 1 3 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 1 2 . 0 3 3 ;   L i u   B H ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 8 7 ,   P 5 2 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 1 1 . 0 3 2 ;   L i u   B H ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 8 7 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 1 1 . 0 1 7 ;   L i u   B H ,   2 0 0 3 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 0 ,   p A 3 9 8 ,   D O I   1 0 . 1 1 4 9 / 1 . 1 5 5 3 7 8 5 ;   L i u   B H ,   2 0 0 5 ,   E L E C T R O C H I M   A C T A ,   V 5 0 ,   P 3 7 1 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 5 . 0 1 . 0 1 8 ;   L i u   B H ,   2 0 0 4 ,   E L E C T R O C H I M   A C T A ,   V 4 9 ,   P 3 0 9 7 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 4 . 0 2 . 0 2 3 ;   L i u   B H ,   2 0 0 6 ,   J   A L L O Y   C O M P D ,   V 4 1 5 ,   P 2 8 8 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 5 . 0 8 . 0 1 9 ;   L i u   B H ,   2 0 0 8 ,   T H E R M O C H I M   A C T A ,   V 4 7 1 ,   P 1 0 3 ,   D O I   1 0 . 1 0 1 6 / j . t c a . 2 0 0 8 . 0 3 . 0 0 9 ;   L i u   B H ,   2 0 0 8 ,   E N E R G   F U E L ,   V 2 2 ,   P 1 8 9 4 ,   D O I   1 0 . 1 0 2 1 / e f 7 0 0 7 8 7 s ;   L i u   B H ,   2 0 0 8 ,   J   A L L O Y   C O M P D ,   V 4 5 4 ,   P 2 8 0 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 6 . 1 2 . 0 3 4 ;   L i u   B H ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 5 ,   P 2 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 9 . 0 4 7 ;   L i u   B H ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 4 ,   P 1 0 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 9 . 1 0 7 ;   L i u   B H ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 9 4 3 6 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 9 . 0 7 8 ;   L i u   B H ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 7 6 ,   p L 1 6 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 8 . 0 9 . 0 5 7 ;   L i u   B H ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 6 8 ,   P 4 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 8 . 0 1 . 0 2 3 ;   L i u   B H ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 7 4 ,   P 3 2 1 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 8 . 0 6 . 1 1 4 ;   L i u   B H ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 7 4 ,   p L 6 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 8 . 0 6 . 0 4 0 ;   L i u   B H ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 7 3 8 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 0 5 5 ;   L i u   B H ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 1 2 5 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 8 . 0 6 3 ;   L i u   C H ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 4 0 2 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 2 . 0 3 8 ;   L i u   C H ,   2 0 0 9 ,   A P P L   C A T A L   B - E N V I R O N ,   V 9 1 ,   P 3 6 8 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t b . 2 0 0 9 . 0 6 . 0 0 3 ;   L i u   C H ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 2 1 5 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 1 2 . 0 5 9 ;   L i u   H ,   2 0 0 9 ,   S H E N Y A N G   G O N G Y E   D A X U ,   V 3 1 ,   P 1 8 2 ;   L i u   R S ,   2 0 0 8 ,   J   P H Y S   C H E M   B ,   V 1 1 2 ,   P 4 8 7 0 ,   D O I   1 0 . 1 0 2 1 / j p 0 7 5 5 9 2 n ;   L i u   Y ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 1 8 5 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 1 0 . 0 1 6 ;   L i u   Y ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 8 8 ,   P 2 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 9 . 0 8 . 0 7 9 ;   L i u   Z L ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 6 ,   P 3 0 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 9 . 1 1 4 ;   L o   C T F ,   2 0 0 7 ,   I N D   E N G   C H E M   R E S ,   V 4 6 ,   P 5 4 7 8 ,   D O I   1 0 . 1 0 2 1 / i e 0 6 0 8 8 6 1 ;   L u o   N ,   2 0 0 6 ,   A I P   C O N F   P R O C ,   V 8 1 3 ,   P 2 0 9 ;   L u o   N ,   2 0 0 7 ,   5   I N T   E N   C O N V   E N G   C ,   V 1 ,   P 4 5 6 ;   L u o   N ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 3 5 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 6 . 0 5 1 ;   L u o   N ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 6 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 8 . 0 9 0 ;   L u x   S ,   2 0 1 0 ,   J   F U E L   C E L L   S C I   T E C H ,   V 7 ,   D O I   1 0 . 1 1 1 5 / 1 . 3 1 7 6 2 1 8 ;   L Y T T L E   D A ,   1 9 5 2 ,   A N A L   C H E M ,   V 2 4 ,   P 1 8 4 3 ,   D O I   1 0 . 1 0 2 1 / a c 6 0 0 7 1 a 0 4 1 ;   M a   H ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 7 4 ,   P 5 8 4 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 8 . 0 7 . 0 0 5 ;   M a   J ,   2 0 0 8 ,   F U E L   C E L L S ,   V 8 ,   P 3 9 4 ,   D O I   1 0 . 1 0 0 2 / f u c e . 2 0 0 8 0 0 0 4 8 ;   M a   J ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 4 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 1 0 . 0 2 . 0 3 4 ;   M a   J ,   2 0 1 0 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 4 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 0 9 . 0 8 . 0 0 2 ;   M a   J F ,   2 0 0 8 ,   E L E C T R O C H E M   C O M M U N ,   V 1 0 ,   P 1 0 0 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 7 . 1 1 . 0 0 6 ;   M a   J F ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 2 ,   P 2 2 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 7 . 0 3 1 ;   M a l v a d k a r   N ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 2 ,   P 3 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 3 . 0 6 0 ;   M a n c h e s t e r   F .   D . ,   2 0 0 0 ,   P H A S E   D I A G R A M S   B I N A R ;   M a o   J F ,   2 0 0 9 ,   J   P H Y S   C H E M   C ,   V 1 1 3 ,   P 1 0 8 1 3 ,   D O I   1 0 . 1 0 2 1 / j p 8 0 8 2 6 9 v ;   M a o   J F ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 7 9 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 9 . 0 1 . 0 1 2 ;   M a r r e r o - A l f o n s o   E Y ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 4 7 1 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 7 . 0 6 6 ;   M a r r e r o - A l f o n s o   E Y ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 4 7 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 8 . 0 1 4 ;   M a r r e r o - A l f o n s o   E Y ,   2 0 0 9 ,   I N D   E N G   C H E M   R E S ,   V 4 8 ,   P 3 7 0 3 ,   D O I   1 0 . 1 0 2 1 / i e 8 0 1 6 2 2 5 ;   M a r t e l l i   P ,   2 0 1 0 ,   J   P H Y S   C H E M   C ,   V 1 1 4 ,   P 7 1 7 3 ,   D O I   1 0 . 1 0 2 1 / j p 9 0 9 3 4 1 z ;   M a r t i n s   J I ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 5 ,   P 2 4 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 9 . 0 2 8 ;   M a r t i n s   J I ,   2 0 0 7 ,   E L E C T R O C H I M   A C T A ,   V 5 2 ,   P 6 4 4 3 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 7 . 0 4 . 0 6 6 ;   M A R Y N I C K   D S ,   1 9 7 2 ,   I N O R G   C H E M ,   V 1 1 ,   P 8 2 0 ,   D O I   1 0 . 1 0 2 1 / i c 5 0 1 1 0 a 0 3 3 ;   M a s j e d i   M ,   2 0 1 0 ,   I N O R G   C H I M   A C T A ,   V 3 6 3 ,   P 1 7 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i c a . 2 0 1 0 . 0 3 . 0 2 3 ;   M a s j e d i   M ,   2 0 0 9 ,   J   M O L   C A T A L   A - C H E M ,   V 3 1 0 ,   P 5 9 ,   D O I   1 0 . 1 0 1 6 / j . m o l c a t a . 2 0 0 9 . 0 5 . 0 2 2 ;   M c   L a f f e r t y   J ,   2 0 1 0 ,   E L E C T R O C H I M   A C T A ,   V 5 6 ,   P 1 0 8 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 1 0 . 0 9 . 0 4 1 ;   M c L a f f e r t y   J .   B . ,   2 0 0 7 ,   E C S   T ,   V 2 ,   P 1 9 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 8 1 5 9 4 6 ;   M E M O N   M I ,   1 9 8 2 ,   J   M O L   S T R U C T ,   V 8 0 ,   P 1 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 2 8 6 0 ( 8 2 ) 8 7 2 1 5 - 3 ;   M E S M E R   R E ,   1 9 6 2 ,   I N O R G   C H E M ,   V 1 ,   P 6 0 8 ,   D O I   1 0 . 1 0 2 1 / i c 5 0 0 0 3 a 0 3 1 ;   M e t i n   O ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 1 7 0 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 1 1 . 0 2 5 ;   M e t i n   O ,   2 0 0 8 ,   J   M O L   C A T A L   A - C H E M ,   V 2 9 5 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / j . m o l c a t a . 2 0 0 8 . 0 8 . 0 1 4 ;   M e t i n   O ,   2 0 0 9 ,   E N E R G   F U E L ,   V 2 3 ,   P 3 5 1 7 ,   D O I   1 0 . 1 0 2 1 / e f 9 0 0 1 7 1 t ;   M i l e y   G H ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 5 ,   P 5 0 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 1 0 . 0 6 2 ;   M i l i a u s k a s   D ,   2 0 0 8 ,   M A T E R   S C I - M E D Z G ,   V 1 4 ,   P 2 0 ;   M i n k i n a   V G ,   2 0 0 8 ,   R U S S   J   A P P L   C H E M + ,   V 8 1 ,   P 3 8 0 ,   D O I   1 0 . 1 1 3 4 / S 1 0 7 0 4 2 7 2 0 8 0 3 0 0 5 1 ;   M i n k i n a   V G ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 5 6 2 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 7 . 0 3 7 ;   M I R K I N   M V ,   1 9 9 2 ,   J   E L E C T R O C H E M   S O C ,   V 1 3 9 ,   P 2 2 1 2 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 2 2 1 2 0 4 ;   M I R K I N   M V ,   1 9 9 1 ,   A N A L   C H E M ,   V 6 3 ,   P 5 3 2 ,   D O I   1 0 . 1 0 2 1 / a c 0 0 0 0 5 a 0 3 0 ;   M i t o v   M ,   2 0 0 7 ,   J   M A T E R   S C I ,   V 4 2 ,   P 3 3 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 5 3 - 0 0 6 - 0 7 8 6 - 0 ;   M i t o v   M ,   2 0 0 9 ,   E N V I R O N   C H E M   L E T T ,   V 7 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 3 1 1 - 0 0 8 - 0 1 5 3 - 2 ;   M o o n   G Y ,   2 0 0 8 ,   J   I N D   E N G   C H E M ,   V 1 4 ,   P 9 4 ,   D O I   1 0 . 1 0 1 6 / j . j i e c . 2 0 0 7 . 0 8 . 0 0 3 ;   M o o n   G Y ,   2 0 1 0 ,   K O R E A N   J   C H E M   E N G ,   V 2 7 ,   P 4 7 4 ,   D O I   1 0 . 1 0 0 7 / s 1 1 8 1 4 - 0 1 0 - 0 0 7 2 - 3 ;   M u r t o m a a   M . ,   1 9 9 9 ,   P O W D E R   H A N D L   P ,   V 1 1 ,   P 8 7 ;   M u r u g e s a n   S ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 8 7 ,   P 2 1 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 1 0 . 0 6 0 ;   N A H U M   L S ,   1 9 7 2 ,   A N A L   C H E M ,   V 4 4 ,   P 5 9 3 ,   D O I   1 0 . 1 0 2 1 / a c 6 0 3 1 1 a 0 5 3 ;   N a k a m o r i   Y ,   2 0 0 8 ,   J   P H Y S   C H E M   S O L I D S ,   V 6 9 ,   P 2 2 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j p c s . 2 0 0 8 . 0 4 . 0 1 7 ;   N a k a m o r i   Y ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 5 5 ,   P 4 4 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 0 4 . 0 1 3 ;   N i   X ,   2 0 1 0 ,   Z H O N G G U O   X I T U   X U E B A O ,   V 2 8 ,   P 5 0 1 ;   N i   X M ,   2 0 1 0 ,   E L E C T R O C H E M   C O M M U N ,   V 1 2 ,   P 7 1 0 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 1 0 . 0 3 . 0 1 4 ;   N I K O L I C   S D ,   1 9 9 3 ,   T A L A N T A ,   V 4 0 ,   P 1 2 8 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 9 - 9 1 4 0 ( 9 3 ) 8 0 1 9 9 - 2 ;   N o r i t a k e   T ,   2 0 0 6 ,   A P P L   P H Y S   A - M A T E R ,   V 8 3 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 3 9 - 0 0 6 - 3 5 0 0 - 9 ;   N o t h   H . ,   1 9 6 1 ,   A N G E W   C H E M ,   V 7 3 ,   P 3 7 1 ,   D O I   1 0 . 1 0 0 2 / a n g e . 1 9 6 1 0 7 3 1 1 0 6 ;   O r i m o   S ,   2 0 0 4 ,   M A T   S C I   E N G   B - S O L I D ,   V 1 0 8 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / j . m s e b . 2 0 0 3   1 0 . 0 4 5 ;   O r i m o   S I ,   2 0 0 7 ,   C H E M   R E V ,   V 1 0 7 ,   P 4 1 1 1 ,   D O I   1 0 . 1 0 2 1 / c r 0 5 0 1 8 4 6 ;   O r o n z i o   R ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 4 5 5 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 1 . 0 5 6 ;   O z k a r   S ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 4 0 4 ,   P 7 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 4 . 1 0 . 0 8 4 ;   O z k a r   S ,   2 0 0 9 ,   A P P L   S U R F   S C I ,   V 2 5 6 ,   P 1 2 7 2 ,   D O I   1 0 . 1 0 1 6 / j . a p s u s c . 2 0 0 9 . 1 0 . 0 3 6 ;   P a r k   D ,   2 0 0 9 ,   I E E J   T   P O W E R   E N E R G Y ,   V 1 2 9 ,   P 1 2 5 9 ;   P a r k   E H ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 2 9 8 2 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 3 . 0 2 9 ;   P a r k   J H ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 1 8 4 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 1 . 0 0 3 ;   P a r k   K T ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 2 ,   P 1 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 7 . 0 4 0 ;   P a r k   S Y ,   2 0 1 0 ,   C U R R   A P P L   P H Y S ,   V 1 0 ,   p S 4 0 ,   D O I   1 0 . 1 0 1 6 / j . c a p . 2 0 0 9 . 1 1 . 0 3 8 ;   P a r r o u r   G ,   2 0 1 0 ,   E L E C T R O C H I M   A C T A ,   V 5 5 ,   P 9 1 1 3 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 1 0 . 0 7 . 0 8 6 ;   P a t e l   N ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 2 8 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 7 . 0 1 8 ;   P a t e l   N ,   2 0 0 7 ,   A P P L   S U R F   S C I ,   V 2 5 4 ,   P 1 3 0 7 ,   D O I   1 0 . 1 0 1 6 / j . a p s u s c . 2 0 0 7 . 0 9 . 0 0 3 ;   P a t e l   N ,   2 0 0 7 ,   A P P L   C A T A L   A - G E N ,   V 3 2 3 ,   P 1 8 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t a . 2 0 0 7 . 0 1 . 0 5 3 ;   P a t e l   N ,   2 0 1 0 ,   T H I N   S O L I D   F I L M S ,   V 5 1 8 ,   P 4 7 7 9 ,   D O I   1 0 . 1 0 1 6 / j . t s f . 2 0 1 0 . 0 1 . 0 2 9 ;   P a t e l   N ,   2 0 1 0 ,   J   C A T A L ,   V 2 7 1 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / j . j c a t . 2 0 1 0 . 0 2 . 0 1 4 ;   P a t e l   N ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 8 8 ,   P 4 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 1 1 . 1 2 1 ;   P a t e l   N ,   2 0 0 8 ,   J   P H Y S   C H E M   C ,   V 1 1 2 ,   P 6 9 6 8 ,   D O I   1 0 . 1 0 2 1 / j p 7 1 0 4 1 9 2 ;   P E C S O K   R L ,   1 9 5 3 ,   J   A M   C H E M   S O C ,   V 7 5 ,   P 2 8 6 2 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 1 0 8 a 0 2 1 ;   P e i   F ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 8 1 3 6 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 1 . 0 1 6 ;   P e n a - A l o n s o   R ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 5 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 1 2 . 0 4 3 ;   P h i l i p s   M F ,   2 0 1 0 ,   J   N A N O E L E C T R O N   O P T O E ,   V 5 ,   P 1 7 5 ,   D O I   1 0 . 1 1 6 6 / j n o . 2 0 1 0 . 1 0 8 8 ;   P i n t o   A M F R ,   2 0 0 6 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 1 ,   P 1 3 4 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 5 . 1 1 . 0 1 5 ;   P i s k i n   M B ,   2 0 0 9 ,   E N E R G Y ,   V 3 4 ,   P 4 7 7 3 ;   P o n c e - d e - L e o n   C ,   2 0 0 6 ,   E L E C T R O C H E M   C O M M U N ,   V 8 ,   P 1 6 5 5 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 6 . 0 7 . 0 3 1 ;   P o n c e   C . ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 4 ,   P 4 4 1 ;   P o n c e   D e   L e o n   C ,   2 0 0 8 ,   E C S   T ,   V 1 5 ,   P 2 5 ;   [ A n o n y m o u s ] ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ;   P o u r b a i x   M . ,   1 9 7 4 ,   A T L A S   E L E C T R O C H E M I C A ;   P o z i o   A ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 8 . 0 2 4 ;   P r i c e   L ,   2 0 0 6 ,   S E C T O R A L   T R E N D S   G L O B ;   P R I C E   W C ,   1 9 4 9 ,   J   C H E M   P H Y S ,   V 1 7 ,   P 1 0 4 4 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 7 4 7 1 1 0 ;   P r o s i n i   P P ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 2 2 3 4 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 7 . 0 9 4 ;   Q i n   H Y ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 9 0 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 8 . 0 4 7 ;   Q i n   H Y ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 8 9 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 8 . 0 5 2 ;   Q i n   H Y ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 9 2 ,   P 3 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 3 . 0 0 6 ;   Q i n   H Y ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 2 8 6 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 5 . 0 0 4 ;   Q i n   H Y ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 3 1 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 1 2 . 0 0 1 ;   R a k a p   M ,   2 0 0 9 ,   A P P L   C A T A L   B - E N V I R O N ,   V 9 1 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / j . a p c a t b . 2 0 0 9 . 0 5 . 0 1 4 ;   R a m a n   R K ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 2 ,   P 1 0 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 7 . 0 5 9 ;   R a m a n   R K ,   2 0 0 7 ,   F U E L   C E L L S ,   V 7 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / f u c e . 2 0 0 6 0 0 0 2 3 ;   R a m a n   R K ,   2 0 0 5 ,   J   A P P L   E L E C T R O C H E M ,   V 3 5 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 0 0 - 0 0 5 - 9 0 2 1 - y ;   R a m a n   R K ,   2 0 0 4 ,   E L E C T R O C H E M   S O L I D   S T ,   V 7 ,   p A 4 8 8 ,   D O I   1 0 . 1 1 4 9 / 1 . 1 8 1 7 8 5 5 ;   R a n d   D A J ,   2 0 0 4 ,   R S C   C L E A N   T E C H N O L O G Y ;   R e m h o f   A ,   2 0 1 0 ,   P H Y S   R E V   B ,   V 8 1 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v B . 8 1 . 2 1 4 3 0 4 ;   R e m h o f   A ,   2 0 0 9 ,   J   P H Y S   C H E M   C ,   V 1 1 3 ,   P 1 6 8 3 4 ,   D O I   1 0 . 1 0 2 1 / j p 9 0 6 1 7 4 e ;   R e n a u d i n   G ,   2 0 0 4 ,   J   A L L O Y   C O M P D ,   V 3 7 5 ,   P 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 3 . 1 1 . 0 1 8 ;   R i c h a r d s o n   B S ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 5 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 1 2 . 0 5 7 ;   R o m e r   M ,   2 0 0 8 ,   I E E E   T   E N E R G Y   C O N V E R ,   V 2 3 ,   P 1 7 1 ,   D O I   1 0 . 1 1 0 9 / T E C . 2 0 0 7 . 9 1 4 1 5 9 ;   R o s t a m i k i a   G ,   2 0 0 8 ,   E C S   T R A N S A C T I O N S ,   V 1 6 ,   P 1 8 6 9 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 9 8 2 0 2 7 ;   R o s t a m i k i a   G ,   2 0 1 0 ,   E N E R G   E N V I R O N   S C I ,   V 3 ,   P 1 2 6 2 ,   D O I   1 0 . 1 0 3 9 / c 0 e e 0 0 1 1 5 c ;   R o s t a m i k i a   G ,   2 0 1 0 ,   E L E C T R O C H I M   A C T A ,   V 5 5 ,   P 1 1 7 5 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 9 . 1 0 . 0 0 2 ;   R o s t a m i k i a   G ,   2 0 0 9 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 6 ,   p B 8 6 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 0 1 0 3 8 2 ;   R U D I E   C N ,   1 9 7 9 ,   J   A M   O I L   C H E M   S O C ,   V 5 6 ,   P 5 2 0 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 8 0 1 9 3 ;   R u m a n   T ,   2 0 0 7 ,   I N O R G   C H E M   C O M M U N ,   V 1 0 ,   P 1 0 7 4 ,   D O I   1 0 . 1 0 1 6 / j . i n o c h e . 2 0 0 7 . 0 5 . 0 2 9 ;   S a h i n   O ,   2 0 1 0 ,   I N T   J   E N E R G   R E S ,   V 3 4 ,   P 5 5 7 ,   D O I   1 0 . 1 0 0 2 / e r . 1 5 6 3 ;   S a k a m o t o   Y . ,   2 0 1 0 ,   P   I P E C ,   P 8 1 4 ;   S A L M I   T ,   1 9 8 3 ,   T A L A N T A ,   V 3 0 ,   P 7 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 9 - 9 1 4 0 ( 8 3 ) 8 0 1 7 5 - 1 ;   S a n l i   A E ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 2 6 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 1 1 . 0 9 1 ;   S a n l i   E ,   2 0 0 7 ,   E C S   T ,   V 5 ,   P 1 3 7 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 7 2 8 9 9 6 ;   S a n l i   E ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 2 0 9 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 1 . 0 4 9 ;   S a n l i   E ,   2 0 0 6 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 1 ,   P 1 9 2 0 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 0 4 . 0 0 3 ;   S a n t o s   D M F ,   2 0 0 8 ,   D E F E C T   D I F F U S   F O R U M ,   V 2 7 3 - 2 7 6 ,   P 5 8 3 ;   S a n t o s   D M F ,   2 0 0 6 ,   D E F E C T   D I F F U S   F O R U M ,   V 2 5 8 - 2 6 0 ,   P 3 3 3 ;   S a n t o s   D M F ,   2 0 1 0 ,   E L E C T R O C H I M   A C T A ,   V 5 5 ,   P 6 7 7 5 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 1 0 . 0 5 . 0 9 1 ;   S a n t o s   D M F ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 9 8 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 1 0 . 0 1 . 1 2 9 ;   S a n t o s   D M F ,   2 0 1 0 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 7 ,   p B 1 3 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 2 4 7 5 4 0 ;   S a n t o s   D M F ,   2 0 0 8 ,   E C S   T R A N S A C T I O N S ,   V 1 6 ,   P 1 8 5 5 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 9 8 2 0 2 6 ;   S a n t o s   D M F ,   2 0 0 9 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 6 ,   p F 6 7 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 0 8 2 3 7 1 ;   S a n t o s   D M F ,   2 0 0 9 ,   J   E L E C T R O A N A L   C H E M ,   V 6 2 7 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j e l e c h e m . 2 0 0 8 . 1 2 . 0 0 9 ;   S a n t o s   D M F ,   2 0 0 8 ,   E C S   T ,   V 1 6 ,   P 1 2 3 ;   S a n t o s   D M F ,   2 0 0 6 ,   T H E S I S   T U   L I S B O N   P O R ;   S a n t o s   D M ,   2 0 0 7 ,   E C S   T ,   V 3 ,   P 1 9 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 7 8 9 2 6 7 ;   S a n t o s   D M F ,   2 0 0 7 ,   E C S   T ,   V 3 ,   P 6 9 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 7 8 9 2 7 1 ;   T o x i c o l o g y   D a t a   N e t w o r k ,   H A Z   S U B S T   D A T   B A N K ;   S c h u b e r t   F . ,   1 9 5 9 ,   D E   P a t . ,   P a t e n t   N o .   1 0 6 7 0 0 5 ;   G o e r r i g   D ,   1 9 6 4 ,   U S   P a t e n t ,   P a t e n t   N o .   3 1 4 0 1 5 0 ;   B a n u s   M D ,   1 9 5 5 ,   U S   P a t e n t ,   P a t e n t   N o .   2 7 2 0 4 4 4 ;   B e r n e r   R G ,   1 9 6 0 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 3 9 7 6 2 ;   C h i n   A A ,   2 0 0 8 ,   U S   P a t e n t ,   P a t e n t   N o .   7 4 5 5 8 2 1 ;   H u f f   G F ,   1 9 6 3 ,   U S   P a t e n t ,   P a t e n t   N o .   3 0 7 9 2 2 4 ;   B r a g d o n   R W ,   1 9 6 0 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 2 6 9 9 1 ;   H a n s l e y   V L ,   1 9 6 0 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 3 4 4 0 1 ;   S n o v e r   J . ,   2 0 0 4 ,   U .   S   P a t e n t s ,   P a t e n t   N o .   [ U S   6 7 0 6 9 0 9   B 1 ,   6 7 0 6 9 0 9 ] ;   P e c a k   V ,   1 9 7 0 ,   U S   P a t e n t ,   P a t e n t   N o .   3 5 1 5 5 2 2 ;   L o r t h i o i r   S ,   1 9 9 4 ,   U S   P a t e n t ,   P a t e n t   N o .   5 2 9 4 4 2 3 ;   C o o p e r   H . B . H . ,   1 9 6 9 ,   [ N o   t i t l e   c a p t u r e d ] ,   P a t e n t   N o .   [ U S 3 4 7 3 8 9 9   A ,   3 4 7 3 8 9 9 ] ;   C o o p e r   H B ,   1 9 7 2 ,   U S   P a t e n t ,   P a t e n t   N o .   3 6 9 5 8 6 4 ;   F i l b y   E E ,   1 9 7 6 ,   U S   P a t e n t ,   P a t e n t   N o .   3 9 9 3 7 3 2 ;   C h i n   A A ,   2 0 0 9 ,   P r o c e s s   f o r   p r o d u c t i o n   o f   a   b o r o h y d r i d e   c o m p o u n d ,   P a t e n t   N o .   [ E P   2 0 9 8 4 7 9   A l ,   2 0 9 8 4 7 9 ] ;   B r o w n   H C ,   1 9 6 0 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 6 4 3 7 8 ;   D i e t e r   G . ,   1 9 6 5 ,   [ N o   t i t l e   c a p t u r e d ] ,   P a t e n t   N o .   [ U S 3 1 6 4 4 4 1   A ,   3 1 6 4 4 4 1 ] ;   J e n k n e r   H ,   1 9 6 5 ,   U S   P a t e n t ,   P a t e n t   N o .   3 2 2 2 1 2 1 ;   Z h o u   Y ,   2 0 0 8 ,   U S   P a t e n t ,   P a t e n t   N o .   7 4 2 9 3 6 8 ;   C h i n   A A ,   2 0 0 7 ,   E P ,   P a t e n t   N o .   [ 1 6 4 5 6 4 4   B 1 ,   1 6 4 5 6 4 4 ] ;   H a l e   C H ,   1 9 9 0 ,   U S   P a t ,   P a t e n t   N o .   4 9 3 1 1 5 4 ;   K n o r r e   H ,   1 9 6 8 ,   U S   P a t e n t ,   P a t e n t   N o .   3 3 7 9 5 1 1 ;   N i g o n   J P ,   1 9 6 1 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 8 3 5 7 4 ;   C o o p e r   H B H ,   1 9 7 3 ,   U S   P a t ,   P a t e n t   N o .   3 7 3 4 8 4 2 ;   H o r n   E - M ,   1 9 7 0 ,   U S   P a t e n t ,   P a t e n t   N o .   3 5 0 5 0 3 5 ;   H u f f   G F ,   1 9 5 8 ,   U S   P a t ,   P a t e n t   N o .   2 8 5 5 3 5 3 ;   M a z u r   D J ,   2 0 0 5 ,   U S   P a t e n t ,   P a t e n t   N o .   2 0 0 5 0 2 2 4 3 6 5 ;   K o n g   P C ,   2 0 1 0 ,   U S   P a t e n t ,   P a t e n t   N o .   7 7 4 1 4 2 8 ;   S c h u b e r t   F . ,   1 9 6 3 ,   < I T > U . S .   P a t . < / I T > ,   P a t e n t   N o .   [ 3   0 7 7   3 7 6 ,   3 0 7 7 3 7 6 ] ;   K o n g   P C ,   2 0 0 7 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 7 3 0 3 6 5 7   B 2 ,   7 3 0 3 6 5 7 ] ;   A s h b y   E .   J . ,   2 0 0 7 ,   U . S .   P a t e n t ,   P a t e n t   N o .   [ U S   7 2 4 7 2 8 6   B 2 ,   7 2 4 7 2 8 6 ] ;   A m e n d o l a   S ,   2 0 0 6 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 7 0 1 9 1 0 5   B 2 ,   7 0 1 9 1 0 5 ] ;   S c h l e s i n g e r   H .   I . ,   1 9 5 0 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 2 , 5 3 4 , 5 3 3 ,   2 5 3 4 5 3 3 ] ;   B r o j a   G . S c h a b a c h e r W ,   1 9 6 6 ,   U S   P a t e n t ,   P a t e n t   N o .   3 2 5 9 4 7 4 ;   E d w a r d s   L J ,   1 9 6 2 ,   U S   P a t e n t ,   P a t e n t   N o .   3 0 4 2 4 8 5 ;   L o g a n   J S ,   1 9 6 4 ,   U S   P a t e n t ,   P a t e n t   N o .   3 1 5 2 8 6 1 ;   C H A M B E R L A I N   D L ,   1 9 6 2 ,   P a t e n t   N o .   3 0 2 9 1 2 8 ;   A m e n d o l a   S .   C . ,   2 0 0 3 ,   U S   P a t . ,   P a t e n t   N o .   [ 6 5 2 4 5 4 2 ,   6 5 8 6 5 6 3 ] ;   P r y d e   E H ,   1 9 5 4 ,   U S   P a t e n t ,   P a t e n t   N o .   2 6 8 4 8 8 8 ;   C h i n   A A ,   2 0 0 6 ,   U S   P a t e n t ,   P a t e n t   N o .   2 0 0 6 0 0 7 8 4 8 6 ;   C h i n   A A ,   2 0 0 7 ,   U S   P a t e n t ,   P a t e n t   N o .   7 2 9 7 3 1 6 ;   K o j i m a   Y ,   2 0 0 2 ,   J P   P a t e n t ,   P a t e n t   N o .   [ 2 0 0 2 - 1 9 3 6 0 4 ,   2 0 0 2 1 9 3 6 0 4 ] ;   K e l l y   M T ,   2 0 0 6 ,   W O   P a t e n t ,   P a t e n t   N o .   [ 2 0 0 6 0 5 0 0 7 7   A 2 ,   2 0 0 6 0 5 0 0 7 7 ] ;   B r o j a   G . ,   1 9 5 9 ,   D E   P a t . ,   P a t e n t   N o .   1 1 0 8 6 7 0 ;   G u i l b a u l t   U . S u l l i v a n E A ,   2 0 0 9 ,   U S   P a t e n t ,   P a t e n t   N o .   7 6 3 8 0 2 9 ;   H a g a   T . ,   2 0 0 2 ,   J P   P a t e n t ,   P a t e n t   N o .   [ 2 0 0 2 - 2 4 1 1 0 9 ,   2 0 0 2 2 4 1 1 0 9 ] ;   C H I N   A A ,   2 0 0 8 ,   P a t e n t   N o .   1 8 8 7 0 9 2 ;   P e t e r s o n   W D ,   1 9 6 1 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 7 4 0 1 5 ;   X u   J ,   2 0 0 6 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 7 1 0 8 7 7 7   B 2 ,   7 1 0 8 7 7 7 ] ;   P e t i l l o   P J ,   2 0 0 3 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 6 5 4 4 6 7 9   B 1 ,   6 5 4 4 6 7 9 ] ;   H o n g   Z ,   2 0 0 7 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 2 0 0 7 0 1 2 8 5 0 9   A 1 ,   2 0 0 7 0 1 2 8 5 0 9 ] ;   G u i l b a u l t   L .   J . ,   2 0 0 5 ,   U S   P a t . ,   P a t e n t   N o .   2 0 0 5 0 2 2 4 3 6 4 ;   S h a r i f i a n   H ,   1 9 9 0 ,   U S   P a t ,   P a t e n t   N o .   4 9 0 4 3 5 7 ;   N a j i m   J ,   2 0 0 7 ,   U S   P a t e n t   A p p l ,   P a t e n t   N o .   2 0 0 7 0 2 6 9 3 6 0 ;   J a c k s o n   C B ,   1 9 5 6 ,   U S   P a t e n t ,   P a t e n t   N o .   2 7 4 4 8 1 0 ;   K o l l o n i t s c h   J ,   1 9 6 2 ,   U S   P a t e n t ,   P a t e n t   N o .   3 0 6 3 7 9 1 ;   A m e n d o l a   S .   C . ,   2 0 0 3 ,   U .   S .   P a t e n t ,   P a t e n t   N o .   [ U S   6 5 2 4 5 4 2   B 2 ,   6 5 2 4 5 4 2 ] ;   K y l l o n e n   D M ,   1 9 6 1 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 6 9 2 7 4 ;   K o n g   P C ,   2 0 0 8 ,   U S   P a t e n t ,   P a t e n t   N o .   7 4 2 0 0 2 7 ;   C o o p e r   H B ,   1 9 7 0 ,   U S   P a t e n t ,   P a t e n t   N o .   3 4 9 5 9 3 8 ;   K i n g   A J ,   1 9 6 0 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 4 2 9 3 5 ;   Z h o u   Y ,   2 0 0 9 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 2 0 0 9 0 0 2 6 4 1 6   A l ,   2 0 0 9 0 0 2 6 4 1 6 ] ;   O r t e g a   J .   V . ,   2 0 0 3 ,   U S   P a t . ,   P a t e n t   N o .   [ 6 5 8 6 5 6 3 ,   6 6 7 0 4 4 4 ] ;   M a z u r   D J ,   2 0 0 5 ,   E P ,   P a t e n t   N o .   [ 1 5 8 6 6 7 8   A 1 ,   1 5 8 6 6 7 8 ] ;   A m e n d o l a   S . C . ,   1 9 9 8 ,   U S   P a t e n t ,   P a t e n t   N o .   [ 5 ,   8 0 4 ,   3 2 9 ,   5 8 0 4 3 2 9 ] ;   S u d a   S ,   2 0 0 2 ,   J P   P a t e n t ,   P a t e n t   N o .   [ 2 0 0 2 - 1 7 3 3 0 6 ,   2 0 0 2 1 7 3 3 0 6 ] ;   H e r b e r t   J ,   1 9 6 2 ,   U S   P a t e n t ,   P a t e n t   N o .   3 0 4 7 3 5 8 ;   G o v e r n a l e   L J ,   1 9 6 1 ,   U S   P a t e n t ,   P a t e n t   N o .   3 0 0 2 8 0 6 ;   P r y d e   E H ,   1 9 6 0 ,   U S   P a t e n t ,   P a t e n t   N o .   2 9 2 6 9 8 9 ;   B o n t e m p e l l i   J C ,   1 9 6 9 ,   U S   P a t e n t ,   P a t e n t   N o .   3 4 7 1 2 6 8 ;   C h i n   A A ,   2 0 0 8 ,   P r o c e s s   f o r   p r o d u c t i o n   o f   a   b o r o h y d r i d e   c o m p o u n d ,   P a t e n t   N o .   [ E P   1 5 8 6 5 3 6   B l ,   1 5 8 6 5 3 6 ] ;   M c e l r o y   A D ,   1 9 5 9 ,   U S   P a t e n t ,   P a t e n t   N o .   2 8 8 9 1 9 4 ;   J o h n s t o n   J D ,   1 9 6 9 ,   U S   P a t e n t ,   P a t e n t   N o .   3 4 5 9 5 1 4 ;   K n o r r e   H ,   1 9 6 9 ,   U S   P a t e n t ,   P a t e n t   N o .   3 4 3 3 6 0 5 ;   S u n   Y . ,   2 0 0 3 ,   C N   P a t .   A p p l . ,   P a t e n t   N o .   [ 1 3 9 6 3 0 7 A ,   1 3 9 6 3 0 7 ] ;   A r m s t r o n g   W .   E . ,   2 0 0 2 ,   U S   P a t . ,   P a t e n t   N o .   [ 4   1 2 4   5 3 8 ,   6 4 3 3 1 2 9 ] ;   F i s h e r   N G ,   1 9 5 6 ,   U S   P a t e n t ,   P a t e n t   N o .   2 7 2 9 5 4 0 ;   A m e n d o l a   S . C . ,   2 0 0 4 ,   U . S .   P a t . ,   P a t e n t   N o .   [ 6 , 6 8 3 , 0 2 5   B 2 ,   6 6 8 3 0 2 5 ] ;   S a n t o s   D M F ,   2 0 1 0 ,   J   E L E C T R O C H E M   S O C ,   V 1 5 7 ,   p F 1 6 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 2 5 6 1 3 6 ;   S C H L E S I N G E R   H I ,   1 9 5 3 ,   J   A M   C H E M   S O C ,   V 7 5 ,   P 1 8 6 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 0 9 7 a 0 4 9 ;   S C H L E S I N G E R   H I ,   1 9 5 3 ,   J   A M   C H E M   S O C ,   V 7 5 ,   P 1 9 9 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 0 9 7 a 0 5 3 ;   S c h l e s i n g e r   H I ,   1 9 4 0 ,   J   A M   C H E M   S O C ,   V 6 2 ,   P 3 4 2 9 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 8 6 9 a 0 3 9 ;   S C H L E S I N G E R   H I ,   1 9 5 3 ,   J   A M   C H E M   S O C ,   V 7 5 ,   P 2 0 5 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 0 9 7 a 0 5 4 ;   S C H L E S I N G E R   H I ,   1 9 5 3 ,   J   A M   C H E M   S O C ,   V 7 5 ,   P 2 1 5 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 0 9 7 a 0 5 7 ;   S C H U T T E   C J H ,   1 9 6 0 ,   S P E C T R O C H I M   A C T A ,   V 1 6 ,   P 1 0 5 4 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 1 - 1 9 5 1 ( 6 0 ) 8 0 1 4 5 - 2 ;   S e l v a r a n i   G ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 8 ,   P 8 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 1 1 . 1 1 5 ;   S e n o h   H ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 7 . 0 2 9 ;   S e q u e i r a   C A C ,   2 0 0 9 ,   J   B R A Z I L   C H E M   S O C ,   V 2 0 ,   P 3 8 7 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 3 - 5 0 5 3 2 0 0 9 0 0 0 3 0 0 0 0 2 ;   S e q u e i r a   C A C ,   2 0 0 7 ,   E C S   T ,   V 3 / 1 8 ,   P 7 ;   S h a f i r o v i c h   E ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 2 0 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 0 8 . 0 2 0 ;   S H A H   A R ,   1 9 7 2 ,   A N A L Y S T ,   V 9 7 ,   P 1 7 ,   D O I   1 0 . 1 0 3 9 / a n 9 7 2 9 7 0 0 0 1 7 ;   S h a n g   Y ,   2 0 0 6 ,   E N E R G   F U E L ,   V 2 0 ,   P 2 1 4 2 ,   D O I   1 0 . 1 0 2 1 / e f 0 5 0 3 6 3 q ;   S h a n g   Y ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 6 7 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 7 . 0 6 9 ;   S h a n g   Y H ,   2 0 0 6 ,   E N E R G   F U E L ,   V 2 0 ,   P 2 1 4 9 ,   D O I   1 0 . 1 0 2 1 / e f 0 5 0 3 8 0 f ;   S i   C D ,   2 0 1 0 ,   R E A C T   K I N E T   M E C H   C A T ,   V 1 0 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 4 4 - 0 1 0 - 0 2 2 1 - z ;   S i m a g i n a   V I ,   2 0 0 8 ,   K I N E T   C A T A L + ,   V 4 9 ,   P 5 6 8 ,   D O I   1 0 . 1 1 3 4 / S 0 0 2 3 1 5 8 4 0 8 0 4 0 1 7 4 ;   S i m a g i n a   V I ,   2 0 0 7 ,   K I N E T   C A T A L + ,   V 4 8 ,   P 1 6 8 ,   D O I   1 0 . 1 1 3 4 / S 0 0 2 3 1 5 8 4 0 7 0 1 0 2 2 3 ;   S i m a g i n a   V I ,   2 0 0 8 ,   C A T A L   T O D A Y ,   V 1 3 8 ,   P 2 5 3 ,   D O I   1 0 . 1 0 1 6 / j . c a t t o d . 2 0 0 8 . 0 5 . 0 2 2 ;   S i m o e s   M ,   2 0 0 9 ,   E C S   T R A N S A C T I O N S ,   V 2 5 ,   P 1 4 1 3 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 2 1 0 6 9 7 ;   S i m o e s   M ,   2 0 1 0 ,   E L E C T R O C H I M   A C T A ,   V 5 6 ,   P 5 8 0 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 1 0 . 0 9 . 0 0 6 ;   S i m o e s   M ,   2 0 0 9 ,   J   P H Y S   C H E M   C ,   V 1 1 3 ,   P 1 3 3 6 9 ,   D O I   1 0 . 1 0 2 1 / j p 9 0 2 7 4 1 z ;   S O L D A T E   A M ,   1 9 4 7 ,   J   A M   C H E M   S O C ,   V 6 9 ,   P 9 8 7 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 1 9 7 a 0 0 2 ;   S o l e r   L ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 4 7 0 2 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 6 . 0 1 9 ;   S t e p a n o v   N ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 7 3 7 8 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 0 5 2 ;   S T O C K M A Y E R   W ,   1 9 6 1 ,   J   P H Y S   C H E M - U S ,   V 6 5 ,   P 1 0 7 6 ,   D O I   1 0 . 1 0 2 1 / j 1 0 0 8 2 4 a 5 2 2 ;   S T O C K M A Y E R   W H ,   1 9 5 5 ,   J   A M   C H E M   S O C ,   V 7 7 ,   P 1 9 8 0 ,   D O I   1 0 . 1 0 2 1 / j a 0 1 6 1 2 a 0 8 2 ;   S u d a   S ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 4 0 4 ,   P 6 4 3 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 5 . 0 2 . 1 0 1 ;   S u d a   S ,   2 0 0 1 ,   A P P L   P H Y S   A - M A T E R ,   V 7 2 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 3 9 0 1 0 0 7 8 5 ;   S Y M O N S   M C R ,   1 9 8 3 ,   J   C H E M   S O C   C H E M   C O M M ,   P 3 2 6 ,   D O I   1 0 . 1 0 3 9 / c 3 9 8 3 0 0 0 0 3 2 6 ;   T A G U E   T J ,   1 9 9 4 ,   J   A M   C H E M   S O C ,   V 1 1 6 ,   P 4 9 7 0 ,   D O I   1 0 . 1 0 2 1 / j a 0 0 0 9 0 a 0 4 8 ;   T a r o z a i t e   R ,   2 0 0 9 ,   J   S O L I D   S T A T E   E L E C T R ,   V 1 3 ,   P 7 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 8 - 0 0 8 - 0 6 0 6 - 3 ;   T e g o u   A ,   2 0 0 9 ,   J   E L E C T R O A N A L   C H E M ,   V 6 3 4 ,   P 1 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j e l e c h e m . 2 0 0 9 . 0 7 . 0 1 6 ;   T i a n   H J ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 2 1 3 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 1 0 . 0 0 6 ;   T o n g   D G ,   2 0 1 0 ,   P L A S M A   C H E M   P L A S M A   P ,   V 3 0 ,   P 6 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 9 0 - 0 1 0 - 9 2 3 9 - 2 ;   T o w n e   S ,   2 0 0 9 ,   E C S   T R A N S A C T I O N S ,   V 2 5 ,   P 1 9 5 1 ,   D O I   1 0 . 1 1 4 9 / 1 . 3 2 1 0 7 5 1 ;   T s i v a d z e   A Y ,   2 0 0 7 ,   D O K L   P H Y S   C H E M ,   V 4 1 4 ,   P 1 0 7 ,   D O I   1 0 . 1 1 3 4 / S 0 0 1 2 5 0 1 6 0 7 0 5 0 0 3 X ;   U n a l   U ,   2 0 0 9 ,   T U R K   J   C H E M ,   V 3 3 ,   P 6 5 7 ,   D O I   1 0 . 3 9 0 6 / k i m - 0 9 0 2 - 8 ;   U r g n a n i   J ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 3 1 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 3 . 0 3 1 ;   U r i a n   R C ,   2 0 0 9 ,   M A T E R   R E S   S O C   S   P ,   V 1 1 6 8 ,   P 7 ;   V a j e e s t o n   P ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 3 8 7 ,   P 9 7 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 4 . 0 6 . 0 5 8 ;   V a j o   J J ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 3 9 0 ,   P 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 4 . 0 8 . 0 4 2 ;   V a r i n   R A ,   2 0 0 8 ,   J   A L L O Y   C O M P D ,   V 4 6 2 ,   P 2 0 1 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 7 . 0 7 . 1 1 0 ;   V a r i n   R A ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 3 9 7 ,   P 2 7 6 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 4 . 1 2 . 0 4 7 ;   V a s k e l i s   A ,   2 0 0 7 ,   E L E C T R O C H I M   A C T A ,   V 5 3 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . e l e c t a c t a . 2 0 0 7 . 0 4 . 0 0 8 ;   V e r m a   A ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 5 ,   P 2 8 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 1 1 . 0 7 1 ;   V e r m a   A ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 4 ,   P 1 8 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 7 . 0 7 7 ;   V e r m a   A ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 8 ,   P 2 0 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 2 . 0 6 9 ;   V e r m a   A ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 4 1 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 4 . 0 9 . 0 0 5 ;   W a l t e r   J .   C . ,   2 0 0 8 ,   E C S   T ,   V 6 ,   P 5 5 ,   D O I   1 0 . 1 1 4 9 / 1 . 2 8 3 2 3 9 9 ;   W a l t e r   J C ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 7 9 ,   P 3 3 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 1 2 . 0 0 6 ;   W a n g   G - J ,   2 0 0 8 ,   G A O   X I A O   H U A   X U E   G O N ,   V 2 2 ,   P 6 6 6 ;   W a n g   G J ,   2 0 1 0 ,   E L E C T R O C H E M   C O M M U N ,   V 1 2 ,   P 1 0 7 0 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 1 0 . 0 5 . 0 2 9 ;   W a n g   G J ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 6 . 0 8 0 ;   W a n g   G L ,   2 0 1 0 ,   C H E M   J   C H I N E S E   U ,   V 3 1 ,   P 1 5 3 ;   W a n g   G L ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 1 2 2 7 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 1 1 . 0 4 1 ;   W a n g   G L ,   2 0 0 9 ,   C H I N E S E   J   C H E M ,   V 2 7 ,   P 2 1 6 6 ;   [ s5  W A N G   G u i l i n g ] ,   2 0 0 8 ,   [ S]f[b,   J o u r n a l   o f   C h e m i c a l   I n d u s t r y   a n d   E n g i n e e r i n g   ( C h i n a ) ] ,   V 5 9 ,   P 8 0 5 ;   W a n g   K L ,   2 0 0 7 ,   J   P H Y S   C H E M   C ,   V 1 1 1 ,   P 7 4 5 6 ,   D O I   1 0 . 1 0 2 1 / j p 0 7 1 0 4 8 3 ;   W a n g   K L ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 5 ,   P 8 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 8 . 0 6 9 ;   W a n g   K L ,   2 0 0 5 ,   J   E L E C T R O A N A L   C H E M ,   V 5 8 5 ,   P 1 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j e l e c h e m . 2 0 0 5 . 0 8 . 0 0 9 ;   W a n g   L B ,   2 0 0 5 ,   E L E C T R O C H E M   C O M M U N ,   V 7 ,   P 1 4 7 7 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 5 . 1 0 . 0 1 2 ;   W a n g   L B ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 3 9 1 ,   P 3 1 8 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 4 . 0 9 . 0 0 2 ;   W a n g   L B ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 3 9 7 ,   P 3 1 3 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 5 . 0 1 . 0 4 4 ;   W a n g   P ,   2 0 0 8 ,   D A L T O N   T ,   P 5 4 0 0 ,   D O I   1 0 . 1 0 3 9 / b 8 0 7 1 6 2 d ;   W a n g   Y P ,   2 0 1 0 ,   F U E L   C E L L S ,   V 1 0 ,   P 1 3 2 ,   D O I   1 0 . 1 0 0 2 / f u c e . 2 0 0 9 0 0 0 9 1 ;   W a n g   Y G ,   2 0 0 6 ,   E L E C T R O C H E M   C O M M U N ,   V 8 ,   P 1 7 7 5 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 6 . 0 8 . 0 1 8 ;   W a n g   Y G ,   2 0 1 0 ,   E N E R G   E N V I R O N   S C I ,   V 3 ,   P 1 5 1 5 ,   D O I   1 0 . 1 0 3 9 / c 0 0 4 0 6 1 d ;   W e e   J H ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 5 5 ,   P 3 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 1 . 0 3 6 ;   W e e   J H ,   2 0 0 6 ,   J   P O W E R   S O U R C E S ,   V 1 6 1 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 7 . 0 3 2 ;   W e e   J H ,   2 0 0 6 ,   F U E L   P R O C E S S   T E C H N O L ,   V 8 7 ,   P 8 1 1 ,   D O I   1 0 . 1 0 1 6 / j . f u p r o c . 2 0 0 6 . 0 5 . 0 0 1 ;   W e g n e r   P A ,   1 9 7 3 ,   B O R O N   H Y D R I D E   C H E M ;   W e i   H - J ,   2 0 1 0 ,   B E I J I N G   K E J I   D A X U E   X ,   V 3 2 ,   P 9 6 ;   W e i   J L ,   2 0 0 8 ,   P R O G   C H E M ,   V 2 0 ,   P 1 4 2 7 ;   W e i   J L ,   2 0 0 9 ,   E N E R G   F U E L ,   V 2 3 ,   P 4 0 3 7 ,   D O I   1 0 . 1 0 2 1 / e f 9 0 0 1 8 6 m ;   W e i   J L ,   2 0 0 9 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 4 ,   P 3 3 6 0 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 2 . 0 1 4 ;   W E R N E R   D A ,   1 9 7 3 ,   A N A L   B I O C H E M ,   V 5 4 ,   P 5 5 4 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 3 - 2 6 9 7 ( 7 3 ) 9 0 3 8 7 - 4 ;   W u   C ,   2 0 0 5 ,   M A T E R   L E T T ,   V 5 9 ,   P 1 7 4 8 ,   D O I   1 0 . 1 0 1 6 / j . m a t l e t . 2 0 0 5 . 0 1 . 0 5 8 ;   W u   C ,   2 0 0 4 ,   C A T A L   T O D A Y ,   V 9 3 - 5 ,   P 4 7 7 ,   D O I   1 0 . 1 0 1 6 / j . c a t t o d . 2 0 0 4 . 0 6 . 0 9 5 ;   W u   C ,   2 0 0 6 ,   X I A N D A I   H U A G O N G ,   V 2 6 ,   P 8 2 ;   W u   C ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 2 6 7 5 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 0 4 . 0 2 8 ;   [ 4TwmQ  W u   H a i j u n ] ,   2 0 0 8 ,   [ *Y3f[b,   A c t a   E n e r g i a e   S o l a r i s   S i n i c a ] ,   V 2 9 ,   P 2 2 7 ;   W u   Y ,   2 0 0 3 ,   A C S   D I V   F U E L   C H E M   P R ,   V 4 8 ,   P 9 3 8 ;   X i a   Z T ,   2 0 0 5 ,   J   P O W E R   S O U R C E S ,   V 1 5 2 ,   P 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 5 . 0 3 . 0 0 2 ;   X u   D Y ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 2 ,   P 6 1 6 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 4 . 0 1 8 ;   X u   D Y ,   2 0 0 7 ,   P R O G   C H E M ,   V 1 9 ,   P 1 5 9 8 ;   X u   D Y ,   2 0 0 7 ,   C A T A L   C O M M U N ,   V 8 ,   P 1 7 6 7 ,   D O I   1 0 . 1 0 1 6 / j . c a t c o m . 2 0 0 7 . 0 2 . 0 2 8 ;   X u   D Y ,   2 0 0 8 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 3 ,   P 7 3 7 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 8 . 0 9 . 0 6 5 ;   Y a m a m o t o   J ,   2 0 0 3 ,   R O H M   H A A S   S O D I U M   B O R ;   Y a m a z a k i   S ,   2 0 1 0 ,   J   P O W E R   S O U R C E S ,   V 1 9 5 ,   P 1 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 8 . 0 5 7 ;   Y a m a z a k i   S I ,   2 0 0 9 ,   E L E C T R O C H E M   C O M M U N ,   V 1 1 ,   P 1 1 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e l e c o m . 2 0 0 9 . 0 3 . 0 3 9 ;   Y a n g   C C ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 4 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 6 . 0 4 2 ;   Y a n g   J Q ,   2 0 0 9 ,   J   P O W E R   S O U R C E S ,   V 1 9 4 ,   P 8 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 9 . 0 6 . 0 3 4 ;   Y a n g   Z Z ,   2 0 0 8 ,   J   P O W E R   S O U R C E S ,   V 1 8 4 ,   P 2 6 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 8 . 0 6 . 0 1 2 ;   Y e   W ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 4 ,   P 5 4 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 0 9 . 1 1 4 ;   Y i   Q . L i L ,   2 0 0 9 ,   H U A G O N G   X U E B A O   C I E S C ,   V 6 0 ,   P 4 5 5 ;   Z a h m a k i r a n   M ,   2 0 0 8 ,   L A N G M U I R ,   V 2 4 ,   P 7 0 6 5 ,   D O I   1 0 . 1 0 2 1 / l a 8 0 0 8 7 4 u ;   Z a h m a k i r a n   M ,   2 0 0 6 ,   J   M O L   C A T A L   A - C H E M ,   V 2 5 8 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / j . m o l c a t a . 2 0 0 6 . 0 5 . 0 3 7 ;   Z a h m a k i r a n   M ,   2 0 0 9 ,   L A N G M U I R ,   V 2 5 ,   P 2 6 6 7 ,   D O I   1 0 . 1 0 2 1 / l a 8 0 3 3 9 1 c ;   Z a l u s k a   A ,   2 0 0 5 ,   J   A L L O Y   C O M P D ,   V 4 0 4 ,   P 7 0 6 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 5 . 0 3 . 1 0 4 ;   Z a l u s k i   L ,   1 9 9 9 ,   J   A L L O Y   C O M P D ,   V 2 9 0 ,   P 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 8 3 8 8 ( 9 9 ) 0 0 2 1 1 - X ;   Z a n c h e t t a   C ,   2 0 0 7 ,   M E A S   S C I   T E C H N O L ,   V 1 8 ,   p N 2 1 ,   D O I   1 0 . 1 0 8 8 / 0 9 5 7 - 0 2 3 3 / 1 8 / 5 / N 0 2 ;   Z h a n g   H P ,   2 0 0 9 ,   J   A L L O Y   C O M P D ,   V 4 8 4 ,   P 3 5 2 ,   D O I   1 0 . 1 0 1 6 / j . j a l l c o m . 2 0 0 9 . 0 4 . 0 9 3 ;   Z h a n g   J S ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 4 ,   P 7 7 2 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 1 1 . 0 0 2 ;   Z h a n g   J S ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 7 0 ,   P 1 5 0 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 7 . 0 3 . 0 2 5 ;   Z h a n g   J S ,   2 0 0 7 ,   J   P O W E R   S O U R C E S ,   V 1 6 5 ,   P 8 4 4 ,   D O I   1 0 . 1 0 1 6 / j . j p o w s o u r . 2 0 0 6 . 1 2 . 0 5 5 ;   Z h a n g   J S ,   2 0 0 6 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 1 ,   P 2 2 9 2 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 6 . 0 2 . 0 2 6 ;   Z h a n g   Q ,   2 0 0 7 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 2 ,   P 4 7 3 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 7 . 0 8 . 0 1 7 ;   Z h a n g   Q ,   2 0 0 6 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 1 ,   P 9 6 1 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 5 . 0 7 . 0 0 8 ;   Z h a n g   Q L ,   2 0 0 7 ,   I N D   E N G   C H E M   R E S ,   V 4 6 ,   P 1 1 2 0 ,   D O I   1 0 . 1 0 2 1 / i e 0 6 1 0 8 6 t ;   Z h a n g   Q L ,   2 0 0 9 ,   I N D   E N G   C H E M   R E S ,   V 4 8 ,   P 1 6 0 3 ,   D O I   1 0 . 1 0 2 1 / i e 8 0 0 4 7 0 d ;   Z h a n g   X D ,   2 0 0 9 ,   E P L - E U R O P H Y S   L E T T ,   V 8 8 ,   D O I   1 0 . 1 2 0 9 / 0 2 9 5 - 5 0 7 5 / 8 8 / 3 6 0 0 5 ;   Z h a n g   X W ,   2 0 1 0 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 3 5 ,   P 8 3 6 3 ,   D O I   1 0 . 1 0 1 6 / j . i j h y d e n e . 2 0 0 9 . 1 1 . 0 1 8 ;   Z h a n g   Y W ,   2 0 0 8 ,   J   P H Y S   C H E M   C ,   V 1 1 2 ,   P 1 2 0 9 2 ,   D O I   1 0 . 1 0 2 1 / j p 8 0 5 7 8 8 x ;   Z h o u   H J ,   2 0 1 0 ,   J   P H Y S   C H E M   L E T T ,   V 1 ,   P 2 6 7 1 ,   D O I   1 0 . 1 0 2 1 / j z 1 0 0 9 6 3 y ;   Z i m m e r   J L ,   2 0 0 6 ,   F E D   R E G I S T E R ,   V 7 1 ,   P 7 6 3 0 7 ;   Z u t t e l   A ,   2 0 0 7 ,   S C R I P T A   M A T E R ,   V 5 6 ,   P 8 2 3 ,   D O I   1 0 . 1 0 1 6 / j . s c r i p t a m a t . 2 0 0 7 . 0 1 . 0 1 0 	 6 1 8 	 1 3 5 	 1 3 9 	 1 9 	 1 8 9 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 1 3 6 4 - 0 3 2 1 	 	 	 R E N E W   S U S T   E N E R G   R E V 	 R e n e w .   S u s t .   E n e r g .   R e v . 	 O C T 	 2 0 1 1 	 1 5 	 8 	 	 	 	 	 3 9 8 0 	 4 0 0 1 	 	 1 0 . 1 0 1 6 / j . r s e r . 2 0 1 1 . 0 7 . 0 1 8 	 	 2 2 	 G R E E N   &   S U S T A I N A B L E   S C I E N C E   &   T E C H N O L O G Y ;   E n e r g y   &   F u e l s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   E n e r g y   &   F u e l s 	 8 7 1 U V 	 W O S : 0 0 0 2 9 8 7 6 4 1 0 0 0 4 8 	 	 
 
 J 	 C r o n i n ,   B 	 	 	 	 C r o n i n ,   B 	 	 	 B i b l i o m e t r i c s   a n d   b e y o n d :   S o m e   t h o u g h t s   o n   w e b - b a s e d   c i t a t i o n   a n a l y s i s 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 C o n f e r e n c e   o n   F r e e d o m   o f   I n f o r m a t i o n :   T h e   I m p a c t   o f   O p e n   A c c e s s   o n   B i o m e d i c a l   S c i e n c e 	 J U L   0 6 - 0 7 ,   2 0 0 0 	 N E W   Y O R K   A C A D   M E D ,   N E W   Y O R K ,   N E W   Y O R K 	 	 N E W   Y O R K   A C A D   M E D 	 	 A U T H O R S ;   I M P A C T 	 T h e   i d e a   o f   a   u n i f i e d   c i t a t i o n   i n d e x   t o   t h e   l i t e r a t u r e   o f   s c i e n c e   w a s   f i r s t   o u t l i n e d   b y   E u g e n e   G a r f i e l d   [ I ]   i n   1 9 5 5   i n   t h e   j o u r n a l   S c i e n c e .   S c i e n c e   C i t a t i o n   I n d e x   h a s   s i n c e   e s t a b l i s h e d   i t s e l f   a s   t h e   g o l d   s t a n d a r d   f o r   s c i e n t i f i c   i n f o r m a t i o n   r e t r i e v a l .   I t   h a s   a l s o   b e c o m e   t h e   d a t a b a s e   o f   c h o i c e   f o r   c i t a t i o n   a n a l y s t s   a n d   e v a l u a t i v e   b i b l i o m e t r i c i a n s   w o r l d w i d e .   A s   s c i e n t i f i c   p u b l i c a t i o n   m o v e s   t o   t h e   w e b ,   a n d   n o v e l   a p p r o a c h e s   t o   s c h o l a r l y   c o m m u n i c a t i o n   a n d   p e e r   r e v i e w   e s t a b l i s h   t h e m s e l v e s ,   n e w   m e t h o d s   o f   c i t a t i o n   a n d   l i n k   a n a l y s i s   w i l l   e m e r g e   t o   c a p t u r e   o f t e n   l i m i n a l   e x p r e s s i o n s   o f   p e e r   e s t e e m ,   i n f l u e n c e   a n d   a p p r o b a t i o n .   T h e   w e b   t h u s   a f f o r d s   b i b l i o m e t r i c i a n s   r i c h   o p p o r t u n i t i e s   t o   a p p l y   a n d   a d a p t   t h e i r   t e c h n i q u e s   t o   n e w   c o n t e x t s   a n d   c o n t e n t :   t h e   a g e   o f   ' b i b l i o m e t r i c   s p e c t r o s c o p y '   [ 2 ]   i s   d a w n i n g . 	 I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 C r o n i n ,   B   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 	 	 	 	 	 A D L E R   S ,   1 9 9 9 ,   S L A S H D O T   E F F E C T   A N A L ;   A D L E R   S ,   1 9 9 9 ,   A D D E N D U M   S L A S H D O T   E F ;   A T K I N S   H ,   1 9 9 9 ,   I S I   W E B   S C I   L I N K S   E L ;   B a l d i   S ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 4 ;   B O S S Y   M J ,   1 9 9 5 ,   S O L A R I S ,   V 2 ;   B r a a m   R .   R . ,   1 9 9 1 ,   M A P P I N G   S C I   F O C I   I N T ;   C A M E R O N   R D ,   1 9 9 7 ,   U N I V E R S A L   C I T A T I O N   D ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 9 5 3 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - C ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   C r o n i n   B ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 2 6 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 0 ;   C r o n i n   B . ,   1 9 9 5 ,   S C H O L A R S   C O U R T E S Y   R O ;   C R O N I N   B ,   1 9 8 9 ,   C H R O N I C L E   H I G H E   1 0 1 5 ,   p A 2 5 ;   C R O N I N   B ,   U N P U B   H Y P E R A U T H O R S H I ;   D a v e n p o r t   E ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 5 1 7 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   H a r n a d   S . ,   1 9 9 2 ,   S E R I A L S   R E V ,   V 1 8 ,   P 5 8 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 8 - 7 9 1 3 ( 9 2 ) 9 0 0 4 4 - W ;   H a r t e r   S P ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 9 4 0 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 9 4 0 : : A I D - A S I 6 0 > 3 . 0 . C O ; 2 - F ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K L I N G   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M A T I O N ;   L A R S O N   R R ,   1 9 9 6 ,   G L O B A L   C O M P L E X I T Y   I N ;   L a w r e n c e   S ,   1 9 9 9 ,   C O M P U T E R ,   V 3 2 ,   P 6 7 ,   D O I   1 0 . 1 1 0 9 / 2 . 7 6 9 4 4 7 ;   L e w i s o n   G ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 3 6 1 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M A R I C I C   S ,   1 9 9 9 ,   N A T U R E                     0 1 2 8 ;   M a r k o v i t z   B P ,   2 0 0 0 ,   J   A M   M E D   I N F O R M   A S S N ,   V 7 ,   P 2 2 2 ;   M e a d o w s   A .   J . ,   1 9 7 4 ,   C O M M U N I C A T I O N   S C I ;   M e r t o n   R K ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 4 3 5 ;   M U L L I N S   N C ,   1 9 7 3 ,   T H E O R I E S   T H E O R Y   G R O U ;   P I T K O W   J ,   1 9 9 7 ,   P   C H I   9 7   C   H U M   F A C T ;   R e n n i e   D ,   1 9 9 8 ,   A M   J   P U B L I C   H E A L T H ,   V 8 8 ,   P 8 2 8 ,   D O I   1 0 . 2 1 0 5 / A J P H . 8 8 . 5 . 8 2 8 ;   R e n n i e   D ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 8 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 8 . 7 . 5 7 9 ;   R O U S S E A U   R ,   1 9 9 7 ,   C Y B E R M E T E R I C S ,   V 1 ;   R o u s s e a u   R . ,   1 9 9 8 ,   C Y B E R M E T R I C S ,   V 2 ;   S C H L O S S B E R G   E ,   1 9 9 9 ,   B R I L L S   C O N T E N T ,   V 2 ,   P 6 8 ;   S c h o n b e r g   E ,   2 0 0 0 ,   C O M M U N   A C M ,   V 4 3 ,   P 5 3 ,   D O I   1 0 . 1 1 4 5 / 3 4 5 1 2 4 . 3 4 5 1 4 2 ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   T A U B E S   G ,   1 9 9 3 ,   S C I E N C E ,   V 2 6 0 ,   P 8 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 8 4 9 3 5 1 6 ;   T e r v e e n   L ,   1 9 9 7 ,   C O M M U N   A C M ,   V 4 0 ,   P 5 9 ,   D O I   1 0 . 1 1 4 5 / 2 4 5 1 0 8 . 2 4 5 1 2 2 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 9 3 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 8 2 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 7 3 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 8 6 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 8 8 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 9 0 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 7 8 ;   T H O M P S O N   M J ,   2 0 0 0 ,   I N D   S T A N D A R D         0 7 2 4 ,   P 1 7 1 ;   v a n   R a a n   A . F . J . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 0 1 ;   W e i n b e r g   B H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 3 1 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 4 ) 4 8 : 4 < 3 1 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Z ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ;   1 9 9 9 ,   S C I   A M                       J U N ,   P 5 4 	 5 2 	 1 3 4 	 1 3 9 	 1 5 	 9 1 	 B O W K E R - S A U R 	 E   G R I N S T E A D 	 W I N D S O R   C O U R T ,   E A S T   G R I N S T E A D   H O U S E ,   E   G R I N S T E A D   R H 1 9   1 X A ,   W   S U S S E X ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F O R M   S C I 	 J .   I n f .   S c i . 	 	 2 0 0 1 	 2 7 	 1 	 	 	 	 	 1 	 7 	 	 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 0 7 R K 	 W O S : 0 0 0 1 6 7 2 8 4 4 0 0 0 0 1 	 	 
 
 J 	 B u t l e r ,   L 	 	 	 	 B u t l e r ,   L 	 	 	 E x p l a i n i n g   A u s t r a l i a ' s   i n c r e a s e d   s h a r e   o f   I S I   p u b l i c a t i o n s   -   t h e   e f f e c t s   o f   a   f u n d i n g   f o r m u l a   b a s e d   o n   p u b l i c a t i o n   c o u n t s 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 8 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s 	 J U L   1 6 - 2 0 ,   2 0 0 1 	 S Y D N E Y ,   A U S T R A L I A 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r ,   J o h n   M e t c a l f e   M e m   F u n d ,   E u g e n e   G a r f i e l d   F d n ,   I S I ,   T h o m s o n   S c i ,   I S I ,   T h o m s o n   S c i ,   A s i a   P a c i f i c   R e g ,   I n s t   S c i   I n f o r m a t ,   U n i v   N e w   S   W a l e s ,   F a c   C o m m e r c e   &   E c o n ,   U n i v   N e w   S   W a l e s ,   B i b l i o m e t r   &   I n f o r m e t r   R e s   G r p 	 	 r e s e a r c h   f u n d i n g ;   b i b l i o m e t r i c s ;   e f f e c t s   o f   e v a l u a t i o n ;   u n i v e r s i t y   r e s e a r c h ;   p r o d u c t i v i t y 	 	 A u s t r a l i a ' s   s h a r e   o f   p u b l i c a t i o n s   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   h a s   i n c r e a s e d   b y   2 5 %   i n   t h e   l a s t   d e c a d e .   T h e   w o r r y i n g   a s p e c t   a s s o c i a t e d   w i t h   t h i s   t r e n d   i s   t h e   s i g n i f i c a n t   d e c l i n e   i n   c i t a t i o n   i m p a c t   A u s t r a l i a   i s   a c h i e v i n g   r e l a t i v e   t o   o t h e r   c o u n t r i e s .   I t   h a s   d r o p p e d   f r o m   s i x t h   p o s i t i o n   i n   a   r a n k i n g   o f   1 1   O E C D   c o u n t r i e s   i n   1 9 8 8 ,   t o   1 0 t h   p o s i t i o n   b y   1 9 9 3 ,   a n d   t h e   d i s t a n c e   f r o m   n i n t h   p l a c e   c o n t i n u e s   t o   w i d e n .   T h e   i n c r e a s e d   p u b l i c a t i o n   a c t i v i t y   c a m e   a t   a   t i m e   w h e n   p u b l i c a t i o n   o u t p u t   w a s   e x p e c t e d   t o   d e c l i n e   d u e   t o   p r e s s u r e s   f a c i n g   t h e   h i g h e r   e d u c a t i o n   s e c t o r ,   w h i c h   a c c o u n t s   f o r   o v e r   t w o - t h i r d s   o f   A u s t r a l i a n   p u b l i c a t i o n s .   T h i s   p a p e r   e x a m i n e s   p o s s i b l e   m e t h o d o l o g i c a l   a n d   c o n t e x t u a l   e x p l a n a t i o n s   o f   t h e   t r e n d s   i n   A u s t r a l i a ' s   p r e s e n c e   i n   t h e   S C I ,   a n d   u n d e r t a k e s   a   d e t a i l e d   c o m p a r i s o n   o f   t w o   u n i v e r s i t i e s   t h a t   i n t r o d u c e d   d i v e r s e   r e s e a r c h   m a n a g e m e n t   s t r a t e g i e s   i n   t h e   l a t e   1 9 8 0 s .   T h e   c o n c l u s i o n   r e a c h e d   i s   t h a t   t h e   d r i v i n g   f o r c e   b e h i n d   t h e   A u s t r a l i a n   t r e n d s   a p p e a r s   t o   l i e   w i t h   t h e   i n c r e a s e d   c u l t u r e   o f   e v a l u a t i o n   f a c e d   b y   t h e   s e c t o r .   S i g n i f i c a n t   f u n d s   a r e   d i s t r i b u t e d   t o   u n i v e r s i t i e s ,   a n d   w i t h i n   u n i v e r s i t i e s ,   o n   t h e   b a s i s   o f   a g g r e g a t e   p u b l i c a t i o n   c o u n t s ,   w i t h   l i t t l e   a t t e n t i o n   p a i d   t o   t h e   i m p a c t   o r   q u a l i t y   o f   t h a t   o u t p u t .   I n   c o n s e q u e n c e ,   j o u r n a l   p u b l i c a t i o n   p r o d u c t i v i t y   h a s   i n c r e a s e d   s i g n i f i c a n t l y   i n   t h e   l a s t   d e c a d e ,   b u t   i t s   i m p a c t   h a s   d e c l i n e d .   ( C )   2 0 0 2   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 A u s t r a l i a n   N a t l   U n i v ,   R e s   S c h   S o c i a l   S c i ,   R e s   E v a l u a t   &   P o l i c y   P r o j e c t ,   C a n b e r r a ,   A C T   0 2 0 0 ,   A u s t r a l i a 	 B u t l e r ,   L   ( r e p r i n t   a u t h o r ) ,   A u s t r a l i a n   N a t l   U n i v ,   R e s   S c h   S o c i a l   S c i ,   R e s   E v a l u a t   &   P o l i c y   P r o j e c t ,   C a n b e r r a ,   A C T   0 2 0 0 ,   A u s t r a l i a . 	 	 B u t l e r ,   L i n d a / A - 3 7 3 1 - 2 0 0 8 	 	 	 	 * A B S ,   1 9 9 8 ,   1 2 9 7 0   A B S ;   A N D E R S O N   D ,   1 9 9 6 ,   5 1   N A T   B O A R D   E M P L   E D ;   * A U S T R   S E N   E M P L   W O ,   2 0 0 1 ,   U   C R I S I S ;   B O U R K E   P ,   1 9 9 3 ,   P E R F O R M A N C E   I N D I C A T O ,   V 1 ;   B O U R K E   P ,   1 9 8 5 ,   Q U A L I T Y   M E A S U R E S   U ;   B u t l e r   L . ,   2 0 0 1 ,   M O N I T O R I N G   A U S T R   S C I ;   C o n s i d i n e   M . ,   2 0 0 1 ,   C O M P   P E R F O R M A N C E   A U S ;   * C T E C ,   1 9 8 6 ,   S E L   H I G H   E D   S T A T ;   * C T E C ,   1 9 7 9 ,   S E L   U   S T A T ;   * D E E T ,   1 9 8 8 ,   S T A F F   S E L   H I G H   E D   S T ;   F O X   M F ,   1 9 8 3 ,   S O C   S T U D   S C I ,   V 1 3 ,   P 2 8 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 3 0 1 3 0 0 2 0 0 5 ;   G A L L A G H E R   M ,   2 0 0 0 ,   D E T Y A   O C C   P A P   S E R   2 0 ;   G e u n a   A . ,   2 0 0 1 ,   S P R U   E L E C T   W O R K I N G   P ;   G R I G G   L ,   1 9 9 6 ,   I M P A C T   A U S T R   S C I ;   H i c k s   D . ,   1 9 9 6 ,   S C I   P U B L   P O L I C Y ,   V 2 3 ,   P 3 9 ;   * I S I ,   1 9 9 3 ,   S C I   W A T C H ,   V 4 ;   L i n k e   R .   D . ,   1 9 9 1 ,   P E R F O R M A N C E   I N D I C A T O ;   M A R T I N B I O S C A   Y ,   1 9 9 4 ,   J   B I O C H E M   B I O P H   M E T H ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 5 - 0 2 2 X ( 9 4 ) 9 0 0 5 4 - X ;   M O E D   H F ,   1 9 8 3 ,   M E A S U R E M E N T   R E S   P E R F ;   R A M S D E N   P ,   1 9 9 2 ,   2   D E P   E M P L   E D   T R A I N ;   V a n   R a a n   A ,   1 9 9 7 ,   S C I   P U B L   P O L I C Y ,   V 2 4 ,   P 2 9 0 	 2 1 	 1 3 3 	 1 3 6 	 1 	 2 6 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 J A N 	 2 0 0 3 	 3 2 	 1 	 	 	 	 	 1 4 3 	 1 5 5 	 P I I   S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 	 1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 	 	 1 3 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 6 3 4 P Y 	 W O S : 0 0 0 1 8 0 3 5 0 6 0 0 0 0 9 	 	 
 
 J 	 W a g n e r ,   C S ;   R o e s s n e r ,   J D ;   B o b b ,   K ;   K l e i n ,   J T ;   B o y a c k ,   K W ;   K e y t o n ,   J ;   R a f o l s ,   I ;   B o r n e r ,   K 	 	 	 	 W a g n e r ,   C a r o l i n e   S . ;   R o e s s n e r ,   J .   D a v i d ;   B o b b ,   K a m a u ;   K l e i n ,   J u l i e   T h o m p s o n ;   B o y a c k ,   K e v i n   W . ;   K e y t o n ,   J o a n n ;   R a f o l s ,   I s m a e l ;   B o e r n e r ,   K a t y 	 	 	 A p p r o a c h e s   t o   u n d e r s t a n d i n g   a n d   m e a s u r i n g   i n t e r d i s c i p l i n a r y   s c i e n t i f i c   r e s e a r c h   ( I D R ) :   A   r e v i e w   o f   t h e   l i t e r a t u r e 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 I n t e r d i s c i p l i n a r y ;   S c i e n c e ;   R e s e a r c h ;   I n d i c a t o r s ;   B i b l i o m e t r i c s ;   E v a l u a t i o n 	 T R A N S D I S C I P L I N A R Y   R E S E A R C H ;   T E A M   S C I E N C E ;   C O L L A B O R A T I O N ;   P E R S P E C T I V E S ;   B E T W E E N N E S S ;   I N D I C A T O R S ;   C E N T R A L I T Y ;   J O U R N A L S ;   C E N T E R S ;   F I E L D 	 I n t e r d i s c i p l i n a r y   s c i e n t i f i c   r e s e a r c h   ( I D R )   e x t e n d s   a n d   c h a l l e n g e s   t h e   s t u d y   o f   s c i e n c e   o n   a   n u m b e r   o f   f r o n t s ,   i n c l u d i n g   c r e a t i n g   o u t p u t   s c i e n c e   a n d   e n g i n e e r i n g   ( S & E )   i n d i c a t o r s .   T h i s   l i t e r a t u r e   r e v i e w   b e g a n   w i t h   a   n a r r o w   s e a r c h   f o r   q u a n t i t a t i v e   m e a s u r e s   o f   t h e   o u t p u t   o f   I D R   t h a t   c o u l d   c o n t r i b u t e   t o   i n d i c a t o r s ,   b u t   t h e   a u t h o r s   e x p a n d e d   t h e   s c o p e   o f   t h e   r e v i e w   a s   i t   b e c a m e   c l e a r   t h a t   d i f f e r i n g   d e f i n i t i o n s ,   a s s e s s m e n t   t o o l s ,   e v a l u a t i o n   p r o c e s s e s ,   a n d   m e a s u r e s   a l l   s h e d   l i g h t   o n   d i f f e r e n t   a s p e c t s   o f   I D R .   K e y   a m o n g   t h e s e   b r o a d e r   a s p e c t s   i s   ( a )   t h e   i m p o r t a n c e   o f   i n c o r p o r a t i n g   t h e   c o n c e p t   o f   k n o w l e d g e   i n t e g r a t i o n ,   a n d   ( b )   r e c o g n i z i n g   t h a t   i n t e g r a t i o n   c a n   o c c u r   w i t h i n   a   s i n g l e   m i n d   a s   w e l l   a s   a m o n g   a   t e a m .   E x i s t i n g   o u t p u t   m e a s u r e s   a l o n e   c a n n o t   a d e q u a t e l y   c a p t u r e   t h i s   p r o c e s s .   A m o n g   t h e   q u a n t i t a t i v e   m e a s u r e s   c o n s i d e r e d ,   b i b l i o m e t r i c s   ( c o - a u t h o r s h i p s ,   c o - i n v e n t o r s ,   c o l l a b o r a t i o n s ,   r e f e r e n c e s ,   c i t a t i o n s   a n d   c o - c i t a t i o n s )   a r e   t h e   m o s t   d e v e l o p e d ,   b u t   l e a v e   c o n s i d e r a b l e   g a p s   i n   u n d e r s t a n d i n g   o f   t h e   s o c i a l   d y n a m i c s   t h a t   l e a d   t o   k n o w l e d g e   i n t e g r a t i o n .   E m e r g i n g   m e a s u r e s   i n   n e t w o r k   d y n a m i c s   ( p a r t i c u l a r l y   b e t w e e n n e s s   c e n t r a l i t y   a n d   d i v e r s i t y ) ,   a n d   e n t r o p y   a r e   p r o m i s i n g   a s   i n d i c a t o r s ,   b u t   t h e i r   u s e   r e q u i r e s   s o p h i s t i c a t e d   i n t e r p r e t a t i o n s .   C o m b i n a t i o n s   o f   q u a n t i t a t i v e   m e a s u r e s   a n d   q u a l i t a t i v e   a s s e s s m e n t s   b e i n g   a p p l i e d   w i t h i n   e v a l u a t i o n   s t u d i e s   a p p e a r   t o   r e v e a l   I D R   p r o c e s s e s   b u t   c a r r y   b u r d e n s   o f   e x p e n s e ,   i n t r u s i o n ,   a n d   l a c k   o f   r e p r o d u c i b i l i t y   y e a r - u p o n - y e a r .   T h i s   r e v i e w   i s   a   f i r s t   s t e p   t o w a r d   p r o v i d i n g   a   m o r e   h o l i s t i c   v i e w   o f   m e a s u r i n g   I D R ,   a l t h o u g h   r e s e a r c h   a n d   d e v e l o p m e n t   i s   n e e d e d   b e f o r e   m e t r i c s   c a n   a d e q u a t e l y   r e f l e c t   t h e   a c t u a l   p h e n o m e n o n   o f   I D R .   ( C )   2 0 1 0   P u b l i s h e d   b y   E l s e v i e r   L t d . 	 [ W a g n e r ,   C a r o l i n e   S . ;   R o e s s n e r ,   J .   D a v i d ;   B o b b ,   K a m a u ]   S R I   I n t ,   A r l i n g t o n ,   V A   U S A ;   [ K l e i n ,   J u l i e   T h o m p s o n ]   W a y n e   S t a t e   U n i v ,   D e t r o i t ,   M I   U S A ;   [ B o y a c k ,   K e v i n   W . ]   S c i T e c h   S t r a t e g i e s   I n c ,   A l b u q u e r q u e ,   N M   U S A ;   [ K e y t o n ,   J o a n n ]   N   C a r o l i n a   S t a t e   U n i v ,   R a l e i g h ,   N C   2 7 6 9 5   U S A ;   [ R a f o l s ,   I s m a e l ]   U n i v   S u s s e x ,   S c i   P o l i c y   R e s   U n i t ,   B r i g h t o n ,   E   S u s s e x ,   E n g l a n d ;   [ B o e r n e r ,   K a t y ]   I n d i a n a   U n i v ,   B l o o m i n g t o n ,   I N   U S A 	 W a g n e r ,   C S   ( r e p r i n t   a u t h o r ) ,   P e n n   S t a t e   U n i v ,   S c h   I n t   A f f a i r s ,   U n i v e r s i t y   P k ,   P A   1 6 8 0 2   U S A . 	 c s w 1 6 @ p s u . e d u 	 W a g n e r ,   C a r o l i n e / A - 7 1 7 0 - 2 0 1 2 ;   R a f o l s ,   I s m a e l / D - 1 5 0 9 - 2 0 0 9 	 R a f o l s ,   I s m a e l / 0 0 0 0 - 0 0 0 2 - 6 5 2 7 - 7 7 7 8 	 	 	 A D A M S   J ,   2 0 0 7 ,   R E P O R T   H I G H E R   E D   F U N ;   B a r - I l a n   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 8 . 0 0 1 ;   B O U L D I N G   K E ,   1 9 5 6 ,   M A N A G E   S C I ,   V 2 ,   P 1 9 7 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 . 3 . 1 9 7 ;   B o y a c k   K W ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 9 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 0 9 1 0 0 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C h e n   C M ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 1 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 0 4 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C r o y l e   R T ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 9 0 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 1 2 ;   D A R D E N   L ,   1 9 7 7 ,   P H I L O S   S C I ,   V 4 4 ,   P 4 3 ,   D O I   1 0 . 1 0 8 6 / 2 8 8 7 2 3 ;   E l k a n a   Y . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   G a r f i e l d   E . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 7 9 ;   G r a y   B ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 1 2 4 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 3 . 0 3 7 ;   H a l l   K L ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 3 . 0 3 5 ;   H A M I L T O N   K S ,   2 0 0 5 ,   U S I N G   B I B L I O M E T R I C S ;   K e s s e l   F ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 2 2 5 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 0 5 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K l a v a n s   R ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 9 1 ;   K l e i n   J .   T h o m p s o n ,   1 9 9 6 ,   C R O S S I N G   B O U N D A R I E S ;   K L E I N   J T ,   2 0 0 8 ,   S A G E   H D B   R H E T O R I C A L ,   P 2 6 5 ;   K l e i n   J T ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 1 1 6 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 1 0 ;   L e v i t t   J M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 9 7 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 4 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 9 1 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 4 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 4 - z ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 7 ;   M a r s h a k o v a   I .   V . ,   1 9 7 3 ,   S C I   T E C H N I C A L   I N F O R M ,   V 6 ,   P 3 ;   M a s s e   L C ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 1 5 1 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 2 0 ;   M i l l e r   M . ,   2 0 0 4 ,   T H I N K I N G   P E R S P E C T I V E ;   M i t r a n y   M ,   2 0 0 5 ,   J   P L A N   E D U C   R E S ,   V 2 4 ,   P 4 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 7 3 9 4 5 6 X 0 4 2 7 0 3 6 8 ;   M o r i l l o   F ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 6 ;   M o r i l l o   F ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 2 9 1 1 4 9 4 1 ;   N a s h   J M ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 1 3 3 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 0 4 ;   N a t i o n a l   A c a d e m i e s ,   2 0 0 5 ,   F A C   I N T   R E S ;   P o r t e r   A L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 0 0 - 5 ;   P o r t e r   A L ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 1 8 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 5 8 4 1 ;   P o r t e r   A L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 7 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 9 7 - 2 ;   P o r t e r   A L ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 2 7 3 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 3 6 4 5 5 3 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P r i c e   D .   J .   S . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 6 9 ;   R a f o l s   I ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 1 - y ;   R a f o l s   I ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 8 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 6 ;   R H O T E N   D ,   2 0 0 3 ,   B C S 0 1 2 9 5 7 3   N S F   H Y B R ;   R i n i a   E J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 5 6 6 2 5 6 2 3 ;   R O S E N F I E L D   P L ,   1 9 9 2 ,   S O C   S C I   M E D ,   V 3 5 ,   P 1 3 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 7 - 9 5 3 6 ( 9 2 ) 9 0 0 3 8 - R ;   S c h m i d t   J .   C . ,   2 0 0 8 ,   P O I E S I S   P R A X I S ,   V 5 ,   P 5 3 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 0 2 0 2 - 0 0 7 - 0 0 3 7 - 8 ;   S c h u m m e r   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 2 . 7 1 3 1 4 . 3 8 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S t i r l i n g   A ,   2 0 0 7 ,   J   R   S O C   I N T E R F A C E ,   V 4 ,   P 7 0 7 ,   D O I   1 0 . 1 0 9 8 / r s i f . 2 0 0 7 . 0 2 1 3 ;   S t o k o l s   D ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 7 7 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 0 2 ;   S t o k o l s   D a n i e l ,   2 0 0 3 ,   N i c o t i n e   T o b   R e s ,   V 5   S u p p l   1 ,   p S 2 1 ;   v a n   d e n   B e s s e l a a r   P ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 4 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 6 ) 4 7 : 6 < 4 1 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Y ;   H e i m e r i k s   G . ,   2 0 0 1 ,   P   8   I N T   C   S C I   I N F   I S ,   P 7 0 5 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 1 ;   W A G N E R   C S ,   2 0 0 9 ,   E V A L U A T I N G   O U T P U T   D I ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y ;   Z i t t   M . ,   2 0 0 5 ,   M E A S U R E M E N T   I N T E R D I S ,   V 3 ,   P 3 8 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 	 5 7 	 1 2 6 	 1 3 3 	 3 5 	 2 0 4 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 1 	 5 	 1 	 	 	 	 	 1 4 	 2 6 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 4 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 9 8 W S 	 W O S : 0 0 0 2 8 5 6 2 6 0 0 0 0 0 2 	 	 
 
 J 	 A r c h a m b a u l t ,   E ;   V i g n o l a - G a g n e ,   E ;   C o t e ,   G ;   L a r i v i e r e ,   V ;   G i n g r a s ,   Y 	 	 	 	 A r c h a m b a u l t ,   E r i c ;   V i g n o l a - G a g n e ,   E t i e n n e ;   C o t e ,   G r e g o i r e ;   L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s 	 	 	 B e n c h m a r k i n g   s c i e n t i f i c   o u t p u t   i n   t h e   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s :   T h e   l i m i t s   o f   e x i s t i n g   d a t a b a s e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 0 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s 	 J U L ,   2 0 0 5 	 K a r o l i n s k a   I n s t ,   S t o c k h o l m ,   S W E D E N 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r 	 K a r o l i n s k a   I n s t 	 	 S O C I O L O G Y   C I T A T I O N   I N D E X ;   R E S E A R C H   P E R F O R M A N C E ;   B E H A V I O R A L - S C I E N C E S ;   I N D I C A T O R S ;   C O V E R A G E ;   J O U R N A L S ;   I M P A C T 	 T h e   g o a l   o f   t h i s   p a p e r   i s   t o   e x a m i n e   t h e   i m p a c t   o f   l i n g u i s t i c   c o v e r a g e   o f   d a t a b a s e s   u s e d   b y   b i b l i o m e t r i c i a n s   o n   t h e   c a p a c i t y   t o   e f f e c t i v e l y   b e n c h m a r k   t h e   w o r k   o f   r e s e a r c h e r s   i n   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s .   W e   e x a m i n e   t h e   s t r o n g   l i n k   b e t w e e n   b i b l i o m e t r i c s   a n d   t h e   T h o m s o n   S c i e n t i f i c ' s   d a t a b a s e   a n d   r e v i e w   t h e   d i f f e r e n c e s   i n   t h e   p r o d u c t i o n   a n d   d i f f u s i o n   o f   k n o w l e d g e   i n   t h e   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s   ( S S H )   a n d   t h e   n a t u r a l   s c i e n c e s   a n d   e n g i n e e r i n g   ( N S E ) .   T h i s   l e a d s   t o   a   r e - e x a m i n a t i o n   o f   t h e   d e b a t e   o n   t h e   c o v e r a g e   o f   t h e s e   d a t a b a s e s ,   m o r e   s p e c i f i c a l l y   i n   t h e   S S H .   T h e   m e t h o d s   s e c t i o n   e x p l a i n s   h o w   w e   h a v e   c o m p a r e d   t h e   c o v e r a g e   o f   T h o m s o n   S c i e n t i f i c   d a t a b a s e s   i n   t h e   N S E   a n d   S S H   t o   t h e   U l r i c h   e x t e n s i v e   d a t a b a s e   o f   j o u r n a l s .   O u r   r e s u l t s   s h o w   t h a t   t h e r e   i s   a   2 0   t o   2 5 %   o v e r r e p r e s e n t a t i o n   o f   E n g l i s h - l a n g u a g e   j o u r n a l s   i n   T h o m s o n   S c i e n t i f i c ' s   d a t a b a s e s   c o m p a r e d   t o   t h e   l i s t   o f   j o u r n a l s   p r e s e n t e d   i n   U l r i c h .   T h i s   p a p e r   c o n c l u d e s   t h a t   b e c a u s e   o f   t h i s   b i a s ,   T h o m s o n   S c i e n t i f i c   d a t a b a s e s   c a n n o t   b e   u s e d   i n   i s o l a t i o n   t o   b e n c h m a r k   t h e   o u t p u t   o f   c o u n t r i e s   i n   t h e   S S H . 	 U n i v   Q u e b e c ,   C I R S T ,   O S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a 	 A r c h a m b a u l t ,   E   ( r e p r i n t   a u t h o r ) ,   S c i   M e t r i x ,   4 5 7 2   A v e   L o r i m i e r ,   M o n t r e a l ,   P Q   H 2 H   2 B 5 ,   C a n a d a . 	 e r i c . a r c h a m b a u l t @ s c i e n c e - m e t r i x . c o m 	 	 	 	 	 A c a d e m y   o f   F i n l a n d ,   2 0 0 3 ,   S C I   R E S   F I N L   R E V   I T S ;   A n d e r s e n   H ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 6 7 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 3 2 ;   A N D E R S E N   H ,   1 9 9 6 ,   D A N S K   S O C I O L O G I ,   V 7 ,   P 7 2 ;   B r a u n   T ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 2 5 1 ;   * C N E R ,   2 0 0 2 ,   E V   R E C   P U B L   E T   P U B L ;   G A R F I E L D   E ,   1 9 9 6 ,   S C   C I T A T I O N   I N D E X   J ;   G i n g r a s   Y ,   1 9 8 4 ,   R E C H   S O C I O G R A P H ,   V 2 5 ,   P 2 8 6 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 2 ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   G O D I N   B ,   2 0 0 2 ,   S O C I A L   S C I   C A N A D A   W A ;   H i c k s   D ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 3 8 0 ;   H i c k s   D i a n a ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ,   P 4 7 6 ;   H o d g s o n   G M ,   1 9 9 9 ,   E C O N   J ,   V 1 0 9 ,   p F 1 6 5 ;   I n g w e r s e n   P ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 5 7 1 0 7 9 0 1 ;   I N G W E R S E N   P ,   1 9 9 7 ,   5 3   C I S   R O Y A L   S C H   L I B ;   K A T Z   J S ,   1 9 9 8 ,   I N D I C A T O R S   S Y S T E M S   I ;   K y v i k   S . ,   1 9 8 8 ,   I N T   S O C   S C I   J ,   V 1 1 5 ,   P 1 6 3 ;   L A R I V E R E   V ,   2 0 0 6 ,   J   A M   S O C   I N F O R M   S C I ;   L I N E   M B ,   1 9 9 9 ,   6 5   I F L A   C O U N C   G E N   C ;   M e l a   G S ,   1 9 9 9 ,   E U R   J   C A N C E R ,   V 3 5 ,   P 1 1 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 9 9 ) 0 0 1 0 7 - 0 ;   M o e d   H F ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 9 8 ;   N E D E R H O F   A J ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 3 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 8 ;   N E D E R H O F   A J ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 4 ) 4 3 : 3 < 2 4 9 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - I ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 3 ;   S c h o e p e l i n   U ,   1 9 9 2 ,   R E P R E S E N T A T I O N S   S C I ,   P 1 7 7 ;   V a n   R a a n   A n t h o n y   F . J . ,   2 0 0 3 ,   T E C H N I K F O L G E N A B S C H A T ,   V 1 ,   P 2 0 ;   W e b s t e r   B M ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 1 0 3 ;   W i n c l a w s k a   B M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 8 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 9 ;   Y i t z h a k i   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 8 1 ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 2 3 3 2 9 2 7 7 	 3 0 	 1 2 5 	 1 2 7 	 5 	 5 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 D E C 	 2 0 0 6 	 6 8 	 3 	 	 	 	 	 3 2 9 	 3 4 2 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 7 K K 	 W O S : 0 0 0 2 3 9 3 0 0 6 0 0 0 0 2 	 	 
 
 J 	 H i c k s ,   D 	 	 	 	 H i c k s ,   D 	 	 	 T h e   d i f f i c u l t y   o f   a c h i e v i n g   f u l l   c o v e r a g e   o f   i n t e r n a t i o n a l   s o c i a l   s c i e n c e   l i t e r a t u r e   a n d   t h e   b i b l i o m e t r i c   c o n s e q u e n c e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 B E H A V I O R A L - S C I E N C E S ;   R E S E A R C H   P E R F O R M A N C E ;   C I T A T I O N ;   S O C I O L O G Y ;   I N D I C A T O R S ;   U N I V E R S I T I E S ;   P H I L O S O P H Y ;   H U M A N I T I E S ;   K N O W L E D G E ;   E C O N O M I C S 	 T h i s   r e v i e w   o f   s o c i a l   s c i e n c e   b i b l i o m e t r i c   l i t e r a t u r e   s e e k s   t o   e s t a b l i s h   c h a r a c t e r i s t i c s   o f   t h e   s o c i a l   s c i e n c e   l i t e r a t u r e   a n d   t o   u n d e r s t a n d   t h e i r   c o n s e q u e n c e s   f o r   t h e   c o v e r a g e   o f   l i t e r a t u r e   d a t a b a s e s   a n d   f o r   i n t e r p r e t a t i o n   o f   b i b l i o m e t r i c   s o c i a l   s c i e n c e   i n d i c a t o r s   b a s e d   o n   s u c h   d a t a b a s e s .   T h e   p a p e r   r e v i e w s   w h a t   w e   k n o w   a b o u t   s o c i a l   s c i e n c e   p u b l i s h i n g   a n d   d a t a b a s e   c o v e r a g e   o f   i t .   I t   e x a m i n e s   t h e   m a i n   r e a s o n s   w h y   s o c i a l   s c i e n c e   b i b l i o m e t r i c s   a r e   p r o b l e m a t i c ,   n a m e l y :   t h e   c e n t r a l i t y   o f   b o o k s   i n   s o c i a l   s c i e n c e   l i t e r a t u r e   a n d   t h e i r   h i g h   c i t a t i o n   r a t e ;   a n d   t h e   n a t i o n a l   o r i e n t a t i o n   o f   s o c i a l   s c i e n c e   l i t e r a t u r e s .   T h e   p a p e r   t h e n   l o o k s   a t   r e a s o n s   w h y   s o c i a l   s c i e n c e   b i b l i o m e t r i c s   h o l d s   i n c r e a s i n g   p r o m i s e ,   n a m e l y :   i n c r e a s i n g   i n t e r n a t i o n a l i z a t i o n ;   a n d   g o o d   c o v e r a g e   o f   s c h o l a r l y   j o u r n a l s . 	 C H I   R e s   I n c ,   H a d d o n   H t s ,   N J   0 8 0 3 5   U S A 	 H i c k s ,   D   ( r e p r i n t   a u t h o r ) ,   C H I   R e s   I n c ,   1 0   W h i t e   H o r s e   P i k e ,   H a d d o n   H t s ,   N J   0 8 0 3 5   U S A . 	 	 	 	 	 	 B o u r k e   P . ,   1 9 9 6 ,   M O N O G R A P H   S E R I E S ,   V 3 ;   B R O A D U S   R N ,   1 9 7 1 ,   I N T   S O C   S C I   J ,   V 2 3 ,   P 2 3 6 ;   B u r n h i l l   P .   M . ,   1 9 9 4 ,   R E S   E V A L U A T ,   V 4 ,   P 1 3 0 ;   C r o n i n   B ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 2 6 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 0 ;   D E L A M O N T   S ,   1 9 8 9 ,   S O C I O L   R E V ,   V 3 7 ,   P 3 3 2 ;   d e L o o z e   M A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 1 6 7 ;   D O R B A N   M ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 5 2 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 2 ;   H A R G E N S   L L ,   1 9 9 0 ,   S O C   S C I   R E S ,   V 1 9 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 9 - 0 8 9 X ( 9 0 ) 9 0 0 0 6 - 5 ;   H I C K S   D ,   1 9 9 1 ,   S O C   S T U D   S C I ,   V 2 1 ,   P 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 1 0 2 1 0 0 3 0 0 3 ;   K Y V I K   S ,   1 9 8 8 ,   I N T   S O C   S C I   J ,   P 1 6 3 ;   L E M O I N E   W ,   S T A T E   O F   T H E   A R T   R E V ;   L i n d h o l m R o m a n t s c h u k   Y ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 3 8 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 7 2 ;   N A R I N   F ,   1 9 7 6 ,   E V A L U A T I O N   B I B L I O M E T ;   N E D E R H O F   A J ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 3 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 8 ;   N e d e r h o f   A J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 2 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 3 9 ;   N E D E R H O F   A J ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 7 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 5 4 8 ;   N E D E R H O F   A J ,   1 9 9 3 ,   R E S   P O L I C Y ,   V 2 2 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 0 5 - 3 ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 3 ;   N E D E R H O F   A J ,   1 9 8 9 ,   A M   P S Y C H O I L ,   P 7 3 4 ;   P E R S S O N   O ,   1 9 8 5 ,   S O C   S C I   I N F O R M   S T U D ,   V 5 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 5 ) 9 0 0 2 7 - 4 ;   P e s t a n a   A . ,   1 9 9 5 ,   P   5   I N T   C   I N T   S O C   S C ,   P 4 2 5 ;   P I E R C E   S J ,   1 9 8 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 9 ,   P 1 4 3 ;   R O Y L E   P ,   1 9 9 4 ,   A U S T R   A C A D   R E S   L I B ,   V 2 5 ,   P 7 7 ;   R U B I O   A V ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 7 0 ;   S c h o e p f l i n   U . ,   1 9 9 0 ,   R E P R E S E N T A T I O N S   S C I ,   P 1 7 7 ;   T H O M A S   P ,   1 9 9 8 ,   T H E S I S   N O T T I N G H A M   T R ;   T H O R S T E I N S D O T T I . H ,   1 9 9 8 ,   T H E S I S   U   S U S S E X ;   T I J S S E N   R J W ,   1 9 9 6 ,   W E T E N S C H A P S E N   T E C H N O ;   V A N D E R M E U L E N   B ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 2 8 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 3 0 2 ;   V A N R A A N   A F J ,   1 9 9 8 ,   R E S   E V A L U A T ,   V 7 ,   P 2 ;   W e b s t e r   B M ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 1 0 3 ;   W i n c l a w s k a   B M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 8 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 9 ;   W I N T E R H A G E R   M ,   1 9 9 4 ,   I N F O R M A T I O N S   W I S S E N S ,   P 5 3 9 ;   Y i t z h a k i   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 8 1 	 3 5 	 1 2 4 	 1 2 5 	 2 	 4 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 1 9 9 9 	 4 4 	 2 	 	 	 	 	 1 9 3 	 2 1 5 	 	 1 0 . 1 0 0 7 / B F 0 2 4 5 7 3 8 0 	 	 2 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 7 1 U M 	 W O S : 0 0 0 0 7 8 8 8 2 5 0 0 0 0 5 	 	 
 
 J 	 C h e n ,   Y C ;   Y e h ,   H Y ;   W u ,   J C ;   H a s c h l e r ,   I ;   C h e n ,   T J ;   W e t t e r ,   T 	 	 	 	 C h e n ,   Y u - C h u n ;   Y e h ,   H s i a o - Y u n ;   W u ,   J a u - C h i n g ;   H a s c h l e r ,   I n g o ;   C h e n ,   T z e n g - J i ;   W e t t e r ,   T h o m a s 	 	 	 T a i w a n ' s   N a t i o n a l   H e a l t h   I n s u r a n c e   R e s e a r c h   D a t a b a s e :   a d m i n i s t r a t i v e   h e a l t h   c a r e   d a t a b a s e   a s   s t u d y   o b j e c t   i n   b i b l i o m e t r i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A d m i n i s t r a t i v e   h e a l t h   c a r e   d a t a b a s e ;   N a t i o n a l   H e a l t h   I n s u r a n c e   R e s e a r c h   D a t a b a s e ;   B i b l i o m e t r i c   a n a l y s i s ;   K n o w l e d g e   g r o w t h 	 S E C O N D A R Y   D A T A   S O U R C E S ;   E P I D E M I O L O G I C   R E S E A R C H ;   G R O W T H ;   P H A R M A C O E P I D E M I O L O G Y ;   K N O W L E D G E 	 T h e   t r e n d   t o   u s e   a d m i n i s t r a t i v e   h e a l t h   c a r e   d a t a b a s e s   a s   r e s e a r c h   m a t e r i a l   i s   i n c r e a s i n g   b u t   n o t   w e l l   e x p l o r e d .   T a i w a n ' s   N a t i o n a l   H e a l t h   I n s u r a n c e   R e s e a r c h   D a t a b a s e   ( N H I R D ) ,   o n e   o f   t h e   l a r g e s t   a d m i n i s t r a t i v e   h e a l t h   c a r e   d a t a b a s e s   a r o u n d   t h e   w o r l d ,   h a s   b e e n   u s e d   w i d e l y   i n   a c a d e m i c   s t u d i e s .   T h i s   s t u d y   a n a l y z e d   3 8 3   N H I R D   s t u d i e s   p u b l i s h e d   b e t w e e n   2 0 0 0   a n d   2 0 0 9   t o   q u a n t i f y   t h e   e f f e c t s   o n   o v e r a l l   g r o w t h ,   s c h o l a r   r e s p o n s e ,   a n d   s p r e a d   o f   t h e   s t u d y   f i e l d s .   T h e   N H I R D   s t u d i e s   e x p a n d e d   r a p i d l y   i n   b o t h   q u a n t i t y   a n d   q u a l i t y   s i n c e   t h e   f i r s t   s t u d y   w a s   p u b l i s h e d   i n   2 0 0 0 .   R e s e a r c h e r s   u s u a l l y   c o l l a b o r a t e d   t o   s h a r e   k n o w l e d g e ,   w h i c h   w a s   c r u c i a l   t o   p r o c e s s   t h e   N H I R D   d a t a .   H o w e v e r ,   o n c e   t h e   f u n d a m e n t a l   p r o b l e m   h a d   b e e n   o v e r c o m e ,   s u c c e s s   t o   g e t   p u b l i s h e d   b e c a m e   m o r e   r e p r o d u c i b l e .   N H I R D   s t u d i e s   w e r e   a l s o   p u b l i s h e d   d i v e r s e l y   i n   a   g r o w i n g   n u m b e r   o f   j o u r n a l s .   B o t h   g e n e r a l   h e a l t h   a n d   c l i n i c a l   s c i e n c e   s t u d i e s   b e n e f i t e d   f r o m   N I I I R D .   I n   c o n c l u s i o n ,   t h i s   n e w   r e s e a r c h   m a t e r i a l   w i d e l y   p r o m o t e s   s c i e n t i f i c   p r o d u c t i o n   i n   a   g r e a t e r   m a g n i t u d e .   T h e   e x p e r i e n c e   o f   T a i w a n ' s   N H I R D   s h o u l d   e n c o u r a g e   n a t i o n a l -   o r   i n s t i t u t i o n a l - l e v e l   d a t a   h o l d e r s   t o   c o n s i d e r   r e - u s i n g   t h e i r   a d m i n i s t r a t i v e   d a t a b a s e s   f o r   a c a d e m i c   p u r p o s e s . 	 [ C h e n ,   Y u - C h u n ;   H a s c h l e r ,   I n g o ;   W e t t e r ,   T h o m a s ]   U n i v   H e i d e l b e r g ,   D e p t   M e d   I n f o r m a t ,   D - 6 9 1 2 0   H e i d e l b e r g ,   G e r m a n y ;   [ Y e h ,   H s i a o - Y u n ;   C h e n ,   T z e n g - J i ]   T a i p e i   V e t   G e n   H o s p ,   D e p t   F a m i l y   M e d ,   T a i p e i ,   T a i w a n ;   [ W u ,   J a u - C h i n g ]   T a i p e i   V e t   G e n   H o s p ,   N e u r o l   I n s t ,   D e p t   N e u r o s u r g ,   T a i p e i ,   T a i w a n ;   [ W u ,   J a u - C h i n g ]   N a t l   Y a n g   M i n g   U n i v ,   I n s t   P h a r m a c o l ,   T a i p e i   1 1 2 ,   T a i w a n ;   [ W u ,   J a u - C h i n g ]   N a t l   Y a n g   M i n g   U n i v ,   S c h   M e d ,   T a i p e i   1 1 2 ,   T a i w a n ;   [ C h e n ,   T z e n g - J i ]   N a t l   Y a n g   M i n g   U n i v ,   I n s t   H o s p   &   H l t h   C a r e   A d m ,   T a i p e i   1 1 2 ,   T a i w a n 	 C h e n ,   Y C   ( r e p r i n t   a u t h o r ) ,   U n i v   H e i d e l b e r g ,   D e p t   M e d   I n f o r m a t ,   N e u e n h e i m e r   F e l d   3 0 5 ,   D - 6 9 1 2 0   H e i d e l b e r g ,   G e r m a n y . 	 Y u - C h u n . C h e n @ s t u d . u n i - h e i d e l b e r g . d e 	 C h e n ,   Y u - C h u n / B - 1 2 2 7 - 2 0 1 2 	 C h e n ,   Y u - C h u n / 0 0 0 0 - 0 0 0 2 - 4 1 2 4 - 1 9 4 9 	 	 	 B e r g e r   M L ,   2 0 0 9 ,   V A L U E   H E A L T H ,   V 1 2 ,   P 1 0 4 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 4 - 4 7 3 3 . 2 0 0 9 . 0 0 6 0 0 . x ;   C h e n   T z e n g - J i ,   2 0 0 7 ,   J   C h i n   M e d   A s s o c ,   V 7 0 ,   P 1 1 0 ;   D e S h a z o   J P ,   2 0 0 9 ,   B M C   M E D   I N F O R M   D E C I S ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 9 - 7 ;   D i a m o n d   C C ,   2 0 0 9 ,   H E A L T H   A F F A I R ,   V 2 8 ,   P 4 5 4 ,   D O I   1 0 . 1 3 7 7 / h l t h a f f . 2 8 . 2 . 4 5 4 ;   E g g h e   L ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   S E R ,   P 1 ;   F e r n a n d e z - C a n o   A ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 1 2 . 1 1 5 6 2 . 1 1 ;   G u p t a   B M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 3 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 3 2 1 0 8 2 ;   H a r p e   S E ,   2 0 0 9 ,   P H A R M A C O T H E R A P Y ,   V 2 9 ,   P 1 3 8 ,   D O I   1 0 . 1 5 9 2 / p h c o . 2 9 . 2 . 1 3 8 ;   H A Y E S   R M ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ;   H o f f m a n n   F ,   2 0 0 9 ,   P H A R M A C O E P I D E M   D R   S ,   V 1 8 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 2 / p d s . 1 7 2 1 ;   H s i a o   F Y ,   2 0 0 7 ,   J   F O O D   D R U G   A N A L ,   V 1 5 ,   P 9 9 ;   L a m b i o t t e   R ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 1 8 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 0 7 ;   L a r s e n   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 7 - 2 ;   L e y d e s d o r f f   L ,   2 0 1 0 ,   U S E R   F R I E N D L Y   M E T H O D ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 7 ;   * N A T   L I B   M E D ,   2 0 1 0 ,   N L M   C A T ;   R a f o l s   I ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 1 - y ;   S c h n e e w e i s s   S ,   2 0 0 5 ,   J   C L I N   E P I D E M I O L ,   V 5 8 ,   P 3 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 4 . 1 0 . 0 1 2 ;   S z y d l o w s k i   M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 5 8 - 7 ;   T r i c c o   A C ,   2 0 0 8 ,   J   C L I N   E P I D E M I O L ,   V 6 1 ,   P 1 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 7 . 0 3 . 0 0 9 	 2 0 	 1 1 7 	 1 1 8 	 5 	 5 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 1 	 8 6 	 2 	 	 	 	 	 3 6 5 	 3 8 0 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 8 9 - 2 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 1 0 F L 	 W O S : 0 0 0 2 8 6 4 9 6 2 0 0 0 1 1 	 	 
 
 J 	 W a t t s ,   R J ;   P o r t e r ,   A L 	 	 	 	 W a t t s ,   R J ;   P o r t e r ,   A L 	 	 	 I n n o v a t i o n   f o r e c a s t i n g 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 T E C H N O L O G Y ;   D I F F U S I O N 	 T e c h n o l o g i c a l   f o r e c a s t i n g   i s   p r e m i s e d   o n   a   c e r t a i n   o r d e r l i n e s s   o f   t h e   i n n o v a t i o n   p r o c e s s .   M y r i a d   s t u d i e s   o f   t e c h n o l o g i c a l   s u b s t i t u t i o n ,   d i f f u s i o n ,   a n d   t r a n s f e r   p r o c e s s e s   h a v e   y i e l d e d   c o n c e p t u a l   m o d e l s   o f   w h a t   m a t t e r s   f o r   s u c c e s s f u l   i n n o v a t i o n ,   b u t   m o s t   t e c h n o l o g i c a l   f o r e c a s t s   k e y   o n   l i m i t e d   e m p i r i c a l   m e a s u r e s   q u i t e   d i v o r c e d   f r o m   t h o s e   i n n o v a t i o n   p r o c e s s   m o d e l s .   W e   g l e a n   a   n u m b e r   o f   c o n c e p t s   f r o m   v a r i o u s   i n n o v a t i o n   m o d e l s ,   t h e n   p r e s e n t   a n   a r r a y   o f   b i b l i o m e t r i c   m e a s u r e s   t h a t   o f f e r   t h e   p r o m i s e   o f   o p e r a t i o n a l i z i n g   t h e s e   c o n c e p t s .   J u d i c i o u s   c o m b i n a t i o n   o f   s u c h   b i b l i o m e t r i c s   w i t h   o t h e r   f o r m s   o f   e v i d e n c e   o f f e r s   a n   e n r i c h e d   f o r m   o f   t e c h n o l o g i c a l   f o r e c a s t i n g   w e   c a l l   ' ' i n n o v a t i o n   f o r e c a s t i n g . ' '   T h i s   p r o v i d e s   a   g o o d   m e a n s   t o   c o m b i n e   t e c h n o l o g i c a l   t r e n d s ,   m a p p i n g   o f   t e c h n o l o g i c a l   i n t e r d e p e n d e n c i e s ,   a n d   c o m p e t i t i v e   i n t e l l i g e n c e   t o   p r o d u c e   a   v i a b l e   f o r c a s t .   W e   i l l u s t r a t e   b y   a s s e s s i n g   p r o s p e c t s   f o r   c e r a m i c   e n g i n e   t e c h n o l o g i e s .   ( C )   1 9 9 7   E l s e v i e r   S c i e n c e   I n c . 	 U S A , T A C O M , W A R R E N , M I ;   G E O R G I A   T E C H , T E C H N O L   P O L I C Y   &   A S S E S S M E N T   C T R , A T L A N T A , G A 	 	 	 M a f u t s a n a ,   M o p e d i / C - 5 1 5 7 - 2 0 1 5 	 	 	 	 A N D E R S O N   P ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 6 0 4 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 1 1 ;   B A R B I R O L I   G ,   1 9 9 2 ,   T E C H N O V A T I O N ,   V 1 2 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 4 9 7 2 ( 9 2 ) 9 0 0 3 7 - I ;   B U R G E L M A N   R ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E M E N T ,   P 1 5 9 ;   C E T R O N   M J ,   1 9 7 3 ,   2 1   J O I N T   E N G   C ,   P 1 1 ;   C O H E N   H ,   1 9 7 9 ,   R E S   M A N A G E ,   V 2 2 ,   P 1 1 ;   C U N N I N G H A M   S W ,   1 9 9 7 ,   T H E S I S   U   S U S S E X   B R I G ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D R O R   I ,   1 9 8 9 ,   R & D   M A N A G E ,   V 1 9 ,   P 2 4 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 8 9 . t b 0 0 6 4 5 . x ;   D u n p h y   S M ,   1 9 9 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 3 ,   P 2 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 6 ) 0 0 0 9 8 - 4 ;   F R A N K L I N   J J ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   F U N A T A N I   K ,   1 9 9 5 ,   A U T O M O T I V E   E N G       J A N ,   P 1 5 ;   G a r f i e l d   E . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   H A M E L   G ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E M E N T ,   P 5 9 6 ;   K O S T O F F   R N ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 4 . x ;   K O S T O F F   R N ,   1 9 9 4 ,   4   I N T   C   M A N   T E C H N   M I ,   P 4 2 3 ;   K o s t o f f   R .   N ,   1 9 9 3 ,   E V A L U A T I N G   R   D   I M P A C ,   P 6 3 ;   K o s t o f f   R .   N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 4 8 ,   D O I   1 0 . 1 0 0 2 / c i r . 3 8 8 0 0 5 0 1 0 9 ;   L A R S E N   R P ,   1 9 8 8 ,   O U T L O O K   C E R A M I C S   H E A ,   P 4 ;   L i n s t o n e   H ,   1 9 8 4 ,   M U L T I P L E   P E R S P E C T I V E ;   M a h a j a n   V ,   1 9 9 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 1 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 5 ) 0 0 2 2 5 - 1 ;   M a r t i n o   J . P . ,   1 9 9 3 ,   T E C H N O L O G I C A L   F O R E C A ;   M E T C A L F E   J S ,   1 9 8 1 ,   F U T U R E S ,   V 1 3 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 3 2 8 7 ( 8 1 ) 9 0 1 2 0 - 8 ;   M e t c a l f e   J .   S . ,   1 9 8 8 ,   T E C H N I C A L   C H A N G E   E C ,   P 5 6 0 ;   M I L L S O N   M R ,   1 9 9 2 ,   J   P R O D   I N N O V A T   M A N A G ,   V 9 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 7 3 7 - 6 7 8 2 ( 9 2 ) 9 0 0 6 1 - G ;   M O D I S   T ,   1 9 9 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 3 ,   P 1 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 3 ) 9 0 0 1 3 - W ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   P O R T E R   A L ,   1 9 9 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 9 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 5 ) 0 0 0 2 2 - 3 ;   P o r t e r   A .   L . ,   1 9 9 1 ,   F O R E C A S T I N G   M A N A G E M E ;   P o r t e r   M . E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V A N T A G ;   R A Z I M   C ,   1 9 9 1 ,   C E R A M I C S   A U T O M O T I V E ,   P 2 7 7 ;   R i p   A . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   R o g e r s   E .   M . ,   1 9 8 3 ,   D I F F U S I O N   I N N O V A T I O N ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S m i t h   C .   G . ,   1 9 9 2 ,   J   E N G   T E C H N O L   M A N A G E ,   V 9 ,   P 2 7 9 ,   D O I   1 0 . 1 0 1 6 / 0 9 2 3 - 4 7 4 8 ( 9 2 ) 9 0 0 1 9 - 2 ;   S o u d e r   W . E . ,   1 9 8 7 ,   M A N A G I N G   N E W   P R O D U C T ;   S O U D E R   W E ,   1 9 9 0 ,   T E C H N O L O G Y   T R A N S   W I N ,   P 5 ;   T A K A O   H ,   1 9 9 1 ,   P   I N T   S   C E R   M A T   C O M P ,   P 1 3 0 ;   T I J S S E N   R J W ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 1 0 ;   T w i s s   B .   C . ,   1 9 9 2 ,   F O R E C A S T I N G   T E C H N O L O ;   V a n s t o n   J .   H . ,   1 9 9 5 ,   T E C H N O L O G Y   F O R E C A S T I ;   W A T T S   R J ,   1 9 9 6 ,   T H E S I S   N A T L   T E C H N O L O 	 4 1 	 1 1 2 	 1 1 4 	 4 	 6 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 6 5 5   A V E N U E   O F   T H E   A M E R I C A S ,   N E W   Y O R K ,   N Y   1 0 0 1 0 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 S E P 	 1 9 9 7 	 5 6 	 1 	 	 	 	 	 2 5 	 4 7 	 	 1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 	 	 2 3 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 X T 8 7 0 	 W O S : A 1 9 9 7 X T 8 7 0 0 0 0 0 2 	 	 
 
 J 	 W a l t m a n ,   L ;   C a l e r o - M e d i n a ,   C ;   K o s t e n ,   J ;   N o y o n s ,   E C M ;   T i j s s e n ,   R J W ;   v a n   E c k ,   N J ;   v a n   L e e u w e n ,   T N ;   v a n   R a a n ,   A F J ;   V i s s e r ,   M S ;   W o u t e r s ,   P 	 	 	 	 W a l t m a n ,   L u d o ;   C a l e r o - M e d i n a ,   C l a r a ;   K o s t e n ,   J o o s t ;   N o y o n s ,   E d   C .   M . ;   T i j s s e n ,   R o b e r t   J .   W . ;   v a n   E c k ,   N e e s   J a n ;   v a n   L e e u w e n ,   T h e d   N . ;   v a n   R a a n ,   A n t h o n y   F .   J . ;   V i s s e r ,   M a r t i j n   S . ;   W o u t e r s ,   P a u l 	 	 	 T h e   L e i d e n   r a n k i n g   2 0 1 1 / 2 0 1 2 :   D a t a   c o l l e c t i o n ,   i n d i c a t o r s ,   a n d   i n t e r p r e t a t i o n 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   b i b l i o m e t r i c s 	 U N I V E R S I T Y   R A N K I N G S ;   W O R L D   U N I V E R S I T I E S ;   A C A D E M I C   R A N K I N G ;   F A T A L   A T T R A C T I O N ;   S C I E N C E ;   I N S T I T U T I O N S ;   P E R F O R M A N C E ;   E X C E L L E N C E ;   K I L O M E T E R S ;   E D U C A T I O N 	 T h e   L e i d e n   R a n k i n g   2 0 1 1 / 2 0 1 2   i s   a   r a n k i n g   o f   u n i v e r s i t i e s   b a s e d   o n   b i b l i o m e t r i c   i n d i c a t o r s   o f   p u b l i c a t i o n   o u t p u t ,   c i t a t i o n   i m p a c t ,   a n d   s c i e n t i f i c   c o l l a b o r a t i o n .   T h e   r a n k i n g   i n c l u d e s   5 0 0   m a j o r   u n i v e r s i t i e s   f r o m   4 1   d i f f e r e n t   c o u n t r i e s .   T h i s   p a p e r   p r o v i d e s   a n   e x t e n s i v e   d i s c u s s i o n   o f   t h e   L e i d e n   R a n k i n g   2 0 1 1 / 2 0 1 2 .   T h e   r a n k i n g   i s   c o m p a r e d   w i t h   o t h e r   g l o b a l   u n i v e r s i t y   r a n k i n g s ,   i n   p a r t i c u l a r   t h e   A c a d e m i c   R a n k i n g   o f   W o r l d   U n i v e r s i t i e s   ( c o m m o n l y   k n o w n   a s   t h e   S h a n g h a i   R a n k i n g )   a n d   t h e   T i m e s   H i g h e r   E d u c a t i o n   W o r l d   U n i v e r s i t y   R a n k i n g s .   T h e   c o m p a r i s o n   f o c u s e s   o n   t h e   m e t h o d o l o g i c a l   c h o i c e s   u n d e r l y i n g   t h e   d i f f e r e n t   r a n k i n g s .   A l s o ,   a   d e t a i l e d   d e s c r i p t i o n   i s   o f f e r e d   o f   t h e   d a t a   c o l l e c t i o n   m e t h o d o l o g y   o f   t h e   L e i d e n   R a n k i n g   2 0 1 1 / 2 0 1 2   a n d   o f   t h e   i n d i c a t o r s   u s e d   i n   t h e   r a n k i n g .   V a r i o u s   i n n o v a t i o n s   i n   t h e   L e i d e n   R a n k i n g   2 0 1 1 / 2 0 1 2   a r e   p r e s e n t e d .   T h e s e   i n n o v a t i o n s   i n c l u d e   ( 1 )   a n   i n d i c a t o r   b a s e d   o n   c o u n t i n g   a   u n i v e r s i t y ' s   h i g h l y   c i t e d   p u b l i c a t i o n s ,   ( 2 )   i n d i c a t o r s   b a s e d   o n   f r a c t i o n a l   r a t h e r   t h a n   f u l l   c o u n t i n g   o f   c o l l a b o r a t i v e   p u b l i c a t i o n s ,   ( 3 )   t h e   p o s s i b i l i t y   o f   e x c l u d i n g   n o n - E n g l i s h   l a n g u a g e   p u b l i c a t i o n s ,   a n d   ( 4 )   t h e   u s e   o f   s t a b i l i t y   i n t e r v a l s .   F i n a l l y ,   s o m e   c o m m e n t s   a r e   m a d e   o n   t h e   i n t e r p r e t a t i o n   o f   t h e   r a n k i n g   a n d   a   n u m b e r   o f   l i m i t a t i o n s   o f   t h e   r a n k i n g   a r e   p o i n t e d   o u t . 	 [ W a l t m a n ,   L u d o ;   C a l e r o - M e d i n a ,   C l a r a ;   K o s t e n ,   J o o s t ;   N o y o n s ,   E d   C .   M . ;   T i j s s e n ,   R o b e r t   J .   W . ;   v a n   E c k ,   N e e s   J a n ;   v a n   L e e u w e n ,   T h e d   N . ;   v a n   R a a n ,   A n t h o n y   F .   J . ;   V i s s e r ,   M a r t i j n   S . ;   W o u t e r s ,   P a u l ]   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   N L - 2 3 0 0   R A   L e i d e n ,   N e t h e r l a n d s 	 W a l t m a n ,   L   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   N L - 2 3 0 0   R A   L e i d e n ,   N e t h e r l a n d s . 	 w a l t m a n l r @ c w t s . l e i d e n u n i v . n l ;   c l a r a @ c w t s . l e i d e n u n i v . n l ;   k o s t e n m j f @ c w t s . l e i d e n u n i v . n l ;   n o y o n s @ c w t s . l e i d e n u n i v . n l ;   t i j s s e n @ c w t s . l e i d e n u n i v . n l ;   e c k n j p v a n @ c w t s . l e i d e n u n i v . n l ;   l e e u w e n @ c w t s . l e i d e n u n i v . n l ;   v a n r a a n @ c w t s . l e i d e n u n i v . n l ;   v i s s e r @ c w t s . l e i d e n u n i v . n l ;   p . f . w o u t e r s @ c w t s . l e i d e n u n i v . n l 	 v a n   E c k ,   N e e s   J a n / B - 6 0 4 2 - 2 0 0 8 ;   T i j s s e n ,   R o b e r t / B - 2 3 9 7 - 2 0 0 9 	 v a n   E c k ,   N e e s   J a n / 0 0 0 0 - 0 0 0 1 - 8 4 4 8 - 4 5 2 1 ;   	 	 	 A g u i l l o   I . ,   2 0 0 8 ,   H I G H E R   E D   E U R O P E ,   V 3 3 ,   P 2 3 3 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 8 0 2 2 5 4 0 3 1 ;   A g u i l l o   I F ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 9 0 - z ;   A k s n e s   D W ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 8 . 0 0 2 ;   B a t y   P . ,   2 0 1 1 ,   C H A N G E   B E T T E R ;   B i l l a u t   J C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 2 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 1 5 - x ;   B o o k s t e i n   F L ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 2 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 8 9 - 5 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 6 ;   B u t l e r   D ,   2 0 1 0 ,   N A T U R E ,   V 4 6 4 ,   P 1 6 ,   D O I   1 0 . 1 0 3 8 / 4 6 4 0 1 6 a ;   C a l e r o - M e d i n a   C ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 7 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 0 7 ;   C o l l i a n d e r   C ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 1 0 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 9 . 0 0 3 ;   D e h o n   C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 5 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 7 6 - 0 ;   E f r o n   B ,   1 9 9 3 ,   I N T R O   B O O T S T R A P ;   E n s e r i n k   M ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 7 ,   P 1 0 2 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 1 7 . 5 8 4 1 . 1 0 2 6 ;   F l o r i a n   R V ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 7 - 1 7 1 2 - 1 ;   G a u f f r i a u   M ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 3 4 - 2 ;   H a z e l k o r n   E . ,   2 0 0 8 ,   H I G H   E D U C   P O L I C Y ,   V 2 1 ,   P 1 9 3 ,   D O I   D O I   1 0 . 1 0 5 7 / H E P . 2 0 0 8 . 1 ;   H a z e l k o r n   E . ,   2 0 0 7 ,   H I G H E R   E D   M A N A G E M E N T ,   V 2 ,   P 8 7 ;   I o a n n i d i s   J P ,   2 0 0 7 ,   B M C   M E D ,   V 5 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 1 - 7 0 1 5 - 5 - 3 0 ;   L e y d e s d o r f f   L . ,   S C I E N T O M E T R   I N   P R E S S ;   L i u   N C ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 1 - z ;   L i u   N C ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 1 1 6 ;   L o p e z - I l l e s c a s   C ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 5 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 9 8 - 6 ;   N o r d F o r s k ,   2 0 1 1 ,   C O M P   R E S   N O R D   U   U S   B ;   R a u h v a r g e r s   A . ,   2 0 1 1 ,   G L O B A L   U   R A N K I N G S   T H ;   S a i s a n a   M ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 1 6 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 9 . 0 0 3 ;   S c h n e i d e r   J .   W . ,   2 0 1 1 ,   A R X I V 1 1 1 2 2 5 1 6 V 1 ;   S h e l d r i c k   G M ,   2 0 0 8 ,   A C T A   C R Y S T A L L O G R   A ,   V 6 4 ,   P 1 1 2 ,   D O I   1 0 . 1 1 0 7 / S 0 1 0 8 7 6 7 3 0 7 0 4 3 9 3 0 ;   S p i e g e l h a l t e r   D J ,   2 0 0 9 ,   S T A T   S C I ,   V 2 4 ,   P 2 1 ;   T i j s s e n   R J W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 8 2 4 3 2 6 6 0 ;   T i j s s e n   R .   J .   W . ,   2 0 1 1 ,   E V A L U A T I O N   H I G H E R   E D ,   V 1 2 ,   P 1 9 ;   T i j s s e n   R J W ,   2 0 1 1 ,   N A T U R E ,   V 4 7 3 ,   P 1 5 4 ,   D O I   1 0 . 1 0 3 8 / 4 7 3 1 5 4 a ;   U s h e r   A . ,   2 0 0 6 ,   W O R L D   D I F F E R E N C E   G L O ;   v a n   L e e u w e n   T N ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 9 7 1 9 4 8 4 ;   v a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 2 - y ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   v a n   R a a n   A F J ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 8 2 - 1 ;   v a n   R a a n   T ,   2 0 1 1 ,   N A T U R E ,   V 4 6 9 ,   P 3 4 ,   D O I   1 0 . 1 0 3 8 / 4 6 9 0 3 4 a ;   V a n   V u g h t   F . ,   2 0 1 0 ,   H I G H E R   E D   M A N A G E M E N T ,   V 2 2 ,   P 3 1 ;   W e s t e r h e i j d e n   D .   F . ,   2 0 1 2 ,   M U L T I D I M E N S I O N A L   R A N ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 5 7 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 5 . 0 0 3 ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 ;   Z i t t   M . ,   2 0 0 7 ,   W O R L D   C L A S S   U   R A N K I N ,   P 1 4 1 	 4 2 	 1 0 9 	 1 0 9 	 2 1 	 1 3 8 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 1 2 	 6 3 	 1 2 	 	 	 	 	 2 4 1 9 	 2 4 3 2 	 	 1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 4 7 P S 	 W O S : 0 0 0 3 1 1 8 5 3 6 0 0 0 0 6 	 	 
 
 J 	 R a f o l s ,   I ;   L e y d e s d o r f f ,   L ;   O ' H a r e ,   A ;   N i g h t i n g a l e ,   P ;   S t i r l i n g ,   A 	 	 	 	 R a f o l s ,   I s m a e l ;   L e y d e s d o r f f ,   L o e t ;   O ' H a r e ,   A l i c e ;   N i g h t i n g a l e ,   P a u l ;   S t i r l i n g ,   A n d y 	 	 	 H o w   j o u r n a l   r a n k i n g s   c a n   s u p p r e s s   i n t e r d i s c i p l i n a r y   r e s e a r c h :   A   c o m p a r i s o n   b e t w e e n   I n n o v a t i o n   S t u d i e s   a n d   B u s i n e s s   &   M a n a g e m e n t 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I n t e r d i s c i p l i n a r y ;   E v a l u a t i o n ;   R a n k i n g ;   I n n o v a t i o n ;   B i b l i o m e t r i c s ;   R e s e a r c h   a s s e s s m e n t 	 S C I E N C E - A N D - T E C H N O L O G Y ;   I M P A C T   F A C T O R ;   R E S E A R C H   C O L L A B O R A T I O N ;   C I T A T I O N - I N D E X ;   K N O W L E D G E - B A S E ;   C L I M A T E - C H A N G E ;   I N D I C A T O R S ;   P O L I C Y ;   C E N T R A L I T Y ;   D I F F U S I O N 	 T h i s   s t u d y   p r o v i d e s   q u a n t i t a t i v e   e v i d e n c e   o n   h o w   t h e   u s e   o f   j o u r n a l   r a n k i n g s   c a n   d i s a d v a n t a g e   i n t e r d i s c i p l i n a r y   r e s e a r c h   i n   r e s e a r c h   e v a l u a t i o n s .   U s i n g   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a ,   i t   c o m p a r e s   t h e   d e g r e e   o f   i n t e r d i s c i p l i n a r i t y   a n d   t h e   r e s e a r c h   p e r f o r m a n c e   o f   a   n u m b e r   o f   I n n o v a t i o n   S t u d i e s   u n i t s   w i t h   t h a t   o f   l e a d i n g   B u s i n e s s   &   M a n a g e m e n t   S c h o o l s   ( B M S )   i n   t h e   U K .   O n   t h e   b a s i s   o f   v a r i o u s   m a p p i n g s   a n d   m e t r i c s ,   t h i s   s t u d y   s h o w s   t h a t :   ( i )   I n n o v a t i o n   S t u d i e s   u n i t s   a r e   c o n s i s t e n t l y   m o r e   i n t e r d i s c i p l i n a r y   i n   t h e i r   r e s e a r c h   t h a n   B u s i n e s s   &   M a n a g e m e n t   S c h o o l s ;   ( i i )   t h e   t o p   j o u r n a l s   i n   t h e   A s s o c i a t i o n   o f   B u s i n e s s   S c h o o l s '   r a n k i n g s   s p a n   a   l e s s   d i v e r s e   s e t   o f   d i s c i p l i n e s   t h a n   l o w e r - r a n k e d   j o u r n a l s ;   ( i i i )   t h i s   r e s u l t s   i n   a   m o r e   f a v o u r a b l e   a s s e s s m e n t   o f   t h e   p e r f o r m a n c e   o f   B u s i n e s s   &   M a n a g e m e n t   S c h o o l s ,   w h i c h   a r e   m o r e   d i s c i p l i n a r y - f o c u s e d .   T h i s   c i t a t i o n - b a s e d   a n a l y s i s   c h a l l e n g e s   t h e   j o u r n a l   r a n k i n g - b a s e d   a s s e s s m e n t .   I n   s h o r t ,   t h e   i n v e s t i g a t i o n   i l l u s t r a t e s   h o w   o s t e n s i b l y   ' e x c e l l e n c e - b a s e d '   j o u r n a l   r a n k i n g s   e x h i b i t   a   s y s t e m a t i c   b i a s   i n   f a v o u r   o f   m o n o - d i s c i p l i n a r y   r e s e a r c h .   T h e   p a p e r   c o n c l u d e s   w i t h   a   d i s c u s s i o n   o f   i m p l i c a t i o n s   o f   t h e s e   p h e n o m e n a ,   i n   p a r t i c u l a r   h o w   t h e   b i a s   i s   l i k e l y   t o   a f f e c t   n e g a t i v e l y   t h e   e v a l u a t i o n   a n d   a s s o c i a t e d   f i n a n c i a l   r e s o u r c i n g   o f   i n t e r d i s c i p l i n a r y   r e s e a r c h   o r g a n i s a t i o n s ,   a n d   m a y   r e s u l t   i n   r e s e a r c h e r s   b e c o m i n g   m o r e   c o m p l i a n t   w i t h   d i s c i p l i n a r y   a u t h o r i t y   o v e r   t i m e .   ( C )   2 0 1 2   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ R a f o l s ,   I s m a e l ;   O ' H a r e ,   A l i c e ;   N i g h t i n g a l e ,   P a u l ;   S t i r l i n g ,   A n d y ]   U n i v   S u s s e x ,   S P R U   S c i   &   T e c h n o l   P o l i c y   R e s ,   B r i g h t o n   B N 1   9 Q E ,   E   S u s s e x ,   E n g l a n d ;   [ R a f o l s ,   I s m a e l ]   G e o r g i a   I n s t   T e c h n o l ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ L e y d e s d o r f f ,   L o e t ]   U n i v   A m s t e r d a m ,   A m s t e r d a m   S c h   C o m m u n   R e s   A S C o R ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s 	 R a f o l s ,   I   ( r e p r i n t   a u t h o r ) ,   U n i v   S u s s e x ,   S P R U   S c i   &   T e c h n o l   P o l i c y   R e s ,   B r i g h t o n   B N 1   9 Q E ,   E   S u s s e x ,   E n g l a n d . 	 i . r a f o l s @ s u s s e x . a c . u k 	 L e y d e s d o r f f ,   L o e t / E - 2 9 0 3 - 2 0 1 0 ;   R a f o l s ,   I s m a e l / D - 1 5 0 9 - 2 0 0 9 ;   	 L e y d e s d o r f f ,   L o e t / 0 0 0 0 - 0 0 0 2 - 7 8 3 5 - 3 0 9 8 ;   R a f o l s ,   I s m a e l / 0 0 0 0 - 0 0 0 2 - 6 5 2 7 - 7 7 7 8 ;   S t i r l i n g ,   A n d y / 0 0 0 0 - 0 0 0 2 - 0 6 5 0 - 4 3 1 X ;   N i g h t i n g a l e ,   P a u l / 0 0 0 0 - 0 0 0 2 - 4 1 5 5 - 0 8 8 0 	 	 	 A B R C ,   1 9 9 0 ,   P E E R   R E V   R E P   A D V   B O A ;   A B S ,   2 0 1 0 ,   A C A D   J   Q U A L I T Y   G U I D E ;   A d a m s   J . ,   2 0 0 7 ,   B I B L I O M E T R I C   A N A L   I N ;   A d a m s   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 3 2 - 7 ;   A l v e s s o n   M . ,   2 0 1 1 ,   2 0 1 1   E G O S   E U R   G R O U P ;   B a l a k r i s h n a n   A . ,   2 0 1 1 ,   2 0 1 1   A T L   S C I   I N N   P O L ;   B a r r y   A ,   2 0 0 8 ,   E C O N   S O C ,   V 3 7 ,   P 2 0 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 8 5 1 4 0 7 0 1 7 6 0 8 4 1 ;   B h u p a t i r a j u   S ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 2 0 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 1 ;   B o d d i n g t o n   A . ,   1 9 9 9 ,   I N T E R D I S C I P L I N A R Y   R E ;   B o r d o n s   M ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 2 7 5 5 - 9 _ 2 0 ;   B o r n e r   K . ,   2 0 1 0 ,   S C I   T R A N S L   M E D ,   V 2 ,   p c m 2 4 ,   D O I   [ 1 0 . 1 1 2 6 / s c i t r a n s l m e d . 3 0 0 1 3 9 9 . ,   D O I   1 0 . 1 1 2 6 / S C I T R A N S L M E D . 3 0 0 1 3 9 9 ] ;   B r a u n   T ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 3 9 9 1 0 2 7 8 ;   B r u c e   A ,   2 0 0 4 ,   F U T U R E S ,   V 3 6 ,   P 4 5 7 ,   D O I   1 0 . 1 0 1 6 / j . f u t u r e s . 2 0 0 3 . 1 0 . 0 0 3 ;   C a m p b e l l   D .   T . ,   1 9 6 9 ,   I N T E R D I S C I P L I N A R Y   R E ,   P 3 2 8 ;   C a r a y o l   N ,   2 0 0 5 ,   R E S   E V A L U A T ,   V 1 4 ,   P 7 0 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 5 7 8 1 7 7 6 3 5 5 ;   C e c h   T R ,   2 0 0 4 ,   N A T   S T R U C T   M O L   B I O L ,   V 1 1 ,   P 1 1 6 6 ,   D O I   1 0 . 1 0 3 8 / n s m b 1 2 0 4 - 1 1 6 6 ;   C l a u s e n   T ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 2 4 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 4 ;   C o l l i n g r i d g e   D . ,   1 9 8 2 ,   C R I T I C A L   D E C I S I O N   M A ;   C o l l i n i   S . ,   2 0 0 8 ,   A B S E N T   M I N D S   I N T E L L E ;   C o r s i   M ,   2 0 1 0 ,   A M   J   E C O N   S O C I O L ,   V 6 9 ,   P 1 4 9 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 6 - 7 1 5 0 . 2 0 1 0 . 0 0 7 5 4 . x ;   C u m m i n g s   J . N . ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 7 2 2 ;   C u m m i n g s   J N ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 1 6 2 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 9 . 0 0 1 ;   M r v a r   A . ,   2 0 0 5 ,   E X P L O R A T O R Y   S O C I A L   N ;   D o n o v a n   C ,   2 0 0 7 ,   S C I   P U B L   P O L I C Y ,   V 3 4 ,   P 5 3 8 ,   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 7 X 2 5 6 5 2 9 ;   E R C ,   2 0 1 0 ,   E U R   R E S   C O U N C   E R C   G R ;   E u r o p e a n   U n i o n   R e s e a r c h   A d v i s o r y   B o a r d   ( E U R A B ) ,   2 0 0 4 ,   I N T   R E S ;   F a g e r b e r g   J ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 3 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 0 8 ;   F a g e r b e r g   J ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 1 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 2 . 0 0 6 ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   F u c h s m a n   K . ,   2 0 0 7 ,   D I S C I P L I N A R Y   R E A L I T I ;   F u n t o w i c z   S .   O . ,   1 9 9 0 ,   U N C E R T A I N T Y   Q U A L I T Y ;   G i b b o n s   M . ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G l a s e r   J . ,   2 0 0 7 ,   C H A N G I N G   G O V E R N A N C E ,   P 1 0 1 ,   D O I   [ D O I   1 0 . 1 0 0 7 / 9 7 8 - 1 - 4 0 2 0 - 6 7 4 6 - 4 _ 5 ,   1 0 . 1 0 0 7 / 9 7 8 - 1 - 4 0 2 0 - 6 7 4 6 - 4 _ 5 ] ;   G o o d a l l   A H ,   2 0 0 8 ,   J   M A N A G E   I N Q U I R Y ,   V 1 7 ,   P 4 0 8 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 7 3 1 1 9 3 0 ;   H a m i l t o n   K . S . ,   2 0 0 5 ,   U S I N G   B I B I L I O M E T R I C S ;   H a r l e y   S . ,   1 9 9 7 ,   H U M   R E L A T ,   V 5 0 ,   P 1 4 2 5 ;   H e i n z e   T ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 6 1 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 1 . 0 1 4 ;   H e s s e l s   L . K . ,   2 0 1 0 ,   T H E S I S   U   U T R E C H T   U T R ;   H o l l i n g s w o r t h   R o g e r s   J . ,   2 0 0 0 ,   P R A C T I S I N G   I N T E R D I S C ,   P 2 1 5 ;   H u u t o n i e m i   K ,   2 0 1 0 ,   O X F O R D   H D B   I N T E R D I S C ,   P 3 0 9 ;   H u u t o n i e m i   K ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 7 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 9 . 0 1 1 ;   J a c o b s   J A ,   2 0 0 9 ,   A N N U   R E V   S O C I O L ,   V 3 5 ,   P 4 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v - s o c - 0 7 0 3 0 8 - 1 1 5 9 5 4 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K a t z   J .   S . ,   2 0 0 0 ,   S C I   P U B L   P O L I C Y ,   V 2 7 ,   P 2 3 ,   D O I   [ 1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ] ;   K e l l y   A . ,   2 0 0 9 ,   M O D E L L I N G   O U T C O M E   U K ;   K i s s   I Z ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 7 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 8 . 0 0 2 ;   L a n g f e l d t   L ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 3 1 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 6 0 3 9 ;   L a r i v i e r e   V ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 2 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 2 6 ;   L a u d e l   G ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 2 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 6 0 6 6 ;   L e a h e y   E ,   2 0 0 7 ,   A M   S O C I O L   R E V ,   V 7 2 ,   P 5 3 3 ;   L e e   C . ,   2 0 0 6 ,   N A T U R E ;   L e e   F S ,   2 0 0 7 ,   C A M B   J   E C O N ,   V 3 1 ,   P 3 0 9 ,   D O I   1 0 . 1 0 9 3 / c j e / b e l 0 2 1 ;   L e e   F S ,   1 9 9 8 ,   C A P I T A L   C L A S S ,   V 2 2 ,   P 2 3 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 3 0 9 8 1 6 8 9 8 0 6 6 0 0 1 0 3 ;   L e v i t t   J M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 9 7 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 4 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 4 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 4 - z ;   L e y d e s d o r f f   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 1 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 3 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 9 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 8 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 0 9 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 9 . 0 0 2 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 3 ;   L e y d e s d o r f f   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 6 4 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 5 . 0 0 3 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 7 ;   L i u   Y X ,   2 0 1 2 ,   J   D O C ,   V 6 8 ,   P 3 1 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 1 2 1 1 2 0 0 3 1 0 ;   L l e r e n a   P ,   2 0 0 4 ,   S C I   I N N O V A T I O N   R E T H I ,   P 6 9 ;   L o w e   P ,   2 0 0 6 ,   J   A G R   E C O N ,   V 5 7 ,   P 1 6 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 7 - 9 5 5 2 . 2 0 0 6 . 0 0 0 4 5 . x ;   L o w e   P ,   2 0 0 9 ,   E N V I R O N   P L A N N   A ,   V 4 1 ,   P 1 1 7 1 ,   D O I   1 0 . 1 0 6 8 / a 4 1 7 5 ;   M a l l a r d   G ,   2 0 0 9 ,   S C I   T E C H N O L   H U M   V A L ,   V 3 4 ,   P 5 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 0 8 3 2 9 3 8 1 ;   M a n d i   S ,   2 0 0 8 ,   C I T A T I O N   C O U N T S   A R E ;   M a n s i l l a   V B ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 1 7 ;   M a r t i n   B . ,   2 0 1 0 ,   R E C O N F I G U R I N G   K N O W L E ,   P 5 1 ;   M a r t i n   B R ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 8 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 0 ;   M a r t i n   B R ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 9 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M e t z g e r   N ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 3 ,   P 6 4 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 3 . 5 4 0 2 . 6 4 2 ;   M i n z b e r g   H . ,   2 0 0 0 ,   M A N A G E R S   N O T   M B A S ;   M i r o w s k i   P . ,   2 0 1 1 ,   S C I   M A R T ;   M o l a s - G a l l a r t   J . ,   2 0 0 2 ,   I P T S   R E P O R T ,   V 6 6 ,   P 5 ;   M u l l e r   B . ,   2 0 0 9 ,   0 9 0 8 7   Z E W ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   N a t i o n a l   A c a d e m i e s ,   2 0 0 4 ,   F A C   I N T   R E S ;   N i g h t i n g a l e   P . ,   2 0 0 7 ,   S C I   P U B L   P O L I C Y ,   V 3 4 ,   P 5 4 3 ,   D O I   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 7 X 2 5 4 3 9 6 ;   O s w a l d   A J ,   2 0 0 7 ,   E C O N O M I C A ,   V 7 4 ,   P 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 3 5 . 2 0 0 6 . 0 0 5 7 5 . x ;   P a g e   S E ,   2 0 0 7 ,   D I F F E R E N C E :   H O W   T H E   P O W E R   O F   D I V E R S I T Y   C R E A T E S   B E T T E R   G R O U P S ,   F I R M S ,   S C H O O L S ,   A N D   S O C I E T I E S ,   P 1 ;   P a t e n a u d e   G ,   2 0 1 1 ,   G L O B A L   E N V I R O N   C H A N G ,   V 2 1 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 1 0 . 0 7 . 0 1 0 ;   P o r t e r   A .   L . ,   1 9 8 5 ,   S C I   T E C H N O L ,   V 1 0 ,   P 3 3 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 8 5 0 1 0 0 0 3 0 4 ;   P o r t e r   A L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 0 0 - 5 ;   P o r t e r   A L ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 1 8 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 5 8 4 1 ;   P o r t e r   A L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 7 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 9 7 - 2 ;   P R I C E   D D ,   1 9 8 4 ,   R E S   P O L I C Y ,   V 1 3 ,   P 3 ;   L e y d e s d o r f f   L . ,   2 0 1 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 1 ,   P 8 7 1 ;   R a f o l s   I ,   2 0 0 7 ,   I N N O V A T I O N - A B I N G D O N ,   V 2 0 ,   P 3 9 5 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 1 1 6 1 0 7 0 1 7 6 0 7 7 0 ;   R a f o l s   I ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 1 - y ;   R a f o l s   I ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 8 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 6 ;   R h o t e n   D ,   2 0 0 4 ,   S C I E N C E ,   V 3 0 6 ,   P 2 0 4 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 0 3 6 2 8 ;   R h o t e n   D . ,   2 0 0 9 ,   T H E S I S   1 1 ,   V 9 6 ,   P 8 3 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 7 2 5 5 1 3 6 0 8 0 9 9 1 2 1 ;   R h o t e n   D ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 5 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 8 . 0 0 1 ;   R i n i a   E J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 5 6 6 2 5 6 2 3 ;   R i n i a   E J ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 8 2 - 2 ;   R O E S S N E R   D ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 8 ,   P 1 2 5 ;   S a n z - M e n e n d e z   L ,   2 0 0 1 ,   R E S   E V A L U A T ,   V 1 0 ,   P 4 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 1 7 8 1 7 7 7 1 2 3 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S h i n n   T ,   2 0 0 2 ,   S O C   S C I   I N F O R M ,   V 4 1 ,   P 2 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 4 0 2 0 4 1 0 0 2 0 0 3 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S t i r l i n g   A . ,   1 9 9 8 ,   S P R U   E L E C T   W O R K I N G   P ,   V 2 8 ;   S t i r l i n g   A ,   2 0 0 8 ,   S C I   T E C H N O L   H U M   V A L ,   V 3 3 ,   P 2 6 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 0 7 3 1 1 2 6 5 ;   S t i r l i n g   A ,   2 0 0 7 ,   J   R   S O C   I N T E R F A C E ,   V 4 ,   P 7 0 7 ,   D O I   1 0 . 1 0 9 8 / r s i f . 2 0 0 7 . 0 2 1 3 ;   S t i r l i n g   A ,   2 0 1 0 ,   N A T U R E ,   V 4 6 8 ,   P 1 0 2 9 ,   D O I   1 0 . 1 0 3 8 / 4 6 8 1 0 2 9 a ;   S t o k o l s   D ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   p S 7 7 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 0 5 . 0 0 2 ;   T a y l o r   J ,   2 0 1 1 ,   B R I T   J   M A N A G E ,   V 2 2 ,   P 2 0 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 5 5 1 . 2 0 1 0 . 0 0 7 2 2 . x ;   T o u r i s h   D ,   2 0 1 1 ,   L E A D E R S H I P - L O N D O N ,   V 7 ,   P 3 6 7 ,   D O I   1 0 . 1 1 7 7 / 1 7 4 2 7 1 5 0 1 1 4 0 7 3 8 5 ;   T R A V I S   G D L ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 3 2 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 3 0 3 ;   v a n   E c k   N J ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 5 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 4 6 - 3 ;   v a n   R i j n s o e v e r   F J ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 4 6 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 1 1 . 0 0 1 ;   W a g n e r   C S ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 1 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 4 ;   W a l s h   V . ,   2 0 1 0 ,   E X P L O R E   W O R K S H   L U N D ,   P 2 0 1 0 ;   W E I N B E R G   A M ,   1 9 6 3 ,   M I N E R V A ,   V 1 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 0 9 6 2 4 8 ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   W h i t l e y   R .   D . ,   2 0 0 0 ,   I N T E L L E C T U A L   S O C I A L ;   W i l l m o t t   H ,   2 0 1 1 ,   O R G A N I Z A T I O N ,   V 1 8 ,   P 4 4 7 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 1 1 4 0 3 5 3 6 ;   W i l l m o t t   H ,   2 0 1 1 ,   O R G A N I Z A T I O N ,   V 1 8 ,   P 4 2 9 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 1 1 4 0 3 5 3 2 ;   Y e g r o s - Y e g r o s   A . ,   2 0 1 0 ,   S T I   I N D   C   L E I D   S E P T ;   Y o u t i e   J ,   2 0 0 8 ,   J   T E C H N O L   T R A N S F E R ,   V 3 3 ,   P 3 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 7 - 9 0 3 0 - 6 ;   Z h o u   P ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 6 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 1 . 0 1 0 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y ;   Z i t t   M ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 4 1 - 7 ;   Z i t t   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 0 ;   H e m l i n   S ,   2 0 0 4 ,   C R E A T I V E   K N O W L E D G E   E N V I R O N M E N T S :   T H E   I N F L U E N C E S   O N   C R E A T I V I T Y   I N   R E S E A R C H   A N D   I N N O V A T I O N ,   P 1 	 1 2 9 	 1 0 8 	 1 1 0 	 2 2 	 1 6 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 1 8 7 3 - 7 6 2 5 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 S E P 	 2 0 1 2 	 4 1 	 7 	 	 	 S I 	 	 1 2 6 2 	 1 2 8 2 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 5 	 	 2 1 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 9 5 6 R B 	 W O S : 0 0 0 3 0 5 1 0 5 7 0 0 0 0 9 	 	 
 
 J 	 L e e ,   J ;   K r a u s ,   K L ;   C o u l d w e l l ,   W T 	 	 	 	 L e e ,   J a n e t ;   K r a u s ,   K r i s t i n   L . ;   C o u l d w e l l ,   W i l l i a m   T . 	 	 	 U s e   o f   t h e   h   i n d e x   i n   n e u r o s u r g e r y   C l i n i c a l   a r t i c l e 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n s ;   h   i n d e x ;   i m p a c t 	 C I T A T I O N S ;   I M P A C T ;   N U M B E R S 	 O b j e c t .   A s s e s s i n g   a c a d e m i c   p r o d u c t i v i t y   t h r o u g h   s i m p l e   q u a n t i f i c a t i o n   m a y   o v e r l o o k   k e y   i n f o r m a t i o n ,   a n d   t h e   u s e   o f   s t a t i s t i c a l   e n u m e r a t i o n   o f   a c a d e m i c   o u t p u t   i s   g r o w i n g .   T h e   h   i n d e x ,   w h i c h   i n c o r p o r a t e s   b o t h   t h e   t o t a l   n u m b e r   o f   p u b l i c a t i o n s   a n d   t h e   c i t a t i o n s   o f   t h o s e   p u b l i c a t i o n s ,   h a s   b e e n   r e c e n t l y   p r o p o s e d   a s   a n   o b j e c t i v e   m e a s u r e   o f   a c a d e m i c   p r o d u c t i v i t y .   T h e   a u t h o r s   u s e d   s e v e r a l   t o o l s   t o   c a l c u l a t e   t h e   h   i n d e x   f o r   a c a d e m i c   n e u r o s u r g e o n s   t o   p r o v i d e   a   b a s i s   f o r   e v a l u a t i n g   p u b l i s h i n g   b y   p h y s i c i a n s .   M e t h o d s .   T h e   h   i n d e x   o f   r a n d o m l y   s e l e c t e d   a c a d e m i c   n e u r o s u r g e o n s   f r o m   a   s a m p l e   o f   o n e - t h i r d   o f   t h e   a c a d e m i c   p r o g r a m s   i n   t h e   U S   w a s   c a l c u l a t e d   u s i n g   d a t a   f r o m   G o o g l e   S c h o l a r   a n d   f r o m   t h e   S c o p u s   d a t a b a s e .   T h e   m e a n   h   i n d e x   f o r   e a c h   a c a d e m i c   r a n k   w a s   d e t e r m i n e d .   T h e   h   i n d i c e s   w e r e   a l s o   c o r r e l a t e d   w i t h   v a r i o u s   o t h e r   f a c t o r s   ( s u c h   a s   t i m e   s p e n t   p r a c t i c i n g   n e u r o s u r g e r y ,   a u t h o r s h i p   p o s i t i o n )   t o   i d e n t i f y   h o w   t h e s e   f a c t o r s   i n f l u e n c e d   t h e   h   i n d e x .   T h e   h   i n d i c e s   w e r e   t h e n   c o m p a r e d   w i t h   o t h e r   c i t a t i o n   s t a t i s t i c s   t o   e v a l u a t e   t h e   r o b u s t n e s s   o f   t h i s   m e t r i c .   F i n a l l y ,   h   i n d i c e s   w e r e   a l s o   c a l c u l a t e d   f o r   a   s a m p l i n g   o f   p h y s i c i a n s   i n   o t h e r   m e d i c a l   s p e c i a l t i e s   f o r   c o m p a r i s o n .   R e s u l t s .   A s   e x p e c t e d ,   t h e   h   i n d e x   i n c r e a s e d   w i t h   a c a d e m i c   r a n k   a n d   t h e r e   w a s   a   s t a t i s t i c a l l y   s i g n i f i c a n t   d i f f e r e n c e   b e t w e e n   e a c h   r a n k .   A   w e i g h t i n g   b a s e d   o n   p o s i t i o n   o f   a u t h o r s h i p   d i d   n o t   a f f e c t   h   i n d i c e s .   T h e   h   i n d e x   w a s   p o s i t i v e l y   c o r r e l a t e d   w i t h   t i m e   s i n c e   A m e r i c a n   B o a r d   o f   N e u r o l o g i c a l   S u r g e r y   c e r t i f i c a t i o n ,   a n d   i t   w a s   a l s o   c o r r e l a t e d   w i t h   o t h e r   c i t a t i o n   m e t r i c s .   A   c o m p a r i s o n   a m o n g   m e d i c a l   s p e c i a l t i e s   s u p p o r t s   t h e   a s s e r t i o n   t h a t   h   i n d e x   v a l u e s   m a y   n o t   b e   c o m p a r a b l e   b e t w e e n   f i e l d s ,   e v e n   c l o s e l y   r e l a t e d   s p e c i a l t i e s .   C o n c l u s i o n s .   T h e   h   i n d e x   a p p e a r s   t o   b e   a   r o b u s t   s t a t i s t i c   f o r   c o m p a r i n g   a c a d e m i c   o u t p u t   o f   n e u r o s u r g e o n s .   W i t h i n   t h e   f i e l d   o f   a c a d e m i c   n e u r o s u r g e r y ,   c l e a r   d i f f e r e n c e s   o f   h   i n d i c e s   b e t w e e n   a c a d e m i c   r a n k s   e x i s t .   O n   a v e r a g e ,   a n   i n c r e a s e   o f   t h e   h   i n d e x   b y   5   a p p e a r s   t o   c o r r e s p o n d   t o   t h e   n e x t   h i g h e s t   a c a d e m i c   r a n k ,   w i t h   t h e   e x c e p t i o n   o f   c h a i r p e r s o n .   T h e   h   i n d e x   c a n   b e   u s e d   a s   a   t o o l ,   a l o n g   w i t h   o t h e r   e v a l u a t i o n s ,   t o   e v a l u a t e   a n   i n d i v i d u a l ' s   p r o d u c t i v i t y   i n   t h e   a c a d e m i c   a d v a n c e m e n t   p r o c e s s   w i t h i n   t h e   f i e l d   o f   n e u r o s u r g e r y   b u t   s h o u l d   n o t   b e   u s e d   f o r   c o m p a r i s o n s   a c r o s s   m e d i c a l   s p e c i a l t i e s .   ( D O I :   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ) 	 [ L e e ,   J a n e t ;   K r a u s ,   K r i s t i n   L . ;   C o u l d w e l l ,   W i l l i a m   T . ]   U n i v   U t a h ,   D e p t   N e u r o s u r g ,   S a l t   L a k e   C i t y ,   U T   8 4 1 3 2   U S A 	 C o u l d w e l l ,   W T   ( r e p r i n t   a u t h o r ) ,   U n i v   U t a h ,   D e p t   N e u r o s u r g ,   1 7 5   N   M e d   D r   E ,   S a l t   L a k e   C i t y ,   U T   8 4 1 3 2   U S A . 	 n e u r o p u b @ h s c . u t a h . e d u 	 	 	 	 	 B a l l   P ,   2 0 0 7 ,   N A T U R E ,   V 4 4 8 ,   P 7 3 7 ,   D O I   1 0 . 1 0 3 8 / 4 4 8 7 3 7 a ;   * C O M M   P U B L   E T H ,   2 0 0 8 ,   2 0 0 5   C O M M   P U B L   E T H   R ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   F a l a g a s   M E ,   2 0 0 6 ,   F A S E B   J ,   V 2 0 ,   P 1 0 3 9 ,   D O I   1 0 . 1 0 9 6 / f j . 0 6 - 0 6 0 3 u f m ;   G o t t f r i e d   O N ,   2 0 0 5 ,   J   N E U R O S U R G ,   V 1 0 2 ,   P 2 0 2 ,   D O I   1 0 . 3 1 7 1 / j n s . 2 0 0 5 . 1 0 2 . 2 . 0 2 0 2 ;   G R A F   C ,   2 0 0 7 ,   I N T   J   C L I N   P R A C T ,   V 1 5 2 ,   P 1 ;   * H E A R T   G R O U P ,   2 0 0 8 ,   C I R C   R E S ,   V 1 0 2 ,   p E 1 0 4 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I n t e r n a t i o n a l   C o m m i t t e e   o f   M e d i c a l   J o u r n a l   E d i t o r s ,   B I O M E D I C A L   J   U N P U B ;   I n t e r n a t i o n a l   C o m m i t t e e   o f   M e d i c a l   J o u r n a l   E d i t o r s ,   2 0 0 6 ,   A N N   S U R G ,   V 2 4 3 ,   P 7 1 3 ;   J e a n g   K T ,   2 0 0 7 ,   R E T R O V I R O L O G Y ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 4 6 9 0 - 4 - 4 2 ;   J i n   B . ,   1 9 9 7 ,   I S S I   N E W S L E T T E R ,   V 3 ,   P 6 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K e l l y   C D ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 c ;   K i n n e y   A L ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 7 9 4 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 4 4 1 6 1 0 4 ;   L e v y   M a r k   L ,   2 0 0 7 ,   P r i m   C a r e   R e s p i r   J ,   V 1 6 ,   P 2 0 3 ,   D O I   1 0 . 3 1 3 2 / p c r j . 2 0 0 7 . 0 0 0 5 0 ;   M i s h r a   D C ,   2 0 0 8 ,   N A T U R E ,   V 4 5 1 ,   P 2 4 4 ,   D O I   1 0 . 1 0 3 8 / 4 5 1 2 4 4 a ;   P u r v i s   A ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 4 2 2 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 5 . 0 1 4 ;   R o e d i g e r   H .   L . ,   2 0 0 6 ,   A C A D   O B S E R V E R ,   V 1 9 ,   P 1 ;   S y k o r o v a   J ,   2 0 0 7 ,   C e s k a   G y n e k o l ,   V 7 2 ,   P 3 0 9 ;   v a n   H a s e l e n   R ,   2 0 0 7 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 7 . 1 0 . 0 0 4 ;   W e n d l   M C ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 b 	 2 4 	 1 0 7 	 1 0 7 	 0 	 1 6 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 A U G 	 2 0 0 9 	 1 1 1 	 2 	 	 	 	 	 3 8 7 	 3 9 2 	 	 1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 	 	 6 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 4 7 5 E L 	 W O S : 0 0 0 2 6 8 3 4 1 1 0 0 0 3 0 	 1 9 3 9 2 5 9 0 	 
 
 J 	 L e e ,   S ;   Y o o n ,   B ;   P a r k ,   Y 	 	 	 	 L e e ,   S u n g j o o ;   Y o o n ,   B y u n g u n ;   P a r k ,   Y o n g t a e 	 	 	 A n   a p p r o a c h   t o   d i s c o v e r i n g   n e w   t e c h n o l o g y   o p p o r t u n i t i e s :   K e y w o r d - b a s e d   p a t e n t   m a p   a p p r o a c h 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 K e y w o r d - b a s e d ;   T e x t - m i n i n g ;   P C A ;   N e w   t e c h n o l o g y   c r e a t i o n ;   P a t e n t   i n f o r m a t i o n ;   P a t e n t   m a p ;   T e c h n o l o g y   v a c a n c y 	 I N T E L L E C T U A L   P R O P E R T Y ;   B I B L I O M E T R I C S ;   V I S U A L I Z A T I O N ;   P E R F O R M A N C E ;   I N D U S T R Y ;   S Y S T E M 	 T h i s   p a p e r   p r o p o s e s   a n   a p p r o a c h   f o r   c r e a t i n g   a n d   u t i l i z i n g   k e y w o r d - b a s e d   p a t e n t   m a p s   f o r   u s e   i n   n e w   t e c h n o l o g y   c r e a t i o n   a c t i v i t y .   T h e   p r o p o s e d   a p p r o a c h   c o m p r i s e s   t h e   f o l l o w i n g   s u b - m o d u l e s .   F i r s t ,   t e x t   m i n i n g   i s   u s e d   t o   t r a n s f o r m   p a t e n t   d o c u m e n t s   i n t o   s t r u c t u r e d   d a t a   t o   i d e n t i f y   k e y w o r d   v e c t o r s .   S e c o n d ,   p r i n c i p a l   c o m p o n e n t   a n a l y s i s   i s   e m p l o y e d   t o   r e d u c e   t h e   n u m b e r s   o f   k e y w o r d   v e c t o r s   t o   m a k e   s u i t a b l e   f o r   u s e   o n   a   t w o - d i m e n s i o n a l   m a p .   T h i r d ,   p a t e n t   ' v a c a n c i e s ' ,   d e f i n e d   a s   b l a n k   a r e a s   i n   t h e   m a p   t h a t   a r e   s p a r s e   i n   p a t e n t   d e n s i t y   b u t   l a r g e   i n   s i z e ,   a r e   i d e n t i f i e d .   T h e   v a l i d i t y   o f   t h e   v a c a n c y   i s   t h e n   t e s t e d   a g a i n s t   S u c h   c r i t e r i a   a s   t e c h n o l o g i c a l   c r i t i c a l i t y   a n d   t e c h n o l o g i c a l   t r e n d s .   I f   a   v a c a n c y   i s   j u d g e d   a s   m e a n i n g f u l ,   i t s   t e c h n o l o g i c a l   f e a t u r e s   a r e   i n v e s t i g a t e d   i n   d e t a i l   t o   i d e n t i f y   t h e   p o t e n t i a l   f o r   n e w   t e c h n o l o g y   c r e a t i o n .   T h e   p r o c e d u r e   o f   t h e   p r o p o s e d   a p p r o a c h   i s   d e s c r i b e d   i n   d e t a i l   b y   e m p l o y i n g   a n   i l l u s t r a t i v e   p a t e n t   d a t a b a s e   a n d   i s   i m p l e m e n t e d   i n t o   a n   e x p e r t   s y s t e m   f o r   n e w   t e c h n o l o g y   c r e a t i o n .   ( C )   2 0 0 8   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ P a r k ,   Y o n g t a e ]   S e o u l   N a t l   U n i v ,   S c h   E n g n ,   D e p t   I n d   E n g n ,   S e o u l   1 5 1 7 4 2 ,   S o u t h   K o r e a ;   [ L e e ,   S u n g j o o ]   A j o u   U n i v ,   D e p t   I n d   &   I n f o r m a t   S y s t   E n g n ,   S u w o n   4 4 3 7 4 9 ,   K y u n g g i   D o ,   S o u t h   K o r e a ;   [ Y o o n ,   B y u n g u n ]   D o n g g u k   U n i v ,   D e p t   I n d   &   S y s t   E n g n ,   S e o u l   1 0 0 7 1 5 ,   S o u t h   K o r e a 	 P a r k ,   Y   ( r e p r i n t   a u t h o r ) ,   S e o u l   N a t l   U n i v ,   S c h   E n g n ,   D e p t   I n d   E n g n ,   S a n   5 6 - 1 , S h i l l i m   D o n g ,   S e o u l   1 5 1 7 4 2 ,   S o u t h   K o r e a . 	 p a r k y t @ c y b e r n e t . s n u . a c . k r 	 	 	 	 	 A b r a h a m   B P ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 0 ) 0 0 0 4 0 - 7 ;   A n d a l   M . ,   2 0 0 6 ,   F O R U M   I N F O R M   T E C H N O L ,   P 1 1 1 ;   A S H T O N   W B ,   1 9 8 9 ,   R E S   T E C H N O L   M A N A G E ,   V 3 2 ,   P 3 6 ;   A U S T I N   D H ,   1 9 9 3 ,   A M   E C O N   R E V ,   V 8 3 ,   P 2 5 3 ;   B a d e r   M A ,   2 0 0 8 ,   T E C H N O V A T I O N ,   V 2 8 ,   P 1 9 6 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 7 . 0 5 . 0 0 7 ;   B A Y   Y ,   2 0 0 3 ,   P   1   A S   P A C   C   P A T   M A P ,   P 3 ;   C A M P B E L L   G J ,   1 9 8 3 ,   S C A N N I N G ,   V 5 ,   P 1 3 7 ;   C a m u s   C . ,   2 0 0 3 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 5 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 2 ) 0 0 1 3 1 - X ;   C h e s b r o u g h   H .   W ,   2 0 0 3 ,   O P E N   I N N O V A T I O N   N E W ;   D a i m   T U ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 4 . 0 0 4 ;   D a v i d s o n   G S ,   1 9 9 8 ,   J   I N T E L L   I N F   S Y S T ,   V 1 1 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 6 9 0 0 0 8 8 5 6 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   E N G E L S M A N   E C ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 2 4 - 8 ;   E R N S T   H ,   1 9 9 5 ,   T E C H N O V A T I O N ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 4 9 7 2 ( 9 5 ) 9 6 6 0 5 - S ;   E r n s t   H ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 9 8 - 0 ;   E r n s t   H . ,   2 0 0 3 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 3 ) 0 0 0 7 7 - 2 ;   P e d r a z z i   G . ,   2 0 0 3 ,   W O R L D   P A T E N T   I N F O R M ,   V 2 5 ,   P 3 3 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 3 ) 0 0 1 1 3 - 3 ;   F a y y a d   U .   M . ,   1 9 9 6 ,   A D V   K N O W L E D G E   D I S C O V ;   F i s c h e r   G . ,   2 0 0 6 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 8 ,   P 3 1 2 ,   D O I   1 0 . 1 0 1 6 / j . w p i . 2 0 0 6 . 0 4 . 0 0 7 ;   F u j i i   A ,   2 0 0 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 3 ,   P 1 1 4 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 1 1 . 0 0 4 ;   G r e e n a c r e   M .   J . ,   1 9 8 4 ,   T H E O R Y   A P P L   C O R R E S P O ;   H a n e l   P ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 8 9 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 5 . 1 2 . 0 0 1 ;   H u l l   D . ,   2 0 0 1 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 3 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 1 ) 0 0 0 2 4 - 2 ;   * J I I I ,   2 0 0 2 ,   G U I D   B O O K   P R A C T   U S   P ;   J o h n s o n   R .   A . ,   1 9 9 8 ,   A P P L   M U L T I V A R I A T E   S T ;   J U N G   S ,   2 0 0 3 ,   W I P O   M O S T   I N T E R M E D I A ,   P 1 0 ;   K a r k i   M . ,   1 9 9 7 ,   W O R L D   P A T E N T   I N F O R M A ,   V 1 9 ,   P 2 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 9 7 ) 0 0 0 3 3 - 1 ;   K i m   Y G ,   2 0 0 8 ,   E X P E R T   S Y S T   A P P L ,   V 3 4 ,   P 1 8 0 4 ,   D O I   1 0 . 1 0 1 6 / j . e s w a . 2 0 0 7 . 0 1 . 0 3 3 ;   K o h o n e n   T . ,   1 9 9 5 ,   S E L F   O R G A N I Z I N G   M A P S ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   K r i e r   M . ,   2 0 0 2 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 4 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 2 ) 0 0 0 2 6 - 1 ;   K u z n e t s   S . ,   1 9 6 2 ,   R A T E   D I R E C T I O N   I N V E N ;   L a n j o u w   J . ,   1 9 9 9 ,   7 3 4 5   N A T   B U R   E C   R E S ;   L a r k e y   L .   S . ,   1 9 9 9 ,   P   D L   9 9   4   A C M   C   D I G ,   P 1 7 9 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 1 3 2 3 8 . 3 1 3 3 0 4 ;   L e c l e r c q   I . ,   1 9 9 9 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 1 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 0 ) 0 0 0 0 9 - 0 ;   L e e   S ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 1 6 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 8 . 0 0 5 0 9 . x ;   L E R N E R   J ,   1 9 9 4 ,   R A N D   J   E C O N ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 8 3 3 ;   L i u   S J ,   1 9 9 7 ,   I N T   J   T E C H N O L   M A N A G E ,   V 1 3 ,   P 6 6 1 ,   D O I   1 0 . 1 5 0 4 / I J T M . 1 9 9 7 . 0 0 1 6 8 9 ;   L i u   S . J . ,   2 0 0 3 ,   P   1   A S   P A C   C   P A T   M A P ,   P 2 ;   L y o n   M . ,   1 9 9 9 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 1 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 9 9 ) 0 0 0 3 5 - 6 ;   M i l l e r   W .   L . ,   1 9 9 9 ,   4   G E N E R A T I O N   R   D   M A N ;   M O R R I S   A ,   2 0 0 1 ,   P   I E E E   I N T   J O I N T   C   N ;   M o r r i s   S ,   2 0 0 2 ,   C O M P U T   I N D   E N G ,   V 4 3 ,   P 8 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 1 4 3 - 2 ;   N o r t o n   M .   J . ,   2 0 0 1 ,   I N T R O   C O N C E P T S   I N F O R ;   P a r k   Y ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 1 0 . 0 0 8 ;   P a r k   Y ,   2 0 0 5 ,   T E C H N O L   S O C ,   V 2 7 ,   P 4 7 1 ;   P i r a m u t h u   S ,   2 0 0 4 ,   E U R   J   O P E R   R E S ,   V 1 5 6 ,   P 4 8 3 ,   D O I   [ 1 0 . 1 0 1 6 / S 0 3 7 7 - 2 2 1 7 ( 0 2 ) 0 0 9 1 1 - 6 ,   1 0 . 1 0 1 6 / s 0 3 7 7 - 2 2 1 7 ( 0 2 ) 0 0 9 1 1 - 6 ] ;   S a l a m a t o v   Y . ,   1 9 9 9 ,   R I G H T   S O L U T I O N   R I G H T ;   S A L T O N   G ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 1 - 0 ;   S c h e l l n e r   I . ,   2 0 0 2 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 4 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 2 ) 0 0 0 1 9 - 4 ;   S C H E R E R   F M ,   1 9 8 1 ,   P A T E N T S   P R O D U C T I V I T Y ;   S c h u t z e   H . ,   1 9 9 5 ,   P   4   A N N   S   D O C   A N   I N F ,   P 1 6 1 ;   S C H U T Z E   H ,   1 9 9 4 ,   P   R I A O   9 4   C ;   S h a n e   S ,   2 0 0 1 ,   M A N A G E   S C I ,   V 4 7 ,   P 2 0 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 7 . 2 . 2 0 5 . 9 8 3 7 ;   S L A T E R   S F ,   1 9 9 3 ,   I N D   M A R K E T   M A N A G ,   V 2 2 ,   P 2 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 9 - 8 5 0 1 ( 9 3 ) 9 0 0 2 2 - Y ;   S m i t h   S R ,   2 0 0 2 ,   J   P S Y C H O P A T H O L   B E H A V ,   V 2 4 ,   P 2 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 7 3 1 1 1 7 0 2 2 ;   T A K E U C H I   H ,   1 9 8 6 ,   H A R V A R D   B U S   R E V ,   V 6 4 ,   P 1 3 7 ;   T h e o d o r o u   Y ,   2 0 0 7 ,   F U Z Z Y   S E T   S Y S T ,   V 1 5 8 ,   P 7 0 4 ,   D O I   1 0 . 1 0 1 6 / j . f s s . 2 0 0 6 . 1 1 . 0 1 1 ;   T s e n g   Y . - H . ,   2 0 0 5 ,   P   I A C I S   P A C   2 0 0 5   C   M ,   P 1 1 0 9 ;   T s e n g   Y H ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 7 1 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 7 7 4 0 6 ;   T s e n g   Y H ,   2 0 0 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 3 ,   P 1 2 1 6 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 1 1 . 0 1 1 ;   U C H I D A   H ,   2 0 0 4 ,   P   4   N T C I R   W O R K S H   J U N ;   U r b a n   G .   L . ,   1 9 9 3 ,   D E S I G N   M A R K E T I N G   N E W ;   U t t e r b a c k   J .   M . ,   1 9 9 6 ,   M A S T E R I N G   D Y N A M I C S   I ;   V O N H I P P E L   E ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 7 9 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 7 . 7 9 1 ;   W a n g   P M ,   1 9 9 8 ,   J   B U S   E C O N   S T A T ,   V 1 6 ,   P 2 7 ,   D O I   1 0 . 2 3 0 7 / 1 3 9 2 0 1 3 ;   W a t a n a b e   C ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 7 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 1 ) 0 0 0 2 5 - 6 ;   W e i s s   S . ,   2 0 0 5 ,   T E X T   M I N I N G   P R E D I C T I ;   * W I P O ,   2 0 0 3 ,   P A T   M A P   E X   R E L   W I P O ;   * W I P O ,   2 0 0 0 ,   5 9   W I P O ,   P 1 3 ;   Y e a p   T ,   2 0 0 3 ,   I N T E R N A T I O N A L   C O N F E R E N C E   O N   M E M S ,   N A N O   A N D   S M A R T   S Y S T E M S ,   P R O C E E D I N G S ,   P 2 7 4 ,   D O I   1 0 . 1 1 0 9 / I C M E N S . 2 0 0 3 . 1 2 2 2 0 0 8 ;   Y o o n   B . ,   2 0 0 5 ,   T H E S I S   S E O U L   N A T L   U ;   Y o o n   B . ,   2 0 0 4 ,   J   H I G H   T E C H N O L O G Y   M A ,   V 1 5 ,   P 3 7 ,   D O I   D O I   1 0 . 1 0 1 6 / J . H I T E C H . 2 0 0 3 . 0 9 . 0 0 3 ;   Y O O N   B ,   2 0 0 8 ,   P   W S E A   C   C A M B R   U K   F E ;   Y o o n   B U ,   2 0 0 2 ,   R & D   M A N A G E ,   V 3 2 ,   P 2 9 1 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 3 1 0 . 0 0 2 6 1 	 7 5 	 1 0 7 	 1 1 0 	 6 	 1 1 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 6 - 4 9 7 2 	 1 8 7 9 - 2 3 8 3 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 J U N - J U L 	 2 0 0 9 	 2 9 	 6 - 7 	 	 	 	 	 4 8 1 	 4 9 7 	 	 1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 1 0 . 0 0 6 	 	 1 7 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 4 5 5 L I 	 W O S : 0 0 0 2 6 6 7 6 0 9 0 0 0 0 7 	 	 
 
 J 	 B a r - I l a n ,   J 	 	 	 	 B a r - I l a n ,   J u d i t 	 	 	 I n f o r m e t r i c s   a t   t h e   b e g i n n i n g   o f   t h e   2 1 s t   c e n t u r y   -   A   r e v i e w 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 i n f o r m e t r i c s ;   b i b l i o m e t r i c s ;   s c i e n t o m e t r i c s ;   w e b o m e t r i c s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   J O U R N A L - C I T A T I O N - R E P O R T S ;   U N I V E R S I T Y   W E B   S I T E S ;   S C I E N C E - A N D - T E C H N O L O G Y ;   I N D U S T R Y - G O V E R N M E N T   R E L A T I O N S ;   I N F O R M A L   S C H O L A R L Y   C O M M U N I C A T I O N ;   L A T E N T   S E M A N T I C   A N A L Y S I S ;   S E A R C H   E N G I N E   C O V E R A G E ;   A C C E S S   R E S E A R C H   P A P E R S ;   C O M B I N I N G   F U L L - T E X T 	 T h i s   p a p e r   r e v i e w s   d e v e l o p m e n t s   i n   i n f o r m e t r i c s   b e t w e e n   2 0 0 0   a n d   2 0 0 6 .   A t   t h e   b e g i n n i n g   o f   t h e   2 1 s t   c e n t u r y   w e   w i t n e s s   c o n s i d e r a b l e   g r o w t h   i n   w e b o m e t r i c s ,   m a p p i n g   a n d   v i s u a l i z a t i o n   a n d   o p e n   a c c e s s .   A   n e w   t o p i c   i s   c o m p a r i s o n   b e t w e e n   c i t a t i o n   d a t a b a s e s ,   a s   a   r e s u l t   o f   t h e   i n t r o d u c t i o n   o f   t w o   n e w   c i t a t i o n   d a t a b a s e s   S c o p u s   a n d   G o o g l e   S c h o l a r .   T h e r e   i s   r e n e w e d   i n t e r e s t   i n   i n d i c a t o r s   a s   a   r e s u l t   o f   t h e   i n t r o d u c t i o n   o f   t h e   h - i n d e x .   T r a d i t i o n a l   t o p i c s   l i k e   c i t a t i o n   a n a l y s i s   a n d   i n f o r m e t r i c   t h e o r y   a l s o   c o n t i n u e   t o   d e v e l o p .   T h e   i m p a c t   f a c t o r   d e b a t e ,   e s p e c i a l l y   o u t s i d e   t h e   i n f o r m e t r i c   l i t e r a t u r e   c o n t i n u e s   t o   t h r i v e .   R a n k e d   l i s t s   ( o f   j o u r n a l ,   h i g h l y   c i t e d   p a p e r s   o r   o f   e d u c a t i o n a l   i n s t i t u t i o n s )   a r e   o f   g r e a t   p u b l i c   i n t e r e s t .   ( C )   2 0 0 7   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 B a r   I l a n   U n i v ,   D e p t   I n f o r m a t   S c i ,   I L - 5 2 9 0 0   R a m a t   G a n ,   I s r a e l 	 B a r - I l a n ,   J   ( r e p r i n t   a u t h o r ) ,   B a r   I l a n   U n i v ,   D e p t   I n f o r m a t   S c i ,   I L - 5 2 9 0 0   R a m a t   G a n ,   I s r a e l . 	 b a r i l a j @ m a i l . b i u . a c . i l 	 B a r - I l a n ,   J u d i t / B - 3 4 5 2 - 2 0 0 9 	 B a r - I l a n ,   J u d i t / 0 0 0 0 - 0 0 0 2 - 8 7 9 6 - 5 2 4 8 	 	 	 A c s   Z J ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 0 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 8 4 - 6 ;   A D A M   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 5 ;   A d a m s   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 5 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 8 - 9 ;   A g u i l l o   I F ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 9 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 3 3 ;   A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   A k s n e s   D W ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 6 2 ;   A k s n e s   D W ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 6 4 5 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   A k s n e s   D W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 1 9 2 2 8 3 6 8 ;   A l b e r t   R ,   2 0 0 2 ,   R E V   M O D   P H Y S ,   V 7 4 ,   P 4 7 ,   D O I   1 0 . 1 1 0 3 / R e v M o d P h y s . 7 4 . 4 7 ;   A l l e n   M P ,   2 0 0 6 ,   J   M E D   L I B R   A S S O C ,   V 9 4 ,   P 2 0 6 ;   A n d e r s o n   K e n t ,   2 0 0 1 ,   J   E L E C T   P U B L I S H I N G ,   V 6 ;   A n t e l m a n   K ,   2 0 0 4 ,   C O L L   R E S   L I B R ,   V 6 5 ,   P 3 7 2 ;   A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   A r u n a c h a l a m   S ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 2 1 ;   A r z b e r g e r   P ,   2 0 0 4 ,   S C I E N C E ,   V 3 0 3 ,   P 1 7 7 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 9 5 9 5 8 ;   B a e z a - Y a t e s   R ,   2 0 0 5 ,   C Y B E R M E T R I C S ,   V 9 ;   B a i l o n - M o r e n o   R ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 1 - 5 ;   B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B a l c o n i   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 3 ) 0 0 1 0 8 - 2 ;   B a n k s   M G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 6 - 5 ;   B a r - I l a n   J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 4 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 5 < 4 3 2 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 7 ;   B a r - I l a n   J ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 2 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 9 1 1 9 2 6 5 ;   B a r - I l a n   J ,   2 0 0 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 8 ,   P 2 3 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 8 0 1 0 6 ;   B a r - I l a n   J ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 8 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 4 9 ;   B a r - I l a n   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 9 ;   B a r - I l a n   J ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 3 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 4 7 ;   B a r - I l a n   J ,   2 0 0 2 ,   J   I N F   S C I ,   V 2 8 ,   P 4 5 5 ;   B a r - I l a n   J ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 3 7 1 ;   B a r - I l a n   J ,   2 0 0 0 ,   O N L I N E   I N F O R M   R E V ,   V 2 4 ,   P 4 3 9 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 0 1 0 3 6 2 0 9 9 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B a r - I l a n   J ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 5 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 9 ;   B a r a b a s i   A L ,   2 0 0 2 ,   P H Y S I C A   A ,   V 3 1 1 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 4 3 7 1 ( 0 2 ) 0 0 7 3 6 - 7 ;   B a r I l a n   J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 2 9 ;   B A R I L A N   J ,   2 0 0 5 ,   I N F O R M   P R O C E S S I N G   M A ,   V 4 1 ,   P 9 6 6 ;   B a r - I l a n   J . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 3 ;   B a r - I l a n   J ,   2 0 0 5 ,   C Y B E R M E T R I C S ,   V 9 ;   B a r j a k   F ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 3 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 5 4 ;   B a r j a k   F ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 6 - y ;   B a r r a t   A ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 3 7 4 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 0 0 8 7 1 0 1 ;   B a r r e t t   C B ,   2 0 0 0 ,   A P P L   E C O N ,   V 3 2 ,   P 2 3 9 ;   B a s u   A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 3 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 2 5 0 5 6 8 7 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B A U E R   K ,   2 0 0 5 ,   D L I B   M A G A Z I N E ,   V 1 1 ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B e a v e r   D D ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 3 9 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 2 . 8 5 3 6 0 . c d ;   B e a v e r   D D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 3 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 5 4 2 1 4 3 3 7 ;   B e h r e n s   T R ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 1 1 2 - 2 ;   B e l l e r   F K ,   2 0 0 0 ,   G Y N A K O L   G E B U R T   R U N D S ,   V 4 0 ,   P 5 0 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 2 2 3 2 9 ;   B e n s m a n   S J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 0 8 ;   B e n s m a n   S J ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 2 8 ;   B e n s m a n   S J ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 2 2 . a b s ;   B h a t t a c h a r y a   S ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 4 4 8 2 8 7 5 9 ;   B j o r n e b o r n   L ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 2 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 7 7 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B j o r n e b o r n   L . ,   2 0 0 4 ,   T H E S I S   R O Y A L   S C H   L I B ;   B j o r n e b o r n   L . ,   2 0 0 1 ,   P   1 2   A C M   C   H Y P   H Y P ,   P 1 3 3 ;   B l a n c h a r d   D ,   2 0 0 2 ,   P R E V   M E D ,   V 3 5 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 6 / p m e d . 2 0 0 2 . 1 0 8 8 ;   B l o c h   S ,   2 0 0 1 ,   A U S T   N Z   J   P S Y C H I A T ,   V 3 5 ,   P 5 6 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 6 1 4 . 2 0 0 1 . 0 0 9 1 8 . x ;   B o l d t   J ,   2 0 0 0 ,   A C T A   A N A E S T H   S C A N D ,   V 4 4 ,   P 8 4 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 0 . 4 4 0 7 1 0 . x ;   B o l l a c k e r   K D ,   2 0 0 0 ,   I E E E   I N T E L L   S Y S T   A P P ,   V 1 5 ,   P 4 2 ,   D O I   1 0 . 1 1 0 9 / 5 2 5 4 . 8 5 0 8 2 6 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B o n a c c o r s i   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 2 7 5 0 7 5 5 2 ;   B o n i t z   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 0 8 5 1 0 3 9 8 ;   B o n n e v i e   E ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 1 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 3 2 ;   B O O K S T E I N   A ,   2 0 0 6 ,   I N F O R M   P R O C E S S I N G   M A ,   V 4 2 9 6 ,   P 1 4 2 2 ;   B o r d o n s   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 0 4 0 7 8 7 6 ;   B o r g m a n   C L ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 1 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 1 ;   B o r g m a n   C .   L . ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   P 3 ;   B o r n e r   K ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 6 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 6 2 5 1 0 0 ;   B O R N E R   K ,   2 0 0 3 ,   V I S U A L I Z I N G   K N O W L E D G ,   P 1 7 9 ;   B o r n m a n n   L ,   2 0 0 5 ,   R E S   E V A L U A T ,   V 1 4 ,   P 1 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 5 7 8 1 7 7 6 2 8 3 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 4 - 2 ;   B o r n m a n n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 1 - 1 ;   B o y a c k   K W ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 9 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 0 9 1 0 0 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   B o y a c k   K W ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 3 0 ;   B o y a c k   K W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 6 6 ;   B o z e m a n   B ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 5 9 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 0 8 ;   B r a u n   T ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 3 - x ;   B r a u n   T ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 8 ;   B r a u n   T ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 9 8 0 0 6 0 7 8 ;   B r a u n   T ,   2 0 0 0 ,   C H E M   R E V ,   V 1 0 0 ,   P 2 3 ,   D O I   1 0 . 1 0 2 1 / c r 9 9 0 0 9 6 j ;   B r a u n   T ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 4 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 4 3 0 0 2 5 6 0 ;   B r a u n   T . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 5 1 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B r o d e r   A ,   2 0 0 0 ,   C O M P U T   N E T W ,   V 3 3 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 9 - 1 2 8 6 ( 0 0 ) 0 0 0 8 3 - 9 ;   B r o d y   T ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 0 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 7 3 ;   B r o w n   C ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 3 6 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 3 ;   B r o w n   C ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 8 6 > 3 . 3 . C O ; 2 - 4 ;   B u c h a n a n   R A ,   2 0 0 6 ,   C O L L   R E S   L I B R ,   V 6 7 ,   P 2 9 2 ;   B u e l a - C a s a l   G ,   2 0 0 3 ,   P S I C O T H E M A ,   V 1 5 ,   P 2 3 ;   B u e l a - C a s a l   G ,   2 0 0 2 ,   P S I C O T H E M A ,   V 1 4 ,   P 8 3 7 ;   B u r r e l l   Q L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 0 - 5 ;   B u r r e l l   Q L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 1 7 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 6 ;   B u r r e l l   Q L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 7 0 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 6 0 ;   B u r r e l l   Q L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 0 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 1 6 9 1 1 5 1 1 ;   B u r r e l l   Q L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 5 1 5 0 9 9 7 5 ;   B u t l e r   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 4 - 1 ;   B u t l e r   L ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 ;   B u t l e r   L ,   2 0 0 2 ,   N A T U R E ,   V 4 1 9 ,   P 8 7 7 ,   D O I   1 0 . 1 0 3 8 / 4 1 9 8 7 7 a ;   C a h l i k   T ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 3 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 8 1 4 2 1 9 9 0 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   C H A N   L C Y ,   2 0 0 2 ,   C Y B E R M E T R I C S ,   V 6 ;   C h e n   C . ,   2 0 0 3 ,   M A P P I N G   S C I   F R O N T I E R ;   C h e n   C . ,   2 0 0 4 ,   I N F O R M   V I S U A L I Z A T I O N ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h e n   C M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 6 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 5 ;   C h e n   C M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 3 1 5 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 7 4 > 3 . 3 . C O ; 2 - U ;   C H E N   C M ,   2 0 0 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 6 ,   P 7 0 4 ;   C h e n   X Y ,   2 0 0 1 ,   C H I N E S E   E D U C   S O C ,   V 3 4 ,   P 7 1 ;   C h o m p a l o v   I ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 7 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 4 5 - 7 ;   C h u   H ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 7 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 4 . 0 9 . 0 0 2 ;   C o a t s   A J S ,   2 0 0 5 ,   I N T   J   C A R D I O L ,   V 1 0 5 ,   P 1 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i j c a r d . 2 0 0 5 . 0 8 . 0 0 4 ;   C o c c i a   M ,   2 0 0 4 ,   R & D   M A N A G E ,   V 3 4 ,   P 2 6 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 4 . 0 0 3 3 8 . x ;   C o e l h o   P M Z ,   2 0 0 3 ,   B R A Z   J   M E D   B I O L   R E S ,   V 3 6 ,   P 1 6 0 5 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 0 - 8 7 9 X 2 0 0 3 0 0 1 2 0 0 0 0 1 ;   C o l q u h o u n   D ,   2 0 0 3 ,   N A T U R E ,   V 4 2 3 ,   P 4 7 9 ,   D O I   1 0 . 1 0 3 8 / 4 2 3 4 7 9 a ;   C o t h e y   V ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 2 2 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 7 8 ;   C o t h e y   V . ,   2 0 0 6 ,   C Y B E R M E T R I C S ,   V 1 0 ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   C r o n i n   B ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 5 3 ;   C r o n i n   B ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 7 8 ;   C r o n i n   B ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s ;   C r o n i n   B ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 2 6 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 4 0 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C R O N I N   B ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 4 ;   C R O N I N   B . ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   C u r t i   M ,   2 0 0 1 ,   H A E M A T O L O G I C A ,   V 8 6 ,   P 1 0 1 5 ;   D a n e l l   R ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 0 5 1 2 3 8 3 1 ;   D a n e l l   R ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 2 0 5 ;   D A V E N P O R T   E ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 5 1 7 ;   D a v i s   P ,   2 0 0 2 ,   P O R T A L - L I B R   A C A D ,   V 2 ,   P 1 5 5 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 2 . 0 0 0 9 ;   D a v i s   P M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 3 0 9 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 6 9 > 3 . 3 . C O ; 2 - G ;   D a v i s   R M ,   2 0 0 2 ,   S C I   E N G   E T H I C S ,   V 8 ,   P 5 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 9 4 8 - 0 0 2 - 0 0 0 4 - 7 ;   D e b a c k e r e   K ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 3 2 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 1 2 . 0 0 3 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   M r v a r   A . ,   2 0 0 5 ,   E X P L O R A T O R Y   S O C I A L   N ;   D I E T Z   J S ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 4 1 2 ;   D i n g   Y ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 1 9 0 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 3 1 > 3 . 0 . C O ; 2 - B ;   D i n g   Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 5 7 0 9 1 0 9 ;   D i n g   Y ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 5 1 - 0 ;   H i n z e   S . ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 8 ,   P 1 0 1 ;   D o n o h u e   J M ,   2 0 0 0 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 8 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 9 ) 0 0 0 2 4 - 9 ;   D o r e   J C ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 3 0 ;   D u B o i s   F L ,   2 0 0 0 ,   J   I N T   B U S   S T U D ,   V 3 1 ,   P 6 8 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 9 2 9 ;   D u r r a n t   R ,   2 0 0 3 ,   T O B   C O N T R O L ,   V 1 2 ,   P 7 5 ;   D u y   J ,   2 0 0 6 ,   J   A C A D   L I B R ,   V 3 2 ,   P 5 1 2 ,   D O I   1 0 . 1 0 1 6 / j . a c a l i b . 2 0 0 6 . 0 5 . 0 0 5 ;   E g g h e   L ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 2 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 3 4 9 2 5 7 3 4 ;   E g g h e   L ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 3 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 8 4 0 4 7 7 8 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 0 3 > 3 . 0 . C O ; 2 - 8 ;   E g g h e   L ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 0 6 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 4 . 0 5 . 0 0 4 ;   E g g h e   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 1 ;   E g g h e   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 9 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 8 6 ;   E g g h e   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 5 8 ;   E g g h e   L ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 9 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 9 0 . 9 6 4 1 8 . b f ;   E g g h e   L ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 1 0 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 7 3 6 6 . 8 3 4 1 4 . 0 9 ;   E g g h e   L ,   2 0 0 2 ,   C A N   J   I N F O R M   L I B   S C I ,   V 2 7 ,   P 2 9 ;   E g g h e   L ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   S E R ,   P 1 ;   E g g h e   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 6 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 7 ;   E g g h e   L ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 0 3 ;   E g g h e   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 6 8 0 3 0 4 1 2 6 ;   E g g h e   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 5 8 6 1 2 0 1 4 ;   E g g h e   L ,   2 0 0 2 ,   M A T H   C O M P U T   M O D E L ,   V 3 5 ,   P 1 1 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 7 1 7 7 ( 0 2 ) 0 0 0 7 7 - 8 ;   E g g h e   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 6 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 6 7 8 0 7 5 0 4 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 4 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 9 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 5 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 5 8 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - X ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   E G G H E   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 3 3 ;   E G G H E   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 2 2 1 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   * E S S   S C I   I N D ,   2 0 0 5 ,   O N L   H E L P ;   E t z k o w i t z   H ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 5 5 - 4 ;   E y s e n b a c h   G . ,   2 0 0 6 ,   P L O S   B I O L ,   V 4 ,   P 6 9 2 ;   F a n g   Y ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 2 7 3 ;   F a r k a s   I ,   2 0 0 2 ,   P H Y S I C A   A ,   V 3 1 4 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 4 3 7 1 ( 0 2 ) 0 1 1 8 1 - 0 ;   F a s s o u l a k i   A ,   2 0 0 2 ,   A C T A   A N A E S T H   S C A N D ,   V 4 6 ,   P 9 0 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 2 . 4 6 0 7 2 3 . x ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   F e n t o n   J E ,   2 0 0 0 ,   C L I N   O T O L A R Y N G O L ,   V 2 5 ,   P 4 0 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 2 7 3 . 2 0 0 0 . 0 0 3 2 2 . x ;   F o r g i o n n e   G A ,   2 0 0 1 ,   I N F O R M   M A N A G E ,   V 3 8 ,   P 4 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 2 0 6 ( 0 0 ) 0 0 0 7 9 - 3 ;   F r a n d s e n   T F ,   2 0 0 6 ,   J   D O C ,   V 6 2 ,   P 5 8 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 6 1 0 6 4 2 0 4 8 ;   F r a n d s e n   T F ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 0 0 ;   F r a n k l i n   J ,   2 0 0 3 ,   B M C   M U S C U L O S K E L E T   D I ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 7 4 - 4 - 6 ;   G a d d   E ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 2 4 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 2 3 9 ;   G a d d   E ,   2 0 0 3 ,   J   L I B R   I N F   S C I ,   V 3 5 ,   P 1 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 3 3 5 3 0 0 5 ;   G a d d   E ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 3 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 3 0 2 9 5 0 0 2 ;   G a r d n e r   S . ,   2 0 0 5 ,   L i b r a r y   H i   T e c h   N e w s ,   V 2 2 ,   D O I   1 0 . 1 1 0 8 / 0 7 4 1 9 0 5 0 5 1 0 6 3 3 9 5 2 ;   G a r f i e l d   E ,   2 0 0 0 ,   C R O A T   M E D   J ,   V 4 1 ,   P 3 6 8 ;   G a r f i e l d   E ,   2 0 0 4 ,   J   I N F   S C I ,   V 3 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 2 8 0 2 ;   G a r f i e l d   E ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 6 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 2 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 6 ;   G A R F I E L D   E ,   2 0 0 7 ,   F R E E   F U L L   T E X T   A C C E S ;   G a u g h a n   M ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 5 2 ;   G i l e s   C L ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 1 7 5 9 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 7 7 4 3 1 0 1 ;   G i r v a n   M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 7 8 2 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 2 2 6 5 3 7 9 9 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 1 5 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 1 2 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 3 5 . 9 9 8 8 5 . e 9 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 6 3 ;   G l a n z e l   W ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 6 1 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 7 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 1 . 3 0 7 0 0 . e a ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 1 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 4 8 9 2 9 6 6 8 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 7 8 8 0 4 0 8 7 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 0 6 6 2 7 9 4 4 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 1 3 2 1 7 2 3 ;   G l a n z e l   W . ,   2 0 0 5 ,   I S S I   N E W S L E T T E R ,   V 1 ,   P 1 5 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 4 - y ;   G l e n i s s o n   P ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 4 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 1 ;   G l e n i s s o n   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 0 8 - 0 ;   G m u r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 1 9 5 0 3 0 0 5 ;   G o d i n   B ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 6 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 3 2 - X ;   G o d i n   B ,   2 0 0 0 ,   P U B L I C   U N D E R S T   S C I ,   V 9 ,   P 4 3 ,   D O I   1 0 . 1 0 8 8 / 0 9 6 3 - 6 6 2 5 / 9 / 1 / 3 0 3 ;   G o d i n   B ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 6 5 - 7 ;   G o d i n   B e n o i t ,   2 0 0 6 ,   S C I   P U B L   P O L I C Y ,   V 3 3 ,   P 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 6 7 8 1 7 7 9 1 9 0 ;   G o d i n   B . ,   2 0 0 5 ,   M E A S U R E M E N T   S T A T   S C I ;   G o d i n   B ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 8 6 - 0 ;   G o l d s t e i n   M L ,   2 0 0 4 ,   E U R   P H Y S   J   B ,   V 4 1 ,   P 2 5 5 ,   D O I   1 0 . 1 1 4 0 / e p j b / e 2 0 0 4 - 0 0 3 1 6 - 5 ;   G O L D S T E I N   M L ,   2 0 0 5 ,   P H Y S   R E V   E ,   V 7 1 ;   G o o d r u m   A A ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 6 6 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 4 7 - 9 ;   G r i g g s   R A ,   2 0 0 2 ,   T E A C H   P S Y C H O L ,   V 2 9 ,   P 2 0 3 ,   D O I   1 0 . 1 2 0 7 / S 1 5 3 2 8 0 2 3 T O P 2 9 0 3 _ 0 4 ;   G u t i e r r e z   J ,   2 0 0 1 ,   P R O G   H U M   G E O G ,   V 2 5 ,   P 5 3 ,   D O I   1 0 . 1 1 9 1 / 0 3 0 9 1 3 2 0 1 6 6 6 8 2 3 3 1 6 ;   H a l l   B H ,   2 0 0 5 ,   R A N D   J   E C O N ,   V 3 6 ,   P 1 6 ;   H a r h o f f   D ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 3 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 1 2 4 - 5 ;   H a r n a d   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 0 ,   P 1 0 2 4 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 4 2 1 0 ;   H a r n a d   S ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 2 9 ;   H a r n a d   S . ,   2 0 0 4 ,   S E R I A L S   R E V ,   V 3 0 ,   P 3 1 0 ,   D O I   D O I   1 0 . 1 0 1 6 / J . S E R R E V . 2 0 0 4 . 0 9 . 0 1 3 ;   H a r n a d   S . ,   2 0 0 4 ,   D L I B   M A G A Z I N E ,   V 1 0 ;   H a r r i e s   G ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 4 3 6 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 6 7 3 6 ;   H a r t e r   S P ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 9 4 0 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 9 4 0 : : A I D - A S I 6 0 > 3 . 0 . C O ; 2 - F ;   H e   S Y ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 1 ;   H e   Y L ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 ;   H e i m e r i k s   G ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 9 6 8 1 2 8 3 0 ;   H e i m e r i k s   G ,   2 0 0 6 ,   C Y B E R M E T R I C S ,   V 1 0 ,   P 1 ;   H e n d e r s o n   J ,   2 0 0 5 ,   C A N   M E D   A S S O C   J ,   V 1 7 2 ,   P 1 5 4 9 ,   D O I   1 0 . 1 5 0 3 / c m a j . 0 5 0 4 0 4 ;   H e r r i n g   S D ,   2 0 0 2 ,   C O L L   R E S   L I B R ,   V 6 3 ,   P 3 3 4 ;   H i c k s   D ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 6 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 1 4 7 - 5 ;   H i c k s   D . ,   2 0 0 0 ,   S C I   P U B L   P O L I C Y ,   V 2 7 ,   P 3 1 0 ,   D O I   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 1 8 0 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H I T C H C O C K   S ,   2 0 0 0 ,   P   5   A C M   C   D I G   L I B R ,   P 1 4 3 ,   D O I   1 0 . 1 1 4 5 / 3 3 6 5 9 7 . 3 3 6 6 5 5 ;   H i t c h c o c k   S . ,   2 0 0 2 ,   D L I B   M A G A Z I N E ,   V 8 ;   H o   Y S ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 1 7 1 ;   H o f f m a n - G o e t z   L ,   2 0 0 3 ,   J   H E A L T H   C O M M U N ,   V 8 ,   P 4 7 5 ,   D O I   1 0 . 1 0 8 0 / 1 0 8 1 0 7 3 0 3 9 0 2 3 3 2 9 9 ;   H o l d e n   P A ,   2 0 0 5 ,   V A D O S E   Z O N E   J ,   V 4 ,   P 1 ;   H o l m e s   A . ,   2 0 0 1 ,   I N F O R M   R E S ,   V 6 ;   H o o d   W W ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 0 1 ;   H o o d   W W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 8 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 2 . 4 7 1 1 5 . c 6 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   H o o d   W W ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 2 4 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 9 1 ;   H u a n g   Z ,   2 0 0 4 ,   J   N A N O P A R T   R E S ,   V 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 4 - 4 1 1 7 - 6 ;   H u a n g   Z ,   2 0 0 3 ,   J   N A N O P A R T   R E S ,   V 5 ,   P 3 3 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 5 5 6 8 0 0 9 9 4 ;   H u b e r   J C ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 2 5 ;   H u b e r   J C ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 8 1 9 2 5 3 5 7 ;   H u l l m a n n   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 0 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 7 . 4 5 4 6 7 . a 7 ;   H y l a n d   K ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 0 4 ;   H y l a n d   K ,   2 0 0 1 ,   E N G L   S P E C I F   P U R P ,   V 2 0 ,   P 2 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 9 - 4 9 0 6 ( 0 0 ) 0 0 0 1 2 - 0 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   I n g w e r s e n   P ,   2 0 0 1 ,   C H I N E S E   S C I   B U L L ,   V 4 6 ,   P 5 2 4 ;   I n o n u   E ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 1 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 0 6 9 2 5 6 4 2 ;   I o a n n i d i s   J P A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 4 ,   P 2 1 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 4 . 2 . 2 1 8 ;   J a c s o   P ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 3 7 ;   J a c s o   P ,   2 0 0 5 ,   O N L I N E   I N F O R M   R E V ,   V 2 9 ,   P 2 0 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 5 1 0 5 9 8 0 6 6 ;   J a c s o   P ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 2 - 6 ;   J a c s o   P ,   2 0 0 6 ,   O N L I N E   I N F O R M   R E V ,   V 3 0 ,   P 2 9 7 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 6 1 0 6 7 5 8 1 6 ;   J a n s s e n   M A ,   2 0 0 6 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 6 ,   P 2 4 0 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 6 . 0 4 . 0 0 1 ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   J a r v e l i n   K ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 2 5 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 1 5 ;   J i n   B H . ,   2 0 0 5 ,   P   I S S I   2 0 0 5 ,   P 3 6 2 ,   D O I   S t o c k h o l m ;   J i n   P ,   2 0 0 3 ,   J   T R A N S L   M E D ,   V 1 ,   P 8 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 9 - 5 8 7 6 - 1 - 8 ;   K a p l a n   N R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 3 2 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 4 < 3 2 4 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - B ;   K a t e r a t t a n a k u l   P ,   2 0 0 3 ,   C O M M U N   A C M ,   V 4 6 ,   P 1 1 1 ,   D O I   1 0 . 1 1 4 5 / 9 4 4 2 1 7 . 9 4 4 2 2 1 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K i n g   J T ,   2 0 0 0 ,   N E U R O S U R G E R Y ,   V 4 7 ,   P 4 3 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 2 3 - 2 0 0 0 0 8 0 0 0 - 0 0 0 3 2 ;   K j a e r g a r d   L L ,   2 0 0 2 ,   J   C L I N   E P I D E M I O L ,   V 5 5 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 4 3 5 6 ( 0 1 ) 0 0 5 1 3 - 3 ;   K l e i j n e n   J P C ,   2 0 0 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 6 ,   P 5 5 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 9 ) 0 0 0 7 6 - X ;   K n o t h e   G ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 9 ;   K o e h l e r   W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 6 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 1 8 ;   K o e h l e r   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 1 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 6 7 1 2 2 1 5 ;   K o s t o f f   R N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 1 9 2 0 1 7 2 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o u s h a   K ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 6 - 9 ;   K r e t s c h m e r   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 4 0 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 1 8 . 6 8 4 3 0 . f d ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   K u r t z   M J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 9 5 ;   K u r t z   M J ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 9 5 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 0 ;   K u r t z   M J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 9 6 ;   L a f o u g e   T ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 1 4 2 3 3 5 1 8 ;   L a n d a u e r   T K ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 1 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 0 3 4 1 1 0 1 ;   L a n d r y   R ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 8 1 - 0 ;   L a n g e   L L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 9 9 9 1 7 0 6 3 ;   L a n k h o r s t   G J ,   2 0 0 1 ,   C L I N   R E H A B I L ,   V 1 5 ,   P 1 1 5 ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   L a s c a r   C ,   2 0 0 1 ,   C O L L   R E S   L I B R ,   V 6 2 ,   P 4 2 2 ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L A W R E N C E   S ,   2 0 0 0 ,   I E E E   C O M P U T ,   V 3 4 ,   P 2 6 ;   L e e   K P ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 0 5 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 0 5 ;   L e t a   J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 2 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 6 8 9 2 8 3 4 9 ;   L e w i s o n   G ,   2 0 0 5 ,   R E S   E V A L U A T ,   V 1 4 ,   P 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 5 7 8 1 7 7 6 3 1 9 ;   L e w i s o n   G ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 1 4 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 6 7 7 . 7 9 1 7 3 . b 8 ;   L e w i s o n   G ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 4 6 0 8 7 8 5 ;   L e w i s o n   G ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 9 4 8 1 0 8 8 3 ;   L e y d e s d o r f f   L ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 2 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 3 9 0 2 6 6 4 3 ;   L e y d e s d o r f f   L ,   2 0 0 5 ,   S C I   C O M M U N ,   V 2 7 ,   P 6 4 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 0 5 2 7 8 3 4 6 ;   L e y d e s d o r f f   L ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 3 7 1 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 4 8 1 4 4 ;   L e y d e s d o r f f   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 6 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 3 1 - 1 ;   L e y d e s d o r f f   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 7 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 3 0 ;   L e y d e s d o r f f   L ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 1 5 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 6 7 8 . 3 1 0 9 7 . e 0 ;   L e y d e s d o r f f   L ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 5 3 1 3 0 5 7 7 ;   L e y d e s d o r f f   L ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 7 6 3 0 8 2 8 7 ;   L e y d e s d o r f f   L ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 8 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 4 5 8 0 2 8 ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 6 0 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 2 2 ;   L e y d e s d o r f f   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 3 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 9 2 1 0 6 0 5 9 ;   L e y d e s d o r f f   L ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 4 4 ;   L e y d e s d o r f f   L ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 2 6 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 9 3 ;   L e y d e s d o r f f   L . ,   2 0 0 1 ,   C H A L L E N G E   S C I E N T O M E T ;   L E Y D E S D O R F F   L ,   2 0 0 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 5 ,   P 9 9 9 ;   L E Y D E S D O R F F   L ,   2 0 0 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 7 ,   P 1 1 7 0 ;   L e y d e s d o r f f   L . ,   2 0 0 1 ,   C Y B E R M E T R I C S ,   V 5 ;   L e y d e s d o r f f   L . ,   2 0 0 0 ,   C Y B E R M E T R I C S ,   V 4 ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 3 5 ;   L i   X M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 6 - 7 ;   L i   X M ,   2 0 0 3 ,   O N L I N E   I N F O R M   R E V ,   V 2 7 ,   P 4 0 7 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 3 1 0 5 1 0 0 4 6 ;   L i   X M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 1 8 9 7 0 2 4 6 3 ;   L I A N G   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 3 ;   L i a n g   L M ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 4 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 9 6 ;   L i a n g   L M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 5 2 0 1 7 9 7 1 ;   L i a n g   L M ,   2 0 0 1 ,   R E S   E V A L U A T ,   V 1 0 ,   P 1 0 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 1 7 8 1 7 7 7 0 4 2 ;   L i n   X ,   2 0 0 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 9 ,   P 6 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 3 7 - 7 ;   L i u   N C ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 1 - z ;   L i u   N C ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 1 1 6 ;   L o k   C K W ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 4 ,   P 2 2 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 8 . x ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   L u   D W ,   2 0 0 5 ,   J   A M   A C A D   D E R M A T O L ,   V 5 3 ,   P 7 2 0 ,   D O I   1 0 . 1 0 1 6 / j . j a a d . 2 0 0 5 . 0 6 . 0 4 8 ;   L u n d b e r g   G D ,   2 0 0 3 ,   M E D   J   A U S T R A L I A ,   V 1 7 8 ,   P 2 5 3 ;   M a b e   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 2 0 9 1 3 1 2 4 ;   M a b e   M A ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 1 4 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 4 1 6 9 2 ;   M a h l c k   P ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 1 2 0 8 8 1 0 ;   M a n   J P ,   2 0 0 4 ,   E U R   J   E P I D E M I O L ,   V 1 9 ,   P 8 1 1 ;   M a r u s i c   M ,   2 0 0 1 ,   C R O A T   M E D   J ,   V 4 2 ,   P 1 1 3 ;   M a r x   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 9 8 9 1 1 7 9 2 ;   M a u r s e t h   P B ,   2 0 0 2 ,   S C A N D   J   E C O N ,   V 1 0 4 ,   P 5 3 1 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 4 4 2 . 0 0 3 0 0 ;   M A Y R   P ,   2 0 0 5 ,   I N F O R M   W I S S E N S C H A F T ,   V 5 6 ,   P 4 1 ;   M a y r   P . ,   2 0 0 7 ,   C Y B E R M E T R I C S ,   V 1 1 ;   M c C a i n   K W ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 2 1 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 8 > 3 . 0 . C O ; 2 - Q ;   M c K i b b o n   K A ,   2 0 0 4 ,   B M C   M E D ,   V 2 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 1 - 7 0 1 5 - 2 - 3 3 ;   M c M i l l a n   G S ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 0 - X ;   M C M I L L A N   G S ,   2 0 0 0 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 2 ,   P 4 6 7 ;   M e a d o w s   J ,   2 0 0 5 ,   I N T E R L E N D   D O C   S U P P L Y ,   V 3 3 ,   P 9 0 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 1 0 5 0 6 0 2 6 2 8 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   M e h o   L I ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 2 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 2 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - N ;   M e l i n   G ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 1 - 1 ;   M e t t r o p   W ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 6 2 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 9 6 ;   M e y e r   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 1 3 3 2 5 6 4 8 ;   M e y e r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 4 0 7 2 7 8 5 1 ;   M e y e r   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 1 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 5 7 7 2 7 2 0 9 ;   M e y e r   M ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 4 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 4 0 - 2 ;   M e y e r   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 1 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 2 6 2 1 1 0 5 ;   M e y e r   M S ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 2 9 1 4 0 3 3 ;   M i c h e l   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 0 3 0 8 7 1 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M o e d   H F ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 9 8 ;   M o e d   H F ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 1 2 8 1 0 6 0 2 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M o e d   H F ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 5 1 1 1 6 2 2 ;   M O E D   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 6 6 ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   M o n t e m u r r o   M A ,   2 0 0 1 ,   P H Y S I C A   A ,   V 3 0 0 ,   P 5 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 4 3 7 1 ( 0 1 ) 0 0 3 5 5 - 7 ;   M o o d y   J ,   2 0 0 4 ,   A M   S O C I O L   R E V ,   V 6 9 ,   P 2 1 3 ;   M o r i l l o   F ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 6 ;   M o r i l l o   F ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 2 9 1 1 4 9 4 1 ;   M o r r i s   S A ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 7 ;   M o w e r y   D C ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 1 0 0 - 6 ;   M o w e r y   D C ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 3 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 1 6 - 0 ;   M u r r a y   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 3 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 7 0 - 7 ;   M u s t   U ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 1 6 - 1 ;   N e d e r h o f   A J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 3 2 3 2 6 8 8 ;   N E D E R H O F   A J ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 7 9 3 5 3 ;   N e u b e r g e r   J ,   2 0 0 2 ,   E U R   J   G A S T R O E N   H E P A T ,   V 1 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 2 7 3 7 - 2 0 0 2 0 3 0 0 0 - 0 0 0 0 1 ;   N e u h a u s   C ,   2 0 0 6 ,   P O R T A L - L I B R   A C A D ,   V 6 ,   P 1 2 7 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 6 . 0 0 2 6 ;   N e w m a n   M E ,   2 0 0 1 ,   P H Y S   R E V   E ,   V 6 4 ;   N e w m a n   M E J ,   2 0 0 1 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 8 ,   P 4 0 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 2 1 5 4 4 8 9 8 ;   N e w m a n   M E J ,   2 0 0 3 ,   S O C   N E T W O R K S ,   V 2 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 8 7 3 3 ( 0 2 ) 0 0 0 3 9 - 4 ;   N e w m a n   M E J ,   2 0 0 3 ,   S I A M   R E V ,   V 4 5 ,   P 1 6 7 ,   D O I   1 0 . 1 1 3 7 / S 0 0 3 6 1 4 4 5 0 3 4 2 4 8 0 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   P 6 9 ;   N I C H O L L S   P T ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 7 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 1 1 ) 4 0 : 6 < 3 7 9 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Q ;   N i s o n g e r   T E ,   2 0 0 4 ,   C O L L   R E S   L I B R ,   V 6 5 ,   P 1 5 2 ;   N i s o n g e r   T E ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 6 5 9 2 9 0 2 6 ;   N i s o n g e r   T E ,   2 0 0 0 ,   C O L L   R E S   L I B R ,   V 6 1 ,   P 2 6 3 ;   N o r r i s   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 7 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 7 3 4 ;   N o r u z i   A ,   2 0 0 5 ,   L I B R I ,   V 5 5 ,   P 1 7 0 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 5 . 1 7 0 ;   N o y o n s   E ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 4 2 0 2 9 7 7 ;   O d l y z k o   A ,   2 0 0 2 ,   L E A R N   P U B L ,   V 1 5 ,   P 7 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 2 7 5 3 3 0 3 6 3 4 ;   O n y a n c h a   O B ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 7 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 5 ;   O p p e n h e i m   C ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 3 6 1 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 1 9 ;   O p p e n h e i m   C ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 4 0 5 ;   O r t e g a   J L ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 3 4 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 5 7 8 5 ;   O t t e   E ,   2 0 0 2 ,   J   I N F O R M   S C I ,   V 2 8 ,   P 4 4 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 2 7 6 2 2 0 2 1 2 3 ;   P a a s i   A ,   2 0 0 5 ,   E N V I R O N   P L A N N   A ,   V 3 7 ,   P 7 6 9 ,   D O I   1 0 . 1 0 6 8 / a 3 7 6 9 ;   P a l a d u g u   R ,   2 0 0 2 ,   W O R L D   J   S U R G ,   V 2 6 ,   P 1 0 9 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 6 8 - 0 0 2 - 6 3 7 6 - 7 ;   P a r k   H .   W . ,   2 0 0 3 ,   J   C O M P U T E R   M E D I A T E D ,   V 8 ;   P a t e l   V ,   2 0 0 1 ,   B R I T   J   P S Y C H I A T ,   V 1 7 8 ,   P 4 0 6 ,   D O I   1 0 . 1 1 9 2 / b j p . 1 7 8 . 5 . 4 0 6 ;   P a t s o p o u l o s   N A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 3 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 3 . 1 9 . 2 3 6 2 ;   P A Y N E   D ,   2 0 0 4 ,   S C I E N T I S T ,   V 5 ;   P e r i t z   B C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 1 8 0 1 3 0 9 6 ;   P e r k e l   J M ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 2 4 ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   P e r s s o n   O ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 4 0 0 9 4 2 8 ;   P e t t i g r e w   K E ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 6 2 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 5 2 : 1 < 6 2 : : A I D - A S I 1 0 6 1 > 3 . 3 . C O ; 2 - A ;   P i c h a p p a n   P ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 7 0 0 2 9 9 3 5 ;   P i e t e r s   R ,   2 0 0 2 ,   J   E C O N   L I T ,   V 4 0 ,   P 4 8 3 ,   D O I   1 0 . 1 2 5 7 / 0 0 2 2 0 5 1 0 2 3 2 0 1 6 1 3 4 8 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P o r t e r   A L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 7 3 0 2 9 2 5 8 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   P r i m e   C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 2 2 2 1 4 0 0 5 ;   P u d o v k i n   A I ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 1 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 5 3 ;   R a h m a n   M ,   2 0 0 3 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 9 ,   P 2 4 9 ;   R a h m a n   M ,   2 0 0 3 ,   P U B L I C   H E A L T H ,   V 1 1 7 ,   P 2 7 4 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 3 - 3 5 0 6 ( 0 3 ) 0 0 0 6 8 - 4 ;   R a h m a n   M ,   2 0 0 2 ,   N E W   E N G L   J   M E D ,   V 3 4 7 ,   P 1 2 1 1 ,   D O I   1 0 . 1 0 5 6 / N E J M 2 0 0 2 1 0 1 0 3 4 7 1 5 2 3 ;   R a m a s c o   J .   J . ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 7 0 ;   R a m i r e z   A M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 0 0 8 0 7 2 9 2 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R a y   J ,   2 0 0 0 ,   A M   J   M E D ,   V 1 0 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 9 3 4 3 ( 0 0 ) 0 0 4 5 0 - 2 ;   R e d m a n   J ,   2 0 0 1 ,   J   A P P L   C R Y S T A L L O G R ,   V 3 4 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 7 / S 0 0 2 1 8 8 9 8 0 1 0 0 3 0 5 3 ;   R e n   S L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 8 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 7 7 1 3 0 1 6 6 ;   R i n i a   E J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 7 8 3 3 1 7 5 2 ;   R i n i a   E J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 8 9 3 0 0 8 2 9 ;   R i n i a   E J ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 8 2 - 2 ;   R O E S S N E R   D ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 8 ,   P 1 2 5 ;   R o g e r s   L F ,   2 0 0 2 ,   A M   J   R O E N T G E N O L ,   V 1 7 8 ,   P 5 4 1 ;   R O S E N B E R G   G ,   2 0 0 5 ,   S O C I A L   W O R K   H L T H   C A R ,   V 4 1 ,   P 1 0 3 ;   R o t h m a n   J ,   2 0 0 3 ,   S O C   W O R K   R E S ,   V 2 7 ,   P 1 0 5 ;   R o u s s e a u   B ,   2 0 0 0 ,   C Y B E R M E T R I C S ,   V 4 ;   R o u s s e a u   R ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 3 - 1 ;   R o u s s e a u   R ,   2 0 0 5 ,   J   D O C ,   V 6 1 ,   P 1 9 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 5 1 0 5 8 5 1 8 8 ;   R o u s s e a u   R ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 5 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 4 0 1 ;   R o u s s e a u   R ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 1 8 ;   R o u s s e a u   R ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 1 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 7 5 9 0 9 8 2 9 ;   R o u s s e a u   R ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 3 4 9 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 6 ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ;   R o w l a n d s   I ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 7 7 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 3 5 2 1 1 ;   R u i z - P e r e z   R ,   2 0 0 2 ,   J   M E D   L I B R   A S S O C ,   V 9 0 ,   P 4 1 1 ;   S a a d   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 2 - 9 ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 1 ;   S a n d s t r o m   P E ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 5 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 5 5 3 0 5 2 8 6 ;   W o u t e r s   P . ,   2 0 0 6 ,   C Y B E R M E T R I C S ,   V 1 0 ;   S C H L E G L   C ,   2 0 0 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 6 ,   P 1 1 5 5 ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S c h u b e r t   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 8 6 2 0 2 4 2 5 ;   S c h u m m e r   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 2 . 7 1 3 1 4 . 3 8 ;   * S C O P ,   2 0 0 7 ,   E L S   P R O U D   A N N   T O D   L A ;   S e g l e n   P O ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 1 2 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 5 3 0 9 7 1 9 ;   S h i n n   T ,   2 0 0 2 ,   S O C   S T U D   S C I ,   V 3 2 ,   P 5 9 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 0 2 1 2 8 9 6 7 2 7 1 ;   S I N A I   M ,   2 0 0 7 ,   B R A N D O N   H I L L   S E L E C T E ;   S m a l l   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 7 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 0 . 6 8 3 9 3 . b c ;   S m a l l   H ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 3 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 5 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   S m i t h   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 0 4 1 5 8 2 2 ;   S o l a r i   A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 6 0 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 0 2 0 2 9 6 1 ;   S o m b a t s o m p o p   N ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 6 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 5 0 ;   S o m b a t s o m p o p   N . ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 3 5 ;   S o t e r i a d e s   E S ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 1 ,   P 1 9 2 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 3 1 . 7 5 1 0 . 1 9 2 ;   S O T E R I A D E S   E S ,   2 0 0 6 ,   F A S E B   J ,   V 2 0 ,   P 1 9 ;   S p r o t t   D E ,   2 0 0 2 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 2 1 ,   P 1 0 5 ,   D O I   1 0 . 1 5 0 9 / j p p m . 2 1 . 1 . 1 0 5 . 1 7 6 0 6 ;   S t e e l e   T W ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 4 7 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 5 < 4 7 6 : : A I D - A S I 8 > 3 . 3 . C O ; 2 - 7 ;   S t e g m a n n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 2 8 1 5 7 8 8 ;   S t e g m a n n   J ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 1 1 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 5 4 8 0 8 8 0 4 ;   S w a n s o n   D R ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 3 5 ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   T a n g   R ,   2 0 0 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 0 3 ) 0 0 0 5 3 - 7 ;   T a n g   R ,   2 0 0 2 ,   P   A S I S T   A N N U ,   V 3 9 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 3 9 0 1 4 6 ;   T h e l w a l l   M ,   2 0 0 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 9 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 9 0 1 1 0 ;   T h e l w a l l   M ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 2 ;   T h e l w a l l   M ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 2 4 0 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 4 6 6 9 ;   T h e l w a l l   M ,   2 0 0 3 ,   O N L I N E   I N F O R M   R E V ,   V 2 7 ,   P 3 3 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 3 1 0 5 0 2 2 9 8 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 2 0 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 4 6 3 4 9 1 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 1 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 1 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 7 0 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 6 7 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 9 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 2 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 6 1 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 1 ;   T h e l w a l l   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 4 1 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 8 7 1 0 5 9 0 4 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   I N F O R M   S C I ,   V 2 8 ,   P 4 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 2 7 6 2 2 0 2 1 5 0 ;   T h e l w a l l   M ,   2 0 0 2 ,   O N L I N E   I N F O R M   R E V ,   V 2 6 ,   P 4 1 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 2 1 0 4 5 2 7 4 5 ;   T h e l w a l l   M ,   2 0 0 2 ,   I N T E R N E T   R E S ,   V 1 2 ,   P 1 2 4 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 2 1 0 4 2 2 5 0 3 ;   T H E L W A L L   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 5 8 ;   T h e l w a l l   M . ,   2 0 0 4 ,   L I N K   A N A L   I N F O R M   S C I ;   T H E L W A L L   M ,   2 0 0 1 ,   C Y B E R M E T R I C S ,   V 5 ;   T h e l w a l l   M . ,   2 0 0 3 ,   I N F O R M   R E S ,   V 8 ;   T h e l w a l l   M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 3 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 3 4 ;   [ A n o n y m o u s ] ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 1 0 1 ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 ;   T h e l w a l l   M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 3 ;   T h e l w a l l   M ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 1 8 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 0 1 0 8 0 3 8 0 1 ;   T h e l w a l l   M ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 8 3 - 3 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 6 6 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 2 5 4 1 2 ;   T h e l w a l l   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 6 0 2 1 0 8 0 ;   T h e l w a l l   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 1 0 7 2 8 8 5 2 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 5 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 9 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 1 4 2 3 3 8 3 3 ;   T h e l w a l l   M ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 1 1 8 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 3 5 2 4 8 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 1 9 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T h o m a s   O ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 3 8 ;   T h o m p s o n   J W ,   2 0 0 2 ,   L I B R I ,   V 5 2 ,   P 1 2 1 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 2 . 1 2 1 ;   T h o r s t e i n s d o t t i r   O H ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 1 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 1 7 4 2 6 5 5 7 ;   T i j s s e n   R J W ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 8 0 - 3 ;   T i j s s e n   R J W ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 3 . 1 1 . 0 0 2 ;   T i j s s e n   R J W ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 5 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 2 4 - X ;   T i j s s e n   R J W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 8 2 4 3 2 6 6 0 ;   T i j s s e n   R J W ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 8 9 ;   T r a y h u r n   P ,   2 0 0 2 ,   B R I T   J   N U T R ,   V 8 8 ,   P 1 ,   D O I   1 0 . 1 0 7 9 / B J N 2 0 0 2 6 1 8 ;   T s a l l i s   C ,   2 0 0 0 ,   E U R   P H Y S   J   B ,   V 1 3 ,   P 7 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 0 9 7 ;   T s a y   M Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 4 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 9 3 8 2 4 7 1 6 ;   T s a y   M Y ,   2 0 0 5 ,   J   M E D   L I B R   A S S O C ,   V 9 3 ,   P 4 5 0 ;   U g o l i n i   D ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 2 6 8 2 0 0 1 7 ;   v a n   D a l e n   H P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 0 8 3 1 7 1 8 ;   V a n   d e n   B e s s e l a a r   P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 4 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 1 4 0 2 0 4 5 3 ;   v a n   d e n   B e s s e l a a r   P ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 1 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 6 1 2 3 9 1 7 ;   V a n   F l e e t   D D ,   2 0 0 0 ,   J   M A N A G E ,   V 2 6 ,   P 8 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 0 0 2 6 0 0 5 0 5 ;   v a n   L e e u w e n   T N ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 1 5 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 0 7 8 1 7 7 7 3 5 9 ;   v a n   L e e u w e n   T N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 7 - z ;   v a n   L e e u w e n   T N ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 1 4 1 8 1 9 3 0 2 ;   V a n   L e e u w e n   T N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 8 7 0 9 6 9 4 ;   v a n   L e e u w e n   T N ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 9 7 1 9 4 8 4 ;   V a n   L o o y   B ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 3 5 5 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 7 3 2 8 4 6 0 ;   v a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 2 - y ;   v a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 5 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 7 - x ;   v a n   R a a n   A F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 . 8 2 4 4 1 . f 1 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   v a n   R a a n   A F J ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 6 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 2 9 - 9 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 3 0 1 ;   v a n   T e i j l i n g e n   E ,   2 0 0 2 ,   J   A D V   N U R S ,   V 3 7 ,   P 5 0 6 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 2 . 0 2 1 3 5 . x ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 8 ,   P 8 1 ;   V A N R A A N   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 4 7 ;   V a u g h a n   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 9 9 ;   V a u g h a n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 2 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 1 0 ;   V a u g h a n   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 3 . 1 0 . 0 0 1 ;   V a u g h a n   L ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 6 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 3 ) 0 0 0 6 3 - 3 ;   V a u g h a n   L ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 6 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 3 ) 0 0 0 4 3 - 8 ;   V a u g h a n   L ,   2 0 0 4 ,   C A N   J   I N F O R M   L I B   S C I ,   V 2 8 ,   P 1 7 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 3 8 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   V a u g h a n   L ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 3 5 6 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 5 2 5 5 5 ;   V a u g h a n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 6 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 3 - x ;   V a u g h a n   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 1 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 9 8 ;   V a u g h a n   L W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 8 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 9 . 1 4 8 2 5 . b c ;   V a u g h a n   L W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 2 2 . 9 3 0 1 8 . 2 a ;   V e r b e e k   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 4 5 1 6 7 3 1 ;   V e s s e y   I ,   2 0 0 2 ,   J   M A N A G E   I N F O R M   S Y S T ,   V 1 9 ,   P 1 2 9 ;   V i n k l e r   P ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 9 1 ;   V i n k l e r   P ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 6 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 6 0 7 2 6 5 3 2 ;   V i n k l e r   P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 9 0 0 0 7 6 7 ;   v o n   E l m   E ,   2 0 0 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 1 ,   P 9 7 4 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 1 . 8 . 9 7 4 ;   V r e e l a n d   R C ,   2 0 0 0 ,   L A W   L I B R   J ,   V 9 2 ,   P 9 ;   W a g n e r   C S ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 1 6 0 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 2 ;   W a g n e r - D o b l e r   R ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 5 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 0 8 2 1 9 7 8 8 ;   W a l l a c e   L S ,   2 0 0 3 ,   A M   J   H E A L T H   B E H A V ,   V 2 7 ,   P 7 5 ;   W a l t e r   G ,   2 0 0 3 ,   M E D   J   A U S T R A L I A ,   V 1 7 8 ,   P 2 8 0 ;   W a r n e r   J ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 5 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 5 6 ;   W E A L E   A R ,   2 0 0 4 ,   B M C   M E D   R E S   M E T H O D O L ,   V 4 ;   W e b s t e r   T J ,   2 0 0 1 ,   E C O N   E D U C   R E V ,   V 2 0 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 7 7 5 7 ( 9 9 ) 0 0 0 6 6 - 7 ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   W e s t   R ,   2 0 0 2 ,   A D D I C T I O N ,   V 9 7 ,   P 5 0 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 0 - 0 4 4 3 . 2 0 0 2 . 0 0 1 0 4 . x ;   W e t t e r e r   J K ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 5 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 2 ;   W h i t e   H D ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 9 ;   W h i t e   H D ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 4 2 > 3 . 3 . C O ; 2 - K ;   W h i t e   H D ,   2 0 0 4 ,   A P P L   L I N G U I S T ,   V 2 5 ,   P 8 9 ,   D O I   1 0 . 1 0 9 3 / a p p l i n / 2 5 . 1 . 8 9 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 5 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 0 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 0 7 5 2 2 1 2 5 ;   W h i t e   H D ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 4 7 5 ;   W h i t e h o u s e   G ,   2 0 0 1 ,   B R I T   J   R A D I O L ,   V 7 4 ,   P 1 ;   W i l k i n s o n   D ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   W i n k m a n n   G ,   2 0 0 2 ,   D E U T   M E D   W O C H E N S C H R ,   V 1 2 7 ,   P 1 3 1 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 2 - 1 9 7 1 5 ;   W l e k l i n s k i   J M ,   2 0 0 5 ,   O N L I N E ,   V 2 9 ,   P 2 2 ;   W o l f r a m   D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 0 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 1 1 ;   W o o l f   S H ,   2 0 0 0 ,   A M   J   P R E V   M E D ,   V 1 9 ,   P 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 9 - 3 7 9 7 ( 0 0 ) 0 0 1 8 0 - X ;   W o r m e l l   I ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 2 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 8 8 0 6 0 8 4 ;   W o r m e l l   I ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 2 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 6 7 2 2 0 1 4 ;   W o u t e r s   P a u l ,   1 9 9 9 ,   T H E   C I T A T I O N   C U L T U R E ;   W r e n   J D ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 0 ,   P 1 1 2 8 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 4 2 2 . 6 1 1 7 3 6 . E 0 ;   Y o o n   B . ,   2 0 0 4 ,   J   H I G H   T E C H N O L O G Y   M A ,   V 1 5 ,   P 3 7 ,   D O I   D O I   1 0 . 1 0 1 6 / J . H I T E C H . 2 0 0 3 . 0 9 . 0 0 3 ;   Y o s h i k a n e   F ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 2 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 3 9 ;   Y u   G ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 9 - 4 ;   Z h a o   D Z ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 7 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 2 ;   Z h a o   D Z ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 0 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 3 ;   Z h a o   D Z ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 4 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 9 0 6 0 1 7 1 0 ;   Z h o u   D N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 4 7 9 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 6 9 4 2 5 ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 1 4 5 9 2 0 2 1 0 ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 2 3 3 2 9 2 7 7 ;   Z i t t   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 6 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 3 2 3 1 9 7 9 9 ;   Z i t t   M ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 6 ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 6 ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 4 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 8 	 6 1 0 	 1 0 7 	 1 1 0 	 3 0 	 2 8 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 	 2 0 0 8 	 2 	 1 	 	 	 	 	 1 	 5 2 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 	 	 5 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 7 0 L L 	 W O S : 0 0 0 2 5 3 7 2 2 2 0 0 0 0 1 	 	 
 
 J 	 G l a n z e l ,   W ;   S c h o e p f l i n ,   U 	 	 	 	 G l a n z e l ,   W ;   S c h o e p f l i n ,   U 	 	 	 A   b i b l i o m e t r i c   s t u d y   o f   r e f e r e n c e   l i t e r a t u r e   i n   t h e   s c i e n c e s   a n d   s o c i a l   s c i e n c e s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 5 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s 	 J U N   0 7 - 1 0 ,   1 9 9 5 	 R I V E R   F O R E S T ,   I L L I N O I S 	 	 	 	 S C I E N T I F I C   L I T E R A T U R E ;   S C I E N T O M E T R I C   W E I G H T ;   5 0   N A T I O N S ;   A R E A S 	 I n   e a r l i e r   p a p e r s   t h e   a u t h o r s   f o c u s e d   o n   d i f f e r e n c e s   i n   t h e   a g e i n g   o f   j o u r n a l   l i t e r a t u r e   i n   s c i e n c e   a n d   t h e   s o c i a l   s c i e n c e s .   I t   w a s   s h o w n   t h a t   f o r   s e v e r a l   f i e l d s   a n d   t o p i c s   b i b l i o m e t r i c   s t a n d a r d   i n d i c a t o r s   b a s e d   o n   j o u r n a l   a r t i c l e s   n e e d   t o   b e   m o d i f i e d   i n   o r d e r   t o   p r o v i d e   v a l i d   r e s u l t s .   I n   f i e l d s   w h e r e   m o n o g r a p h s ,   b o o k s   o r   r e p o r t s   a r e   i m p o r t a n t   m e a n s   o f   s c i e n t i f i c   i n f o r m a t i o n .   s t a n d a r d   m o d e l s   o f   s c i e n t i f i c   c o m m u n i c a t i o n   a r e   n o t   r e f l e c t e d   b y   j o u r n a l   l i t e r a t u r e   a l o n e .   T o   i d e n t i f y   f i e l d s   w h e r e   t h e   r o l e   o f   n o n - s e r i a l   l i t e r a t u r e   i s   c o n s i d e r a b l e   o r   c r i t i c a l   i n   t e r m s   o f   b i b l i o m e t r i c   s t a n d a r d   m e t h o d s .   t h e   t o t a l i t y   o f   t h e   b i b l i o g r a p h i c   c i t a t i o n s   i n d e x e d   i n   t h e   1 9 9 3   a n n u a l   c u m u l a t i o n   o f   t h e   S C I   a n d   S S C I   d a t a b a s e s ,   h a v e   b e e n   p r o c e s s e d .   T h e   a n a l y s i s   i s   b a s e d   o n   t h r e e   i n d i c a t o r s ,   t h e   p e r c e n t a g e   o f   r e f e r e n c e s   t o   s e r i a l s ,   t h e   m e a n   r e f e r e n c e s   a g e ,   a n d   t h e   m e a n   r e f e r e n c e   r a t e .   A p p l i c a t i o n s   o f   t h e s e   m e a s u r e s   a t   d i f f e r e n t   l e v e l s   o f   a g g r e g a t i o n   ( i . e . ,   t o   j o u r n a l s   i n   s e l e c t e d   s c i e n c e   a n d   s o c i a l   s c i e n c e   f i e l d s )   l e a d   t o   t h e   f o l l o w i n g   c o n c l u s i o n s .   1 .   T h e   p e r c e n t a g e   o f   r e f e r e n c e s   t o   s e r i a l s   p r o v e d   t o   b e   a   s e n s i t i v e   m e a s u r e   t o   c h a r a c t e r i s e   t y p i c a l   d i f f e r e n c e s   i n   t h e   c o m m u n i c a t i o n   b e h a v i o u r   b e t w e e n   t h e   s c i e n c e s   a n d   t h e   s o c i a l   s c i e n c e s . ' .   H o w e v e r ,   t h e r e   i s   a n   o v e r l a p   z o n e   w h i c h   i n c l u d e s   f i e l d s   l i k e   m a t h e m a t i c s ,   t e c h n o l o g y   o r i e n t e d   s c i e n c e ,   a n d   s o m e   s o c i a l   s c i e n c e   a r e a s .   3 ,   I n   c e r t a i n   s o c i a l   s c i e n c e s   p a r t   o f   t h e   i n f o r m a t i o n   s e e m s   e v e n   t o   b e   o r i g i n a t e d   i n   n o n - s c i e n t i f i c   s o u r c e s :   r e f e r e n c e s   t o   n o n - s e r i a l s   d o   n o t   a l w a y s   r e p r e s e n t   m o n o g r a p h s ,   p r e p r i n t s   o r   r e p o r t s .   C o n s e q u e n t l y ,   t h e   m o d e l   o f   i n f o r m a t i o n   t r a n s f e r   f r o m   s c i e n t i f i c   l i t e r a t u r e   t o   s c i e n t i f i c   ( j o u r n a l )   l i t e r a t u r e   a s s u m e d   b y   s t a n d a r d   b i b l i o m e t r i c s   r e q u i r e s   s u b s t a n t i a l   r e v i s i o n   b e f o r e   v a l i d   r e s u l t s   c a n   b e   e x p e c t e d   t h r o u g h   i t s   a p p l i c a t i o n   t o   s o c i a l   s c i e n c e   a r e a s .   ( C )   1 9 9 9   E l s e v i e r   S c i e n c e   L t d .   A l l   r i g h t s   r e s e r v e d . 	 M a x   P l a n c k   I n s t   H i s t   S c i ,   D - 1 0 1 1 7   B e r l i n ,   G e r m a n y ;   R A S C I ,   D - 1 5 2 3 6   F r a n k f u r t ,   G e r m a n y 	 G l a n z e l ,   W   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   I n s t   H i s t   S c i ,   W i l h e l m s t r   4 4 ,   D - 1 0 1 1 7   B e r l i n ,   G e r m a n y . 	 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 B R A U N   T ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 2 ;   B R A U N   T ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 4 2 1 ;   E g g h e   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 5 6 4 ;   F R E U D   S ,   1 9 0 7 ,   W A H N   T R A U M E   W   J E N S E N ,   P 8 1 ;   G L A N Z E L   W ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 1 0 4 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 2 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 2 ;   G l a n z e l   W . ,   1 9 9 5 ,   P   5   B I E N N   C   I N T   S O C ,   P 1 7 7 ;   H E I S E Y   T M ,   1 9 8 8 ,   J   D O C ,   V 4 4 ,   P 2 8 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 3 1 ;   J e n s e n   W i l h e l m ,   1 9 0 3 ,   G R A D I V A   P O M P E J A N I S C H ;   L i n e   M . ,   1 9 8 1 ,   S O C   S C I   I N F O R M ,   V 1 ,   P 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 1 ) 9 0 0 0 1 - 6 ;   M O E D   H ,   1 9 8 8 ,   J   D O C ,   V 5 4 ,   P 3 8 7 ;   P E R I T Z   B C ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 7 3 8 ;   R o u s s e a u   R . ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 2 4 9 ;   S c h o e p e l i n   U ,   1 9 9 2 ,   R E P R E S E N T A T I O N S   S C I ,   P 1 7 7 	 1 5 	 1 0 5 	 1 0 7 	 3 	 6 6 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 J A N 	 1 9 9 9 	 3 5 	 1 	 	 	 	 	 3 1 	 4 4 	 	 1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 6 3 W U 	 W O S : 0 0 0 0 7 8 4 3 0 1 0 0 0 0 3 	 	 
 
 J 	 K o s t o f f ,   R N ;   B o y l a n ,   R ;   S i m o n s ,   G R 	 	 	 	 K o s t o f f ,   R N ;   B o y l a n ,   R ;   S i m o n s ,   G R 	 	 	 D i s r u p t i v e   t e c h n o l o g y   r o a d m a p s 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t e x t   m i n i n g ;   l i t e r a t u r e - b a s e d   d i s c o v e r y ;   i n n o v a t i o n ;   w o r k s h o p s ;   r o a d m a p s ;   d i s r u p t i v e   t e c h n o l o g i e s ;   i n t e r d i s c i p l i n a r y ;   m u l t i d i s c i p l i n a r y ;   c l u s t e r i n g 	 L I T E R A T U R E - B A S E D   D I S C O V E R Y ;   F I S H - O I L ;   D I S C O N T I N U O U S   I N N O V A T I O N ;   D A T A B A S E   T O M O G R A P H Y ;   I N F O R M A T I O N ;   S C I E N C E ;   B I B L I O M E T R I C S ;   R A Y N A U D S 	 D i s r u p t i v e   t e c h n o l o g i e s   c r e a t e   g r o w t h   i n   t h e   i n d u s t r i e s   t h e y   p e n e t r a t e   o r   c r e a t e   e n t i r e l y   n e w   i n d u s t r i e s   t h r o u g h   t h e   i n t r o d u c t i o n   o f   p r o d u c t s   a n d   s e r v i c e s   t h a t   a r e   d r a m a t i c a l l y   c h e a p e r ,   b e t t e r ,   a n d   m o r e   c o n v e n i e n t .   T h e s e   d i s r u p t i v e   t e c h n o l o g i e s   o f t e n   d i s r u p t   w o r k f o r c e   p a r t i c i p a t i o n   b y   a l l o w i n g   t e c h n o l o g i c a l l y   u n s o p h i s t i c a t e d   i n d i v i d u a l s   t o   e n t e r   a n d   b e c o m e   c o m p e t i t i v e   i n   t h e   i n d u s t r i a l   w o r k f o r c e .   D i s r u p t i v e   t e c h n o l o g i e s   o f f e r   a   r e v o l u t i o n a r y   c h a n g e   i n   t h e   c o n d u c t   o f   p r o c e s s e s   o r   o p e r a t i o n s .   D i s r u p t i v e   t e c h n o l o g i e s   c a n   e v o l v e   f r o m   t h e   c o n f l u e n c e   o f   s e e m i n g l y   d i v e r s e   t e c h n o l o g i e s   o r   c a n   b e   a   r e s u l t   o f   a n   e n t i r e l y   n e w   t e c h n o l o g i c a l   i n v e s t i g a t i o n .   E x i s t i n g   p l a n n i n g   p r o c e s s e s   a r e   n o t o r i o u s l y   p o o r   i n   i d e n t i f y i n g   t h e   m i x   o f   s o m e t i m e s   h i g h l y   d i s p a r a t e   t e c h n o l o g i e s   r e q u i r e d   t o   a d d r e s s   t h e   m u l t i p l e   p e r f o r m a n c e   o b j e c t i v e s   o f   a   p a r t i c u l a r   n i c h e   i n   t h e   m a r k e t .   F o r   a   n u m b e r   o f   r e a s o n s ,   e s p e c i a l l y   t h e   i n a b i l i t y   t o   l o o k   b e y o n d   s h o r t - t e r m   p r o f i t a b i l i t y ,   a n d   t h e   r i s k / r e t u r n   t r a d e o f f   o f   l o n g e r   t e r m   p r o j e c t s ,   i t   i s   s u g g e s t e d   t h a t   c u r r e n t   s t r a t e g i c   p l a n n i n g   a n d   m a n a g e m e n t   p r o c e s s e s   p r o m o t e   s u s t a i n i n g   t e c h n o l o g i e s   a t   t h e   e x p e n s e   o f   d i s r u p t i v e   t e c h n o l o g i e s .   W e   p r o p o s e   a   s y s t e m a t i c   a p p r o a c h   t o   i d e n t i f y   d i s r u p t i v e   t e c h n o l o g i e s   t h a t   i s   r e a l i s t i c   a n d   o p e r a b l e   a n d   t a k e s   a d v a n t a g e   o f   t h e   t e x t   m i n i n g   l i t e r a t u r e .   T h i s   l i t e r a t u r e - b a s e d   d i s c o v e r y   p r o c e s s   i s   e s p e c i a l l y   u s e f u l   i n   i d e n t i f y i n g   p o t e n t i a l   d i s r u p t i v e   t e c h n o l o g i e s   t h a t   m a y   r e q u i r e   t h e   i n p u t   f r o m   m a n y   d i v e r s e   t e c h n o l o g i c a l   a n d   m a n a g e m e n t   a r e a s .   W e   b e l i e v e   t h a t   t h i s   p r o c e s s   h o l d s   g r e a t   p o t e n t i a l   f o r   i d e n t i f y i n g   p r o j e c t s   w i t h   a   h i g h e r   p r o b a b i l i t y   o f   d o w n s t r e a m   s u c c e s s .   F u r t h e r ,   w e   s u g g e s t   a   p r o c e s s   t o   t a k e   t h e   i d e n t i f i e d   p o t e n t i a l   d i s r u p t i v e   t e c h n o l o g y   f r o m   t h e   " i d e a   s t a g e "   t h r o u g h   t o   t h e   d e v e l o p m e n t   o f   a   p o t e n t i a l l y   f e a s i b l e   p r o d u c t   f o r   t h e   m a r k e t .   T h i s   s e c o n d   s t a g e   m a k e s   u s e   o f   w o r k s h o p s   a n d   r o a d m a p p i n g   t o   c o d i f y   t h e   i d e a s   o f   t e c h n o l o g i c a l   a n d   m a n a g e m e n t   e x p e r t s ,   w h o   w e r e   i d e n t i f i e d   i n   t h e   l i t e r a t u r e - b a s e d   d i s c o v e r y   s t a g e .   O u r   g o a l   i s   t o   d e s c r i b e   a n d   e x p l a i n   t h e   p r a g m a t i c   s t e p s   s u g g e s t e d   b y   o u r   i n n o v a t i v e   a n d   p r a c t i c a l   p r o c e s s .   T h e   p r o p o s e d   p r o c e s s   c o u l d   i d e n t i f y   t e c h n o l o g i e s   w h o s e   e v e n t u a l   d e v e l o p m e n t   a n d   a p p l i c a t i o n   t o   s p e c i f i c   p r o b l e m s   w o u l d   g e n e r a t e   i n n o v a t i v e   p r o d u c t s .   T h e   g o a l   i s   t o   i s o l a t e   t e c h n o l o g i e s   t h a t   h a v e   t h e   p o t e n t i a l   t o   r e d e f i n e   a n   i n d u s t r y ,   o r   a l t e r n a t i v e l y ,   h a v e   t h e   p o t e n t i a l   t o   c r e a t e   a n   e n t i r e l y   n e w   i n d u s t r i a l   s e t t i n g .   U s e   t h e   t e x t - m i n i n g   c o m p o n e n t   o f   l i t e r a t u r e - b a s e d   d i s c o v e r y   t o   i d e n t i f y   b o t h   t h e   t e c h n i c a l   d i s c i p l i n e s   t h a t   a r e   l i k e l y   c a n d i d a t e s   f o r   d i s r u p t i v e   t e c h n o l o g i c a l   p r o d u c t s ,   a n d   e x p e r t s   i n   t h e s e   c r i t i c a l   t e c h n i c a l   a n d   m a n a g e r i a l   d i s c i p l i n e s .   W h i l e   w e   k n o w   t h a t   t h i s   i s   b u t   o n e   w a y   t o   i n v e s t i g a t e   n a s c e n t   d i s r u p t i v e   t e c h n o l o g i e s   w e   f e e l   i t   i s   i m p e r a t i v e   t h a t   t h e   r e p r e s e n t a t i v e s   o f   t h e s e   p o t e n t i a l l y   c r i t i c a l   t e c h n i c a l   d i s c i p l i n e s   a r e   i n c l u d e d   i n   t h e   r o a d m a p   d e v e l o p m e n t   p r o c e s s ,   e i t h e r   a s   i m p l e m e n t e r s   o r   a s   c o n s u l t a n t s .   E v e r y   f i r m   i s   l o o k i n g   f o r   " t h e   n e x t   g r e a t   t h i n g " .   L i t e r a t u r e - b a s e d   d i s c o v e r y   o f f e r s   a   s t a r t i n g   p o i n t   f o r   i d e n t i f y i n g   a t   l e a s t   a   p o r t i o n   o f   t h e   m a j o r   c o n t r i b u t o r y   t e c h n i c a l   a n d   m a n a g e r i a l   d i s c i p l i n e s   n e c e s s a r y   f o r   p o t e n t i a l   d i s r u p t i v e   t e c h n o l o g i e s   a n d   d i s c o n t i n u o u s   i n n o v a t i o n s .   C o m b i n i n g   l i t e r a t u r e - b a s e d   d i s c o v e r y   w i t h   a   p r a c t i c a l   w o r k s h o p / r o a d m a p   p r o c e s s   d r a m a t i c a l l y   e n h a n c e s   t h e   l i k e l i h o o d   o f   s u c c e s s .   ( C )   2 0 0 3   E l s e v i e r   S c i e n c e   I n c .   A l l   r i g h t s   r e s e r v e d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   U n i v   N   F l o r i d a ,   C o g g i n   C o l l   B u s i n e s s ,   J a c k s o n v i l l e ,   F L   3 2 2 2 4   U S A ;   R e n s s e l a e r   P o l y t e c h   I n s t ,   L a l l y   S c h   M a n a g e m e n t   &   T e c h n o l ,   T r o y ,   N Y   1 2 1 8 0   U S A 	 O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l ;   b o y l a n c p a @ a t t b i . c o m ;   s i m o n s @ r p i . e d u 	 K u m a r ,   A j i t / J - 1 6 1 7 - 2 0 1 5 	 K u m a r ,   A j i t / 0 0 0 0 - 0 0 0 3 - 3 2 5 5 - 5 0 5 4 	 	 	 A B E R N A T H Y   W J ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 2 1 - 6 ;   A R C H E R   W ,   1 9 9 9 ,   C A N   J   U   C O N T I N   E D ,   V 2 5 ;   B O W E R   J ,   1 9 9 5 ,   H A R V A R D   B U S   R E V ,   P 1 7 2 ;   C A R R O A D   P A ,   1 9 8 2 ,   R E S   M A N A G E ,   V 2 5 ,   P 2 8 ;   C h r i s t e n s e n   C ,   2 0 0 1 ,   F O R E I G N   A F F ,   V 8 0 ,   P 8 0 ,   D O I   1 0 . 2 3 0 7 / 2 0 0 5 0 0 6 6 ;   C h r i s t e n s e n   C .   M . ,   1 9 9 7 ,   I N N O V A T O R S   D I L E M M A   N ;   G o r d o n   M D ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 1 1 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 2 ) 4 7 : 2 < 1 1 6 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 1 ;   G o r d o n   M D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 7 4 ;   G r e e n g r a s s   E . ,   1 9 9 7 ,   T R R 5 2 0 2 9 6   N A T   S E C   A G ;   H e a r s t   M A ,   1 9 9 9 ,   P   A C L   9 9   3 7   A N N   M   A S ;   K a s s i c i e h   S K ,   2 0 0 2 ,   I E E E   T   E N G   M A N A G E ,   V 4 9 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 2 . 8 0 7 2 9 3 ;   K i r c h h o f f   B . ,   2 0 0 0 ,   U N T E R N E H M E R   U N T E R N E H ,   V 1 3 ,   P 3 2 3 ;   K o n d r a t i e f f   N D ,   1 9 3 5 ,   R E V   E C O N   S T A T I S T I C S ,   V 1 7 ,   P 1 0 5 ,   D O I   1 0 . 2 3 0 7 / 1 9 2 8 4 8 6 ;   K o s t o f f   R ,   2 0 0 1 ,   A C A D   M E D ,   V 7 6 ,   P 1 2 6 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 8 8 8 - 2 0 0 1 1 2 0 0 0 - 0 0 0 2 5 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   A N A L   C H E M ,   V 7 3 ,   p 3 7 0 A ,   D O I   1 0 . 1 0 2 1 / a c 0 1 2 4 7 2 h ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K O S T O F F   R N ,   2 0 0 2 ,   I N   P R E S S   E N C Y   L I B   I N ;   K O S T O F F   R N ,   2 0 0 2 ,   U N P U B   T E X T O S T E R O N E   F ;   K O S T O F F   R N ,   2 0 0 2 ,   I N   P R E S S   S T I M U L A T I N G ;   L a m b e   C J ,   1 9 9 7 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 4 ,   P 1 0 2 ,   D O I   1 0 . 1 0 1 6 / S 0 7 3 7 - 6 7 8 2 ( 9 6 ) 0 0 0 7 7 - X ;   L i n d s a y   R K ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 5 7 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 7 < 5 7 4 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   L y n n   G S ,   1 9 9 6 ,   C A L I F   M A N A G E   R E V ,   V 3 8 ,   P 8 ;   M C K E E   D ,   1 9 9 2 ,   J   P R O D   I N N O V A T   M A N A G ,   V 9 ,   P 2 3 2 ,   D O I   1 0 . 1 0 1 6 / 0 7 3 7 - 6 7 8 2 ( 9 2 ) 9 0 0 3 3 - 9 ;   M o o r e   G . ,   1 9 9 1 ,   C R O S S I N G   C H A S M ;   S c h u m p e t e r   J . A . ,   1 9 3 4 ,   T H E O R Y   E C   D E V ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   T U S H M A N   M L ,   1 9 8 6 ,   A D M I N   S C I   Q U A R T ,   V 3 1 ,   P 4 3 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 8 3 2 ;   V e r y z e r   R W ,   1 9 9 8 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 5 ,   P 3 0 4 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 5 8 8 5 . 1 5 4 0 3 0 4 ;   V O O R H E E S   E ,   2 0 0 0 ,   N I S T   S P E C I A L   P U B L I C A ;   W a l s h   S .   T . ,   2 0 0 0 ,   E N G   M A N A G E M E N T   J ,   V 1 2 ,   P 2 3 ;   W A L S H   S ,   1 9 9 6 ,   C O M M E R C I A L I Z A T I O N   M I ,   P 1 2 ;   W a l s h   S T ,   2 0 0 2 ,   I E E E   T   E N G   M A N A G E ,   V 4 9 ,   P 3 4 1 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 2 . 8 0 6 7 1 8 ;   W e e b e r   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 0 4 . a b s ;   W E N G E R   W ,   1 9 9 9 ,   D I S C O V E R I N G   O B V I O U S ;   Z a m i r   O . ,   1 9 9 9 ,   T H E S I S   U   W A S H I N G T O N ;   Z U R C H E R   R J ,   1 9 9 7 ,   J   T E C H N O L   T R A N S F ,   V 2 2 	 4 2 	 1 0 1 	 1 0 5 	 9 	 1 0 1 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J A N - F E B 	 2 0 0 4 	 7 1 	 1 - 2 	 	 	 	 	 1 4 1 	 1 5 9 	 	 1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 4 8 - 9 	 	 1 9 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 7 6 3 D Q 	 W O S : 0 0 0 1 8 8 0 5 9 9 0 0 0 0 9 	 	 
 
 J 	 L e y d e s d o r f f ,   L ;   W a g n e r ,   C S 	 	 	 	 L e y d e s d o r f f ,   L o e t ;   W a g n e r ,   C a r o l i n e   S . 	 	 	 I n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   s c i e n c e   a n d   t h e   f o r m a t i o n   o f   a   c o r e   g r o u p 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S c i e n t i f i c   c o l l a b o r a t i o n ;   S o c i a l   n e t w o r k   a n a l y s i s ;   S c i e n c e   p o l i c y ;   S o c i a l   s y s t e m s ;   C o - a u t h o r s h i p 	 C O O C C U R R E N C E   D A T A ;   C E N T R A L I T Y ;   O R G A N I Z A T I O N ;   B E T W E E N N E S S ;   I N D I C A T O R S 	 I n t e r n a t i o n a l   c o l l a b o r a t i o n   a s   m e a s u r e d   b y   c o - a u t h o r s h i p   r e l a t i o n s   o n   r e f e r e e d   p a p e r s   g r e w   l i n e a r l y   f r o m   1 9 9 0   t o   2 0 0 5   i n   t e r m s   o f   t h e   n u m b e r   o f   p a p e r s ,   b u t   e x p o n e n t i a l l y   i n   t e r m s   o f   t h e   n u m b e r   o f   i n t e r n a t i o n a l   a d d r e s s e s .   T h i s   c o n f i r m s   P e r s s o n   e t   a l . '   s   [   P e r s s o n ,   O . ,   G l a n z e l ,   W . ,   &   D a n e l l ,   R .   ( 2 0 0 4 ) .   I n f l a t i o n a r y   b i b l i o m e t r i c s   v a l u e s :   T h e   r o l e   o f   s c i e n t i f i c   c o l l a b o r a t i o n   a n d   t h e   n e e d   f o r   r e l a t i v e   i n d i c a t o r s   i n   e v a l u a t i v e   s t u d i e s .   S c i e n t o m e t r i c s ,   6 0 ( 3 ) ,   4 2 1   -   4 3 2 ]   h y p o t h e s i s   o f   a n   i n f l a t i o n   i n   i n t e r n a t i o n a l   c o l l a b o r a t i o n .   P a t t e r n s   i n   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   s c i e n c e   c a n   b e   c o n s i d e r e d   a s   n e t w o r k   e f f e c t s ,   s i n c e   t h e r e   i s   n o   p o l i t i c a l   i n s t i t u t i o n   m e d i a t i n g   r e l a t i o n s h i p s   a t   t h a t   l e v e l   e x c e p t   f o r   t h e   i n i t i a t i v e s   o f   t h e   E u r o p e a n   C o m m i s s i o n .   S c i e n c e   a t   t h e   i n t e r n a t i o n a l   l e v e l   s h a r e s   f e a t u r e s   w i t h   o t h e r   c o m p l e x   a d a p t i v e   s y s t e m s   w h o s e   o r d e r   a r i s e s   f r o m   t h e   i n t e r a c t i o n s   o f   h u n d r e d s   o f   a g e n t s   p u r s u i n g   s e l f - i n t e r e s t e d   s t r a t e g i e s .   D u r i n g   t h e   p e r i o d   2 0 0 0   -   2 0 0 5 ,   t h e   n e t w o r k   o f   g l o b a l   c o l l a b o r a t i o n s   a p p e a r s   t o   h a v e   r e i n f o r c e d   t h e   f o r m a t i o n   o f   a   c o r e   g r o u p   o f   f o u r t e e n   m o s t   c o o p e r a t i v e   c o u n t r i e s .   T h i s   c o r e   g r o u p   c a n   b e   e x p e c t e d   t o   u s e   k n o w l e d g e   f r o m   t h e   g l o b a l   n e t w o r k   w i t h   g r e a t   e f f i c i e n c y ,   s i n c e   t h e s e   c o u n t r i e s   h a v e   s t r o n g   n a t i o n a l   s y s t e m s .   C o u n t r i e s   a t   t h e   p e r i p h e r y   m a y   b e   d i s a d v a n t a g e d   b y   t h e   i n c r e a s e d   s t r e n g t h   o f   t h e   c o r e .   ( C )   2 0 0 8   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ L e y d e s d o r f f ,   L o e t ]   U n i v   A m s t e r d a m ,   A S C o R ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s ;   [ W a g n e r ,   C a r o l i n e   S . ]   S R I   I n t ,   A r l i n g t o n ,   V A   2 2 2 0 9   U S A 	 L e y d e s d o r f f ,   L   ( r e p r i n t   a u t h o r ) ,   U n i v   A m s t e r d a m ,   A S C o R ,   K l o v e n i e r s b u r g w e l   4 8 ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s . 	 l o e t @ l e y d e s d o r f f . n e t ;   C a r o l i n e . w a g n e r @ s r i . c o m 	 L e y d e s d o r f f ,   L o e t / E - 2 9 0 3 - 2 0 1 0 ;   W a g n e r ,   C a r o l i n e / A - 7 1 7 0 - 2 0 1 2 ;   Z H O U ,   P I N G / D - 7 8 4 8 - 2 0 1 1 	 L e y d e s d o r f f ,   L o e t / 0 0 0 0 - 0 0 0 2 - 7 8 3 5 - 3 0 9 8 ;   Z H O U ,   P I N G / 0 0 0 0 - 0 0 0 1 - 5 4 7 1 - 5 2 6 1 	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   G e o r g h i o u   L ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 6 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 5 4 - 7 ;   H A M E R S   L ,   1 9 8 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 5 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 9 ) 9 0 0 4 8 - 4 ;   L e y d e s d o r f f   L ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 2 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 3 9 0 2 6 6 4 3 ;   L E Y D E S D O R F F   L ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 2 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 9 ) 9 0 0 1 6 - 4 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 4 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 9 1 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 4 ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 3 5 ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   W a g n e r   C S ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 1 6 0 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 2 ;   W a l t m a n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 7 0 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 4 7 	 1 4 	 9 8 	 1 0 0 	 1 5 	 9 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 0 8 	 2 	 4 	 	 	 	 	 3 1 7 	 3 2 5 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 3 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 7 2 L S 	 W O S : 0 0 0 2 6 0 9 0 3 7 0 0 0 0 7 	 	 
 
 J 	 N e r u r ,   S P ;   R a s h e e d ,   A A ;   N a t a r a j a n ,   V 	 	 	 	 N e r u r ,   S r i d h a r   P . ;   R a s h e e d ,   A b d u l   A . ;   N a t a r a j a n ,   V i v e k 	 	 	 T h e   i n t e l l e c t u a l   s t r u c t u r e   o f   t h e   s t r a t e g i c   m a n a g e m e n t   f i e l d :   A n   a u t h o r   c o - c i t a t i o n   a n a l y s i s 	 S T R A T E G I C   M A N A G E M E N T   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a u t h o r   c o - c i t a t i o n   a n a l y s i s ;   p a t h f i n d e r   a n a l y s i s ;   i n f o r m a t i o n   t h e o r y ;   s t r a t e g i c   m a n a g e m e n t   r e s e a r c h ;   b i b l i o m e t r i c s 	 C I T A T I O N   A N A L Y S I S ;   J O U R N A L S ;   S Y S T E M S ;   D I S C I P L I N E ;   S C I E N C E 	 T h i s   p a p e r   c o m p l e m e n t s   a   r e c e n t   s t u d y   b y   R a m o s - R o d r i g u e z   a n d   R u i z - N a v a r r o   ( 2 0 0 4 )   t h a t   i n v e s t i g a t e d   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   t h e   s t r a t e g i c   m a n a g e m e n t   f i e l d   t h r o u g h   c o - c i t a t i o n   a n a l y s i s .   B y   u s i n g   a u t h o r s   a s   t h e   u n i t s   o f   a n a l y s i s   a n d   i n c o r p o r a t i n g   a l l   t h e   c i t a t i o n s   t h a t   a r e   i n c l u d e d   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x   a n d   t h e   S o c i a l   S c i e n c e   C i t a t i o n   I n d e x ,   w e   t r a c e   t h e   e v o l u t i o n   o f   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   t h e   s t r a t e g i c   m a n a g e m e n t   f i e l d   d u r i n g   t h e   p e r i o d   1 9 8 0 - 2 0 0 0 .   U s i n g   a   v a r i e t y   o f   d a t a   a n a l y t i c   t e c h n i q u e s   s u c h   a s   m u l t i d i m e n s i o n a l   s c a l i n g ,   f a c t o r   a n a l y s i s ,   a n d   P a t h f i n d e r   a n a l y s i s ,   w e   ( 1 )   d e l i n e a t e   t h e   s u b f i e l d s   t h a t   c o n s t i t u t e   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   s t r a t e g i c   m a n a g e m e n t ;   ( 2 )   d e t e r m i n e   t h e   r e l a t i o n s h i p s   b e t w e e n   t h e   s u b f i e l d s ;   ( 3 )   i d e n t i f y   a u t h o r s   w h o   p l a y   a   p i v o t a l   r o l e   i n   b r i d g i n g   t w o   o r   m o r e   c o n c e p t u a l   d o m a i n s   o f   r e s e a r c h ;   a n d   ( 4 )   g r a p h i c a l l y   m a p   t h e   i n t e l l e c t u a l   s t r u c t u r e   i n   t w o - d i m e n s i o n a l   s p a c e   i n   o r d e r   t o   v i s u a l i z e   s p a t i a l   d i s t a n c e s   b e t w e e n   i n t e l l e c t u a l   t h e m e s .   T h e   a n a l y s i s   p r o v i d e s   i n s i g h t s   a b o u t   t h e   i n f l u e n c e   o f   i n d i v i d u a l   a u t h o r s   a s   w e l l   a s   c h a n g e s   i n   t h e i r   i n f l u e n c e   o v e r   t i m e .   C o p y r i g h t   ( C )   2 0 0 7   J o h n   W i l e y   &   S o n s ,   L t d . 	 [ N e r u r ,   S r i d h a r   P . ]   U n i v   T e x a s   A r l i n g t o n ,   D e p t   I n f o r m a t   S y s t   &   O p e r a t   M a n a g e m e n t ,   A r l i n g t o n ,   T X   7 6 0 1 9   U S A ;   [ R a s h e e d ,   A b d u l   A . ]   U n i v   T e x a s   A r l i n g t o n ,   C o l l   B u s i n e s s   A d m ,   D e p t   M a n a g e m e n t ,   A r l i n g t o n ,   T X   7 6 0 1 9   U S A ;   [ N a t a r a j a n ,   V i v e k ]   L a m a r   U n i v ,   B e a u m o n t ,   T X   7 7 7 1 0   U S A 	 N e r u r ,   S P   ( r e p r i n t   a u t h o r ) ,   U n i v   T e x a s   A r l i n g t o n ,   D e p t   I n f o r m a t   S y s t   &   O p e r a t   M a n a g e m e n t ,   B o x   1 9 4 3 7 ,   A r l i n g t o n ,   T X   7 6 0 1 9   U S A . 	 s n e r u r @ u t a . e d u 	 	 	 	 	 A n d r e w s   K e n n e t h   R . ,   1 9 7 1 ,   C O N C E P T   C O R P O R A T E   S T ;   A n s o f f   H .   I . ,   1 9 6 5 ,   C O R P O R A T E   S T R A T E G Y ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B A Y E R   A E ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 4 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 4 4 : : A I D - A S I 1 2 > 3 . 0 . C O ; 2 - J ;   B e t t i s   R A ,   1 9 9 1 ,   O R G A N   S C I ,   V 2 ,   P 3 1 5 ,   D O I   1 0 . 1 2 8 7 / o r s c . 2 . 3 . 3 1 5 ;   B i g g a d i k e   E .   R . ,   1 9 8 1 ,   A C A D   M A N A G E   R E V ,   V 6 ,   P 6 2 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 6 4 0 ;   B o y d   B K ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 2 3 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 4 4 ;   B o y d   B K ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 8 4 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 7 7 ;   B U R T ,   2 0 0 5 ,   B R O K E R A G E   C L O S U R E   I N ;   C h a n d l e r   A .   D . ,   1 9 6 2 ,   S T R A T E G Y   S T R U C T U R E   C ;   C O T T R I L L   C A ,   1 9 8 9 ,   K N O W L E D G E ,   V 1 1 ,   P 1 8 1 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   D e a r h o l t   D .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ,   P 1 ;   E I S E N H A R D T   K M ,   1 9 8 9 ,   A C A D   M A N A G E   R E V ,   V 1 4 ,   P 5 7 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 8 9 . 4 2 7 9 0 0 3 ;   E o m   S B ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 9 4 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 1 2 ) 4 7 : 1 2 < 9 4 1 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - 2 ;   G i l b e r t   D .   R . ,   1 9 9 2 ,   T W I L I G H T   C O R P O R A T E   S ;   H A I R   J ,   1 9 9 8 ,   M U L T I V A R I A T E   D A T A   A N ;   H o s k i s s o n   R E ,   1 9 9 9 ,   J   M A N A G E ,   V 2 5 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 0 6 3 ( 9 9 ) 0 0 0 0 8 - 2 ;   J e m i s o n   D . B . ,   1 9 8 1 ,   A C A D   M A N A G E   R E V ,   V 6 ,   P 6 3 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 6 4 1 ;   J e m i s o n   D a v i d   B ,   1 9 8 1 ,   A C A D   M A N A G E   R E V ,   P 6 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 6 3 8 ;   K O G U T   B ,   1 9 9 1 ,   M A N A G E   S C I ,   V 3 7 ,   P 1 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 7 . 1 . 1 9 ;   K u h n   S .   T . ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   M a r i o n   L S ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 7 2 > 3 . 0 . C O ; 2 - 8 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 4 ;   M c C a i n   K .   W . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 1 9 4 ;   M E Y E R   A D ,   1 9 9 1 ,   J   M A N A G E ,   V 1 7 ,   P 8 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 1 0 1 7 0 0 4 1 3 ;   M I N T Z B E R G   H ,   1 9 8 5 ,   S T R A T E G I C   M A N A G E   J ,   V 6 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 6 0 3 0 6 ;   M i n t z b e r g   H ,   1 9 9 4 ,   R I S E   F A L L   S T R A T E G I C ;   N a g   R ,   2 0 0 7 ,   S T R A T E G   M A N A G E   J ,   V 2 8 ,   P 9 3 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 1 5 ;   P h e l a n   S E ,   2 0 0 2 ,   S T R A T E G I C   M A N A G E   J ,   V 2 3 ,   P 1 1 6 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 2 6 8 ;   P o d s a k o f f   P M ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 5 4 ;   P o n z i   L J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 1 9 8 2 4 8 5 0 ;   P o r t e r   M . ,   1 9 8 0 ,   C O M P E T I T I V E   S T R A T E G Y ;   P o r t e r   M .   E . ,   1 9 8 1 ,   A C A D   M A N A G E   R E V ,   V 6 ,   P 6 0 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 6 3 9 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   S c h e n d e l   D .   E . ,   1 9 7 9 ,   S T R A T E G I C   M A N A G E M E N T ;   S c h v a n e v e l d t   R .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ;   S h a n n o n   C E ,   1 9 6 3 ,   M A T H   T H E O R Y   C O M M U N I C ;   S H A W   W M ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 0 1 6 6 8 ;   S h a w   J r   W M ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 4 6 ;   S i r c a r   S ,   2 0 0 1 ,   M I S   Q U A R T ,   V 2 5 ,   P 4 5 7 ,   D O I   1 0 . 2 3 0 7 / 3 2 5 0 9 9 1 ;   W e b e r   R . ,   1 9 8 7 ,   J   I N F O R M   S Y S T E M S ,   V 1 ,   P 3 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 ;   W I L K I N S O N   L ,   2 0 0 2 ,   S Y S T A T   1 0   2   S T A T ,   V 2 ,   P 1 1 9 	 5 2 	 9 8 	 1 0 2 	 9 	 9 7 	 J O H N   W I L E Y   &   S O N S   L T D 	 C H I C H E S T E R 	 T H E   A T R I U M ,   S O U T H E R N   G A T E ,   C H I C H E S T E R   P O 1 9   8 S Q ,   W   S U S S E X ,   E N G L A N D 	 0 1 4 3 - 2 0 9 5 	 	 	 S T R A T E G   M A N A G E   J 	 S t r a t e g .   M a n a g e .   J . 	 M A R 	 2 0 0 8 	 2 9 	 3 	 	 	 	 	 3 1 9 	 3 3 6 	 	 1 0 . 1 0 0 2 / s m j . 6 5 9 	 	 1 8 	 B u s i n e s s ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 2 7 4 Y Q 	 W O S : 0 0 0 2 5 4 0 3 9 1 0 0 0 0 5 	 	 
 
 J 	 B j o r n e b o r n ,   L ;   I n g w e r s e n ,   P 	 	 	 	 B j o r n e b o r n ,   L ;   I n g w e r s e n ,   P 	 	 	 T o w a r d   a   b a s i c   f r a m e w o r k   f o r   w e b o m e t r i c s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W O R L D - W I D E - W E B ;   C O M P L E X   N E T W O R K S ;   I N T E R N E T ;   U N I V E R S I T Y ;   C O M M U N I C A T I O N ;   B I B L I O M E T R I C S ;   I N F O R M A T I O N ;   D O C U M E N T A T I O N ;   C O N N E C T I V I T Y ;   I M P A C T 	 I n   t h i s   a r t i c l e ,   w e   d e f i n e   w e b o m e t r i c s   w i t h i n   t h e   f r a m e w o r k   o f   i n f o r m e t r i c   s t u d i e s   a n d   b i b l i o m e t r i c s ,   a s   b e l o n g i n g   t o   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e ,   a n d   a s   a s s o c i a t e d   w i t h   c y b e r m e t r i c s   a s   a   g e n e r i c   s u b f i e l d .   W e   d e v e l o p   a   c o n s i s t e n t   a n d   d e t a i l e d   l i n k   t y p o l o g y   a n d   t e r m i n o l o g y   a n d   m a k e   e x p l i c i t   t h e   d i s t i n c t i o n   a m o n g   d i f f e r e n t   W e b   n o d e   l e v e l s   w h e n   u s i n g   t h e   p r o p o s e d   c o n c e p t u a l   f r a m e w o r k .   A s   a   c o n s e q u e n c e ,   w e   p r o p o s e   a   n o v e l   d i a g r a m   n o t a t i o n   t o   f u l l y   a p p r e c i a t e   a n d   i n v e s t i g a t e   l i n k   s t r u c t u r e s   b e t w e e n   W e b   n o d e s   i n   w e b o m e t r i c   a n a l y s e s .   W e   w a r n   a g a i n s t   t a k i n g   t h e   a n a l o g y   b e t w e e n   c i t a t i o n   a n a l y s e s   a n d   l i n k   a n a l y s e s   t o o   f a r . 	 R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   D e p t   I n f o r m a t   S t u d i e s ,   D K - 2 3 0 0   C o p e n h a g e n   S ,   D e n m a r k 	 B j o r n e b o r n ,   L   ( r e p r i n t   a u t h o r ) ,   R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   D e p t   I n f o r m a t   S t u d i e s ,   D K - 2 3 0 0   C o p e n h a g e n   S ,   D e n m a r k . 	 l b @ d b . d k ;   p i @ d b . d k 	 	 	 	 	 A B R A H A M   R H ,   1 9 9 6 ,   W E B O M E T R Y   M E A S U R I N G ;   A d a m i c   I A ,   2 0 0 1 ,   C O M M U N   A C M ,   V 4 4 ,   P 5 5 ;   A d a m i c   L A ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 7 . 5 4 6 1 . 2 1 1 5 a ;   A l b e r t   R ,   2 0 0 2 ,   R E V   M O D   P H Y S ,   V 7 4 ,   P 4 7 ,   D O I   1 0 . 1 1 0 3 / R e v M o d P h y s . 7 4 . 4 7 ;   A l b e r t   R ,   1 9 9 9 ,   N A T U R E ,   V 4 0 1 ,   P 1 3 0 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   A L M I N D   T C ,   1 9 9 6 ,   I N F O R M E T R I C   A N A L   W O R ;   B a r I l a n   J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 2 9 ;   B j o r k m a n   A ,   2 0 0 2 ,   C E L L   C H E M   T E C H N O L ,   V 3 6 ,   P 3 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B j o r n e b o r n   L . ,   2 0 0 4 ,   T H E S I S   R O Y A L   S C H   L I B ;   B j o r n e b o r n   L . ,   2 0 0 1 ,   P   1 2   A C M   C   H Y P   H Y P ,   P 1 3 3 ;   B O S S Y   M J ,   1 9 9 5 ,   S O L A R I S ,   V 2 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r i n   S . ,   1 9 9 8 ,   C O M P U T E R   N E T W O R K S   I S ,   V 3 0 ,   P 1 ;   B r o d e r   A ,   2 0 0 0 ,   C O M P U T   N E T W ,   V 3 3 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 9 - 1 2 8 6 ( 0 0 ) 0 0 0 8 3 - 9 ;   B r o o k e s   B .   C . ,   1 9 9 0 ,   I N F O R M E T R I C S ,   V 8 9 ,   P 3 1 ;   C h a k r a b a r t i   S ,   1 9 9 9 ,   C O M P U T E R ,   V 3 2 ,   P 6 0 ,   D O I   1 0 . 1 1 0 9 / 2 . 7 8 1 6 3 6 ;   C H A K R A B A R T I   S ,   2 0 0 2 ,   P   W W W 2 0 0 2   C ;   C h e n   C M ,   1 9 9 8 ,   I N T E R A C T   C O M P U T ,   V 1 0 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 3 - 5 4 3 8 ( 9 7 ) 0 0 0 3 4 - 9 ;   C h i   E .   H . ,   1 9 9 8 ,   P   A C M   C   H U M   F A C T   C O M ,   P 4 0 0 ,   D O I   1 0 . 1 1 4 5 / 2 7 4 6 4 4 . 2 7 4 6 9 9 ;   C o o l e y   R . ,   1 9 9 7 ,   P   9   I E E E   I N T   C   T O O L S ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   D a v i s o n   B .   D . ,   2 0 0 0 ,   P   2 3   A N N   I N T   A C M   S I G ,   P 2 7 2 ,   D O I   1 0 . 1 1 4 5 / 3 4 5 5 0 8 . 3 4 5 5 9 7 ;   D I N G   C ,   2 0 0 2 ,   4 7 8 4 7   L B N L ;   D o d g e   M a r t i n ,   2 0 0 2 ,   G E O I N F O R M A T I C S ,   V 5 ,   P 3 8 ;   D o d g e   M . ,   2 0 0 1 ,   M A P P I N G   C Y B E R S P A C E ;   D O D G E   M ,   1 9 9 8 ,   8   C A S A   U   C O L L   L O N D ;   D O W N I E   J ,   1 9 9 6 ,   P   C A N A D I A N   A S S   I N F O R ,   P 1 3 0 ;   E F E   K ,   2 0 0 0 ,   P   I N T   C   A D V   I N F R   E L ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   E G G H E   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T I C S   Q U ;   E t z i o n i   O ,   1 9 9 6 ,   C O M M U N   A C M ,   V 3 9 ,   P 6 5 ,   D O I   1 0 . 1 1 4 5 / 2 4 0 4 5 5 . 2 4 0 4 7 3 ;   F U R N E R   J ,   1 9 9 6 ,   I N F O R M A T I O N   R E T R I E V A ,   P 7 5 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r n e r   R a l p h ,   1 9 6 7 ,   3   D R E X E L   I N F O R M A T I O N ,   P 3 ;   G I R A R D I N ,   1 9 9 6 ,   M A P P I N G   V I R T U A L   G E O G ;   G I R A R D I N   L ,   1 9 9 5 ,   C Y B E R S P A C E   G E O G R A P H Y ;   G r o s s   J . ,   1 9 9 9 ,   G R A P H   T H E O R Y   I T S   A P P ;   H a r t e r   S P ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 1 5 9 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 2 9 > 3 . 0 . C O ; 2 - P ;   H e r n a n d e z B o r g e s   A A ,   1 9 9 7 ,   P E D I A T R I C S ,   V 1 0 0 ,   p a r t .   n o . ,   D O I   1 0 . 1 5 4 2 / p e d s . 1 0 0 . 2 . e 8 ;   H e r r i n g   S C ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 6 0 1 0 4 ;   H e r t z e l   D .   H ,   1 9 8 7 ,   E N C Y   L I B R A R Y   I N F O   S 7 ,   P 1 4 4 ;   H U B E M R A N   B A ,   2 0 0 1 ,   L A W S   W E B   P A T T E R N S   E C ;   H U M M O N   N P ,   1 9 8 9 ,   S O C   N E T W O R K S ,   V 1 1 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 9 ) 9 0 0 1 7 - 8 ;   H u r d   J M ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 2 7 9 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 4 > 3 . 0 . C O ; 2 - 1 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K i m   Y .   R . ,   2 0 0 0 ,   J o u r n a l   o f   F o o d   S c i e n c e   a n d   N u t r i t i o n ,   V 5 ,   P 1 0 ;   K l e i n b e r g   J . ,   1 9 9 9 ,   L E C T   N O T E S   C O M P U T E R ,   V 1 6 2 7 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 7 / 3 - 5 4 0 - 4 8 6 8 6 - 0 _ 1 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K o c h e n   M . ,   1 9 8 9 ,   T H E   S M A L L   W O R L D ;   K o s a l a   R . ,   2 0 0 0 ,   S I G K D D   E X P L O R A T I O N S ,   V 2 ,   P 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 6 0 4 0 2 . 3 6 0 4 0 6 ;   K U S T E R   R J ,   1 9 9 6 ,   P   A S I S   M I D Y   1 9 9 6 ,   P 3 3 8 ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   L E V E N E   M ,   2 0 0 1 ,   S O F T W A R E   F O C U S ,   V 2 ,   P 6 0 ,   D O I   1 0 . 1 0 0 2 / s w f . 3 0 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M A T Z A T   U ,   1 9 9 8 ,   P   I R I S S   9 8   I N T   C ;   M C K I E R N A N   G ,   1 9 9 6 ,   C I T A T I O N   I N D E X I N G   W E ;   * M E M B   C L E V   P R O J ,   1 9 9 9 ,   S C I   A M ,   V 2 8 0 ,   P 5 4 ;   M e n c z e r   F ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 1 4 0 1 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 2 1 2 3 4 8 3 9 9 ;   M E Y E R   E K ,   1 9 9 9 ,   I N T E R N E T   I T S   I M P A C T ,   P 1 3 1 ;   M i l g r a m   S . ,   1 9 6 7 ,   P S Y C H O L   T O D A Y ,   V 2 ,   P 6 0 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 3 5 3 0 5 . 3 3 5 3 2 5 ;   M i l o   R ,   2 0 0 2 ,   S C I E N C E ,   V 2 9 8 ,   P 8 2 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 8 . 5 5 9 4 . 8 2 4 ;   M o l y n e u x   R E ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 2 8 7 ;   M O U L T H R O P   S ,   1 9 9 5 ,   W W W 4   C ;   N A N C E   R E ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 2 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 4 0 3 ;   O t t e   E ,   2 0 0 2 ,   J   I N F O R M   S C I ,   V 2 8 ,   P 4 4 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 2 7 6 2 2 0 2 1 2 3 ;   P a r k   H .   W . ,   2 0 0 3 ,   J   C O M P U T E R   M E D I A T E D ,   V 8 ;   P I R O L L I   P ,   1 9 9 6 ,   C H I   9 6   E L   P ;   P I T K O W   J ,   1 9 9 7 ,   L I F E   D E A T H   L A W F U L N E S ;   P I T K O W   J E ,   1 9 9 7 ,   C H A R A C T E R I Z I N G   W O R L D ;   P O O L   I D ,   1 9 7 8 ,   S O C   N E T W O R K S ,   V 1 ,   P 5 ;   P r i c e   D . ,   1 9 6 5 ,   G R O W T H   K N O W L E D G E   R E A ,   P 1 4 5 ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   P r i m e   C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 2 2 2 1 4 0 0 5 ;   R O U S S E A U   R ,   1 9 9 8 ,   C Y B E R M E T R I C S ,   V 1 ;   S c o t t   J ,   2 0 0 0 ,   S O C I A L   N E T W O R K   A N A L ;   S K V O R E T Z   J ,   1 9 8 9 ,   S M A L L   W O R L D ,   P 2 9 6 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S P E R T U S   E ,   1 9 9 7 ,   W W W 6   C ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 9 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 2 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 6 1 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 5 ;   T H E L W A L L   M ,   2 0 0 3 ,   I N F O R M A T I O N   R E S ,   V 8 ;   T H E L W A L L   M ,   I N   P R E S S   A N N   R E V   I N F ,   V 3 9 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   V a z q u e z   A ,   2 0 0 1 ,   E U R O P H Y S   L E T T ,   V 5 4 ,   P 4 3 0 ,   D O I   1 0 . 1 2 0 9 / e p l / i 2 0 0 1 - 0 0 2 5 9 - y ;   W a l k e r   J i l l ,   2 0 0 2 ,   P   H Y P   2 0 0 2 ,   P 7 8 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W a t t s   D J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 3 ,   P 4 4 0 ,   D O I   1 0 . 1 0 3 8 / 3 0 9 1 8 ;   W E I S S   R ,   1 9 9 6 ,   P   7   A C M   C   H Y P ,   P 1 8 0 ,   D O I   1 0 . 1 1 4 5 / 2 3 4 8 2 8 . 2 3 4 8 4 6 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l k i n s o n   D ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 ;   Y a o   Y ,   2 0 0 1 ,   L E C T   N O T E S   A R T I F   I N T ,   V 2 1 9 8 ,   P 1 ;   Z h a n g   Y ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 1 3 . a b s ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 9 9 	 9 7 	 1 0 4 	 6 	 7 1 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 0 4 	 5 5 	 1 4 	 	 	 	 	 1 2 1 6 	 1 2 2 7 	 	 1 0 . 1 0 0 2 / a s i . 2 0 0 7 7 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 7 0 U S 	 W O S : 0 0 0 2 2 5 0 8 4 7 0 0 0 0 2 	 	 
 
 J 	 H i c k s ,   D ;   B r e i t z m a n ,   T ;   O l i v a s t r o ,   D ;   H a m i l t o n ,   K 	 	 	 	 H i c k s ,   D ;   B r e i t z m a n ,   T ;   O l i v a s t r o ,   D ;   H a m i l t o n ,   K 	 	 	 T h e   c h a n g i n g   c o m p o s i t i o n   o f   i n n o v a t i v e   a c t i v i t y   i n   t h e   U S   -   a   p o r t r a i t   b a s e d   o n   p a t e n t   a n a l y s i s 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i n n o v a t i o n ;   U n i t e d   S t a t e s ;   p a t e n t ;   u n i v e r s i t y ;   l o c a l 	 T E C H N O L O G Y ;   S C I E N C E 	 I n   t h i s   p a p e r ,   p a t e n t   b i b l i o m e t r i c s   a r e   u s e d   t o   i n v e s t i g a t e   s h i f t s   u n d e r w a y   i n   t h e   A m e r i c a n   i n n o v a t i o n   s y s t e m .   P a t e n t   i n d i c a t o r s   p o i n t   t o   e x t r a o r d i n a r i l y   d y n a m i c   i n n o v a t i o n   i n   i n f o r m a t i o n   a n d   h e a l t h   t e c h n o l o g i e s   a c c o m p a n i e d   b y   a   s h i f t   i n   t h e   c e n t e r   o f   U S   i n n o v a t i o n   f r o m   t h e   E a s t   t o   t h e   W e s t   C o a s t .   I n n o v a t i n g   c o m p a n i e s   a r e   a d a p t i n g   t o   t h e   d e m i s e   o f   l a r g e   c o r p o r a t e   b a s i c   r e s e a r c h   l a b o r a t o r i e s   b y   u s i n g   t h e i r   o w n   r e s e a r c h   i n s t e a d .   G r o w t h   i n   u n i v e r s i t y   p a t e n t i n g   i s   a l s o   s t r i k i n g ,   a n d   u n i v e r s i t i e s   h a v e   b e c o m e   d o m i n a n t   p a t e n t e e s   i n   a   f e w   l a r g e ,   e c o n o m i c a l l y   v i b r a n t   c i t i e s .   T h e   i m p o r t a n c e   o f   u n i v e r s i t i e s   t o   l o c a l   i n n o v a t i o n   h a s   a l s o   b e e n   r e v e a l e d   b y   t h e   g r o w t h   i n   r e f e r e n c i n g   f r o m   p a t e n t s   t o   p a p e r s   w h i c h   a l l o w s   u s   t o   s e e   t h a t   c o m p a n i e s   p r e f e r e n t i a l l y   r e f e r e n c e   p a p e r s   f r o m   i n - s t a t e   p u b l i c   s e c t o r   i n s t i t u t i o n s .   ( C )   2 0 0 1   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 C H I   R e s   I n c ,   H a d d o n   H t s ,   N J   0 8 0 3 5   U S A 	 H i c k s ,   D   ( r e p r i n t   a u t h o r ) ,   C H I   R e s   I n c ,   1 0   W h i t e   H o r s e   P i k e ,   H a d d o n   H t s ,   N J   0 8 0 3 5   U S A . 	 	 	 	 	 	 C O H E N   W ,   2 0 0 0 ,   W B E R   W O R K I N G   P A P E R   S ,   V 7 5 5 2 ;   F r e e m a n   C . ,   1 9 8 8 ,   T E C H N I C A L   C H A N G E   E C ;   H A L L   B H ,   2 0 0 0 ,   U N P U B   P A T E N T   P A R A D O X ;   H e n d e r s o n   R ,   1 9 9 8 ,   R E V   E C O N   S T A T ,   V 8 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 8 5 5 7 2 2 1 ;   J A F F E   A B ,   1 9 9 3 ,   Q   J   E C O N ,   V 1 0 8 ,   P 5 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 8 4 0 1 ;   K o r t u m   S ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 8 2 - 1 ;   K o u m p i s   K . ,   1 9 9 9 ,   I N T   J   I N N O V A T I O N   M A N ,   V 3 ,   P 3 3 5 ,   D O I   1 0 . 1 1 4 2 / S 1 3 6 3 9 1 9 6 9 9 0 0 0 1 7 7 ;   M e y e r   M ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 4 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 4 0 - 2 ;   M O W E R Y   D C ,   2 0 0 0 ,   7   C O L   U   S C H   I N T   P U B L ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   * N A T   S C I   B O A R D ,   1 9 9 8 ,   9 8 9 9   N S B ;   * N A T   S C I   B O A R D   S C I ,   1 9 9 8 ,   9 8 1   N S B ;   * N A T   S C I   B O A R D   S C I ,   2 0 0 0 ,   0 0 1   N S B ;   R O S E N B L O O M   R S ,   1 9 9 6 ,   E N G   I N N O V A T I O N ;   W A L D M A N   P ,   2 0 0 0 ,   W A L L   S T R E E T   J   I N T E R A ;   Z U C K E R   L G ,   1 9 9 5 ,   N B E R   W O R K I N G   P A P E R   S ,   V 5 2 4 3 ;   Z u c k e r   L . G ,   1 9 9 4 ,   N B E R   W O R K I N G   P A P E R   S 	 1 7 	 9 7 	 9 9 	 2 	 2 8 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 A P R 	 2 0 0 1 	 3 0 	 4 	 	 	 	 	 6 8 1 	 7 0 3 	 	 1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 1 4 7 - 5 	 	 2 3 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 4 1 6 W P 	 W O S : 0 0 0 1 6 7 8 0 3 6 0 0 0 0 8 	 	 
 
 J 	 M e y e r ,   M 	 	 	 	 M e y e r ,   M 	 	 	 W h a t   i s   s p e c i a l   a b o u t   p a t e n t   c i t a t i o n s ?   D i f f e r e n c e s   b e t w e e n   s c i e n t i f i c   a n d   p a t e n t   c i t a t i o n s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 T h e   e m e r g e n c e   o f   p a t e n t   b i b l i o m e t r i c s   a s   a   n e w   b r a n c h   o f   s c i e n t o m e t r i c s   n e c e s s i t a t e s   a   d e e p e r   u n d e r s t a n d i n g   o f   t h e   r e l a t i o n s h i p   b e t w e e n   p a t e n t s   a n d   p a p e r s .   A s   t h i s   c o n n e c t i o n   i s   e s t a b l i s h e d   t h r o u g h   t h e   L i n k a g e   b e t w e e n   p a t e n t s   a n d   r e s e a r c h   p a p e r s ,   o n e   m u s t   h a v e   a   c l e a r   i d e a   o f   s i m i l a r i t i e s   a n d   d i f f e r e n c e s   b e t w e e n   p a t e n t   a n d   p a p e r   c i t a t i o n s .   T h i s   p a p e r   w i l l   i n v e s t i g a t e   t o   w h a t   e x t e n t   o n e   c a n   n o t   o n l y   a p p l y   b i b l i o m e t r i c   m e t h o d s   t o   p a t e n t s   b u t   a l s o   e x t e n d   t h e   e x i s t i n g   i n t e r p r e t a t i v e   f r a m e w o r k   f o r   c i t a t i o n s   i n   r e s e a r c h   p a p e r s   t o   t h e   f i e l d   o f   p a t e n t   c i t a t i o n s .   A f t e r   p o i n t i n g   o u t   s o m e   p a r a l l e l s   i n   t h e   d e b a t e s   a b o u t   t h e   n a t u r e   o f   c i t a t i o n s   i n   p a t e n t s   a n d   s c i e n t i f i c   a r t i c l e s ,   t h e   p a p e r   o u t l i n e s   t h o s e   p a r t s   o f   b i b l i o m e t r i c   t h e o r y   c o v e r i n g   s c i e n t i f i c   c i t a t i o n s   t h a t   c o u l d   b e   r e l e v a n t   t o   p a t e n t   c i t a t i o n s   t o o .   T h e n   i t   h i g h l i g h t s   t h e   s p e c i a l t i e s   a n d   p e c u l i a r i t i e s   o f   p a t e n t   c i t a t i o n s .   O n e   m a j o r   c o n c l u s i o n   i s   t h a t   t h e   g e n e r a l   n a t u r e   o f   a   c o m m o n   f r a m e w o r k   f o r   b o t h   s c i e n t i f i c   a n d   p a t e n t   c i t a t i o n s   w o u l d   s e v e r e l y   l i m i t   i t s   u s e f u l n e s s ,   b u t   r e s e a r c h   o n   a c a d e m i c   c i t a t i o n s   m i g h t   s t i l l   b e   a   g r e a t   s o u r c e   o f   i n s p i r a t i o n   t o   t h e   s t u d y   o f   p a t e n t   c i t a t i o n s . 	 H e l s i n k i   U n i v   T e c h n o l ,   I n s t   S t r a t e g y   &   I n t   B u s i n e s s ,   D e p t   I n d   E n g n   &   M a n a g e m e n t ,   S F - 0 2 0 1 5   H e l s i n k i ,   F i n l a n d ;   U n i v   S u s s e x ,   S P R U   S c i   &   T e c h n o l   P o l i c y   R e s ,   B r i g h t o n ,   E   S u s s e x ,   E n g l a n d ;   T E C H N O P O L I S   L t d ,   B r i g h t o n ,   E   S u s s e x ,   E n g l a n d 	 M e y e r ,   M   ( r e p r i n t   a u t h o r ) ,   H e l s i n k i   U n i v   T e c h n o l ,   I n s t   S t r a t e g y   &   I n t   B u s i n e s s ,   D e p t   I n d   E n g n   &   M a n a g e m e n t ,   P L   9 5 0 0 ,   S F - 0 2 0 1 5   H e l s i n k i ,   F i n l a n d . 	 	 M e y e r ,   M a r t i n / A - 2 1 4 3 - 2 0 1 3 ;   	 M e y e r ,   M a r t i n / 0 0 0 0 - 0 0 0 2 - 5 5 9 8 - 9 4 8 0 	 	 	 A U G E R   P ,   1 9 9 2 ,   I N F O R M A T I O N   S O U R C E S ;   B A R R E   R ,   1 9 8 1 ,   W O R L D   P A T E N T   I N F O R M A ,   V 3 ,   P 5 6 ;   B E C H E R   T ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 4 5 ;   B E R T R A M   R ,   C O M M U N I C A T I O N ;   C A L L O N   M ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ,   P 9 1 ;   C A M B R O S I O   A ,   1 9 9 0 ,   S O C   P R O B L ,   V 3 7 ,   P 2 7 5 ,   D O I   1 0 . 1 5 2 5 / s p . 1 9 9 0 . 3 7 . 3 . 0 3 a 0 0 0 1 0 ;   C A M P B E L L   B ,   1 9 8 9 ,   E X P E R T   E V I D E N C E   I N T E ,   P 2 1 0 ;   C A R R   F K ,   1 9 9 5 ,   P A T E N T S   H D B   G U I D E   I N ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C O L L I N S   P ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 2 2 - 4 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   F O R D I S   J B ,   1 9 9 5 ,   B I O - T E C H N O L ,   V 1 3 ,   P 4 2 ,   D O I   1 0 . 1 0 3 8 / n b t 0 1 9 5 - 4 2 ;   G A N G U L I   P ,   1 9 9 5 ,   W O R L D   P A T E N T   I N F O R M A ,   V 1 7 ,   P 2 4 5 ;   G A R F I E L D   E ,   1 9 9 4 ,   C U R R E N T   C O N T E N T   0 4 1 5 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G R O N L U N D   K ,   C O M M U N I C A T I O N ;   J O R D A N   G ,   C O M M U N I C A T I O N ;   K A R L S S O N   L ,   C O M M U N I C A T I O N ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M E Y E R   M ,   I N   P R E S S   R E S   P O L I C Y ;   M E Y E R   M ,   1 9 9 8 ,   I P T S   R E P O R T             O C T ;   N A R I N   F ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 9 ;   N a r i n   F . ,   1 9 8 9 ,   S C I   T E C H N O L O G Y   I N D I C ;   R a b e h a r i s o a   V . ,   1 9 9 2 ,   D Y N A M I C S   S C I   B A S E D   I ,   P 4 5 ;   R E I N G O L D   N ,   1 9 6 0 ,   T E C H N O L   C U L T ,   V 1 ,   P 1 6 0 ;   R i p   A . ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ,   P 8 4 ;   S C H M O C H   U ,   1 9 9 1 ,   A C T A   A S T R O N A U T ,   V 2 4 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 4 - 5 7 6 5 ( 9 1 ) 9 0 1 8 5 - 8 ;   S C H M O C H   U ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 0 0 ;   v a n   d e n   B e l t   M e n k ,   1 9 8 9 ,   E X P E R T   E V I D E N C E   I N T E ;   W a l k e r   R ,   1 9 9 5 ,   P A T E N T S   S C I   T E C H N I C A ;   W A L K E R   R D ,   1 9 9 5 ,   P A T E N T S   S C I   T E C H N I C A ,   P 1 3 5 ;   1 9 9 9 ,   G E N E R A L A N Z E I G E R   0 3 1 1 	 3 3 	 9 6 	 9 9 	 1 2 	 5 9 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 S P U I B O U L E V A R D   5 0 ,   P O   B O X   1 7 ,   3 3 0 0   A A   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 2 0 0 0 	 4 9 	 1 	 	 	 	 	 9 3 	 1 2 3 	 	 1 0 . 1 0 2 3 / A : 1 0 0 5 6 1 3 3 2 5 6 4 8 	 	 3 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 4 7 G G 	 W O S : 0 0 0 0 8 8 9 1 9 4 0 0 0 0 7 	 	 
 
 J 	 A c a r ,   E ;   D u n l a v y ,   D M ;   K o l d a ,   T G ;   M o r u p ,   M 	 	 	 	 A c a r ,   E v r i m ;   D u n l a v y ,   D a n i e l   M . ;   K o l d a ,   T a m a r a   G . ;   M o r u p ,   M o r t e n 	 	 	 S c a l a b l e   t e n s o r   f a c t o r i z a t i o n s   f o r   i n c o m p l e t e   d a t a 	 C H E M O M E T R I C S   A N D   I N T E L L I G E N T   L A B O R A T O R Y   S Y S T E M S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 M i s s i n g   d a t a ;   I n c o m p l e t e   d a t a ;   T e n s o r   f a c t o r i z a t i o n ;   C A N D E C O M P ;   P A R A F A C ;   O p t i m i z a t i o n 	 M U L T I W A Y   A N A L Y S I S ;   L E A S T - S Q U A R E S ;   T O O L B O X ;   D E C O M P O S I T I O N S ;   A L G O R I T H M ;   M A T R I C E S ;   P A R A F A C ;   M A T L A B ;   R A N K 	 T h e   p r o b l e m   o f   i n c o m p l e t e   d a t a   -   i . e . ,   d a t a   w i t h   m i s s i n g   o r   u n k n o w n   v a l u e s   -   i n   m u l t i - w a y   a r r a y s   i s   u b i q u i t o u s   i n   b i o m e d i c a l   s i g n a l   p r o c e s s i n g ,   n e t w o r k   t r a f f i c   a n a l y s i s ,   b i b l i o m e t r i c s ,   s o c i a l   n e t w o r k   a n a l y s i s ,   c h e m o m e t r i c s ,   c o m p u t e r   v i s i o n ,   c o m m u n i c a t i o n   n e t w o r k s ,   e t c .   W e   c o n s i d e r   t h e   p r o b l e m   o f   h o w   t o   f a c t o r i z e   d a t a   s e t s   w i t h   m i s s i n g   v a l u e s   w i t h   t h e   g o a l   o f   c a p t u r i n g   t h e   u n d e r l y i n g   l a t e n t   s t r u c t u r e   o f   t h e   d a t a   a n d   p o s s i b l y   r e c o n s t r u c t i n g   m i s s i n g   v a l u e s   ( i . e . ,   t e n s o r   c o m p l e t i o n ) .   W e   f o c u s   o n   o n e   o f   t h e   m o s t   w e l l - k n o w n   t e n s o r   f a c t o r i z a t i o n s   t h a t   c a p t u r e s   m u l t i - l i n e a r   s t r u c t u r e ,   C A N D E C O M P / P A R A F A C   ( C P ) .   I n   t h e   p r e s e n c e   o f   m i s s i n g   d a t a ,   C P   c a n   b e   f o r m u l a t e d   a s   a   w e i g h t e d   l e a s t   s q u a r e s   p r o b l e m   t h a t   m o d e l s   o n l y   t h e   k n o w n   e n t r i e s .   W e   d e v e l o p   a n   a l g o r i t h m   c a l l e d   C P - W O P T   ( C P   W e i g h t e d   O P T i m i z a t i o n )   t h a t   u s e s   a   f i r s t - o r d e r   o p t i m i z a t i o n   a p p r o a c h   t o   s o l v e   t h e   w e i g h t e d   l e a s t   s q u a r e s   p r o b l e m .   B a s e d   o n   e x t e n s i v e   n u m e r i c a l   e x p e r i m e n t s ,   o u r   a l g o r i t h m   i s   s h o w n   t o   s u c c e s s f u l l y   f a c t o r i z e   t e n s o r s   w i t h   n o i s e   a n d   u p   t o   9 9 %   m i s s i n g   d a t a .   A   u n i q u e   a s p e c t   o f   o u r   a p p r o a c h   i s   t h a t   i t   s c a l e s   t o   s p a r s e   l a r g e - s c a l e   d a t a ,   e . g . ,   1 0 0 0   x   1 0 0 0   x   1 0 0 0   w i t h   f i v e   m i l l i o n   k n o w n   e n t r i e s   ( 0 . 5 %   d e n s e ) .   W e   f u r t h e r   d e m o n s t r a t e   t h e   u s e f u l n e s s   o f   C P - W O P T   o n   t w o   r e a l - w o r l d   a p p l i c a t i o n s :   a   n o v e l   E E G   ( e l e c t r o e n c e p h a l o g r a m )   a p p l i c a t i o n   w h e r e   m i s s i n g   d a t a   i s   f r e q u e n t l y   e n c o u n t e r e d   d u e   t o   d i s c o n n e c t i o n s   o f   e l e c t r o d e s   a n d   t h e   p r o b l e m   o f   m o d e l i n g   c o m p u t e r   n e t w o r k   t r a f f i c   w h e r e   d a t a   m a y   b e   a b s e n t   d u e   t o   t h e   e x p e n s e   o f   t h e   d a t a   c o l l e c t i o n   p r o c e s s .   ( C )   2 0 1 0   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ K o l d a ,   T a m a r a   G . ]   S a n d i a   N a t l   L a b s ,   L i v e r m o r e ,   C A   9 4 5 5 1   U S A ;   [ A c a r ,   E v r i m ]   T U B I T A K   U E K A E ,   G e b z e ,   T u r k e y ;   [ D u n l a v y ,   D a n i e l   M . ]   S a n d i a   N a t l   L a b s ,   A l b u q u e r q u e ,   N M   8 7 1 2 3   U S A ;   [ M o r u p ,   M o r t e n ]   T e c h   U n i v   D e n m a r k ,   D K - 2 8 0 0   L y n g b y ,   D e n m a r k 	 K o l d a ,   T G   ( r e p r i n t   a u t h o r ) ,   S a n d i a   N a t l   L a b s ,   L i v e r m o r e ,   C A   9 4 5 5 1   U S A . 	 e v r i m . a c a r @ b t e . t u b i t a k . g o v . t r ;   d m d u n l a @ s a n d i a . g o v ;   t g k o l d a @ s a n d i a . g o v ;   m m @ i m m . d t u . d k 	 K o l d a ,   T a m a r a / B - 1 6 2 8 - 2 0 0 9 ;   A c a r ,   E v r i m / A - 7 1 6 1 - 2 0 1 5 ;   	 K o l d a ,   T a m a r a / 0 0 0 0 - 0 0 0 3 - 4 1 7 6 - 2 4 9 3 ;   A c a r ,   E v r i m / 0 0 0 0 - 0 0 0 2 - 3 7 3 7 - 2 9 2 X ;   M o r u p ,   M o r t e n / 0 0 0 0 - 0 0 0 3 - 4 9 8 5 - 4 3 6 8 	 U n i t e d   S t a t e s   D e p a r t m e n t   o f   E n e r g y ' s   N a t i o n a l   N u c l e a r   S e c u r i t y   A d m i n i s t r a t i o n   [ D E - A C 0 4 - 9 4 A L 8 5 0 0 0 ] 	 T h i s   w o r k   w a s   f u n d e d   b y   t h e   L a b o r a t o r y   D i r e c t e d   R e s e a r c h   &   D e v e l o p m e n t   ( L D R D )   p r o g r a m   a t   S a n d i a   N a t i o n a l   L a b o r a t o r i e s ,   a   m u l t i p r o g r a m   l a b o r a t o r y   o p e r a t e d   b y   S a n d i a   C o r p o r a t i o n ,   a   L o c k h e e d   M a r t i n   C o m p a n y ,   f o r   t h e   U n i t e d   S t a t e s   D e p a r t m e n t   o f   E n e r g y ' s   N a t i o n a l   N u c l e a r   S e c u r i t y   A d m i n i s t r a t i o n   u n d e r   c o n t r a c t   D E - A C 0 4 - 9 4 A L 8 5 0 0 0 . 	 A c a r   E v r i m ,   2 0 1 0 ,   P   2 0 1 0   S I A M   I N T   C   D A ,   P 7 0 1 ;   A c a r   E ,   2 0 0 9 ,   I E E E   T   K N O W L   D A T A   E N ,   V 2 1 ,   P 6 ,   D O I   1 0 . 1 1 0 9 / T K D E . 2 0 0 8 . 1 1 2 ;   A c a r   E ,   2 0 0 7 ,   B I O I N F O R M A T I C S ,   V 2 3 ,   p I 1 0 ,   D O I   1 0 . 1 0 9 3 / b i o i n f o r m a t i c s / b t m 2 1 0 ;   A c a r   E ,   2 0 1 1 ,   J   C H E M O M E T R ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 0 0 2 / c e m . 1 3 3 5 ;   A n d e r s s o n   C A ,   2 0 0 0 ,   C H E M O M E T R   I N T E L L   L A B ,   V 5 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 4 3 9 ( 0 0 ) 0 0 0 7 1 - X ;   B a d e r   B W ,   2 0 0 7 ,   S I A M   J   S C I   C O M P U T ,   V 3 0 ,   P 2 0 5 ,   D O I   1 0 . 1 1 3 7 / 0 6 0 6 7 6 4 8 9 ;   B a d e r   B .   W . ,   M A T L A B   T E N S O R   T O O L B O ;   B r o   R . ,   1 9 9 8 ,   T H E S I S   U   A M S T E R D A M ;   B r o   R ,   2 0 0 6 ,   C R I T   R E V   A N A L   C H E M ,   V 3 6 ,   P 2 7 9 ,   D O I   1 0 . 1 0 8 0 / 1 0 4 0 8 3 4 0 6 0 0 9 6 9 9 6 5 ;   B U C H A N A N   A M ,   2 0 0 5 ,   C V P R 0 5 ,   V 2 ,   P 3 1 6 ,   D O I   D O I   1 0 . 1 1 0 9 / C V P R . 2 0 0 5 . 1 1 8 ;   C A N D E S   E J ,   2 0 0 9 ,   A R X I V 0 9 0 3 1 4 7 6 V 1 ;   C A N D E S   E J ,   2 0 0 9 ,   A R X I V 0 9 0 3 3 1 3 1 V 1 ;   C A R R O L L   J D ,   1 9 7 0 ,   P S Y C H O M E T R I K A ,   V 3 5 ,   P 2 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 3 1 0 7 9 1 ;   D e l o r m e   A ,   2 0 0 4 ,   J   N E U R O S C I   M E T H ,   V 1 3 4 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / j . j n e u m e t h . 2 0 0 3 . 1 0 . 0 0 9 ;   D E M P S T E R   A P ,   1 9 7 7 ,   J   R O Y   S T A T   S O C   B   M E T ,   V 3 9 ,   P 1 ;   D u n l a v y   D M ,   2 0 1 0 ,   S A N D 2 0 1 0 1 4 2 2   S A N D   N A ;   G A B R I E L   K R ,   1 9 7 9 ,   T E C H N O M E T R I C S ,   V 2 1 ,   P 4 8 9 ,   D O I   1 0 . 2 3 0 7 / 1 2 6 8 2 8 8 ;   G e n g   X . ,   2 0 0 9 ,   M M   0 9   P   1 7   A C M   I N T   C ,   P 6 2 9 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 6 3 1 2 7 2 . 1 6 3 1 3 7 3 ;   H a r s h m a n   R .   A ,   1 9 7 0 ,   U C L A   W O R K I N G   P A P E R S ,   V 1 6 ,   P 1 ;   K i e r s   H .   A .   L . ,   1 9 9 7 ,   P S Y C H O M E T R I K A ,   V 6 2 ,   P 2 1 5 ,   D O I   D O I   1 0 . 1 0 0 7 / B F 0 2 2 9 5 2 7 9 ;   K o l d a   T G ,   2 0 0 9 ,   S I A M   R E V ,   V 5 1 ,   P 4 5 5 ,   D O I   1 0 . 1 1 3 7 / 0 7 0 7 0 1 1 1 X ;   K o l d a   T .   G . ,   2 0 0 5 ,   I C D M   2 0 0 5 ,   P 2 4 2 ,   D O I   D O I   1 0 . 1 1 0 9 / I C D M . 2 0 0 5 . 7 7 ;   K R U S K A L   J B ,   1 9 7 7 ,   L I N E A R   A L G E B R A   A P P L ,   V 1 8 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 4 - 3 7 9 5 ( 7 7 ) 9 0 0 6 9 - 6 ;   M i w a k e i c h i   F ,   2 0 0 4 ,   N E U R O I M A G E ,   V 2 2 ,   P 1 0 3 5 ,   D O I   1 0 . 1 0 1 6 / j . n e u r o i m a g e . 2 0 0 4 . 0 3 . 0 3 9 ;   M O R E   J J ,   1 9 9 4 ,   A C M   T   M A T H   S O F T W A R E ,   V 2 0 ,   P 2 8 6 ,   D O I   1 0 . 1 1 4 5 / 1 9 2 1 1 5 . 1 9 2 1 3 2 ;   M o r u p   M ,   2 0 0 7 ,   J   N E U R O S C I   M E T H ,   V 1 6 1 ,   P 3 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j n e u m e t h . 2 0 0 6 . 1 1 . 0 0 8 ;   N o c e d a l   J . ,   1 9 9 9 ,   N U M E R I C A L   O P T I M I Z A T I ;   O r e k h o v   V Y ,   2 0 0 3 ,   J   B I O M O L   N M R ,   V 2 7 ,   P 1 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 9 4 4 7 2 0 6 5 3 ;   P a a t e r o   P ,   1 9 9 7 ,   C H E M O M E T R   I N T E L L   L A B ,   V 3 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 4 3 9 ( 9 7 ) 0 0 0 3 1 - 2 ;   R U H E   A ,   1 9 7 4 ,   U M I N F 4 8 7 4   U   U M   I   M A T ;   J a a k k o l a   T . ,   2 0 0 3 ,   I C M L ,   P 7 2 0 ;   T o m a s i   G ,   2 0 0 5 ,   C H E M O M E T R   I N T E L L   L A B ,   V 7 5 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / j . c h e m o l a b . 2 0 0 4 . 0 7 . 0 0 3 ;   T O M A S I   G ,   I N C O M P L E T E   D A T A   P A R A ;   T U C K E R   L R ,   1 9 6 6 ,   P S Y C H O M E T R I K A ,   V 3 1 ,   P 2 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 8 9 4 6 4 ;   U h l i g   S ,   2 0 0 6 ,   A C M   S I G C O M M   C O M P   C O M ,   V 3 6 ,   P 8 3 ,   D O I   1 0 . 1 1 4 5 / 1 1 1 1 3 2 2 . 1 1 1 1 3 4 1 ;   W a l c z a k   B ,   2 0 0 1 ,   C H E M O M E T R   I N T E L L   L A B ,   V 5 8 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 4 3 9 ( 0 1 ) 0 0 1 3 1 - 9 ;   Z h a n g   Y ,   2 0 0 9 ,   S I G C O M M   2 0 0 9 ,   P 2 6 7 	 3 7 	 9 3 	 9 5 	 6 	 3 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 9 - 7 4 3 9 	 1 8 7 3 - 3 2 3 9 	 	 C H E M O M E T R   I N T E L L   L A B 	 C h e m o m e t r i c s   I n t e l l .   L a b .   S y s t . 	 M A R   1 5 	 2 0 1 1 	 1 0 6 	 1 	 	 	 S I 	 	 4 1 	 5 6 	 	 1 0 . 1 0 1 6 / j . c h e m o l a b . 2 0 1 0 . 0 8 . 0 0 4 	 	 1 6 	 A u t o m a t i o n   &   C o n t r o l   S y s t e m s ;   C h e m i s t r y ,   A n a l y t i c a l ;   C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e ;   I n s t r u m e n t s   &   I n s t r u m e n t a t i o n ;   M a t h e m a t i c s ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   S t a t i s t i c s   &   P r o b a b i l i t y 	 A u t o m a t i o n   &   C o n t r o l   S y s t e m s ;   C h e m i s t r y ;   C o m p u t e r   S c i e n c e ;   I n s t r u m e n t s   &   I n s t r u m e n t a t i o n ;   M a t h e m a t i c s 	 7 4 3 P B 	 W O S : 0 0 0 2 8 9 0 2 9 7 0 0 0 0 7 	 	 
 
 J 	 V a u g h a n ,   L ;   S h a w ,   D 	 	 	 	 V a u g h a n ,   L ;   S h a w ,   D 	 	 	 B i b l i o g r a p h i c   a n d   w e b   c i t a t i o n s :   W h a t   i s   t h e   d i f f e r e n c e ? 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N C E ;   I N T E R N E T ;   B I B L I O M E T R I C S ;   I N F O R M A T I O N ;   I M P A C T ;   L I N K S 	 W e b   c i t a t i o n s   h a v e   b e e n   p r o p o s e d   a s   c o m p a r a b l e   t o ,   e v e n   r e p l a c e m e n t s   f o r ,   b i b l i o g r a p h i c   c i t a t i o n s ,   n o t a b l y   i n   a s s e s s i n g   t h e   a c a d e m i c   i m p a c t   o f   w o r k   i n   p r o m o t i o n   a n d   t e n u r e   d e c i s i o n s .   W e   c o m p a r e d   b i b l i o g r a p h i c   a n d   W e b   c i t a t i o n s   t o   a r t i c l e s   i n   4 6   j o u r n a l s   i n   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e .   F o r   m o s t   j o u r n a l s   ( 5 7 % ) ,   W e b   c i t a t i o n s   c o r r e l a t e d   s i g n i f i c a n t l y   w i t h   b o t h   b i b l i o g r a p h i c   c i t a t i o n s   l i s t e d   i n   t h e   S o c i a l   S c i e n c e s   C i t a t i o n   I n d e x   a n d   t h e   I S I ' s   J o u r n a l   I m p a c t   F a c t o r .   M a n y   o f   t h e   W e b   c i t a t i o n s   r e p r e s e n t e d   i n t e l l e c t u a l   i m p a c t ,   c o m i n g   f r o m   o t h e r   p a p e r s   p o s t e d   o n   t h e   W e b   ( 3 0 % )   o r   f r o m   c l a s s   r e a d i n g s   l i s t s   ( 1 2 % ) .   W e b   c i t a t i o n   c o u n t s   w e r e   t y p i c a l l y   h i g h e r   t h a n   b i b l i o g r a p h i c   c i t a t i o n   c o u n t s   f o r   t h e   s a m e   a r t i c l e .   J o u r n a l s   w i t h   m o r e   W e b   c i t a t i o n s   t e n d e d   t o   h a v e   W e b   s i t e s   t h a t   p r o v i d e d   t a b l e s   o f   c o n t e n t s   o n   t h e   W e b ,   w h i l e   l e s s   c i t e d   j o u r n a l s   d i d   n o t   h a v e   s u c h   p u b l i c i t y .   T h e   n u m b e r   o f   W e b   c i t a t i o n s   t o   j o u r n a l   a r t i c l e s   i n c r e a s e d   f r o m   1 9 9 2   t o   1 9 9 7 . 	 U n i v   W e s t e r n   O n t a r i o ,   F a c   I n f o r m a t   &   M e d i a   S t u d i e s ,   L o n d o n ,   O N   N 6 A   5 B 7 ,   C a n a d a ;   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   M a i n   L i b   0 1 1 ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 V a u g h a n ,   L   ( r e p r i n t   a u t h o r ) ,   U n i v   W e s t e r n   O n t a r i o ,   F a c   I n f o r m a t   &   M e d i a   S t u d i e s ,   L o n d o n ,   O N   N 6 A   5 B 7 ,   C a n a d a . 	 l v a u g h a n @ u w o . c a ;   s h a w d @ i n d i a n a . e d u 	 	 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   A N D E R S O N   A ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 2 ,   P 6 3 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 5 2 . 5 0 0 6 . 6 3 9 ;   B A R I L A N   J ,   I N   P R E S S   A N N   R E V   I N F ,   V 3 8 ,   P 2 3 1 ;   C O L E   J R ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 8 1 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 9 5 3 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - C ;   C r o n i n   B ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 2 6 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 4 0 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 3 ) 4 5 : 2 < 6 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - F ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   G A R F I E L D   E ,   1 9 8 3 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 6 ,   P 3 6 3 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 8 3 ,   E S S A Y S   I N F O R M   S C I ,   V 6 ,   P 3 5 4 ;   G A R F I E L D   E ,   2 0 0 2 ,   W E B   C I T A T I O N ;   G a r f i e l d   E . ,   1 9 6 5 ,   N B S ,   V 2 6 9 ,   P 1 8 9 ;   G o o d r u m   A A ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 6 6 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 4 7 - 9 ;   H a r n a d   S ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 2 9 ;   H e t i n g   C h u ,   2 0 0 2 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 4 3 ,   P 1 1 0 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 9 7 2 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K i m   Y .   R . ,   2 0 0 0 ,   J o u r n a l   o f   F o o d   S c i e n c e   a n d   N u t r i t i o n ,   V 5 ,   P 1 0 ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L I   X ,   2 0 0 2 ,   7   I N T   S   T   I N D   C   K A R L ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   N O T E S S   G R ,   2 0 0 2 ,   S E A R C H   E N G I N E   S T A T   R ;   * O C L C   W E B   C H A R   P R O ,   2 0 0 2 ,   T O P   5 0   L I S T ;   O W E N   T ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ;   R O U S S E A U   R ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ,   P 1 ;   R o u s s e a u   R . ,   1 9 9 8 ,   C Y B E R M E T R I C S ,   V 2 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S L O A N   B ,   2 0 0 1 ,   P E R S O N A L   C I T A T I O N   I N ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   S U L L I V A N   D ,   2 0 0 3 ,   M A J O R   S E A R C H   E N G I N E S ;   T A U B E S   G ,   1 9 9 3 ,   S C I E N C E ,   V 2 6 0 ,   P 8 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 8 4 9 3 5 1 6 ;   T h e l w a l l   M ,   2 0 0 2 ,   O N L I N E   I N F O R M   R E V ,   V 2 6 ,   P 4 1 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 2 1 0 4 5 2 7 4 5 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T H E L W A L L   M ,   2 0 0 1 ,   C Y B E R M E T R I C S ,   V 5 ;   T h o m a s   O ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 3 8 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   V A U G H A N   L ,   I N   P R E S S   I N F O R M A T I O N ;   V A U G H A N   L ,   I N   P R E S S   P   9   I N T   C   S ;   V A U G H A N   L ,   2 0 0 2 ,   P   6 5   A N N   M   A M   S O C   I N ,   P 4 3 6 ;   V I R G O   J A ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 4 1 5 ;   W A D E   N ,   1 9 7 5 ,   S C I E N C E ,   V 1 8 8 ,   P 4 2 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 8 . 4 1 8 7 . 4 2 9 ;   W O U T E R S   P ,   2 0 0 2 ,   E A S S T   2 0 0 2   C   J A N   1 8 ;   Z h a o   D Z ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 4 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 9 0 6 0 1 7 1 0 ;   2 0 0 2 ,   G L O B A L   R E A C H         0 9 3 0 	 4 9 	 9 2 	 9 2 	 1 	 3 5 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 0 3 	 5 4 	 1 4 	 	 	 	 	 1 3 1 3 	 1 3 2 2 	 	 1 0 . 1 0 0 2 / a s i . 1 0 3 3 8 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 4 4 C R 	 W O S : 0 0 0 1 8 6 6 1 0 8 0 0 0 0 6 	 	 
 
 J 	 N a r i n ,   F ;   H a m i l t o n ,   K S 	 	 	 	 N a r i n ,   F ;   H a m i l t o n ,   K S 	 	 	 B i b l i o m e t r i c   p e r f o r m a n c e   m e a s u r e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N C E ;   T E C H N O L O G Y 	 T h r e e   d i f f e r e n t   t y p e s   o f   b i b l i o m e t r i c s   -   l i t e r a t u r e   b i b l i o m e t r i c s ,   p a t e n t   b i b l i o m e t r i c s ,   a n d   l i n k a g e   b i b l i o m e t r i c   c a n   a l l   b e   u s e d   t o   a d d r e s s   v a r i o u s   g o v e r n m e n t   p e r f o r m a n c e   a n d   r e s u l t s   q u e s t i o n s .   A p p l i c a t i o n s   o f   t h e s e   t h r e e   b i b l i o m e t r i c   t y p e s   w i l l   b e   d e s c r i b e d   w i t h i n   t h e   f r a m e w o r k   o f   W e i n b e r g ' s   i n t e r n a l   a n d   e x t e r n a l   c r i t e r i a ,   w h e t h e r   t h e   w o r k   b e i n g   d o n e   i s   g o o d   s c i e n c e ,   e f f i c i e n t l y   a n d   e f f e c t i v e l y   d o n e ,   a n d   w h e t h e r   i t   i s   i m p o r t a n t   s c i e n c e   f r o m   a   t e c h n o l o g i c a l   v i e w p o i n t .   W i t h i n   a l l   b i b l i o m e t r i c s   t h e   f u n d a m e n t a l   a s s u m p t i o n   i s   t h a t   t h e   f r e q u e n c y   w i t h   w h i c h   a   s e t   o f   p a p e r s   o r   p a t e n t s   i s   c i t e d   i s   a   m e a s u r e   o f   t h e   i m p a c t   o r   i n f l u e n c e   o f   t h e   s e t   o f   p a p e r s .   T h e   l i t e r a t u r e   b i b l i o m e t r i c   i n d i c a t o r s   a r e   c o u n t s   o f   p u b l i c a t i o n s   a n d   c i t a t i o n s   r e c e i v e d   i n   t h e   s c i e n t i f i c   l i t e r a t u r e   a n d   v a r i o u s   d e r i v e d   i n d i c a t o r s   i n c l u d i n g   s u c h   p h e n o m e n a   a s   c r o s s - s e c t o r a l   c i t a t i o n ,   c o a u t h o r s h i p   a n d   c o n c e n t r a t i o n   w i t h i n   i n f l u e n t i a l   j o u r n a l s .   O n e   b a s i c   o b s e r v a t i o n   o f   l i t e r a t u r e   b i b l i o m e t r i c s ,   w h i c h   c a r r i e s   o v e r   t o   p a t e n t   b i b l i o m e t r i c s ,   i s   t h a t   o f   h i g h l y   s k e w e d   d i s t r i b u t i o n s   -   w i t h   a   r e l a t i v e l y   s m a l l   n u m b e r   o f   h i g h - i m p a c t   p a t e n t s   a n d   p a p e r s ,   a n d   l a r g e   n u m b e r s   o f   p a t e n t s   a n d   p a p e r s   o f   m i n i m a l   i m p a c t .   T h e   k e y   m e a s u r e   i s   w h e t h e r   a n   a g e n c y   i s   p r o d u c i n g   o r   s u p p o r t i n g   h i g h l y   c i t e d   p a p e r s   a n d   p a t e n t s .   T h e   f i n a l   s e t   o f   d a t a   a r e   i n   t h e   a r e a   o f   l i n k a g e   b i b l i o m e t r i c s ,   l o o k i n g   a t   c i t a t i o n s   f r o m   p a t e n t s   t o   s c i e n t i f i c   p a p e r s .   T h e s e   a r e   p a r t i c u l a r l y   r e l e v a n t   t o   t h e   e x t e r n a l   c r i t e r i a ,   i n   t h a t   i t   i s   q u i r e   o b v i o u s   t h a t   i n s t i t u t i o n s   a n d   s u p p o r t i n g   a g e n c i e s   w h o s e   p a p e r s   a r e   h i g h l y   c i t e d   i n   p a t e n t s   a r e   m a k i n g   m e a s u r a b l e   c o n t r i b u t i o n s   t o   a   n a t i o n ' s   t e c h n o l o g i c a l   p r o g r e s s . 	 	 N a r i n ,   F   ( r e p r i n t   a u t h o r ) ,   C H I   C O M P   H O R I Z O N S   I N C , 1 0   W H I T E   H O R S E   P I K E , H A D D O N   H T S , N J   0 8 0 3 5 ,   U S A . 	 	 	 	 	 	 A N D E R S O N   J ,   1 9 9 6 ,   I N   P R E S S   T E C H N O L O G Y ;   E L L W E I N   L B ,   1 9 9 6 ,   I N   P R E S S   L I N K A G E   R E S ;   F R A M E   J D ,   1 9 7 6 ,   F E D   P R O C ,   V 3 5 ,   P 2 5 2 9 ;   I I T   R e s e a r c h   I n s t i t u t e ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   N A R I N   F ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 1 8 - Y ;   N A R I N   F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 5 ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   N A R I N   F ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 5 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 4 ) 0 0 7 8 0 - 2 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N A R I N   F ,   1 9 8 6 ,   A N A L   R E S   P U B L I C A T I O N ;   N A R I N   F ,   1 9 9 5 ,   E C   R O U N D   T A B L   N A T   I ;   * N A T   S C I   F D N ,   1 9 7 2 ,   R E P   N A T   S C I   B O A R D ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   W E I N B E R G   A M ,   1 9 6 4 ,   M I N E R V A ,   V 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 6 3 0 1 4 7 ;   W E I N B E R G   A M ,   1 9 6 3 ,   M I N E R V A ,   V 1 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 0 9 6 2 4 8 	 1 7 	 9 2 	 9 4 	 7 	 5 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L - A U G 	 1 9 9 6 	 3 6 	 3 	 	 	 	 	 2 9 3 	 3 1 0 	 	 1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 V G 5 0 5 	 W O S : A 1 9 9 6 V G 5 0 5 0 0 0 0 2 	 	 
 
 J 	 P O R T E R ,   A L ;   D E T A M P E L ,   M J 	 	 	 	 P O R T E R ,   A L ;   D E T A M P E L ,   M J 	 	 	 T E C H N O L O G Y   O P P O R T U N I T I E S   A N A L Y S I S 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 W e   p r e s e n t   a n   a p p r o a c h   t o   e f f i c i e n t l y   g e n e r a t e   e f f e c t i v e   i n t e l l i g e n c e   o n   e m e r g i n g   t e c h n o l o g i e s .   T h i s   a p p r o a c h   d r a w s   o n   m o n i t o r i n g   a n d   b i b l i o m e t r i c s   t o   m i n e   t h e   w e a l t h   o f   i n f o r m a t i o n   a v a i l a b l e   i n   m a j o r   p u b l i c   e l e c t r o n i c   d a t a b a s e s .   T h e   a p p r o a c h   u s e s   n e w   s o f t w a r e   t o   e x p e d i t e   s e c o n d a r y   a n a l y s e s   o f   d a t a b a s e   s e a r c h e s   o n   t o p i c s   o f   i n t e r e s t .   W e   i l l u s t r a t e   t h e   r a n g e   o f   i n f o r m a t i o n   p r o f i l e s   p o s s i b l e   b y   e x a m i n i n g   r e s e a r c h   a n d   d e v e l o p m e n t   ( R & D )   p u b l i c a t i o n s   a n d   p a t e n t s   p e r t a i n i n g   t o   e l e c t r o n i c s   a s s e m b l y   a n d ,   m o r e   s p e c i f i c a l l y ,   t o   m u l t i c h i p   m o d u l e   d e v e l o p m e n t . 	 	 P O R T E R ,   A L   ( r e p r i n t   a u t h o r ) ,   G E O R G I A   I N S T   T E C H N O L , C T R   T E C H N O L   P O L I C Y   &   A S S E S S M E N T , A T L A N T A , G A   3 0 3 3 2 ,   U S A . 	 	 p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 	 p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 	 	 	 B r i g h t   J .   R . ,   1 9 7 8 ,   P R A C T I C A L   T E C H N O L O G Y ;   C A L L O N   M ,   1 9 9 1 ,   I N N O V A T I O N   T E C H N O L O G ,   V 3 ,   P 3 ;   C o a t e s   J .   F . ,   1 9 8 6 ,   I S S U E S   M A N A G E M E N T ;   C U N N I N G H A M   S ,   1 9 9 4 ,   A U T O M A T E D   I N D E X I N G   B ;   D A V I S   R ,   1 9 7 3 ,   P R A C T I C A L   G U I D E   T E C H ,   P 6 0 1 ;   F R A N K L I N   J J ,   1 9 8 8 ,   H D B   Q U A N T I A T I V E   S T U D ;   G A R F I E L D   E ,   1 9 8 9 ,   M E T R I C   S C I   A D V E N T   S C ;   I r v i n e   J . ,   1 9 8 4 ,   F O R E S I G H T   S C I   P I C K I N ;   K O S T O F F   R N ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 4 . x ;   K O S T O F F   R N ,   1 9 9 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 4 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 3 ) 9 0 0 7 0 - N ;   K O S T O F F   R N ,   1 9 9 4 ,   4 T H   I N T   C   M A N   T E C H N ;   K o s t o f f   R .   N ,   1 9 9 3 ,   E V A L U A T I N G   R   D   I M P A C ,   P 6 3 ;   K o s t o f f   R .   N . ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ;   L e m o n s   K .   E . ,   1 9 9 2 ,   I M P A C T   A S S E S S M E N T   B ,   V 1 0 ,   P 5 7 ;   M A R T I N   B R ,   1 9 9 0 ,   R E C E N T   T R E N D S   O U T P U T ,   V 1 7 ;   M e l k e r s   J . ,   1 9 9 3 ,   E V A L U A T I N G   R   D   I M P A C ,   P 4 3 ;   M O G E E   M E ,   1 9 9 3 ,   P A T E N T   C I T A T I O N   M A P P ;   N A I S B I T T   J ,   1 9 8 9 ,   M E G A T R E N D S   2 0 0 0 ;   N a i s b i t t   J o h n ,   1 9 8 2 ,   M E G A T R E N D S ;   N A R I N   F ,   1 9 9 2 ,   N O V   V P P   P R O F   M   N U R N B ;   N A R I N   F ,   1 9 9 4 ,   B I B L I O M E T R I C S   T H E O R Y ,   V 1 8 ;   P O R T E R   A L ,   1 9 8 8 ,   T E C H N O L O G Y   F E A S I B I L I ;   P o r t e r   A .   L . ,   1 9 9 1 ,   F O R E C A S T I N G   M A N A G E M E ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R E I T M A N   W ,   1 9 8 5 ,   A U T O M A T E D   I N F O R M A T I O ;   R i p   A . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   T I J S S E N   R J W ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ;   * U S   N A T   S C I   B O A R D ,   1 9 9 3 ,   S C I   E N G   I N D   1 9 9 3 ;   V A N S T O N   J H ,   1 9 8 5 ,   T E C H N O L O G Y   F O R E C A S T I ;   W E N K   E ,   1 9 7 7 ,   I N T E R I N S T I T U T I O N A L   N ,   P 1 5 3 	 3 1 	 9 1 	 9 3 	 3 	 2 5 	 E L S E V I E R   S C I E N C E   P U B L   C O   I N C 	 N E W   Y O R K 	 6 5 5   A V E N U E   O F   T H E   A M E R I C A S ,   N E W   Y O R K ,   N Y   1 0 0 1 0 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J U L 	 1 9 9 5 	 4 9 	 3 	 	 	 	 	 2 3 7 	 2 5 5 	 	 1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 5 ) 0 0 0 2 2 - 3 	 	 1 9 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 R M 5 9 8 	 W O S : A 1 9 9 5 R M 5 9 8 0 0 0 0 1 	 	 
 
 J 	 Z i t t ,   M ;   R a m a n a n a - R a h a r y ,   S ;   B a s s e c o u l a r d ,   E 	 	 	 	 Z i t t ,   M ;   R a m a n a n a - R a h a r y ,   S ;   B a s s e c o u l a r d ,   E 	 	 	 R e l a t i v i t y   o f   c i t a t i o n   p e r f o r m a n c e   a n d   e x c e l l e n c e   m e a s u r e s :   F r o m   c r o s s - f i e l d   t o   c r o s s - s c a l e   e f f e c t s   o f   f i e l d - n o r m a l i s a t i o n 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I M P A C T - F A C T O R S ;   S C I E N T I F I C   J O U R N A L S ;   I N D I C A T O R S ;   S C I E N C E ;   D I S T R I B U T I O N S ;   P U B L I C A T I O N ;   Q U A L I T Y ;   S Y S T E M 	 A s   c i t a t i o n   p r a c t i c e s   s t r o n g l y   d e p e n d   o n   f i e l d s ,   f i e l d   n o r m a l i s a t i o n   i s   r e c o g n i s e d   a s   n e c e s s a r y   f o r   f a i r   c o m p a r i s o n   o f   f i g u r e s   i n   b i b l i o m e t r i c s   a n d   e v a l u a t i o n   s t u d i e s .   H o w e v e r   f i e l d s   m a y   b e   d e f i n e d   a t   v a r i o u s   l e v e l s ,   f r o m   s m a l l   r e s e a r c h   a r e a s   t o   b r o a d   a c a d e m i c   d i s c i p l i n e s ,   a n d   t h u s   n o r m a l i s a t i o n   v a l u e s   a r e   e x p e c t e d   t o   v a r y .   T h e   a i m   o f   t h i s   p r o j e c t   w a s   t o   t e s t   t h e   s t a b i l i t y   o f   c i t a t i o n   r a t i n g s   o f   a r t i c l e s   a s   t h e   l e v e l   o f   o b s e r v a t i o n   -   h e n c e   t h e   b a s i s   o f   n o r m a l i s a t i o n   -   c h a n g e s .   A   c o n v e n t i o n a l   c l a s s i f i c a t i o n   o f   s c i e n c e   b a s e d   o n   I S I   s u b j e c t   c a t e g o r i e s   a n d   t h e i r   a g g r e g a t e s   a t   v a r i o u s   s c a l e s   w a s   u s e d ,   n a m e l y   a t   f i v e   l e v e l s :   a l l   s c i e n c e ,   l a r g e   a c a d e m i c   d i s c i p l i n e ,   s u b - d i s c i p l i n e ,   s p e c i a l i t y   a n d   j o u r n a l .   A m o n g   v a r i o u s   n o r m a l i s a t i o n   m e t h o d s ,   w e   s e l e c t e d   a   s i m p l e   r a n k i n g   m e t h o d   ( q u a n t i l e s ) ,   b a s e d   o n   t h e   c i t a t i o n   s c o r e   o f   t h e   a r t i c l e   i n   e a c h   p a r t i c u l a r   a g g r e g a t e   ( j o u r n a l ,   s p e c i a l i t y ,   e t c . )   i t   b e l o n g e d   t o   a t   e a c h   l e v e l .   T h e   s t u d y   w a s   c o n d u c t e d   o n   a r t i c l e s   i n   t h e   f u l l   S C I   r a n g e ,   f o r   p u b l i c a t i o n   y e a r   1 9 9 8   w i t h   a   f o u r - y e a r   c i t a t i o n   w i n d o w .   S t a b i l i t y   i s   m e a s u r e d   i n   t h r e e   w a y s :   o v e r a l l   c o m p a r i s o n   o f   a r t i c l e   r a n k i n g s ;   i n d i v i d u a l   t r a j e c t o r y   o f   a r t i c l e s ;   s u r v i v a l   o f   t h e   t o p - c i t e d   c l a s s   a c r o s s   l e v e l s .   O v e r a l l   r a n k   c o r r e l a t i o n s   o n   t h e   o b s e r v e d   e m p i r i c a l   s t r u c t u r e   a r e   b e n c h m a r k e d   a g a i n s t   t w o   f i c t i t i o u s   s e t s   t h a t   k e e p   t h e   s a m e   e m b e d d e d   s t r u c t u r e   o f   a r t i c l e s   b u t   r e a s s i g n   c i t a t i o n   s c o r e s   e i t h e r   i n   a   t o t a l l y   o r d e r e d   o r   i n   a   t o t a l l y   r a n d o m   d i s t r i b u t i o n .   T h e s e   s e t s   a c t   r e s p e c t i v e l y   a s   a   ' w o r s t   c a s e '   a n d   ' b e s t   c a s e '   f o r   t h e   s t a b i l i t y   o f   c i t a t i o n   r a t i n g s .   T h e   r e s u l t s   s h o w   t h a t :   ( a )   t h e   a v e r a g e   c i t a t i o n   r a n k i n g s   o f   a r t i c l e s   s u b s t a n t i a l l y   c h a n g e   w i t h   t h e   l e v e l   o f   o b s e r v a t i o n   ( b )   o b s e r v a t i o n   a t   t h e   j o u r n a l   l e v e l   i s   v e r y   p a r t i c u l a r ,   a n d   t h e   r e s u l t s   d i f f e r   g r e a t l y   i n   a l l   t e s t   c i r c u m s t a n c e s   f r o m   a l l   t h e   o t h e r   l e v e l s   o f   o b s e r v a t i o n   ( c )   t h e   l a c k   o f   c r o s s - s c a l e   s t a b i l i t y   i s   c o n f i r m e d   w h e n   l o o k i n g   a t   t h e   d i s t r i b u t i o n   o f   i n d i v i d u a l   t r a j e c t o r i e s   o f   a r t i c l e s   a c r o s s   t h e   l e v e l s ;   ( d )   w h e n   c o n s i d e r i n g   t h e   t o p - c i t e d   f r a c t i o n s ,   a   s t a n d a r d   m e a s u r e   o f   e x c e l l e n c e ,   i t   i s   f o u n d   t h a t   t h e   c o n t e n t s   o f   t h e   ' t o p - c i t e d '   s e t   i s   c o m p l e t e l y   d e p e n d e n t   o n   t h e   l e v e l   o f   o b s e r v a t i o n .   T h e   i n s t a b i l i t y   o f   i m p a c t   m e a s u r e s   s h o u l d   n o t   b e   i n t e r p r e t e d   i n   t e r m s   o f   l a c k   o f   r o b u s t n e s s   b u t   r a t h e r   a s   t h e   c o - e x i s t e n c e   o f   v a r i o u s   p e r s p e c t i v e s   e a c h   h a v i n g   t h e i r   o w n   f o r m   o f   l e g i t i m a c y .   A   f o l l o w - u p   s t u d y   w i l l   f o c u s   o n   t h e   m i c r o   l e v e l s   o f   o b s e r v a t i o n   a n d   w i l l   b e   b a s e d   o n   a   s t r u c t u r e   b u i l t   a r o u n d   b i b l i o m e t r i c   g r o u p i n g s   r a t h e r   t h a n   c o n v e n t i o n a l   g r o u p i n g s   b a s e d   o n   I S I   s u b j e c t   c a t e g o r i e s . 	 I N R A ,   L e r e c o ,   N a n t e s ,   F r a n c e ;   O S T ,   P a r i s ,   F r a n c e 	 Z i t t ,   M   ( r e p r i n t   a u t h o r ) ,   I N R A ,   L e r e c o ,   N a n t e s ,   F r a n c e . 	 z i t t @ n a n t e s . i n r a . f r 	 	 	 	 	 B A R R E   R ,   2 0 0 2 ,   S C I   T E C H N O L O G Y   I N D I C ;   B a s s e c o u l a r d   E ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 3 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 8 3 ;   C z a p s k i   G ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 1 ;   E g g h e   L ,   2 0 0 2 ,   C A N   J   I N F O R M   L I B   S C I ,   V 2 7 ,   P 2 9 ;   F i s h e r   D ,   2 0 0 1 ,   M I N E R V A ,   V 3 9 ,   P 2 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 2 4 0 2 7 5 2 2 ;   G A R F I E L D   E ,   1 9 8 6 ,   C U R R   C O N T E N T S ,   P 1 8 2 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 4 8 ;   K a t z   J S ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 5 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 1 0 - 4 ;   K o s t o f f   R N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 1 9 2 0 1 7 2 ;   M A R S H A K O V A S H A I K E V I ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 8 3 ;   M C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M U R U G E S A N   P ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 0 7 ;   N A R I N   F ,   1 9 7 8 ,   E V A L U A T I V E   B I B L I O M E T ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   R a m i r e z   A M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 0 0 8 0 7 2 9 2 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 7 ;   S c h u b e r t   A . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 1 3 7 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S E N   B K ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 3 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 0 1 ;   S i e g e l   S . ,   1 9 5 6 ,   N O N P A R A M E T R I C   S T A T   B ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S o l a r i   A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 6 0 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 0 2 0 2 9 6 1 ;   T U S S E N   R J W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 8 1 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 7 3 2 8 4 6 0 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 0 1 8 2 0 3 9 3 ;   V i n k l e r   P ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 9 1 ;   V i n k l e r   P ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 6 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 6 0 7 2 6 5 3 2 ;   W A S M E R   E ,   2 0 0 1 ,   S E A R C H   S C I   E X C E L L E N C ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 2 3 3 2 9 2 7 7 ;   Z I T T   M ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 2 	 3 3 	 8 8 	 8 8 	 5 	 5 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 0 5 	 6 3 	 2 	 	 	 	 	 3 7 3 	 4 0 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y 	 	 2 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 2 4 R X 	 W O S : 0 0 0 2 2 8 9 9 9 1 0 0 0 1 0 	 	 
 
 J 	 C h e n ,   C M ;   I b e k w e - S a n J u a n ,   F ;   H o u ,   J H 	 	 	 	 C h e n ,   C h a o m e i ;   I b e k w e - S a n J u a n ,   F i d e l i a ;   H o u ,   J i a n h u a 	 	 	 T h e   S t r u c t u r e   a n d   D y n a m i c s   o f   C o c i t a t i o n   C l u s t e r s :   A   M u l t i p l e - P e r s p e c t i v e   C o c i t a t i o n   A n a l y s i s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I N F O R M A T I O N - S C I E N C E ;   R E S E A R C H   F R O N T S ;   C O M B I N I N G   B I B L I O M E T R I C S ;   S C I E N T I F I C   L I T E R A T U R E ;   R E L E V A N C E   T H E O R Y ;   C O N C E P T   S Y M B O L S ;   G O O G L E   S C H O L A R ;   K N O W L E D G E ;   N E T W O R K S ;   W E B 	 A   m u l t i p l e - p e r s p e c t i v e   c o c i t a t i o n   a n a l y s i s   m e t h o d   i s   i n t r o d u c e d   f o r   c h a r a c t e r i z i n g   a n d   i n t e r p r e t i n g   t h e   s t r u c t u r e   a n d   d y n a m i c s   o f   c o c i t a t i o n   c l u s t e r s .   T h e   m e t h o d   f a c i l i t a t e s   a n a l y t i c   a n d   s e n s e   m a k i n g   t a s k s   b y   i n t e g r a t i n g   n e t w o r k   v i s u a l i z a t i o n ,   s p e c t r a l   c l u s t e r i n g ,   a u t o m a t i c   c l u s t e r   l a b e l i n g ,   a n d   t e x t   s u m m a r i z a t i o n .   C o c i t a t i o n   n e t w o r k s   a r e   d e c o m p o s e d   i n t o   c o c i t a t i o n   c l u s t e r s .   T h e   i n t e r p r e t a t i o n   o f   t h e s e   c l u s t e r s   i s   a u g m e n t e d   b y   a u t o m a t i c   c l u s t e r   l a b e l i n g   a n d   s u m m a r i z a t i o n .   T h e   m e t h o d   f o c u s e s   o n   t h e   i n t e r r e l a t i o n s   b e t w e e n   a   c o c i t a t i o n   c l u s t e r ' s   m e m b e r s   a n d   t h e i r   c i t e r s .   T h e   g e n e r i c   m e t h o d   i s   a p p l i e d   t o   a   t h r e e - p a r t   a n a l y s i s   o f   t h e   f i e l d   o f   i n f o r m a t i o n   s c i e n c e   a s   d e f i n e d   b y   1 2   j o u r n a l s   p u b l i s h e d   b e t w e e n   1 9 9 6   a n d   2 0 0 8 :   ( a )   a   c o m p a r a t i v e   a u t h o r   c o c i t a t i o n   a n a l y s i s   ( A C A ) ,   ( b )   a   p r o g r e s s i v e   A C A   o f   a   t i m e   s e r i e s   o f   c o c i t a t i o n   n e t w o r k s ,   a n d   ( c )   a   p r o g r e s s i v e   d o c u m e n t   c o c i t a t i o n   a n a l y s i s   ( D C A ) .   R e s u l t s   s h o w   t h a t   t h e   m u l t i p l e - p e r s p e c t i v e   m e t h o d   i n c r e a s e s   t h e   i n t e r p r e t a b i l i t y   a n d   a c c o u n t a b i l i t y   o f   b o t h   A C A   a n d   D C A   n e t w o r k s . 	 [ C h e n ,   C h a o m e i ]   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A ;   [ I b e k w e - S a n J u a n ,   F i d e l i a ]   U n i v   L y o n   3 ,   E L I C O ,   F - 6 9 0 0 8   L y o n ,   F r a n c e ;   [ H o u ,   J i a n h u a ]   D a l i a n   U n i v   T e c h n o l ,   W I S E L A B ,   D a l i a n ,   P e o p l e s   R   C h i n a 	 C h e n ,   C M   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   3 1 4 1   C h e s t n u t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 c h a o m e i . c h e n @ d r e x e l . e d u ;   f i d e l i a . i b e k w e - s a n j u a n @ u n i v - l y o n 3 . f r ;   h q z h i x i n g @ g m a i l . c o m 	 C h e n ,   C h a o m e i / A - 1 2 5 2 - 2 0 0 7 	 C h e n ,   C h a o m e i / 0 0 0 0 - 0 0 0 1 - 8 5 8 4 - 1 0 4 1 	 N a t i o n a l   S c i e n c e   F o u n d a t i o n   [ I I S - 0 6 1 2 1 2 9 ] 	 T h i s   w o r k   i s   s u p p o r t e d   i n   p a r t   b y   t h e   N a t i o n a l   S c i e n c e   F o u n d a t i o n   u n d e r   g r a n t   I I S - 0 6 1 2 1 2 9 .   W e   w i s h   t o   t h a n k   E r i c   S a n J u a n   o f   t h e   U n i v e r s i t y   o f   A v i g n o n ,   F r a n c e ,   f o r   i m p l e m e n t i n g   t h e   E n e r t e x   s e n t e n c e   r a n k i n g   a l g o r i t h m   u s e d   i n   t h i s   s t u d y ;   H o w a r d   W h i t e ,   D r e x e l   U n i v e r s i t y ,   f o r   h i s   d e t a i l e d   a n d   c o n s t r u c t i v e   c o m m e n t s   o n   a n   e a r l i e r   d r a f t ;   D a n g z h i   Z h a o   a n d   A n d r e a s   S t r o t m a n n   o f   t h e   U n i v e r s i t y   o f   A l b e r t a ,   C a n a d a ,   f o r   p r o v i d i n g   d e t a i l e d   f a c t o r   l o a d i n g   r e s u l t s   o f   t h e i r   f a c t o r   a n a l y s i s   f o r   t h e   c o m p a r a t i v e   A C A   a n d   f o r   t h e i r   c o m m e n t s   o n   a n   e a r l i e r   d r a f t   o f   t h e   a r t i c l e ;   a n d   a n o n y m o u s   r e v i e w e r s   f o r   t h e i r   d e t a i l e d   r e v i e w s .   S p e c i a l   t h a n k s   t o   Z e y u a n   L i u   a n d   m e m b e r s   o f   t h e   W I S E L A B   a t   D a l i a n   U n i v e r s i t y   o f   T e c h n o l o g y ,   C h i n a ,   f o r   t h e i r   v a l u a b l e   f e e d b a c k   b a s e d   o n   t h e i r   e x t e n s i v e   u s e   o f   e a r l i e r   v e r s i o n s   o f   C i t e S p a c e . 	 A s t r o m   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 9 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 6 7 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B a t a g e l j   V ,   1 9 9 8 ,   C O N N E C T I O N S ,   V 2 1 ,   P 4 7 ;   B e n - H u r   A s a ,   2 0 0 2 ,   P a c   S y m p   B i o c o m p u t ,   P 6 ;   B O N A C I C H   P ,   1 9 8 7 ,   A M   J   S O C I O L ,   V 9 2 ,   P 1 1 7 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 8 6 3 1 ;   B r a n d e s   U ,   2 0 0 1 ,   J   M A T H   S O C I O L ,   V 2 5 ,   P 1 6 3 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   C a r m e l   D ,   2 0 0 9 ,   P R O C E E D I N G S   3 2 N D   A N N U A L   I N T E R N A T I O N A L   A C M   S I G I R   C O N F E R E N C E   O N   R E S E A R C H   A N D   D E V E L O P M E N T   I N   I N F O R M A T I O N   R E T R I E V A L ,   P 1 3 9 ,   D O I   1 0 . 1 1 4 5 / 1 5 7 1 9 4 1 . 1 5 7 1 9 6 7 ;   C h a n   C L ,   2 0 0 5 ,   1 1 T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   P A R A L L E L   A N D   D I S T R I B U T E D   S Y S T E M S ,   V O L   I ,   P R O C E E D I N G S ,   P 9 8 ,   D O I   1 0 . 1 1 4 5 / 1 0 4 0 8 3 0 . 1 0 4 0 8 5 9 ;   C h e n   C M ,   2 0 0 8 ,   D A T A   K N O W L   E N G ,   V 6 7 ,   P 2 3 4 ,   D O I   1 0 . 1 0 1 6 / j . d a t a k . 2 0 0 8 . 0 5 . 0 0 4 ;   C h e n   C M ,   2 0 0 9 ,   I E E E   I N T E L L   S Y S T ,   V 2 4 ,   P 7 4 ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h e n   C M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 4 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 8 - 5 ;   C h e n   Y ,   2 0 0 9 ,   I E T   C O M M U N ,   V 3 ,   P 2 0 9 ,   D O I   1 0 . 1 0 4 9 / i e t - c o m : 2 0 0 8 0 0 6 4 ;   C R O N I N   B ,   1 9 8 1 ,   J   I N F O R M   S C I ,   V 3 ,   P 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 1 0 0 3 0 0 1 0 4 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D u n n i n g   T . ,   1 9 9 3 ,   C o m p u t a t i o n a l   L i n g u i s t i c s ,   V 1 9 ,   P 6 1 ;   E r k a n   G ,   2 0 0 4 ,   J   A R T I F   I N T E L L   R E S ,   V 2 2 ,   P 4 5 7 ;   F E R N A N D E Z   S ,   2 0 0 7 ,   P   6   M E X   I N T   C   A R T   I N ,   P 8 6 1 ;   F i s z m a n   M ,   2 0 0 9 ,   J   B I O M E D   I N F O R M ,   V 4 2 ,   P 8 0 1 ,   D O I   1 0 . 1 0 1 6 / j . j b i . 2 0 0 8 . 1 0 . 0 0 2 ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   G a r f i e l d   E ,   2 0 0 4 ,   J   I N F   S C I ,   V 3 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 2 8 0 2 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   I B E K W E S A N J U A N   F ,   2 0 0 9 ,   P   A N N   M   A M   S O C   I N F   S ;   J a c c a r d   p . ,   1 9 0 1 ,   B   S O C   V A U D   S C I   N A T ,   V 3 7 ,   P 5 4 7 ,   D O I   D O I   1 0 . 5 1 6 9 / S E A L S - 2 6 6 4 5 0 ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   S p a r c k   J o n e s   K . ,   1 9 9 9 ,   A D V   A U T O M A T I C   T E X T   S ,   P 2 ;   K i s s   C ,   2 0 0 8 ,   D E C I S   S U P P O R T   S Y S T ,   V 4 6 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / j . d s s . 2 0 0 8 . 0 6 . 0 0 7 ;   K l a v a n s   R . ,   2 0 0 9 ,   P   1 2   I N T   C   S C I   I N F   I ,   P 2 6 5 ;   K l e i n b e r g   J . ,   2 0 0 2 ,   P   8   A C M   S I G K D D   I N T   C ,   P 9 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 7 7 5 0 4 7 . 7 7 5 0 6 1 ;   K u m a r   R . ,   2 0 0 3 ,   P   1 2   I N T   C   W O R L D   W I D ,   P 5 6 8 ,   D O I   [ D O I   1 0 . 1 1 4 5 / 7 7 5 1 5 2 . 7 7 5 2 3 3 ,   1 0 . 1 1 4 5 / 7 7 5 1 5 2 . 7 7 5 2 3 3 ] ;   L a n e   J ,   2 0 0 9 ,   S C I E N C E ,   V 3 2 4 ,   P 1 2 7 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 7 5 3 3 5 ;   L e y d e s d o r f f   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 7 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 3 0 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M I H A L C E A   R ,   2 0 0 4 ,   P   C   E M P   M E T H   N A T   L A N ,   P 8 ;   M o r r i s   S ,   2 0 0 2 ,   C O M P U T   I N D   E N G ,   V 4 3 ,   P 8 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 1 4 3 - 2 ;   M o r r i s   S A ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 7 ;   M o r r i s   S A ,   2 0 0 8 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 2 ,   P 2 1 3 ;   N e w m a n   M E J ,   2 0 0 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 3 ,   P 8 5 7 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 6 0 1 6 0 2 1 0 3 ;   N g   A Y ,   2 0 0 2 ,   A D V   N E U R   I N ,   V 1 4 ,   P 8 4 9 ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   R O U S S E E U W   P J ,   1 9 8 7 ,   J   C O M P U T   A P P L   M A T H ,   V 2 0 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 0 4 2 7 ( 8 7 ) 9 0 1 2 5 - 7 ;   S A L T O N   G ,   1 9 7 5 ,   C O M M U N   A C M ,   V 1 8 ,   P 6 1 3 ,   D O I   1 0 . 1 1 4 5 / 3 6 1 2 1 9 . 3 6 1 2 2 0 ;   S c h m i d   H . ,   1 9 9 9 ,   N A T U R A L   L A N G U A G E   P R O ,   P 1 3 ;   S c h n e i d e r   J W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 1 - z ;   S c h n e i d e r   J W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 1 9 - y ;   S c h n e i d e r   J . W . ,   2 0 0 9 ,   P   1 2   I N T   C   S C I   I N F   I ,   P 4 4 3 ;   S h i   J B ,   2 0 0 0 ,   I E E E   T   P A T T E R N   A N A L ,   V 2 2 ,   P 8 8 8 ,   D O I   1 0 . 1 1 0 9 / 3 4 . 8 6 8 6 8 8 ;   S h i b a t a   N ,   2 0 0 8 ,   T E C H N O V A T I O N ,   V 2 8 ,   P 7 5 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 0 3 . 0 0 9 ;   S M A L L   H ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 3 ;   S M A L L   H ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 7 0 3 0 2 ;   S m a l l   H ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 3 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 5 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   T a b a h   A N ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 2 4 9 ;   T e u f e l   S ,   2 0 0 2 ,   C O M P U T   L I N G U I S T ,   V 2 8 ,   P 4 0 9 ,   D O I   1 0 . 1 1 6 2 / 0 8 9 1 2 0 1 0 2 7 6 2 6 7 1 9 3 6 ;   L u x b u r g   U .   v . ,   2 0 0 9 ,   L I M I T S   S P E C T R A L   C L U S ;   v o n   L u x b u r g   U ,   2 0 0 6 ,   T U T O R I A L   S P E C T R A L   C L ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 ;   W h i t e   H D ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 4 2 ;   W h i t e   H D ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 5 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 4 3 ;   W i t t e n   I .   H . ,   1 9 9 9 ,   D A T A   M I N I N G   P R A C T I C A ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 0 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 9 9 ;   Z i n s   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 3 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 0 7 ;   Z i n s   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 5 2 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 0 5 ;   Z i n s   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 4 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 0 8 ;   Z i n s   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 6 4 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 0 6 ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 4 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 8 	 7 4 	 8 7 	 1 0 3 	 2 1 	 1 6 0 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U L 	 2 0 1 0 	 6 1 	 7 	 	 	 	 	 1 3 8 6 	 1 4 0 9 	 	 1 0 . 1 0 0 2 / a s i . 2 1 3 0 9 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 1 5 Q V 	 W O S : 0 0 0 2 7 9 1 5 1 6 0 0 0 0 7 	 	 
 
 J 	 H o o d ,   W W ;   W i l s o n ,   C S 	 	 	 	 H o o d ,   W W ;   W i l s o n ,   C S 	 	 	 T h e   l i t e r a t u r e   o f   b i b l i o m e t r i c s ,   s c i e n t o m e t r i c s ,   a n d   i n f o r m e t r i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   S C H O L A R L Y   C O M M U N I C A T I O N ;   B R A D F O R D   D I S T R I B U T I O N ;   I N F O R M A T I O N - S C I E N C E ;   C O C I T A T I O N   A N A L Y S I S ;   D E F I N I T I O N 	 S i n c e   V a s s i l y   V .   N a l i m o v   c o i n e d   t h e   t e r m   ' s c i e n t o m e t r i c s '   i n   t h e   1 9 6 0 s ,   t h i s   t e r m   h a s   g r o w n   i n   p o p u l a r i t y   a n d   i s   u s e d   t o   d e s c r i b e   t h e   s t u d y   o f   s c i e n c e :   g r o w t h ,   s t r u c t u r e ,   i n t e r r e l a t i o n s h i p s   a n d   p r o d u c t i v i t y .   S c i e n t o m e t r i c s   i s   r e l a t e d   t o   a n d   h a s   o v e r l a p p i n g   i n t e r e s t s   w i t h   b i b l i o m e t r i c s   a n d   i n f o r m e t r i c s .   T h e   t e r m s   b i b l i o m e t r i c s ,   s c i e n t o m e t r i c s ,   a n d   i n f o r m e t r i c s   r e f e r   t o   c o m p o n e n t   f i e l d s   r e l a t e d   t o   t h e   s t u d y   o f   t h e   d y n a m i c s   o f   d i s c i p l i n e s   a s   r e f l e c t e d   i n   t h e   p r o d u c t i o n   o f   t h e i r   l i t e r a t u r e ,   A r e a s   o f   s t u d y   r a n g e   f r o m   c h a r t i n g   c h a n g e s   i n   t h e   o u t p u t   o f   a   s c h o l a r l y   f i e l d   t h r o u g h   t i m e   a n d   a c r o s s   c o u n t r i e s ,   t o   t h e   l i b r a r y   c o l l e c t i o n   p r o b l e m   o f   m a i n t a i n i n g   c o n t r o l   o f   t h e   o u t p u t ,   a n d   t o   t h e   l o w   p u b l i c a t i o n   p r o d u c t i v i t y   o f   m o s t   r e s e a r c h e r s .   T h e s e   t e r m s   a r e   u s e d   t o   d e s c r i b e   s i m i l a r   a n d   o v e r l a p p i n g   m e t h o d o l o g i e s .   T h e   o r i g i n s   a n d   h i s t o r i c a l   s u r v e y   o f   t h e   d e v e l o p m e n t   o f   e a c h   o f   t h e s e   t e r m s   a r e   p r e s e n t e d .   P r o f i l e s   o f   t h e   u s a g e   o f   e a c h   o f   t h e s e   t e r m s   o v e r   t i m e   a r e   p r e s e n t e d ,   u s i n g   a n   a p p r o p r i a t e   s u b j e c t   c a t e g o r y   o f   d a t a b a s e s   o n   t h e   D I A L O G   i n f o r m a t i o n   s e r v i c e .   V a r i o u s   d e f i n i t i o n s   o f   e a c h   o f   t h e   t e r m s   a r e   p r o v i d e d   f r o m   a n   e x a m i n a t i o n   o f   t h e   l i t e r a t u r e .   T h e   s i z e   o f   t h e   o v e r a l l   l i t e r a t u r e   o f   t h e s e   f i e l d s   i s   d e t e r m i n e d   a n d   t h e   g r o w t h   a n d   s t a b i l i s a t i o n   o f   b o t h   t h e   d i s s e r t a t i o n   a n d   n o n - d i s s e r t a t i o n   l i t e r a t u r e   a r e   s h o w n .   A   l i s t i n g   o f   t h e   t o p   j o u r n a l s   i n   t h e   t h r e e   f i e l d s   a r e   g i v e n ,   a s   w e l l   a s   a   l i s t   o f   t h e   m a j o r   r e v i e w s   a n d   b i b l i o g r a p h i e s   t h a t   h a v e   b e e n   p u b l i s h e d   o v e r   t h e   y e a r s . 	 U n i v   N e w   S   W a l e s ,   S c h   I n f o r m a t   S y s t   T e c h n o l   &   M a n a g e m e n t ,   S y d n e y ,   N S W ,   A u s t r a l i a 	 H o o d ,   W W   ( r e p r i n t   a u t h o r ) ,   U n i v   N e w   S   W a l e s ,   S c h   I n f o r m a t   S y s t   T e c h n o l   &   M a n a g e m e n t ,   S y d n e y ,   N S W ,   A u s t r a l i a . 	 	 W i l s o n ,   C o n c e p c i o n / M - 8 7 8 4 - 2 0 1 4 	 	 	 	 A G U I L L O   I F ,   1 9 9 7 ,   I N T   J   S C I   I N F O R M E T R I ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B L A C K E R T   L ,   1 9 7 9 ,   W I S S E N S C H A F T L I C H E   Z ,   V 2 6 ,   P 1 8 7 ;   B O N I T Z   M ,   1 9 8 2 ,   Z B L   B I B L I O T H E K S W E S E N ,   V 9 6 ,   P 1 9 ;   B O S S Y   M J ,   1 9 9 5 ,   S O L A R I S   I N F O R M A T I O N ,   V 2 ,   P 2 4 5 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R A U N   T ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 6 ;   B R O A D U S   R N ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 3 ) 3 8 : 2 < 1 2 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   B R O A D U S   R N ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 ;   B r o o k e s   B .   C . ,   1 9 9 0 ,   I N F O R M E T R I C S ,   V 8 9 ,   P 3 1 ;   B R O O K E S   B C ,   1 9 8 8 ,   I N F O R M E T R I C S ,   V 8 7 ,   P 2 9 ;   B u c k l a n d   M K ,   1 9 9 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 0 ,   P 3 8 5 ;   B U R T O N   H D ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 7 6 - 3 ;   C A M P B E L L   F ,   1 8 9 6 ,   T H E O R Y   N A T L   I N T   B I B L ;   C H O N G D E   W ,   1 9 9 6 ,   J   I N F O R M A T I O N   C O M M U N ,   V 2 ,   P 1 5 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   d a   F o n s e c a   E .   N . ,   1 9 7 3 ,   C I E N C I A   I N F O R M A C A O ,   V 2 ,   P 5 ;   D E O G A N   M S ,   1 9 8 7 ,   L U C K N O W   L I B ,   V 1 9 ,   P 4 3 ;   D i n g   Y ,   1 9 9 8 ,   I N T   F O R U M   I N F O R M   D O C ,   V 2 3 ,   P 2 0 ;   D i n g   Y ,   1 9 9 8 ,   I N T   F O R U M   I N F O R M   D O C ,   V 2 3 ,   P 3 ;   E C C H E   L R ,   1 9 9 0 ,   I N F O R M E T R I C S ,   V 8 9 ;   E G G H E   L ,   1 9 8 8 ,   J   D O C ,   V 4 4 ,   P 5 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 1 9 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   E G G H E   L ,   1 9 8 8 ,   I N F O R M E T R I C S ,   V 8 7 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 7 ;   G L A N Z E L   W ,   1 9 9 2 ,   4   I N T   C   B I B L   I N F   S C I ;   G L A N Z E L   W ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 3 0 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I   S C I   S C I ,   V 3 ;   G L A N Z E L   W ,   1 9 9 3 ,   R E S   E V A L U A T ,   V 2 ,   P 1 2 1 ;   G L A N Z E L   W ,   1 9 9 4 ,   4   I N T   C   B I B L   I N F   S C I ;   G L U C K   M ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 1 ) 4 1 : 1 < 4 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - P ;   G O R K O V A   V I ,   1 9 8 8 ,   I N F O R M E T R I Y A ;   G R I F F I T H   B C ,   1 9 7 9 ,   A S L I B   P R O C ,   V 3 1 ,   P 3 8 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 0 6 9 0 ;   H A R S A N Y I   M A ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 3 2 5 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H e r t z e l   D .   H ,   1 9 8 7 ,   E N C Y   L I B R A R Y   I N F O   S 7 ,   P 1 4 4 ;   B u c h a n a n   A .   L . ,   1 9 9 4 ,   C O L L E C T I O N   M A N A G E M E N ,   V 1 8 ,   P 8 9 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 1 8 n 0 3 _ 0 6 ;   H J E R P P E   R ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 0 6 4 ;   H J E R P P E   R ,   1 9 8 0 ,   B I B L I O   B I B L I O   C I T A T I ;   H U L M E   E W ,   1 9 2 3 ,   S T A T   B I B L I O   R E L A T I O N ,   P 2 9 ;   I n g w e r s e n   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 ;   K H A W A J A   I ,   1 9 8 7 ,   P A K I S T A N   L I B   B ,   V 1 8 ,   P 1 ;   K H U R S H I D   A ,   1 9 9 1 ,   I N T   F O R U M   I N F O R M   D O C ,   V 1 6 ,   P 1 8 ;   K h u r s h i d   A . ,   1 9 9 1 ,   J   E D   M E D I A   L I B   S C I ,   V 2 8 ,   P 4 3 3 ;   K O E N I G   M E D ,   1 9 9 5 ,   5   B I E N N   C   I N T   S O C   S C ;   L A W A N I   S M ,   1 9 8 1 ,   L I B R I ,   V 3 1 ,   P 2 9 4 ;   L a w a n i   S .   M . ,   1 9 8 0 ,   T H E S I S   F L O R I D A   S T A T E ;   L O C K E T T   M W ,   1 9 8 9 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 1 ,   P 2 1 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M A C I A S C H A P U L A   C A ,   1 9 9 9 ,   7   C   I N T   S O C   S C I   I N F ;   N A C K E   O ,   1 9 8 0 ,   N A C H R   D O K ,   V 3 1 ,   P 1 0 0 ;   N A C K E   O ,   1 9 7 9 ,   N A C H R   D O K ,   V 3 0 ,   P 2 1 2 ;   N A G P A U L   P S ,   1 9 9 9 ,   E M E R G I N G   T R E N D S   S C I ;   N A L I M O V   V V ,   1 9 7 0 ,   I N D   L A B + ,   V 3 6 ,   P 1 5 4 9 ;   N A L I M O V   V V ,   1 9 7 1 ,   A D 7 3 5 6 3 4   A F B   N T I S   U S ;   N A L I M O V   V V ,   1 9 6 9 ,   A U T O M A T I C   D O C U M E N T A T ,   V 3 ,   P 3 7 ;   N A L I M O V   V V ,   1 9 7 1 ,   G E O G R A F I C H E S K O E   R A S P ,   V 2 ,   P 3 ;   N A R I N   F ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 5 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 2 1 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 4 . 2 1 7 ;   O t l e t   P a u l ,   1 9 3 4 ,   T R A I T E   D O C U M E N T A T I O N ;   P E R I T Z   B C ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 8 ,   P 3 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 4 8 ;   P E R I T Z   B C ,   1 9 9 4 ,   L I B R   Q U A R T ,   V 6 4 ,   P 3 5 7 ;   P E R I T Z   B C ,   1 9 8 4 ,   L I B R I ,   V 3 4 ,   P 2 3 3 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 8 4 . 3 4 . 1 . 2 3 3 ;   P E R I T Z   B C ,   1 9 9 7 ,   6   C   I N T   S O C   S C I   I N F ;   P I E R C E   S J ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 7 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 8 ) 4 3 : 7 < 4 7 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - E ;   P O R T A L   S G ,   1 9 9 5 ,   I N V E S T I G A C I O N   B I B L I O ,   V 8 ,   P 2 3 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P r i t c h a r d   A . ,   1 9 8 1 ,   B I B L I O M E T R I C S   B I B L I O ,   V 1 ;   P r i t c h a r d   A . ,   1 9 6 9 ,   S T A T   B I B L I O   I N T E R I M ;   R A O   I K R ,   1 9 9 2 ,   I N F O R M E T R I C S ,   V 9 1 ;   R O M A N   E ,   1 9 9 4 ,   P R O B L E M E   I N F O R M A R E   D ,   V 2 8 ,   P 5 3 ;   R O U S S E A U   R ,   2 0 0 0 ,   L I B   I N F O R M A T I O N   S C I ,   V 1 0 ;   R O Y   R P M ,   1 9 8 0 ,   I A S L I C   B ,   V 2 5 ,   P 1 0 9 ;   S C H M I D M A I E R   D ,   1 9 8 4 ,   Z B L   B I B L I O T H E K S W E S E N ,   V 9 8 ,   P 4 0 4 ;   S C H R A D E R   A M ,   1 9 8 4 ,   L I B R   I N F O R M   S C I   R E S ,   V 6 ,   P 2 2 7 ;   S C H U B E R T   A ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 6 4 6 ;   S C H U B E R T   A ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 4 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 7 6 5 ;   S C H U B E R T   A ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 7 2 8 5 8 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 1 0 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 6 6 5 0 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 2 1 ;   S c h u b e r t   A ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 3 8 3 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 2 3 8 ;   S E L L E N   M K ,   1 9 9 3 ,   B I B L I O   A N N O T A T E D   B I B ;   S E N G U P T A   I N ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 ;   S H A P I R O   F R ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 6 ) 4 3 : 5 < 3 3 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - T ;   S o p e r   M . E . ,   1 9 9 0 ,   L I B   T H E S A U R U S ;   S T O W E   R C ,   1 9 8 6 ,   A N N O T A T E D   B I B L I O   P U B ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   T A G U E S U T C L I F F E   J ,   1 9 9 4 ,   5 0   Y E A R S   I N F O R M   P R O G ,   P 1 4 7 ;   V a n R a a n   A F J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 0 5 ;   V A N R A A N   A F J ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 ;   V L A C H Y   J ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 2 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 1 4 ;   V l a c h y   J . ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 1 0 9 ;   W e i n b e r g   B H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 3 1 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 4 ) 4 8 : 4 < 3 1 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Z ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l s o n   C .   S . ,   2 0 0 1 ,   A N N   R E V   I N F O R M A T I O N ,   V 3 4 ,   P 3 ;   W I L S O N   C S ,   1 9 9 5 ,   T H E S I S   U   N   S   W A L E S   S ;   W I T T I G   G R ,   1 9 7 8 ,   J   D O C ,   V 3 4 ,   P 2 4 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 6 2 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 1 0 2 	 8 7 	 9 4 	 2 4 	 1 5 2 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 S P U I B O U L E V A R D   5 0 ,   P O   B O X   1 7 ,   3 3 0 0   A A   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 O C T 	 2 0 0 1 	 5 2 	 2 	 	 	 	 	 2 9 1 	 3 1 4 	 	 1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 8 5 G T 	 W O S : 0 0 0 1 7 1 7 4 5 7 0 0 0 1 9 	 	 
 
 J 	 M a r t i n ,   S ;   D i a z ,   G ;   S a n c r i s t o b a l ,   E ;   G i l ,   R ;   C a s t r o ,   M ;   P e i r e ,   J 	 	 	 	 M a r t i n ,   S e r g i o ;   D i a z ,   G a b r i e l ;   S a n c r i s t o b a l ,   E l i o ;   G i l ,   R o s a r i o ;   C a s t r o ,   M a n u e l ;   P e i r e ,   J u a n 	 	 	 N e w   t e c h n o l o g y   t r e n d s   i n   e d u c a t i o n :   S e v e n   y e a r s   o f   f o r e c a s t s   a n d   c o n v e r g e n c e 	 C O M P U T E R S   &   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 T e c h n o l o g y   t r e n d s ;   E d u c a t i o n ;   F o r e c a s t s ;   S o c i a l   w e b ;   M o b i l e   a n d   u b i q u i t o u s   d e v i c e s ;   A u g m e n t e d   r e a l i t y ;   S e m a n t i c   w e b ;   I m m e r s i v e   e n v i r o n m e n t s ;   L e a r n i n g   o b j e c t s 	 P A T E N T   A N A L Y S I S ;   D E S I G N ;   S Y S T E M ;   G A M E ;   B I B L I O M E T R I C S ;   T E A C H 	 E a c h   y e a r   s i n c e   2 0 0 4 ,   a   n e w   H o r i z o n   R e p o r t   h a s   b e e n   r e l e a s e d .   E a c h   e d i t i o n   a t t e m p t s   t o   f o r e c a s t   t h e   m o s t   p r o m i s i n g   t e c h n o l o g i e s   l i k e l y   t o   i m p a c t   o n   e d u c a t i o n   a l o n g   t h r e e   h o r i z o n s :   t h e   s h o r t   t e r m   ( t h e   y e a r   o f   t h e   r e p o r t ) ,   t h e   m i d - t e r m   ( t h e   n e x t   2   y e a r s )   a n d   t h e   l o n g   t e r m   ( t h e   n e x t   4   y e a r s ) .   T h i s   p a p e r   a n a l y z e s   t h e   e v o l u t i o n   o f   t e c h n o l o g y   t r e n d s   f r o m   2 0 0 4   t o   2 0 1 4   t h a t   c o r r e s p o n d   t o   t h e   l o n g - t e r m   p r e d i c t i o n s   o f   t h e   m o s t   r e c e n t   H o r i z o n   R e p o r t .   T h e   s t u d y   a n a l y z e s   t h r o u g h   b i b l i o m e t r i c   a n a l y s i s   w h i c h   t e c h n o l o g i e s   w e r e   s u c c e s s f u l   a n d   b e c a m e   a   r e g u l a r   p a r t   o f   e d u c a t i o n   s y s t e m s ,   w h i c h   o n e s   f a i l e d   t o   h a v e   t h e   p r e d i c t e d   i m p a c t   a n d   w h y ,   a n d   t h e   s h a p e   o f   t e c h n o l o g y   f l o w s   i n   r e c e n t   y e a r s .   T h e   s t u d y   a l s o   s h o w s   h o w   t h e   e v o l u t i o n   a n d   m a t u r i t y   o f   s o m e   t e c h n o l o g i e s   a l l o w e d   t h e   r e v i v a l   o f   e x p e c t a t i o n s   f o r   o t h e r s .   T h e   a n a l y s i s   h e r e ,   w h i c h   f o c u s e s   o n   e d u c a t i o n a l   a p p l i c a t i o n s ,   o f f e r s   g u i d e l i n e s   t h a t   m a y   b e   h e l p f u l   t o   t h o s e   s e e k i n g   t o   i n v e s t   i n   n e w   r e s e a r c h   a r e a s .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ M a r t i n ,   S e r g i o ;   D i a z ,   G a b r i e l ;   S a n c r i s t o b a l ,   E l i o ;   G i l ,   R o s a r i o ;   C a s t r o ,   M a n u e l ;   P e i r e ,   J u a n ]   S p a n i s h   U n i v   D i s t a n c e   E d u c   U N E D ,   E l e c t   &   C o m p   E n g n   D e p t ,   M a d r i d   2 8 0 4 0 ,   S p a i n 	 M a r t i n ,   S   ( r e p r i n t   a u t h o r ) ,   S p a n i s h   U n i v   D i s t a n c e   E d u c   U N E D ,   E l e c t   &   C o m p   E n g n   D e p t ,   1 2   J u a n   d e l   R o s a l ,   M a d r i d   2 8 0 4 0 ,   S p a i n . 	 s m a r t i n @ i e e c . u n e d . e s 	 m i n ,   g u o / F - 3 8 1 3 - 2 0 1 4 	 	 S p a n i s h   S c i e n c e   a n d   I n n o v a t i o n   M i n i s t r y   [ T I N 2 0 0 8 - 0 6 0 8 3 - C 0 3 / T S I ,   C Y T E D - 5 0 8 A C 0 3 4 1 ] ;   e - M a d r i d   P r o j e c t   [ S 2 0 0 9 / T I C - 1 6 5 0 ] 	 T h e   a u t h o r s   a c k n o w l e d g e   t h e   S p a n i s h   S c i e n c e   a n d   I n n o v a t i o n   M i n i s t r y   f o r   s u p p o r t   o f   t h e   p r o j e c t s   T I N 2 0 0 8 - 0 6 0 8 3 - C 0 3 / T S I   " s - L a b s   -   I n t e g r a c i o n   d e   S e r v i c i o s   A b i e r t o s   p a r a   L a b o r a t o r i o s   R e m o t o s   y   V i r t u a l e s   D i s t r i b u i d o s "   a n d   C Y T E D - 5 0 8 A C 0 3 4 1   " S O L I T E S O F T W A R E   L I B R E   E N   T E L E F O R M A C I O N . "   F i n a l l y ,   t h e   a u t h o r s   a c k n o w l e d g e   t h e   s u p p o r t   p r o v i d e d   b y   e - M a d r i d   P r o j e c t ,   S 2 0 0 9 / T I C - 1 6 5 0 ,   " I n v e s t i g a c i o n   y   D e s a r r o l l o   d e   t e c n o l o g i a s   p a r a   e l   e - l e a r n i n g   e n   l a   C o m u n i d a d   d e   M a d r i d " . 	 A b r a h a m   B P ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 0 ) 0 0 0 4 0 - 7 ;   C o l l e r   B D ,   2 0 0 9 ,   C O M P U T   E D U C ,   V 5 3 ,   P 9 0 0 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 9 . 0 5 . 0 1 2 ;   C r o s i e r   J K ,   2 0 0 2 ,   C O M P U T   E D U C ,   V 3 8 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 1 3 1 5 ( 0 1 ) 0 0 0 7 5 - 6 ;   D a i m   T U ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 4 . 0 0 4 ;   D e   L u c i a   A ,   2 0 0 9 ,   C O M P U T   E D U C ,   V 5 2 ,   P 2 2 0 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 8 . 0 8 . 0 0 1 ;   G i r v a n   C ,   2 0 1 0 ,   C O M P U T   E D U C ,   V 5 5 ,   P 3 4 2 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 1 . 0 2 0 ;   H a i n e y   T ,   2 0 1 1 ,   C O M P U T   E D U C ,   V 5 6 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 9 . 0 0 8 ;   H u a n g   S L ,   2 0 0 9 ,   C O M P U T   E D U C ,   V 5 3 ,   P 7 0 1 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 9 . 0 4 . 0 1 1 ;   J a r m o n   L ,   2 0 0 9 ,   C O M P U T   E D U C ,   V 5 3 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 9 . 0 1 . 0 1 0 ;   J a r v i s   J ,   2 0 0 9 ,   W H A T   W O U L D   G O O G L E   D O ;   J o h n s o n   L . ,   2 0 0 4 ,   2 0 0 4   H O R I Z O N   R E P O R T ;   J o h n s o n   L . ,   2 0 0 9 ,   2 0 0 9   H O R I Z O N   R E P O R T ;   J o h n s o n   L . ,   2 0 0 8 ,   2 0 0 8   H O R I Z O N   R E P O R T ;   S m i t h   R . ,   2 0 0 5 ,   2 0 0 5   H O R I Z O N   R E P O R T ;   J o h n s o n   L . ,   2 0 1 0 ,   2 0 1 0   H O R I Z O N   R E P O R T ;   S m i t h   R . ,   2 0 0 6 ,   2 0 0 6   H O R I Z O N   R E P O R T ;   J o h n s o n   L . ,   2 0 0 7 ,   2 0 0 7   H O R I Z O N   R E P O R T ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   K w o k   R C W ,   2 0 1 1 ,   C O M P U T   E D U C ,   V 5 6 ,   P 1 0 1 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 8 . 0 1 5 ;   L i u   S J ,   1 9 9 7 ,   I N T   J   T E C H N O L   M A N A G E ,   V 1 3 ,   P 6 6 1 ,   D O I   1 0 . 1 5 0 4 / I J T M . 1 9 9 7 . 0 0 1 6 8 9 ;   L i u   Y ,   2 0 1 0 ,   C O M P U T   E D U C ,   V 5 5 ,   P 1 2 1 1 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 5 . 0 1 8 ;   M A R T I N   S ,   2 0 0 9 ,   P   4   I N T   M U L T   C O M P   G L ;   M o n a h a n   T ,   2 0 0 8 ,   C O M P U T   E D U C ,   V 5 0 ,   P 1 3 3 9 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 6 . 1 2 . 0 0 8 ;   M o r e n o - G e r   P ,   2 0 0 7 ,   S C I   C O M P U T   P R O G R A M ,   V 6 7 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / j . s c i c o . 2 0 0 6 . 0 7 . 0 0 3 ;   M o r r i s   S ,   2 0 0 2 ,   C O M P U T   I N D   E N G ,   V 4 3 ,   P 8 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 1 4 3 - 2 ;   N a i s m i t h   L . ,   2 0 0 4 ,   N E S T A   F U T U R E L A B   S E R I ,   V 1 1 ;   N A K A Y A M A   K ,   2 0 0 8 ,   2 2   I N T   C   A D V   I N F   N E T ,   V 2 5 ,   P 1 1 5 0 ;   N O R T O N   M J ,   2 0 0 1 ,   I N F O R M   P R O C E S S I N G   M A ,   V 3 7 ,   P 7 6 4 ;   O K U O K A   T ,   2 0 0 9 ,   1 1   I E E E   I N T   S   M U L T   2 ,   V 1 4 ,   P 5 0 1 ;   P A P A S T E R G I O U   M ,   2 0 0 9 ,   C O M P U T E R S   E D ;   P a t t e r s o n   D . ,   2 0 0 9 ,   U K   E   L E A R N I N G   M A R K E T ;   P I L K I N G T O N   A ,   2 0 0 3 ,   P O R T L   I N T   C   M A N   E N G ;   P r e n s k y   M . ,   2 0 0 1 ,   H O R I Z O N ,   V 9 ,   P 1 ,   D O I   D O I   1 0 . 1 1 0 8 / 1 0 7 4 8 1 2 0 1 1 0 4 2 4 8 1 6 ;   R e e v e s   B y r o n ,   2 0 0 9 ,   T O T A L   E N G A G E M E N T   U S I ;   S a n d i   M . ,   2 0 0 9 ,   B R I T   E D U C   R E S   J ,   V 3 5 ,   P 2 4 3 ;   S m i t h   R . ,   2 0 0 4 ,   G U I D E L I N E S   A U T H O R S   L ;   S u e   B e n n e t t ,   2 0 0 8 ,   B R I T   J   E D U C   T E C H N O L ,   V 3 9 ,   P 7 7 5 ;   T r a p h a g a n   T W ,   2 0 1 0 ,   C O M P U T   E D U C ,   V 5 5 ,   P 9 2 3 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 4 . 0 0 3 ;   V A N S T O N   L K ,   2 0 0 4 ,   T E L E K T R O N I K K ,   V 4 ,   P 3 2 ;   W a n g   H C ,   2 0 0 6 ,   C O M P U T   E D U C ,   V 4 6 ,   P 4 5 8 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 5 . 0 9 . 0 0 5 ;   W a n g   P M ,   1 9 9 8 ,   J   B U S   E C O N   S T A T ,   V 1 6 ,   P 2 7 ,   D O I   1 0 . 2 3 0 7 / 1 3 9 2 0 1 3 ;   W a n g   Q Y ,   2 0 1 0 ,   C O M P U T   E D U C ,   V 5 5 ,   P 1 2 7 0 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 5 . 0 2 3 ;   W a t t s   R J ,   1 9 9 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 6 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 ;   W E I S E R   M ,   1 9 9 1 ,   S C I   A M ,   V 2 6 5 ,   P 9 4 ;   W I S H A R T   J ,   1 9 9 0 ,   C O M P U T E R S   E D ;   Y a n g   J C ,   2 0 1 0 ,   C O M P U T   E D U C ,   V 5 5 ,   P 1 3 4 6 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 0 . 0 6 . 0 0 5 ;   Z h o u   F . ,   2 0 0 8 ,   P   I S M A R   2 0 0 8   C A M B R   U 	 4 7 	 8 6 	 8 7 	 1 4 	 1 1 6 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 6 0 - 1 3 1 5 	 	 	 C O M P U T   E D U C 	 C o m p u t .   E d u c . 	 N O V 	 2 0 1 1 	 5 7 	 3 	 	 	 	 	 1 8 9 3 	 1 9 0 6 	 	 1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 1 1 . 0 4 . 0 0 3 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 C o m p u t e r   S c i e n c e ;   E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 8 1 0 A Y 	 W O S : 0 0 0 2 9 4 0 9 9 0 0 0 0 0 5 	 	 
 
 J 	 S h i b a t a ,   N ;   K a j i k a w a ,   Y ;   T a k e d a ,   Y ;   M a t s u s h i m a ,   K 	 	 	 	 S h i b a t a ,   N a o k i ;   K a j i k a w a ,   Y u y a ;   T a k e d a ,   Y o s h i y u k i ;   M a t s u s h i m a ,   K a t s u m o r i 	 	 	 D e t e c t i n g   e m e r g i n g   r e s e a r c h   f r o n t s   b a s e d   o n   t o p o l o g i c a l   m e a s u r e s   i n   c i t a t i o n   n e t w o r k s   o f   s c i e n t i f i c   p u b l i c a t i o n s 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R & D   m a n a g e m e n t ;   R e s e a r c h   f r o n t ;   B i b l i o m e t r i c s ;   C i t a t i o n   n e t w o r k ;   T o p o l o g i c a l   c l u s t e r i n g 	 A I N   B U F F E R   L A Y E R ;   I N T E L L E C T U A L   P R O P E R T Y ;   T E C H N O L O G Y   M A N A G E M E N T ;   D O M A I N   V I S U A L I Z A T I O N ;   B I B L I O M E T R I C   M E T H O D S ;   P R O D U C T I V I T Y   G R O W T H ;   K N O W L E D G E   D O M A I N ;   F U T U R E - P R O S P E C T S ;   E C O N O M I C   G R O W T H ;   S C I E N C E   M A P S 	 I n   t h i s   p a p e r ,   w e   p e r f o r m e d   a   c o m p a r a t i v e   s t u d y   i n   t w o   r e s e a r c h   d o m a i n s   i n   o r d e r   t o   d e v e l o p   a   m e t h o d   o f   d e t e c t i n g   e m e r g i n g   k n o w l e d g e   d o m a i n s .   T h e   s e l e c t e d   d o m a i n s   a r e   r e s e a r c h   o n   g a l l i u m   n i t r i d e   ( G a N )   a n d   r e s e a r c h   o n   c o m p l e x   n e t w o r k s ,   w h i c h   r e p r e s e n t   r e c e n t   e x a m p l e s   o f   i n n o v a t i v e   r e s e a r c h .   W e   d i v i d e d   c i t a t i o n   n e t w o r k s   i n t o   c l u s t e r s   u s i n g   t h e   t o p o l o g i c a l   c l u s t e r i n g   m e t h o d ,   t r a c k e d   t h e   p o s i t i o n s   o f   p a p e r s   i n   e a c h   c l u s t e r ,   a n d   v i s u a l i z e d   c i t a t i o n   n e t w o r k s   w i t h   c h a r a c t e r i s t i c   t e r m s   f o r   e a c h   c l u s t e r .   A n a l y z i n g   t h e   c l u s t e r i n g   r e s u l t s   w i t h   t h e   a v e r a g e   a g e   a n d   p a r e n t - c h i l d r e n   r e l a t i o n s h i p   o f   e a c h   c l u s t e r   m a y   b e   h e l p f u l   i n   d e t e c t i n g   e m e r g e n c e .   I n   a d d i t i o n ,   t o p o l o g i c a l   m e a s u r e s ,   w i t h i n - c l u s t e r   d e g r e e   z   a n d   p a r t i c i p a t i o n   c o e f f i c i e n t   P ,   s u c c e e d e d   i n   d e t e r m i n i n g   w h e t h e r   t h e r e   a r e   e m e r g i n g   k n o w l e d g e   c l u s t e r s .   T h e r e   w e r e   a t   l e a s t   t w o   t y p e s   o f   d e v e l o p m e n t   o f   k n o w l e d g e   d o m a i n s .   O n e   i s   i n c r e m e n t a l   i n n o v a t i o n   a s   i n   G a N   a n d   t h e   o t h e r   i s   b r a n c h i n g   i n n o v a t i o n   a s   i n   c o m p l e x   n e t w o r k s .   I n   t h e   d o m a i n s   w h e r e   i n c r e m e n t a l   i n n o v a t i o n   o c c u r s ,   p a p e r s   c h a n g e d   t h e i r   p o s i t i o n   t o   l a r g e   z   a n d   l a r g e   P .   O n   t h e   o t h e r   h a n d ,   i n   t h e   c a s e   o f   b r a n c h i n g   i n n o v a t i o n ,   t h e y   m o v e d   t o   a   p o s i t i o n   w i t h   l a r g e   z   a n d   s m a l l   P ,   b e c a u s e   t h e r e   i s   a   n e w   e m e r g i n g   c l u s t e r ,   a n d   a c t i v e   r e s e a r c h   c e n t e r s   s h i f t   r a p i d l y .   O u r   r e s u l t s   s h o w e d   t h a t   t o p o l o g i c a l   m e a s u r e s   a r e   b e n e f i c i a l   i n   d e t e c t i n g   b r a n c h i n g   i n n o v a t i o n   i n   t h e   c i t a t i o n   n e t w o r k   o f   s c i e n t i f i c   p u b l i c a t i o n s .   ( C )   2 0 0 8   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ S h i b a t a ,   N a o k i ;   K a j i k a w a ,   Y u y a ;   T a k e d a ,   Y o s h i y u k i ;   M a t s u s h i m a ,   K a t s u m o r i ]   U n i v   T o k y o ,   I n s t   E n g n   I n n o v a t ,   S c h   E n g n ,   B u n k y o   K u ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n 	 K a j i k a w a ,   Y   ( r e p r i n t   a u t h o r ) ,   U n i v   T o k y o ,   I n s t   E n g n   I n n o v a t ,   S c h   E n g n ,   B u n k y o   K u ,   2 - 1 1 - 1 6   Y a y o i ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n . 	 k a j i @ b i z - m o d e l . t . u - t o k y o . a c . j p 	 K a j i k a w a ,   Y u y a / C - 1 9 9 6 - 2 0 1 5 	 K a j i k a w a ,   Y u y a / 0 0 0 0 - 0 0 0 3 - 3 5 7 7 - 5 1 6 7 	 	 	 A d a i   A T ,   2 0 0 4 ,   J   M O L   B I O L ,   V 3 4 0 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j m b . 2 0 0 4 . 0 4 . 0 4 7 ;   A D A M S   J D ,   1 9 9 0 ,   J   P O L I T   E C O N ,   V 9 8 ,   P 6 7 3 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 7 0 2 ;   A k a s a k i   I ,   1 9 9 8 ,   M A T E R   R E S   S O C   S Y M P   P ,   V 4 8 2 ,   P 3 ;   A K A S A K I   I ,   1 9 8 9 ,   J   C R Y S T   G R O W T H ,   V 9 8 ,   P 2 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 0 2 4 8 ( 8 9 ) 9 0 2 0 0 - 5 ;   A L B E R T   M B ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 5 5 - U ;   A M A N O   H ,   1 9 8 9 ,   J P N   J   A P P L   P H Y S   2 ,   V 2 8 ,   p L 2 1 1 2 ;   A M A N O   H ,   1 9 8 6 ,   A P P L   P H Y S   L E T T ,   V 4 8 ,   P 3 5 3 ,   D O I   1 0 . 1 0 6 3 / 1 . 9 6 5 4 9 ;   B a d e r   M A ,   2 0 0 8 ,   T E C H N O V A T I O N ,   V 2 8 ,   P 1 9 6 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 7 . 0 5 . 0 0 7 ;   B a r a b a s i   A L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 0 9 ;   B o y a c k   K W ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 3 0 ;   B o y a c k   K W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 6 6 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B u t e r   R K ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 7 - y ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h e n   C M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 4 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 8 - 5 ;   C h e n   C M ,   2 0 0 1 ,   I E E E   T   S Y S T   M A N   C Y   C ,   V 3 1 ,   P 5 1 8 ,   D O I   1 0 . 1 1 0 9 / 5 3 2 6 . 9 8 3 9 3 5 ;   C h e n   C M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 6 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 5 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   D a v i d s o n   G S ,   1 9 9 8 ,   J   I N T E L L   I N F   S Y S T ,   V 1 1 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 6 9 0 0 0 8 8 5 6 ;   E r d o s   P . ,   1 9 5 9 ,   P U B L   M A T H - D E B R E C E N ,   V 6 ,   P 2 9 0 ;   E r d o s   P . ,   1 9 6 0 ,   P U B L   M A T H   I   H U N G ,   V 5 ,   P 1 7 ,   D O I   D O I   1 0 . 2 3 0 7 / 1 9 9 9 4 0 5 ;   E r d o s   P . ,   1 9 6 1 ,   A C T A   M A T H   A C A D   S C I   H ,   V 1 2 ,   P 2 6 1 ,   D O I   D O I   1 0 . 1 0 0 7 / B F 0 2 0 6 6 6 8 9 ;   F l e m i n g   L ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 0 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 8 4 ;   F r a n t z i   K . ,   2 0 0 0 ,   I n t e r n a t i o n a l   J o u r n a l   o n   D i g i t a l   L i b r a r i e s ,   V 3 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 7 9 9 9 9 0 0 0 2 3 ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   F r i e t s c h   R ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 1 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 0 7 . 0 0 7 ;   G u i m e r a   R ,   2 0 0 5 ,   N A T U R E ,   V 4 3 3 ,   P 8 9 5 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 3 2 8 8 ;   H a n e l   P ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 8 9 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 5 . 1 2 . 0 0 1 ;   H a s h i m o t o   K ,   2 0 0 5 ,   J P N   J   A P P L   P H Y S   1 ,   V 4 4 ,   P 8 2 6 9 ,   D O I   1 0 . 1 1 4 3 / J J A P . 4 4 . 8 2 6 9 ;   H o p c r o f t   J ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 4 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 7 5 0 1 0 0 ;   J a f f e   A B ,   1 9 9 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 3 ,   P 1 2 6 7 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 3 . 2 3 . 1 2 6 7 1 ;   J A F F E   A B ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 9 5 7 ;   K l a v a n s   R ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 7 4 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   L E Y D E S D O R F F   L ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 5 4 - X ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   M A N S F I E L . E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 5 ,   P 4 7 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 5 . 4 0 2 1 . 4 7 7 ;   M a s s i n i   S ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 1 5 5 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 7 . 0 0 4 ;   M e y e r   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 4 0 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 7 . 0 0 8 ;   M I L G R A M   S ,   1 9 6 7 ,   P S Y C H O L   T O D A Y ,   V 1 ,   P 6 1 ;   M i m a   H . ,   1 9 9 8 ,   P   I N T   J O I N T   W O R K S H   C ,   P 1 0 ;   M o r r i s   S A ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 7 ;   N A K A M U R A   S ,   1 9 9 4 ,   A P P L   P H Y S   L E T T ,   V 6 4 ,   P 1 6 8 7 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 1 1 8 3 2 ;   N A K A M U R A   S ,   1 9 9 2 ,   J P N   J   A P P L   P H Y S   1 ,   V 3 1 ,   P 1 2 5 8 ,   D O I   1 0 . 1 1 4 3 / J J A P . 3 1 . 1 2 5 8 ;   N a k a m u r a   S ,   1 9 9 6 ,   J P N   J   A P P L   P H Y S   2 ,   V 3 5 ,   p L 7 4 ,   D O I   1 0 . 1 1 4 3 / J J A P . 3 5 . L 7 4 ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   N i o s i   J ,   1 9 9 9 ,   J   B U S   R E S ,   V 4 5 ,   P 1 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 8 - 2 9 6 3 ( 9 7 ) 0 0 2 3 0 - 0 ;   P E T E R S   H P F ,   1 9 9 3 ,   R E S   P O L I C Y ,   V 2 2 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 3 1 - C ;   P E T E R S   H P F ,   1 9 9 3 ,   R E S   P O L I C Y ,   V 2 2 ,   P 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 3 2 - D ;   P o r t e r   A L ,   2 0 0 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 2 ,   P 1 0 7 0 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 4 . 1 0 . 0 0 7 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   R O S E N B E R G   N ,   1 9 7 4 ,   E C O N   J ,   V 8 4 ,   P 9 0 ,   D O I   1 0 . 2 3 0 7 / 2 2 3 0 4 8 5 ;   S k u p i n   A ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 7 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 6 5 4 1 0 0 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H G ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 2 ;   S o r e n s o n   O ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 6 1 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 9 . 0 0 8 ;   S t o r t o   C . L . ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 9 3 2 ;   S V E I K A U S K A S   L ,   1 9 8 1 ,   R E V   E C O N   S T A T ,   V 6 3 ,   P 2 7 5 ,   D O I   1 0 . 2 3 0 7 / 1 9 2 4 0 9 8 ;   T i j s s e n   R J W ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 5 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 2 4 - X ;   T r y k   D A ,   2 0 0 0 ,   E L E C T R O C H I M   A C T A ,   V 4 5 ,   P 2 3 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 3 - 4 6 8 6 ( 0 0 ) 0 0 3 3 7 - 6 ;   v a n   R a a n   A F J ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 6 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 2 9 - 9 ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   W a t t s   D J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 3 ,   P 4 4 0 ,   D O I   1 0 . 1 0 3 8 / 3 0 9 1 8 ;   W h i t e   H D ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 9 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 6 3 0 1 0 0 ;   W i l l i a m s   R ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 8 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 8 8 5 - 2 ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 	 6 8 	 8 4 	 8 7 	 9 	 8 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 6 - 4 9 7 2 	 1 8 7 9 - 2 3 8 3 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 N O V 	 2 0 0 8 	 2 8 	 1 1 	 	 	 	 	 7 5 8 	 7 7 5 	 	 1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 0 3 . 0 0 9 	 	 1 8 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 3 6 3 T K 	 W O S : 0 0 0 2 6 0 2 8 9 5 0 0 0 0 4 	 	 
 
 J 	 P a p a d o p o u l o s ,   S ;   K o m p a t s i a r i s ,   Y ;   V a k a l i ,   A ;   S p y r i d o n o s ,   P 	 	 	 	 P a p a d o p o u l o s ,   S y m e o n ;   K o m p a t s i a r i s ,   Y i a n n i s ;   V a k a l i ,   A t h e n a ;   S p y r i d o n o s ,   P l o u t a r c h o s 	 	 	 C o m m u n i t y   d e t e c t i o n   i n   S o c i a l   M e d i a   P e r f o r m a n c e   a n d   a p p l i c a t i o n   c o n s i d e r a t i o n s 	 D A T A   M I N I N G   A N D   K N O W L E D G E   D I S C O V E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C o m m u n i t y   d e t e c t i o n ;   L a r g e - s c a l e   n e t w o r k s ;   S o c i a l   M e d i a 	 C O M P L E X   N E T W O R K S ;   A L G O R I T H M ;   G R A P H S ;   C U T S ;   W E B 	 T h e   p r o p o s e d   s u r v e y   d i s c u s s e s   t h e   t o p i c   o f   c o m m u n i t y   d e t e c t i o n   i n   t h e   c o n t e x t   o f   S o c i a l   M e d i a .   C o m m u n i t y   d e t e c t i o n   c o n s t i t u t e s   a   s i g n i f i c a n t   t o o l   f o r   t h e   a n a l y s i s   o f   c o m p l e x   n e t w o r k s   b y   e n a b l i n g   t h e   s t u d y   o f   m e s o s c o p i c   s t r u c t u r e s   t h a t   a r e   o f t e n   a s s o c i a t e d   w i t h   o r g a n i z a t i o n a l   a n d   f u n c t i o n a l   c h a r a c t e r i s t i c s   o f   t h e   u n d e r l y i n g   n e t w o r k s .   C o m m u n i t y   d e t e c t i o n   h a s   p r o v e n   t o   b e   v a l u a b l e   i n   a   s e r i e s   o f   d o m a i n s ,   e . g .   b i o l o g y ,   s o c i a l   s c i e n c e s ,   b i b l i o m e t r i c s .   H o w e v e r ,   d e s p i t e   t h e   u n p r e c e d e n t e d   s c a l e ,   c o m p l e x i t y   a n d   t h e   d y n a m i c   n a t u r e   o f   t h e   n e t w o r k s   d e r i v e d   f r o m   S o c i a l   M e d i a   d a t a ,   t h e r e   h a s   o n l y   b e e n   l i m i t e d   d i s c u s s i o n   o f   c o m m u n i t y   d e t e c t i o n   i n   t h i s   c o n t e x t .   M o r e   s p e c i f i c a l l y ,   t h e r e   i s   h a r d l y   a n y   d i s c u s s i o n   o n   t h e   p e r f o r m a n c e   c h a r a c t e r i s t i c s   o f   c o m m u n i t y   d e t e c t i o n   m e t h o d s   a s   w e l l   a s   t h e   e x p l o i t a t i o n   o f   t h e i r   r e s u l t s   i n   t h e   c o n t e x t   o f   r e a l - w o r l d   w e b   m i n i n g   a n d   i n f o r m a t i o n   r e t r i e v a l   s c e n a r i o s .   T o   t h i s   e n d ,   t h i s   s u r v e y   f i r s t   f r a m e s   t h e   c o n c e p t   o f   c o m m u n i t y   a n d   t h e   p r o b l e m   o f   c o m m u n i t y   d e t e c t i o n   i n   t h e   c o n t e x t   o f   S o c i a l   M e d i a ,   a n d   p r o v i d e s   a   c o m p a c t   c l a s s i f i c a t i o n   o f   e x i s t i n g   a l g o r i t h m s   b a s e d   o n   t h e i r   m e t h o d o l o g i c a l   p r i n c i p l e s .   T h e   s u r v e y   p l a c e s   s p e c i a l   e m p h a s i s   o n   t h e   p e r f o r m a n c e   o f   e x i s t i n g   m e t h o d s   i n   t e r m s   o f   c o m p u t a t i o n a l   c o m p l e x i t y   a n d   m e m o r y   r e q u i r e m e n t s .   I t   p r e s e n t s   b o t h   a   t h e o r e t i c a l   a n d   a n   e x p e r i m e n t a l   c o m p a r a t i v e   d i s c u s s i o n   o f   s e v e r a l   p o p u l a r   m e t h o d s .   I n   a d d i t i o n ,   i t   d i s c u s s e s   t h e   p o s s i b i l i t y   f o r   i n c r e m e n t a l   a p p l i c a t i o n   o f   t h e   m e t h o d s   a n d   p r o p o s e s   f i v e   s t r a t e g i e s   f o r   s c a l i n g   c o m m u n i t y   d e t e c t i o n   t o   r e a l - w o r l d   n e t w o r k s   o f   h u g e   s c a l e s .   F i n a l l y ,   t h e   s u r v e y   d e a l s   w i t h   t h e   i n t e r p r e t a t i o n   a n d   e x p l o i t a t i o n   o f   c o m m u n i t y   d e t e c t i o n   r e s u l t s   i n   t h e   c o n t e x t   o f   i n t e l l i g e n t   w e b   a p p l i c a t i o n s   a n d   s e r v i c e s . 	 [ P a p a d o p o u l o s ,   S y m e o n ;   K o m p a t s i a r i s ,   Y i a n n i s ]   I n f o r m a t   &   T e l e m a t   I n s t ,   C E R T H ,   T h e s s a l o n i k i ,   G r e e c e ;   [ P a p a d o p o u l o s ,   S y m e o n ;   V a k a l i ,   A t h e n a ;   S p y r i d o n o s ,   P l o u t a r c h o s ]   A r i s t o t l e   U n i v   T h e s s a l o n i k i ,   D e p t   I n f o r m a t ,   G R - 5 4 0 0 6   T h e s s a l o n i k i ,   G r e e c e 	 P a p a d o p o u l o s ,   S   ( r e p r i n t   a u t h o r ) ,   I n f o r m a t   &   T e l e m a t   I n s t ,   C E R T H ,   T h e s s a l o n i k i ,   G r e e c e . 	 p a p a d o p @ i t i . g r ;   i k o m @ i t i . g r ;   a v a k a l i @ c s d . a u t h . g r ;   p l s p y r i d @ c s d . a u t h . g r 	 V a k a l i ,   A t h i n a / D - 8 4 3 2 - 2 0 1 6 ;   	 V a k a l i ,   A t h i n a / 0 0 0 0 - 0 0 0 2 - 0 6 6 6 - 6 9 8 4 ;   K o m p a t s i a r i s ,   I o a n n i s   ( Y i a n n i s ) / 0 0 0 0 - 0 0 0 1 - 6 4 4 7 - 9 0 2 0 	 W e K n o w I t ;   G L O C A L ;   E u r o p e a n   C o m m i s s i o n   [ F P 7 - 2 1 5 4 5 3 ,   F P 7 - 2 4 8 9 8 4 ] 	 T h i s   w o r k   w a s   s u p p o r t e d   b y   t h e   W e K n o w I t   a n d   G L O C A L   p r o j e c t s ,   p a r t i a l l y   f u n d e d   b y   t h e   E u r o p e a n   C o m m i s s i o n ,   u n d e r   c o n t r a c t   n u m b e r s   F P 7 - 2 1 5 4 5 3   a n d   F P 7 - 2 4 8 9 8 4   r e s p e c t i v e l y . 	 A g i c h t e i n   E . ,   2 0 0 8 ,   P   I N T   C   W E B   S E A R C H   W ,   P 1 8 3 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 4 1 5 3 1 . 1 3 4 1 5 5 7 ;   A n d e r s e n   R ,   2 0 0 6 ,   A N N   I E E E   S Y M P   F O U N D ,   P 4 7 5 ;   A r e n a s   A ,   2 0 0 6 ,   P H Y S   R E V   L E T T ,   V 9 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 9 6 . 1 1 4 1 0 2 ;   A r e n a s   A ,   2 0 0 7 ,   N E W   J   P H Y S ,   V 9 ,   D O I   1 0 . 1 0 8 8 / 1 3 6 7 - 2 6 3 0 / 9 / 6 / 1 7 6 ;   A S U R   S ,   2 0 0 7 ,   P   1 3   A C M   S I G K D D   I N T ,   P 9 1 3 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 2 8 1 1 9 2 . 1 2 8 1 2 9 0 ;   B a e z a - Y a t e s   R ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 3 6 2 ,   P 1 ;   B a g r o w   J .   P . ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   V 5 ;   B a r b e r   M J ,   2 0 0 7 ,   P H Y S   R E V   E ,   V 7 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 6 . 0 6 6 1 0 2 ;   B a t a g e l j   V . ,   2 0 0 3 ,   A R X I V C S 0 3 1 0 0 4 9 ;   B e g e l m a n   G . ,   2 0 0 6 ,   A U T O M A T E D   T A G   C L U S T E ;   B l o n d e l   V D ,   2 0 0 8 ,   A R X I V 0 8 0 3 0 4 7 6 ;   B O R G A T T I   S P ,   1 9 9 0 ,   S O C   N E T W O R K S ,   V 1 2 ,   P 3 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 9 0 ) 9 0 0 1 4 - Z ;   B R E I G E R   R L ,   1 9 7 5 ,   J   M A T H   P S Y C H O L ,   V 1 2 ,   P 3 2 8 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 2 4 9 6 ( 7 5 ) 9 0 0 2 8 - 0 ;   B R O N   C ,   1 9 7 3 ,   C O M M U N   A C M ,   V 1 6 ,   P 5 7 5 ,   D O I   1 0 . 1 1 4 5 / 3 6 2 3 4 2 . 3 6 2 3 6 7 ;   C a t t u t o   C ,   2 0 0 8 ,   P   I S W C   2 0 0 8   K A R L S R   G ;   C a t t u t o   C ,   2 0 0 8 ,   A D V   C O M P L E X   S Y S T ,   V 1 1 ,   P 5 9 7 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 9 5 2 5 9 0 8 0 0 1 8 1 7 ;   C h a k r a b a r t i   D ,   2 0 0 4 ,   L E C T   N O T E S   A R T I F   I N T ,   V 3 2 0 2 ,   P 1 1 2 ;   C h a k r a b a r t i   D ,   2 0 0 6 ,   P   1 2   A C M   S I G K D D   I N T ,   P 5 5 4 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 1 5 0 4 0 2 . 1 1 5 0 4 6 7 ;   C h e n   J i y a n g ,   2 0 0 9 ,   I N T   C   A D V   S O C   N E T W   A ;   C h i   Y ,   2 0 0 9 ,   I E E E   T   M U L T I M E D I A ,   V 1 1 ,   P 3 7 2 ,   D O I   1 0 . 1 1 0 9 / T M M . 2 0 0 9 . 2 0 1 2 9 1 2 ;   C l a u s e t   A ,   2 0 0 5 ,   P H Y S   R E V   E ,   V 7 2 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 2 . 0 2 6 1 3 2 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   D a n o n   L ,   2 0 0 5 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 5 / 0 9 / P 0 9 0 0 8 ;   D e a n   J ,   2 0 0 4 ,   U S E N I X   A s s o c i a t i o n   P r o c e e d i n g s   o f   t h e   S i x t h   S y m p o s i u m   o n   O p e r a t i n g   S y s t e m s   D e s i g n   a n d   I m p l e m e n t a t i o n   ( O S D E   ' 0 4 ) ,   P 1 3 7 ;   D h i l l o n   I S ,   2 0 0 7 ,   I E E E   T   P A T T E R N   A N A L ,   V 2 9 ,   P 1 9 4 4 ,   D O I   1 0 . 1 1 0 9 / T P ' A M I . 2 0 0 7 . 1 1 1 5 ;   D j i d j e v   H N ,   2 0 0 8 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 9 3 6 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 5 4 0 - 7 8 8 0 8 - 9 _ 1 1 ;   D o n e t t i   L ,   2 0 0 4 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 4 / 1 0 / P 1 0 0 1 2 ;   D u c h   J ,   2 0 0 5 ,   P H Y S   R E V   E ,   V 7 2 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 2 . 0 2 7 1 0 4 ,   1 0 . 1 1 0 3 / P h y s R e c E . 7 2 . 0 2 7 1 0 4 ] ;   F a l k o w s k i   T ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   I E E E / W I C / A C M   I N T E R N A T I O N A L   C O N F E R E N C E   O N   W E B   I N T E L L I G E N C E ,   P 1 1 2 ,   D O I   1 0 . 1 1 0 9 / W I . 2 0 0 7 . 7 4 ;   F e n n   D ,   2 0 0 9 ,   A R X I V 0 8 1 1 3 9 8 8 ;   F l a k e   G .   W . ,   2 0 0 0 ,   P r o c e e d i n g s .   K D D - 2 0 0 0 .   S i x t h   A C M   S I G K D D   I n t e r n a t i o n a l   C o n f e r e n c e   o n   K n o w l e d g e   D i s c o v e r y   a n d   D a t a   M i n i n g ,   P 1 5 0 ,   D O I   1 0 . 1 1 4 5 / 3 4 7 0 9 0 . 3 4 7 1 2 1 ;   F o r t u n a t o   S ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 7 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 5 6 1 0 4 ;   F o r t u n a t o   S . ,   2 0 0 9 ,   A R X I V 0 9 0 6 0 6 1 2 ;   F o r t u n a t o   S a n t o ,   2 0 0 7 ,   A R X I V 0 7 1 2 2 7 1 6 ;   F o r t u n a t o   S ,   2 0 1 0 ,   P H Y S   R E P ,   V 4 8 6 ,   P 7 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s r e p . 2 0 0 9 . 1 1 . 0 0 2 ;   F r a n k e   M a r k u s ,   2 0 0 9 ,   A d v a n c e s   i n   D a t a   A n a l y s i s   a n d   C l a s s i f i c a t i o n ,   V 3 ,   P 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 6 3 4 - 0 0 9 - 0 0 3 9 - 6 ;   G A L L O   G ,   1 9 8 9 ,   S I A M   J   C O M P U T ,   V 1 8 ,   P 3 0 ,   D O I   1 0 . 1 1 3 7 / 0 2 1 8 0 0 3 ;   G e m m e l l   J . ,   2 0 0 8 ,   L N C S ,   V 5 1 8 2 ,   P 1 9 6 ;   G i b s o n   D . ,   2 0 0 5 ,   P   3 1   I N T   C   V E R   L A R G ,   P 7 2 1 ;   G i r v a n   M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 7 8 2 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 2 2 6 5 3 7 9 9 ;   G j o k a   M . ,   2 0 0 9 ,   A R X I V 0 9 0 6 0 0 6 0 ;   G r e g o r y   S . ,   2 0 0 9 ,   A R X I V 0 9 1 0 5 5 1 6 ;   H a s t i n g s   M B ,   2 0 0 6 ,   P H Y S   R E V   E ,   V 7 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 4 . 0 3 5 1 0 2 ;   H u b l e r   C ,   2 0 0 8 ,   I E E E   D A T A   M I N I N G ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 9 / I C D M . 2 0 0 8 . 1 2 4 ;   H u i   P . ,   2 0 1 0 ,   P   2   A C M   I E E E   I N T   W O R ,   V 1 0 ,   P 1 5 7 6 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 6 6 9 1 9 . 1 3 6 6 9 2 9 ;   I n o   H . ,   2 0 0 5 ,   P   1 4   I N T   C   W O R L D   W I D ,   P 6 6 1 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 0 7 4 5 . 1 0 6 0 8 4 1 ;   J a v a   A ,   2 0 0 8 ,   P   I N T   C   W E B L   S O C   M E D ;   J a v a   A ,   2 0 0 8 ,   P   W E B K D D   2 0 0 8   K D D   W O ;   K a n n a n   R ,   2 0 0 4 ,   J   A C M ,   V 5 1 ,   P 4 9 7 ,   D O I   1 0 . 1 1 4 5 / 9 9 0 3 0 8 . 9 9 0 3 1 3 ;   K a r y p i s   G ,   1 9 9 8 ,   S I A M   J   S C I   C O M P U T ,   V 2 0 ,   P 3 5 9 ,   D O I   1 0 . 1 1 3 7 / S 1 0 6 4 8 2 7 5 9 5 2 8 7 9 9 7 ;   K i m   M . ,   2 0 0 9 ,   P V L D B ,   V 2 ,   P 6 2 2 ;   K o v a c s   I A ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 2 5 2 8 ;   K u m a r   R ,   1 9 9 9 ,   C O M P U T   N E T W ,   V 3 1 ,   P 1 4 8 1 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 9 - 1 2 8 6 ( 9 9 ) 0 0 0 4 0 - 7 ;   R a g h a v a n   P ,   2 0 0 0 ,   A C M   S   P R I N C   D A T   S Y S T ;   L a n c i c h i n e t t i   A ,   2 0 0 9 ,   P H Y S   R E V   E ,   V 8 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 0 . 0 5 6 1 1 7 ;   L a n c i c h i n e t t i   A ,   2 0 0 8 ,   P H Y S   R E V   E ,   V 7 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 8 . 0 4 6 1 1 0 ;   L e s k o v e c   J . ,   2 0 0 8 ,   A R X I V 0 8 1 0 1 3 5 5 ;   L e s k o v e c   J ,   2 0 0 6 ,   P   1 2   A C M   S I G K D D   I N T ,   P 6 3 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 1 5 0 4 0 2 . 1 1 5 0 4 7 9 ;   L e u n g   I X Y ,   2 0 0 9 ,   P H Y S   R E V   E ,   V 7 9 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 9 . 0 6 6 1 0 7 ;   L i   X W ,   2 0 0 8 ,   L E C T   N O T E S   C O M P U T   S C ,   V 5 3 0 2 ,   P 4 2 7 ;   L I N   Y R ,   2 0 0 9 ,   P   1 5   A C M   S I G K D D   I N T ,   P 5 2 7 ,   D O I   1 0 . 1 1 4 5 / 1 5 5 7 0 1 9 . 1 5 5 7 0 8 0 ;   L i n   Y .   R . ,   2 0 0 8 ,   P   1 7   I N T   C   W O R L D   W I D ,   P 6 8 5 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 6 7 4 9 7 . 1 3 6 7 5 9 0 ;   L i n   Y R ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   I E E E / W I C / A C M   I N T E R N A T I O N A L   C O N F E R E N C E   O N   W E B   I N T E L L I G E N C E ,   P 4 8 ,   D O I   1 0 . 1 1 0 9 / W I . 2 0 0 7 . 7 1 ;   L o r r a i n   F . ,   1 9 7 1 ,   J   M A T H   S O C I O L ,   V 1 ,   P 4 9 ,   D O I   [ D O I   1 0 . 1 0 8 0 / 0 0 2 2 2 5 0 X . 1 9 7 1 . 9 9 8 9 7 8 8 ,   1 0 . 1 0 8 0 / 0 0 2 2 2 5 0 X . 1 9 7 1 . 9 9 8 9 7 8 8 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 2 2 5 0 X . 1 9 7 1 . 9 9 8 9 7 8 8 ) ] ;   L u o   F . ,   2 0 0 6 ,   P   2 0 0 6   I E E E   W I C   A C M ,   P 2 3 3 ,   D O I   D O I   1 0 . 1 1 0 9 / W I . 2 0 0 6 . 7 2 ;   M a i y a   A .   S . ,   2 0 1 0 ,   P   1 9   I N T   C   W O R L D   W I D ,   P 7 0 1 ,   D O I   1 0 . 1 1 4 5 / 1 7 7 2 6 9 0 . 1 7 7 2 7 6 2 ;   M a s s e n   C P ,   2 0 0 5 ,   P H Y S   R E V   E ,   V 7 1 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 1 . 0 4 6 1 0 1 ;   M i k a   P . ,   2 0 0 5 ,   P   4   I N T   S E M   W E B   C   I S ,   P 5 2 2 ;   M o e l l i c   P .   A . ,   2 0 0 8 ,   P   2 0 0 8   I N T   C   C O N T   B A ,   P 2 6 9 ,   D O I   1 0 . 1 1 4 5 / 1 3 8 6 3 5 2 . 1 3 8 6 3 9 0 ;   N e w m a n   M E J ,   2 0 0 6 ,   P H Y S   R E V   E ,   V 7 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 4 . 0 3 6 1 0 4 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 7 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 5 6 1 3 1 ;   P a l l a   G ,   2 0 0 5 ,   N A T U R E ,   V 4 3 5 ,   P 8 1 4 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 3 6 0 7 ;   P a l l a   G ,   2 0 0 7 ,   N A T U R E ,   V 4 4 6 ,   P 6 6 4 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 5 6 7 0 ;   P a p a d o p o u l o s   S ,   2 0 1 0 ,   P   D A W A K   1 0   B I L B   S P A I ,   P 6 5 ;   P a p a d o p o u l o s   S ,   2 0 0 9 ,   P   C K C A R   0 9   W O R K S H   C O ;   P a p a d o p o u l o s   S . ,   2 0 0 9 ,   A R X I V 0 9 0 2 0 8 7 1 ;   P a p a d o p o u l o s   S ,   2 0 1 0 ,   B O O K   C O M M U N I T Y   B U I L T ;   P a p a d o p o u l o s   S ,   2 0 1 1 ,   I E E E   M U L T I M E D I A ,   V 1 8 ,   P 5 2 ,   D O I   1 0 . 1 1 0 9 / M M U L . 2 0 1 0 . 6 8 ;   P o n s   P . ,   2 0 0 5 ,   C O M P U T E R   I N F O R M   S C I ;   P o r t e r   M . A . ,   2 0 0 9 ,   N O T   A M   M A T H   S O C ,   V 5 6 ,   P 1 0 8 2 ,   D O I   D O I   1 0 . 1 0 6 3 / 1 . 3 1 9 4 1 0 8 ;   Q u a c k   T . ,   2 0 0 8 ,   P   I N T   C   C O N T   B A S   I M ,   P 4 7 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 8 6 3 5 2 . 1 3 8 6 3 6 3 ;   R a d i c c h i   F ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 2 6 5 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 0 0 5 4 1 0 1 ;   R a g h a v a n   U N ,   2 0 0 7 ,   P H Y S   R E V   E ,   V 7 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 6 . 0 3 6 1 0 6 ;   R e i c h a r d t   J ,   2 0 0 6 ,   P H Y S   R E V   E ,   V 7 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 4 . 0 1 6 1 1 0 ;   R i b e i r o - N e t o   B . ,   2 0 0 5 ,   P   2 8   A N N   I N T   A C M   S I G ,   P 4 9 6 ,   D O I   1 0 . 1 1 4 5 / 1 0 7 6 0 3 4 . 1 0 7 6 1 1 9 ;   R o s v a l l   M ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 1 1 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 6 8 5 1 1 0 5 ;   S a y y a d i   H . ,   2 0 0 9 ,   P   I N T   A A A I   C   W E B L   S O ;   S c h a e f f e r   S E ,   2 0 0 7 ,   C O M P U T E R   S C I   R E V ,   V 1 ,   P 2 7 ,   D O I   D O I   1 0 . 1 0 1 6 / J . C 0 S R E V . 2 0 0 7 . 0 5 . 0 0 1 ;   S c h l i t t e r   N . ,   2 0 0 9 ,   P   I N T   C   A D V   S O C   N E T W ;   S c h m i t z   C ,   2 0 0 6 ,   S T U D   C L A S S   D A T A   A N A L ,   P 2 6 1 ,   D O I   1 0 . 1 0 0 7 / 3 - 5 4 0 - 3 4 4 1 6 - 0 _ 2 8 ;   S c o t t   J ,   2 0 0 0 ,   S O C I A L   N E T W O R K   A N A L ;   S c r i p p s   J . ,   2 0 0 7 ,   P   9   W E B K D D   1   S N A   K D D ,   P 2 6 ,   D O I   1 0 . 1 1 4 5 / 1 3 4 8 5 4 9 . 1 3 4 8 5 5 3 ;   S h i   J B ,   2 0 0 0 ,   I E E E   T   P A T T E R N   A N A L ,   V 2 2 ,   P 8 8 8 ,   D O I   1 0 . 1 1 0 9 / 3 4 . 8 6 8 6 8 8 ;   P e l e g   D . ,   2 0 0 6 ,   P   S O F S E M   2 0 0 6   T H E O R ;   S i m p s o n   E ,   2 0 0 8 ,   H P L 2 0 0 8 1 8 ;   S p e c i a   L ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 5 1 9 ,   P 6 2 4 ;   S u n   J . ,   2 0 0 7 ,   P   1 3   A C M   S I G K D D   I N T ,   P 6 8 7 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 2 8 1 1 9 2 . 1 2 8 1 2 6 6 ;   T a n g   L ,   2 0 1 0 ,   A D V   D A T A B A S E   S Y S T ,   V 4 0 ,   P 4 8 7 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 1 - 4 4 1 9 - 6 0 4 5 - 0 _ 1 6 ;   T s a t s o u   D ,   2 0 1 0 ,   O N L I N E   M U L T I M E D I A   A D ,   P 2 3 3 ;   T y l e r   J R ,   2 0 0 3 ,   C O M M U N I T I E S   A N D   T E C H N O L O G I E S ,   P 8 1 ;   V a n   D o n g e n   S . ,   2 0 0 0 ,   T H E S I S   D U T C H   N A T L   R E ;   v o n   L u x b u r g   U . ,   2 0 0 6 ,   1 4 9   M   P L A N C K   I   B I O L ;   V r a g o v i c   I ,   2 0 0 6 ,   P H Y S   R E V   E ,   V 7 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 4 . 0 1 6 1 0 5 ;   W a n g   Y . ,   2 0 0 8 ,   A R X I V 0 8 0 4 4 3 5 6 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   X u   X . ,   2 0 0 7 ,   P   1 3   A C M   S I G K D D   I N T ,   P 8 2 4 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 2 8 1 1 9 2 . 1 2 8 1 2 8 0 ;   Y a n g   B ,   2 0 0 6 ,   J   C O M P U T   S C I   T E C H - C H ,   V 2 1 ,   P 3 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 3 9 0 - 0 0 6 - 0 3 9 3 - 1 ;   Y a n g   S ,   2 0 0 9 ,   P   I N T   C   D A T   M I N   W O R K ,   P 3 3 2 ;   Y e   S ,   2 0 1 0 ,   P   1 2   I N T   A S   P A C   W E B ;   Y E U N G   C M A ,   2 0 0 9 ,   P   2 0   A C M   C   H Y P   H Y P   H ,   P 2 5 1 ;   Z a k h a r o v   P ,   2 0 0 6 ,   A R X I V P H Y S 0 6 0 2 0 6 3 ;   Z H A N G   Y Z ,   2 0 0 9 ,   P   1 5   A C M   S I G K D D   I N T ,   P 9 9 7 ,   D O I   1 0 . 1 1 4 5 / 1 5 5 7 0 1 9 . 1 5 5 7 1 2 7 ;   Z h a o   Q . ,   2 0 0 7 ,   P   2 2   A A A I   C   A R T   I N T ,   P 1 5 0 1 	 1 1 3 	 8 2 	 8 9 	 6 	 5 4 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 1 3 8 4 - 5 8 1 0 	 1 5 7 3 - 7 5 6 X 	 	 D A T A   M I N   K N O W L   D I S C 	 D a t a   M i n .   K n o w l .   D i s c o v . 	 M A Y 	 2 0 1 2 	 2 4 	 3 	 	 	 S I 	 	 5 1 5 	 5 5 4 	 	 1 0 . 1 0 0 7 / s 1 0 6 1 8 - 0 1 1 - 0 2 2 4 - z 	 	 4 0 	 C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e ;   C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s 	 C o m p u t e r   S c i e n c e 	 9 2 1 L K 	 W O S : 0 0 0 3 0 2 4 7 8 9 0 0 0 0 3 	 	 
 
 J 	 M o e d ,   H F 	 	 	 	 M o e d ,   H e n k   F . 	 	 	 N e w   d e v e l o p m e n t s   i n   t h e   u s e   o f   c i t a t i o n   a n a l y s i s   i n   r e s e a r c h   e v a l u a t i o n 	 A R C H I V U M   I M M U N O L O G I A E   E T   T H E R A P I A E   E X P E R I M E N T A L I S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i m p a c t   f a c t o r ;   H i r s c h   i n d e x ;   c i t a t i o n   a n a l y s i s 	 I M P A C T   F A C T O R S ;   J O U R N A L   I M P A C T ;   O U T P U T ;   I N D E X 	 T h i s   p a p e r   p r e s e n t s   a n   o v e r v i e w   o f   r e s e a r c h   a s s e s s m e n t   m e t h o d o l o g i e s   d e v e l o p e d   i n   t h e   f i e l d   o f   e v a l u a t i v e   b i b l i o m e t r i c s ,   a   s u b f i e l d   o f   q u a n t i t a t i v e   s c i e n c e   a n d   t e c h n o l o g y   s t u d i e s ,   a i m e d   t o   c o n s t r u c t   i n d i c a t o r s   o f   r e s e a r c h   p e r f o r m a n c e   f r o m   a   q u a n t i t a t i v e   s t a t i s t i c a l   a n a l y s i s   o f   s c i e n t i f i c - s c h o l a r l y   d o c u m e n t s .   C i t a t i o n   a n a l y s i s   i s   o n e   o f   i t s   k e y   m e t h o d o l o g i e s .   T h e   p a p e r   i l l u s t r a t e s   t h e   p o t e n t i a l i t i e s   a n d   l i m i t a t i o n s   o f   t h e   u s e   o f   b i b l i o m e t r i c   i n d i c a t o r s   i n   r e s e a r c h   a s s e s s m e n t .   I t   d i s c u s s e s   t h e   r e l a t i o n s h i p   b e t w e e n   m e t r i c s   a n d   p e e r   r e v i e w ;   d a t a b a s e s   u s e d   a s   s o u r c e s   o f   b i b l i o m e t r i c   a n a l y s i s ;   t h e   p r o s   a n d   c o n s   o f   i n d i c a t o r s   o f t e n   a p p l i e d ,   i n c l u d i n g   j o u r n a l   i m p a c t   f a c t o r s ,   H i r s c h   i n d i c e s ,   a n d   n o r m a l i z e d   i n d i c a t o r s   o f   c i t a t i o n   i m p a c t ;   a n d   a p p r o a c h e s   t o   t h e   b i b l i o m e t r i c   m e a s u r e m e n t   o f   i n s t i t u t i o n a l   r e s e a r c h   p e r f o r m a n c e . 	 L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   N L - 2 3 0 0   R A   L e i d e n ,   N e t h e r l a n d s 	 M o e d ,   H F   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   N L - 2 3 0 0   R A   L e i d e n ,   N e t h e r l a n d s . 	 m o e d @ c w t s . l e i d e n u n i v . n l 	 	 	 	 	 B R A U N   T ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 9 5 7 ;   G A R F I E L D   E ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 9 . 6 4 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L O P E Z I L L E S C A S   C ,   2 0 0 9 ,   J   I N F   S C I   I N   P R E S S ;   L O P E Z I L L E S C A S   C ,   2 0 0 9 ,   J   I N F O R M   I N   P R E S S ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M o e d   H .   F . ,   2 0 0 8 ,   A P P R A I S A L   C I T A T I O N   D ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   R e e d i j k   J ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 1 8 3 ,   D O I   [ 1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 5 8 0 0 1 ,   1 0 . 1 1 0 8 / 0 0 2 2 0 1 1 0 8 1 0 8 5 8 0 0 1 ] ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   v a n   R a a n   A F J ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 1 9 ;   V I N K L E R   P ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 3 9 	 1 7 	 8 2 	 9 0 	 5 	 6 5 	 B I R K H A U S E R   V E R L A G   A G 	 B A S E L 	 V I A D U K S T R A S S E   4 0 - 4 4 ,   P O   B O X   1 3 3 ,   C H - 4 0 1 0   B A S E L ,   S W I T Z E R L A N D 	 0 0 0 4 - 0 6 9 X 	 	 	 A R C H   I M M U N O L   T H E R   E X 	 A r c h .   I m m u n o l .   T h e r .   E x p . 	 F E B 	 2 0 0 9 	 5 7 	 1 	 	 	 	 	 1 3 	 1 8 	 	 1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 1 - 5 	 	 6 	 I m m u n o l o g y 	 I m m u n o l o g y 	 4 0 9 N I 	 W O S : 0 0 0 2 6 3 5 1 2 0 0 0 0 0 2 	 1 9 2 1 9 5 3 3 	 
 
 J 	 L a i ,   K K ;   W u ,   S J 	 	 	 	 L a i ,   K K ;   W u ,   S J 	 	 	 U s i n g   t h e   p a t e n t   c o - c i t a t i o n   a p p r o a c h   t o   e s t a b l i s h   a   n e w   p a t e n t   c l a s s i f i c a t i o n   s y s t e m 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 p a t e n t   m a n a g e m e n t ;   p a t e n t   c l a s s i f i c a t i o n   s y s t e m ;   c o - c i t a t i o n ;   b i b l i o m e t r i c s 	 I N T E L L E C T U A L   S T R U C T U R E ;   A U T H O R   C O C I T A T I O N 	 T h e   p a p e r   p r o p o s e s   a   n e w   a p p r o a c h   t o   c r e a t e   a   p a t e n t   c l a s s i f i c a t i o n   s y s t e m   t o   r e p l a c e   t h e   I P C   o r   U P C   s y s t e m   f o r   c o n d u c t i n g   p a t e n t   a n a l y s i s   a n d   m a n a g e m e n t .   T h e   n e w   a p p r o a c h   i s   b a s e d   o n   c o - c i t a t i o n   a n a l y s i s   o f   b i b l i o m e t r i c s .   T h e   t r a d i t i o n a l   a p p r o a c h   f o r   m a n a g e m e n t   o f   p a t e n t s ,   w h i c h   i s   b a s e d   o n   e i t h e r   t h e   I P C   o r   U P C ,   i s   t o o   g e n e r a l   t o   m e e t   t h e   n e e d s   o f   s p e c i f i c   i n d u s t r i e s .   I n   a d d i t i o n ,   s o m e   p a t e n t s   a r e   p l a c e d   i n   i n c o r r e c t   c a t e g o r i e s ,   m a k i n g   i t   d i f f i c u l t   f o r   e n t e r p r i s e s   t o   c a r r y   o u t   R & D   p l a n n i n g ,   t e c h n o l o g y   p o s i t i o n i n g ,   p a t e n t   s t r a t e g y - m a k i n g   a n d   t e c h n o l o g y   f o r e c a s t i n g .   T h e r e f o r e ,   i t   i s   e s s e n t i a l   t o   d e v e l o p   a   p a t e n t   c l a s s i f i c a t i o n   s y s t e m   t h a t   i s   a d a p t i v e   t o   t h e   c h a r a c t e r i s t i c s   o f   a   s p e c i f i c   i n d u s t r y .   T h e   a n a l y s i s   o f   t h i s   a p p r o a c h   i s   d i v i d e d   i n t o   t h r e e   p h a s e s .   P h a s e   I   s e l e c t s   a p p r o p r i a t e   d a t a b a s e s   t o   c o n d u c t   p a t e n t   s e a r c h e s   a c c o r d i n g   t o   t h e   s u b j e c t   a n d   o b j e c t i v e   o f   t h i s   s t u d y   a n d   t h e n   s e l e c t   b a s i c   p a t e n t s .   P h a s e   I I   u s e s   t h e   c o - c i t e d   f r e q u e n c y   o f   t h e   b a s i c   p a t e n t   p a i r s   t o   a s s e s s   t h e i r   s i m i l a r i t y .   P h a s e   I I I   u s e s   f a c t o r   a n a l y s i s   t o   e s t a b l i s h   a   c l a s s i f i c a t i o n   s y s t e m   a n d   a s s e s s   t h e   e f f i c i e n c y   o f   t h e   p r o p o s e d   a p p r o a c h .   T h e   m a i n   c o n t r i b u t i o n   o f   t h i s   a p p r o a c h   i s   t o   d e v e l o p   a   p a t e n t   c l a s s i f i c a t i o n   s y s t e m   b a s e d   o n   p a t e n t   s i m i l a r i t i e s   t o   a s s i s t   p a t e n t   m a n a g e r   i n   u n d e r s t a n d i n g   t h e   b a s i c   p a t e n t s   f o r   a   s p e c i f i c   i n d u s t r y ,   t h e   r e l a t i o n s h i p s   a m o n g   c a t e g o r i e s   o f   t e c h n o l o g i e s   a n d   t h e   e v o l u t i o n   o f   a   t e c h n o l o g y   c a t e g o r y .   ( C )   2 0 0 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 N a t l   Y u n l i n   U n i v   S c i   &   T e c h n o l ,   D e p t   B u s i n e s s   A d m ,   T o u l i u   6 4 0 ,   Y u n l i n ,   T a i w a n ;   N a t l   Y u n l i n   U n i v   S c i   &   T e c h n o l ,   G r a d   S c h   M a n a g e m e n t ,   Y u n l i n ,   T a i w a n 	 N a t l   Y u n l i n   U n i v   S c i   &   T e c h n o l ,   D e p t   B u s i n e s s   A d m ,   T o u l i u   6 4 0 ,   Y u n l i n ,   T a i w a n . 	 l a i k k @ y u n t e c h . e d u . t w 	 	 	 	 	 A k i n   L ,   1 9 9 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 9 8 ) 9 0 0 4 3 - 3 ;   A r c h i b u g i   D ,   1 9 9 6 ,   T E C H N O V A T I O N ,   V 1 6 ,   P 4 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 4 9 7 2 ( 9 6 ) 0 0 0 3 1 - 4 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   D a s g u p t a   P . ,   1 9 8 7 ,   A R R O W   A S C E N T   M O D E R N ;   E o m   S B ,   1 9 9 6 ,   D E C I S   S U P P O R T   S Y S T ,   V 1 6 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 5 ) 0 0 0 2 6 - 7 ;   E r n s t   H ,   1 9 9 7 ,   S M A L L   B U S   E C O N ,   V 9 ,   P 3 6 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 9 2 1 8 0 8 1 3 8 ;   H A L L   B H ,   2 0 0 0 ,   W 7 4 3 5   N B E R ;   H a r h o f f   D ,   1 9 9 9 ,   R E V   E C O N   S T A T ,   V 8 1 ,   P 5 1 1 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 9 5 5 8 2 6 5 ;   H A Y E S   R M ,   1 9 8 3 ,   J   E D U C   L I B R A R I A N S H I P ,   V 2 3 ,   P 1 5 1 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 2 8 8 0 ;   H e   Y L ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   H O L S A P P L E   C W ,   1 9 9 5 ,   D E C I S   S U P P O R T   S Y S T ,   V 1 4 ,   P 3 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 4 ) 0 0 0 2 2 - K ;   H u f k e r   T . ,   1 9 9 4 ,   J   P R O D U C T   B R A N D   M A N A ,   V 3 ,   P 4 4 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 1 0 4 2 9 4 1 0 0 7 3 1 3 8 ;   K E S S L E R   M M ,   1 9 6 3 ,   I E E E   T   I N F O R M A T I O N   T ,   V 4 9 ;   M C C A I N   K W ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 9 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M O G E E   M E ,   1 9 9 7 ,   T E C H N   T R A N S F   S O C   A N N ;   N A R I N   F ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 8 - X ;   R I V I T T E   K R ,   2 0 0 0 ,   R E M N A N T S   A T T I C   U N L O C ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S t u a r t   T E ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 2 1 ;   T R A J T E N B E R G   M ,   1 9 9 0 ,   R A N D   J   E C O N ,   V 2 1 ,   P 1 7 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 5 0 2 ;   * U S P T O ,   2 0 0 1 ,   M A N   P A T   E X   P R O C     A U G ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 	 2 6 	 8 2 	 8 7 	 6 	 7 0 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 1 8 7 3 - 5 3 7 1 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 M A R 	 2 0 0 5 	 4 1 	 2 	 	 	 	 	 3 1 3 	 3 3 0 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 3 . 1 1 . 0 0 4 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 7 4 A K 	 W O S : 0 0 0 2 2 5 3 2 3 1 0 0 0 0 9 	 	 
 
 J 	 K o s t o f f ,   R N ;   S t u m p ,   J A ;   J o h n s o n ,   D ;   M u r d a y ,   J S ;   L a u ,   C G Y ;   T o l l e s ,   W M 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   S t u m p ,   J e s s e   A . ;   J o h n s o n ,   D u s t i n ;   M u r d a y ,   J a m e s   S . ;   L a u ,   C l i f f o r d   G .   Y . ;   T o l l e s ,   W i l l i a m   M . 	 	 	 T h e   s t r u c t u r e   a n d   i n f r a s t r u c t u r e   o f   t h e   g l o b a l   n a n o t e c h n o l o g y   l i t e r a t u r e 	 J O U R N A L   O F   N A N O P A R T I C L E   R E S E A R C H 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 n a n o t e c h n o l o g y ;   n a n o s c i e n c e ;   n a n o m a t e r i a l s ;   n a n o p a r t i c l e s ;   n a n o t u b e s ;   n a n o s t r u c t u r e s ;   n a n o c o m p o s i t e s ;   n a n o w i r e s ;   n a n o c r y s t a l s ;   n a n o f a b r i c a t i o n ;   n a n o l i t h o g r a p h y ;   q u a n t u m   d o t s ;   s e l f - a s s e m b l y ;   t e x t   m i n i n g ;   c o m p u t a t i o n a l   l i n g u i s t i c s ;   b i b l i o m e t r i c s 	 D A T A B A S E   T O M O G R A P H Y ;   B I B L I O M E T R I C S ;   I N F O R M A T I O N ;   S C I E N C E ;   I M P A C T 	 T e x t   m i n i n g   i s   t h e   e x t r a c t i o n   o f   u s e f u l   i n f o r m a t i o n   f r o m   l a r g e   v o l u m e s   o f   t e x t .   A   t e x t   m i n i n g   a n a l y s i s   o f   t h e   g l o b a l   o p e n   n a n o t e c h n o l o g y   l i t e r a t u r e   w a s   p e r f o r m e d .   R e c o r d s   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I ) / S o c i a l   S C I   w e r e   a n a l y z e d   t o   p r o v i d e   t h e   i n f r a s t r u c t u r e   o f   t h e   g l o b a l   n a n o t e c h n o l o g y   l i t e r a t u r e   ( p r o l i f i c   a u t h o r s / j o u r n a l s / i n s t i t u t i o n s / c o u n t r i e s ,   m o s t   c i t e d   a u t h o r s / p a p e r s / j o u r n a l s )   a n d   t h e   t h e m a t i c   s t r u c t u r e   ( t a x o n o m y )   o f   t h e   g l o b a l   n a n o t e c h n o l o g y   l i t e r a t u r e ,   f r o m   a   s c i e n c e   p e r s p e c t i v e .   R e c o r d s   f r o m   t h e   E n g i n e e r i n g   C o m p e n d e x   ( E C )   w e r e   a n a l y z e d   t o   p r o v i d e   a   t a x o n o m y   f r o m   a   t e c h n o l o g y   p e r s p e c t i v e .   T h e   F a r   E a s t e r n   c o u n t r i e s   h a v e   e x p a n d e d   n a n o t e c h n o l o g y   p u b l i c a t i o n   o u t p u t   d r a m a t i c a l l y   i n   t h e   p a s t   d e c a d e .   T h e   P e o p l e s   R e p u b l i c   o f   C h i n a   r a n k s   s e c o n d   t o   t h e   U S A   ( 2 0 0 4   r e s u l t s )   i n   n a n o t e c h n o l o g y   p a p e r s   p u b l i s h e d   i n   t h e   S C I ,   a n d   h a s   i n c r e a s e d   i t s   n a n o t e c h n o l o g y   p u b l i c a t i o n   o u t p u t   b y   a   f a c t o r   o f   2 1   i n   a   d e c a d e .   O f   t h e   s i x   m o s t   p r o l i f i c   ( p u b l i c a t i o n s )   n a n o t e c h n o l o g y   c o u n t r i e s ,   t h e   t h r e e   f r o m   t h e   W e s t e r n   g r o u p   ( U S A ,   G e r m a n y ,   F r a n c e )   h a v e   a b o u t   e i g h t   p e r c e n t   m o r e   n a n o t e c h n o l o g y   p u b l i c a t i o n s   ( f o r   2 0 0 4 )   t h a n   t h e   t h r e e   f r o m   t h e   F a r   E a s t e r n   g r o u p   ( C h i n a ,   J a p a n ,   S o u t h   K o r e a ) .   W h i l e   m o s t   o f   t h e   h i g h   n a n o t e c h n o l o g y   p u b l i c a t i o n - p r o d u c i n g   c o u n t r i e s   a r e   a l s o   h i g h   n a n o t e c h n o l o g y   p a t e n t   p r o d u c e r s   i n   t h e   U S   P a t e n t   O f f i c e   ( a s   o f   2 0 0 3 ) ,   C h i n a   i s   a   m a j o r   e x c e p t i o n .   C h i n a   r a n k s   2 0 t h   a s   a   n a n o t e c h n o l o g y   p a t e n t - p r o d u c i n g   c o u n t r y   i n   t h e   U S   P a t e n t   O f f i c e . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   N o r t h r o p   G r u m m a n   T A S C ,   F a i r f a x ,   V A   2 2 0 3 3   U S A ;   U S N ,   D i v   C h e m ,   R e s   L a b ,   W a s h i n g t o n ,   D C   2 0 3 7 5   U S A ;   I n s t   D e f   A n a l ,   A l e x a n d r i a ,   V A   2 2 3 1 1   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 B H U S H A N   B ,   2 0 0 1 ,   S P R I N G E R   H D B   N A N O T E C ;   C o l t o n   R J ,   2 0 0 4 ,   J   V A C   S C I   T E C H N O L   B ,   V 2 2 ,   P 1 6 0 9 ,   D O I   1 0 . 1 1 1 6 / 1 . 1 7 6 0 7 5 4 ;   D a v i d s e   R J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 3 6 ;   D o w l i n g   A . ,   2 0 0 4 ,   N A N O S C I E N C E   N A N O T E C H ;   F r e i t a s   R A ,   1 9 9 9 ,   N A N O M E D I C I N E ,   V I ;   F R E I T A S   R A ,   2 0 0 3 ,   N A N O M E D I C I N E   A ,   V 2 ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   G o d d a r d   W . A . ,   2 0 0 2 ,   H D B   N A N O S C I E N C E   E N G ;   G o l d m a n   J A ,   1 9 9 9 ,   M E T H O D   I N F O R M   M E D ,   V 3 8 ,   P 9 6 ;   G o r d o n   J S ,   1 9 9 8 ,   A M   H E R I T A G E ,   V 4 9 ,   P 8 ;   G r e e n g r a s s   E . ,   1 9 9 7 ,   T R R 5 2 0 2 9 6   N A T   S E C   A G ;   H e a r s t   M A ,   1 9 9 9 ,   P   A C L   9 9   3 7   A N N   M   A S ;   H u a n g   Z ,   2 0 0 4 ,   J   N A N O P A R T   R E S ,   V 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 4 - 4 1 1 7 - 6 ;   K A R Y P I S   G ,   2 0 0 5 ,   C L U T O   C L U S T E R I N G   T O O ;   K o s t o f f   R N ,   2 0 0 4 ,   I N T   J   B I F U R C A T   C H A O S ,   V 1 4 ,   P 6 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 1 2 7 4 0 4 0 0 9 0 8 9 ;   K o s t o f f   R N ,   2 0 0 4 ,   F R A C T A L S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 ;   K o s t o f f   R N ,   2 0 0 3 ,   M E D   H Y P O T H E S E S ,   V 6 1 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 9 8 7 7 ( 0 3 ) 0 0 1 6 7 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R . N . ,   2 0 0 3 ,   I N T   H D B   I N N O V A T I O N ,   P 3 8 8 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 0 8 0 4 4 1 9 8 - 6 / 5 0 0 2 7 - 9 ;   K O S T O F F   R N ,   2 0 0 5 ,   A D A 4 3 5 9 8 4   D E F   T E C H N ;   K O S T O F F   R N ,   2 0 0 3 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 4 ,   P 2 7 8 9 ;   K o s t o f f   R . N . ,   2 0 0 5 ,   A D A 4 3 5 9 8 6   D T I C ;   K O S T O F F   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 ;   K O S T O F F   R N ,   2 0 0 5 ,   A D A 7 3 0 7 2 0   D E F   T E C H N ;   K r i c k a   L J ,   2 0 0 2 ,   C L I N   C H E M ,   V 4 8 ,   P 6 6 2 ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   M a c R o b e r t s   M .   H . ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N A R I N   F ,   1 9 7 6 ,   C 6 2 7   N S F ;   S C H U B E R T   A ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 4 ;   * S C I ,   2 0 0 5 ,   S C I   C I T   I N D ;   S i m o n   J ,   2 0 0 5 ,   C R   C H I M ,   V 8 ,   P 8 9 3 ,   D O I   1 0 . 1 0 1 6 / j . c r c i . 2 0 0 5 . 0 1 . 0 0 6 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T I V E S   B I O L   M E ,   V 3 0 ,   P 1 ;   * T R E C ,   2 0 0 4 ,   T E X T   R E T R   C ;   V i a t o r   J A ,   2 0 0 1 ,   J   A C O U S T   S O C   A M ,   V 1 0 9 ,   P 1 7 7 9 ,   D O I   1 0 . 1 1 2 1 / 1 . 1 3 6 6 7 1 1 ;   W i n k m a n n   G ,   2 0 0 2 ,   K L I N   M O N A T S B L   A U G E N H ,   V 2 1 9 ,   P 7 2 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 2 - 2 3 5 0 5 ;   Z h a o   Y ,   2 0 0 4 ,   M A C H   L E A R N ,   V 5 5 ,   P 3 1 1 ,   D O I   1 0 . 1 0 2 3 / B : M A C H . 0 0 0 0 0 2 7 7 8 5 . 4 4 5 2 7 . d 6 ;   Z h u   D H ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 5 7 - 3 	 4 1 	 8 0 	 8 3 	 0 	 3 1 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 1 3 8 8 - 0 7 6 4 	 	 	 J   N A N O P A R T   R E S 	 J .   N a n o p a r t .   R e s . 	 A U G 	 2 0 0 6 	 8 	 3 - 4 	 	 	 	 	 3 0 1 	 3 2 1 	 	 1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 	 	 2 1 	 C h e m i s t r y ,   M u l t i d i s c i p l i n a r y ;   N a n o s c i e n c e   &   N a n o t e c h n o l o g y ;   M a t e r i a l s   S c i e n c e ,   M u l t i d i s c i p l i n a r y 	 C h e m i s t r y ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   M a t e r i a l s   S c i e n c e 	 0 7 4 L E 	 W O S : 0 0 0 2 3 9 8 1 2 9 0 0 0 0 2 	 	 
 
 J 	 L o s i e w i c z ,   P ;   O a r d ,   D W ;   K o s t o f f ,   R N 	 	 	 	 L o s i e w i c z ,   P ;   O a r d ,   D W ;   K o s t o f f ,   R N 	 	 	 T e x t u a l   d a t a   m i n i n g   t o   s u p p o r t   s c i e n c e   a n d   t e c h n o l o g y   m a n a g e m e n t 	 J O U R N A L   O F   I N T E L L I G E N T   I N F O R M A T I O N   S Y S T E M S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t e x t   d a t a   m i n i n g ;   i n f o r m a t i o n   r e t r i e v a l ;   k n o w l e d g e   d i s c o v e r y   i n   d a t a b a s e s ;   b i b l i o m e t r i c s ;   c o m p u t a t i o n a l   l i n g u i s t i c s 	 	 T h i s   p a p e r   s u r v e y s   a p p l i c a t i o n s   o f   d a t a   m i n i n g   t e c h n i q u e s   t o   l a r g e   t e x t   c o l l e c t i o n s ,   a n d   i l l u s t r a t e s   h o w   t h o s e   t e c h n i q u e s   c a n   b e   u s e d   t o   s u p p o r t   t h e   m a n a g e m e n t   o f   s c i e n c e   a n d   t e c h n o l o g y   r e s e a r c h .   S p e c i f i c   i s s u e s   t h a t   a r i s e   r e p e a t e d l y   i n   t h e   c o n d u c t   o f   r e s e a r c h   m a n a g e m e n t   a r e   d e s c r i b e d ,   a n d   a   t e x t u a l   d a t a   m i n i n g   a r c h i t e c t u r e   t h a t   e x t e n d s   a   c l a s s i c   p a r a d i g m   f o r   k n o w l e d g e   d i s c o v e r y   i n   d a t a b a s e s   i s   i n t r o d u c e d .   T h a t   a r c h i t e c t u r e   i n t e g r a t e s   i n f o r m a t i o n   r e t r i e v a l   f r o m   t e x t   c o l l e c t i o n s ,   i n f o r m a t i o n   e x t r a c t i o n   t o   o b t a i n   d a t a   f r o m   i n d i v i d u a l   t e x t s ,   d a t a   w a r e h o u s i n g   f o r   t h e   e x t r a c t e d   d a t a ,   d a t a   m i n i n g   t o   d i s c o v e r   u s e f u l   p a t t e r n s   i n   t h e   d a t a ,   a n d   v i s u a l i z a t i o n   o f   t h e   r e s u l t i n g   p a t t e r n s .   A t   t h e   c o r e   o f   t h i s   a r c h i t e c t u r e   i s   a   b r o a d   v i e w   o f   d a t a   m i n i n g - t h e   p r o c e s s   o f   d i s c o v e r i n g   p a t t e r n s   i n   l a r g e   c o l l e c t i o n s   o f   d a t a - a n d   t h a t   s t e p   i s   d e s c r i b e d   i n   s o m e   d e t a i l .   T h e   f i n a l   s e c t i o n   o f   t h e   p a p e r   i l l u s t r a t e s   h o w   t h e s e   i d e a s   c a n   b e   a p p l i e d   i n   p r a c t i c e ,   d r a w i n g   u p o n   e x a m p l e s   f r o m   t h e   r e c e n t l y   c o m p l e t e d   f i r s t   p h a s e   o f   t h e   t e x t u a l   d a t a   m i n i n g   p r o g r a m   a t   t h e   O f f i c e   o f   N a v a l   R e s e a r c h .   T h e   p a p e r   c o n c l u d e s   b y   i d e n t i f y i n g   s o m e   r e s e a r c h   d i r e c t i o n s   t h a t   o f f e r   s i g n i f i c a n t   p o t e n t i a l   f o r   i m p r o v i n g   t h e   u t i l i t y   o f   t e x t u a l   d a t a   m i n i n g   f o r   r e s e a r c h   m a n a g e m e n t   a p p l i c a t i o n s . 	 A C S   D e f   I n c ,   R o m e ,   N Y   U S A ;   U n i v   M a r y l a n d ,   C o l l   L i b   &   I n f o r m a t   S e r v ,   C o l l e g e   P k ,   M D   2 0 7 4 2   U S A ;   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A 	 L o s i e w i c z ,   P   ( r e p r i n t   a u t h o r ) ,   A C S   D e f   I n c ,   R o m e ,   N Y   U S A . 	 l o s i e w i c z p @ r l . a f . m i l ;   o a r d @ g l u e . u m d . e d u ;   k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 A P T E   C ,   1 9 9 7 ,   I E E E   C O M P U T A T I O N A L   S ,   P 4 ;   C A L I F F   M E ,   1 9 9 7 ,   W O R K S H   N O T   I J C A I   9 7 ,   P 7 ;   C h e n   H C ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 8 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 7 < 5 8 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - V ;   C O S T   S ,   1 9 9 3 ,   M A C H   L E A R N ,   V 1 0 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 9 9 3 4 8 1 ;   D O E R M A N N   D ,   1 9 9 8 ,   C M P U T E R   V I S I O N   I M A G E ;   F a y y a d   U ,   1 9 9 6 ,   A I   M A G ,   V 1 7 ,   P 3 7 ;   F O O T E   J ,   I N   P R E S S   A C M   S P R I N G E ;   F R E E M A N   L C ,   1 9 9 7 ,   U S I N G   A V A I L A B L E   G R A P ;   G A L L I P P I   A ,   1 9 9 6 ,   T H E S I S   U   S O   C A L I F O R N ;   G E Y   F ,   1 9 9 9 ,   3   I E E E   M E T   C   B E T H   M D ;   G I L M A N   M ,   1 9 8 8 ,   N U G G E T S   D A T A   M I N I N G ;   H A V L A   M M K ,   1 9 9 7 ,   S   C R O S S   L A N G   T E X T   S P ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K O S T O F F   R N ,   1 9 9 1 ,   P   P O R T L   I N T   C   M A N   E N ;   K O S T O F F   R N ,   1 9 9 2 ,   P   3   I N T   C   M A N   T E C H N ;   K O S T O F F   R N ,   1 9 9 3 ,   C O M P E T I T I V E   I N T E L L I G ,   V 4 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 1 ;   L a w r e n c e   S ,   1 9 9 9 ,   C O M P U T E R ,   V 3 2 ,   P 6 7 ,   D O I   1 0 . 1 1 0 9 / 2 . 7 6 9 4 4 7 ;   M c C u l l o c h   W .   S . ,   1 9 8 8 ,   N E U R O C O M P U T I N G   F D N   R ;   O a r d   D .   W . ,   1 9 9 8 ,   A A A I   W O R K S H   R E C   S Y S T ;   R i l o f f   E . ,   1 9 9 8 ,   P   6   W O R K S H   V E R   L A R G ;   R O H R E R   R M ,   1 9 9 8 ,   4   I E E E   S   I N F   V I S   D U R ;   S E L D E N   C R ,   1 9 9 6 ,   9 6 8   N A T   L I B R   M E D ;   S h e t h   B .   D . ,   1 9 9 4 ,   T H E S I S   M I T ;   W e s t p h a l   C . ,   1 9 9 8 ,   D A T A   M I N I N G   S O L U T I O N ;   W H I T E   A P ,   1 9 9 4 ,   M A C H   L E A R N ,   V 1 5 ,   P 3 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 6 9 4 0 1 0 7 5 4 ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 3 0 	 8 0 	 8 2 	 2 	 2 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 9 2 5 - 9 9 0 2 	 	 	 J   I N T E L L   I N F   S Y S T 	 J .   I n t e l l .   I n f .   S y s t . 	 S E P 	 2 0 0 0 	 1 5 	 2 	 	 	 	 	 9 9 	 1 1 9 	 	 1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e ;   C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s 	 C o m p u t e r   S c i e n c e 	 3 3 3 G P 	 W O S : 0 0 0 0 8 8 1 2 2 5 0 0 0 0 1 	 	 
 
 J 	 L I U ,   M X 	 	 	 	 L I U ,   M X 	 	 	 P R O G R E S S   I N   D O C U M E N T A T I O N   -   T H E   C O M P L E X I T I E S   O F   C I T A T I O N   P R A C T I C E   -   A   R E V I E W   O F   C I T A T I O N   S T U D I E S 	 J O U R N A L   O F   D O C U M E N T A T I O N 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 C O N T E X T   A N A L Y S I S ;   S O C I A L - S C I E N C E S ;   B I B L I O G R A P H I C   C I T A T I O N S ;   L I T E R A R Y   M O N O G R A P H S ;   C I T E R   M O T I V A T I O N S ;   B E H A V I O R ;   P A T T E R N S ;   C L A S S I F I C A T I O N ;   B I B L I O M E T R I C S ;   L I T E R A T U R E S 	 T h e   u s e   o f   b i b l i o g r a p h i c   c i t a t i o n   i s   a   c r u c i a l   a s p e c t   i n   t h e   c r e a t i o n   a n d   d i s s e m i n a t i o n   o f   i n f o r m a t i o n .   N u m e r o u s   s t u d i e s   h a v e   b e e n   d o n e   r a n g i n g   f r o m   s i m p l e   c i t a t i o n   c o u n t s   t o   m o r e   c o m p l e x   b i b l i o g r a p h i c   c o u p l i n g   s t u d i e s ,   a n d   f r o m   c i t a t i o n   c l a s s i f i c a t i o n s   t o   c i t a t i o n   m o t i v a t i o n   s t u d i e s .   T h i s   r e v i e w   f o c u s s e s   o n   t h e   c i t a t i o n   s t u d i e s   t h a t   h a v e   e x p l o r e d   t h e   c o m p l e x i t i e s   a n d   t h e   u n d e r l y i n g   n o r m s   o f   t h e   c i t a t i o n   p r o c e s s .   T h e   m a j o r   e m p h a s i s   i s   p l a c e d   u p o n   t h e   s t u d i e s   w h i c h   h a v e   d e a l t   w i t h   c i t a t i o n   f u n c t i o n s ,   c i t a t i o n   q u a l i t y ,   c i t a t i o n   c o n c e p t s   a n d   c i t a t i o n   m o t i v a t i o n .   T h e   i n t e r n a t i o n a l   p e r s p e c t i v e s   o f   c i t a t i o n   p r a c t i c e   a r e   a l s o   d i s c u s s e d . 	 	 L I U ,   M X   ( r e p r i n t   a u t h o r ) ,   S A N   J O S E   S T A T E   U N I V , C L A R K   L I B , 1   W A S H I N G T O N   S Q , S A N   J O S E , C A   9 5 1 9 2 ,   U S A . 	 	 	 	 	 	 A L L E N   T J ,   1 9 7 0 ,   T E C H N O L O G Y   T R A N S F E R ;   A R U N A C H A L A M   S ,   1 9 8 1 ,   J   I N F O R M   S C I ,   V 3 ,   P 1 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 1 0 0 3 0 0 1 0 3 ;   A R U N A C H A L A M   S ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 0 ,   P 1 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 0 0 0 4 0 5 ;   B A V E L A S   J B ,   1 9 7 8 ,   C A N   P S Y C H O L   R E V ,   V 1 9 ,   P 1 5 8 ,   D O I   1 0 . 1 0 3 7 / h 0 0 8 1 4 7 2 ;   B e n s m a n   S .   J . ,   1 9 8 2 ,   L I B R   R E S ,   V 4 ,   P 2 7 9 ;   B O N Z I   S ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 7 1 ;   B O N Z I   S ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 0 8 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B O T T L E   R T ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 1 0 9 ;   B R O A D U S   R N ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 6 ;   B R O O K S   T A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 4 ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 4 0 2 ;   B R O O K S   T A ,   1 9 8 8 ,   E N C Y   L I B   I N F O R M A T   S 8 ,   V 4 3 ,   P 4 8 ;   B y n u m   J . E . ,   1 9 8 4 ,   F R E E   I N Q U I R Y   C R E A T I V ,   V 1 2 ,   P 9 5 ;   C A N O   V ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 8 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 8 4 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - Z ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C L A R K   K E ,   1 9 5 7 ,   P S Y C H O L   S U R V E Y   G R O W I ;   C O L E   J ,   1 9 7 1 ,   A M   S O C I O L ,   V 6 ,   P 2 3 ;   C o l e   S ,   1 9 7 5 ,   I D E A   S O C I A L   S T R U C T U R ,   P 1 7 5 ;   C O Z Z E N S   S E ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 3 3 ;   C O Z Z E N S   S E ,   1 9 8 5 ,   S O C   S T U D   S C I ,   V 1 5 ,   P 1 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 5 0 1 5 0 0 1 0 0 5 ;   C o z z e n s   S .   E . ,   1 9 8 9 ,   S O C I A L   C O N T R O L   M U L T I ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   C R O N I N   B ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 3 ;   C R O N I N   B ,   1 9 8 2 ,   S O C   S C I   I N F O R M   S T U D ,   V 2 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 2 ) 9 0 0 0 1 - 1 ;   C R O N I N   B ,   1 9 8 1 ,   J   I N F O R M   S C I ,   V 3 ,   P 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 1 0 0 3 0 0 1 0 4 ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   C U L L A R S   J ,   1 9 8 9 ,   L I B R   Q U A R T ,   V 5 9 ,   P 3 0 5 ;   C U L L A R S   J ,   1 9 9 0 ,   L I B R   Q U A R T ,   V 6 0 ,   P 3 3 7 ;   D A V I E S   D ,   1 9 7 0 ,   N A T U R E ,   V 2 2 8 ,   P 1 3 5 6 ,   D O I   1 0 . 1 0 3 8 / 2 2 8 1 3 5 6 b 0 ;   D E L A M O N T   S ,   1 9 8 9 ,   S O C I O L   R E V ,   V 3 7 ,   P 3 3 2 ;   D O L M A N   H ,   1 9 8 5 ,   S O C   S T U D   S C I ,   V 1 5 ,   P 5 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 5 0 1 5 0 0 3 0 0 5 ;   D u n c a n   E . B . ,   1 9 8 1 ,   I N F O R M A T I O N   R E T R I E V A ,   P 7 0 ;   F i n n e y   B . ,   1 9 7 9 ,   T H E S I S   C I T Y   U   L O N D O N ;   F R O S T   C O ,   1 9 8 9 ,   L I B R   R E S O U R   T E C H   S E R ,   V 3 3 ,   P 3 4 4 ;   F R O S T   C O ,   1 9 7 9 ,   L I B   Q ,   V 4 9 ,   P 3 3 9 ;   G A R F I E L D   E ,   1 9 8 9 ,   C U R R   C O N T E N T S ,   V 1 8 ,   P 3 ;   G A R F I E L D   E ,   1 9 9 0 ,   A N N   A M   A C A D   P O L I T   S S ,   V 5 1 1 ,   P 1 0 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 2 7 1 6 2 9 0 5 1 1 0 0 1 0 0 2 ;   G A R F I E L D   E ,   1 9 8 4 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 7 ,   P 2 5 3 ;   G A R F I E L D   E ,   1 9 8 9 ,   L I F E   S C I ,   V 3 2 ,   P 1 3 ;   G a r f i e l d   E . ,   1 9 8 0 ,   T   N E W   Y O R K   A C A D   S C I ,   V 3 9 ,   P 6 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 3 ;   G e l l e r   N .   L . ,   1 9 7 8 ,   S O C   S C I   R E S ,   V 7 ,   P 3 4 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 9 - 0 8 9 X ( 7 8 ) 9 0 0 1 8 - 2 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G O R D O N   M D ,   1 9 7 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 0 ,   P 3 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 0 0 6 0 7 ;   H E R L A C H   G ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 3 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 6 0 8 ;   H o d g e s   T . ,   1 9 7 8 ,   T H E S I S   U   C A L I F O R N I A ;   H O O T E N   P A ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 7 ) 4 2 : 6 < 3 9 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - N ;   H U R T   C D ,   1 9 8 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 7 ) 9 0 0 3 3 - 1 ;   H U R T   C D ,   1 9 8 5 ,   L I B R   I N F O R M   S C I   R E S ,   V 7 ,   P 3 4 5 ;   I T Z C H A K Y   M ,   1 9 7 9 ,   T H E S I S   R U T G E R S   U ;   K A P L A N   N ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 1 7 8 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K O C H E N   M ,   1 9 7 4 ,   P R I N C I P L E S   I N F O R M A T I ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   L A N C A S T E R   F   W ,   1 9 8 2 ,   C i e n c i a   e   C u l t u r a   ( S a o   P a u l o ) ,   V 3 4 ,   P 6 2 7 ;   L A N C A S T E R   F W ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 7 3 ;   L A N C A S T E R   F W ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 2 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 3 5 0 ;   L A T O U R   B ,   1 9 7 9 ,   L A B O R A T O R Y   L I F E   S O C I ;   L A W A N I   S M ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 1 0 9 ;   L I N D S E Y   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 2 ;   L I P E T Z   B A ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 2 0 7 ;   L I U   M ,   1 9 9 2 ,   6 T H   P   N A T   C   A S S   C O L L ,   P 3 4 0 ;   L I U   M ,   1 9 9 3 ,   J   L I B R A R Y   I N F O R M A T I O ,   V 1 9 ,   P 1 ;   L I U   M X ,   1 9 9 3 ,   J   I N F O R M   S C I ,   V 1 9 ,   P 1 3 ;   M A C R O B E R T S   M H ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 4 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 1 1 ) 3 9 : 6 < 4 3 2 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 2 ;   M A C R O B E R T S   M H ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 3 0 5 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - I ;   M A C R O B E R T S   M H ,   1 9 8 6 ,   S O C   S T U D   S C I ,   V 1 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 6 0 1 6 0 0 1 0 0 8 ;   M A C R O B E R T S   M H ,   1 9 8 4 ,   S O C   S T U D   S C I ,   V 1 4 ,   P 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 4 0 1 4 0 0 1 0 0 6 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M A G E E   M ,   1 9 6 6 ,   T H E S I S   U   C H I C A G O ;   M A R T Y N   J ,   1 9 6 4 ,   J   D O C ,   V 2 0 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 3 5 2 ;   M A R T Y N   J ,   1 9 7 5 ,   J   D O C ,   V 3 1 ,   P 2 9 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 0 ;   M A Y   K O ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 6 ,   P 8 9 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 6 . 3 7 7 7 . 8 9 0 - a ;   M A Y U M I   I ,   1 9 8 4 ,   L I B R A R Y   I N F O R M A T I O N ,   V 2 2 ,   P 1 1 9 ;   M C C A I N   K W ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 2 9 ;   M C I N N I S   R G ,   1 9 8 8 ,   C O L L   R E S   L I B R ,   V 4 9 ,   P 3 8 7 ;   M E R T O N   R O B E R T   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I ;   M I T R A   A C ,   1 9 7 0 ,   A N N   L I B R A R Y   S C I   D O C U ,   V 1 7 ,   P 1 1 7 ;   M I Y A M O T O   S ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 5 ;   M O E D   H F ,   1 9 8 9 ,   J   I N F O R M   S C I ,   V 1 5 ,   P 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 9 0 1 5 0 0 2 0 5 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   M O R A V C S I K   M J ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 6 8 ;   M U R U G E S A N   P ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 0 7 ;   M Y E R S   C R ,   1 9 7 0 ,   A M   P S Y C H O L ,   V 2 5 ,   P 1 0 4 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 3 0 1 4 9 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   O C O N N O R   J ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 3 6 - X ;   O p p e n h e i m   C . ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 7 ;   P E R I T Z   B C ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 6 ;   P E R I T Z   B C ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 4 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 4 4 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   P R A B H A   C G ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 2 0 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 3 0 5 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   R a v e t z   J . R . ,   1 9 7 1 ,   S C I   K N O W L E D G E   I T S   S O ;   R O W E   M E ,   1 9 8 5 ,   T H E S I S   N   T E X A S   S T A T E ;   R U F F   I ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 9 0 0 9 0 0 1 0 4 ;   S A I T O   K ,   1 9 8 5 ,   L I B R A R Y   I N F O R M A T I O N ,   V 2 3 ,   P 1 2 5 ;   S A N D I S O N   A ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 5 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 3 9 ;   S A T T A R   A ,   1 9 8 5 ,   T H E S I S   U   I L L I N O I S   U R ;   S I E V E R T   M E ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 3 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 3 4 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - S ;   S I L V E R M A N   R J ,   1 9 8 5 ,   R E S   H I G H   E D U C ,   V 2 3 ,   P 1 5 0 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 9 7 6 8 2 5 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S O P E R   M E ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 3 9 7 ;   S P I E G E L R O S I N G   I ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 7 9 ;   S W E E T L A N D   J H ,   1 9 8 9 ,   L I B R   Q U A R T ,   V 5 9 ,   P 2 9 1 ;   V I N K L E R   P ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 9 ;   V I R G O   J A ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 4 1 5 ;   V o o s   H . ,   1 9 7 6 ,   J   A C A D   L I B R ,   V 1 ,   P 1 9 ;   W A N G   C ,   1 9 8 7 ,   I N F O R M A T I O N   S C I ,   V 8 ,   P 1 7 ;   W A N G   C ,   1 9 8 1 ,   I N F O R M A T I O N   S C I ,   V 2 ,   P 3 5 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   Z A L T M A N   G ,   1 9 6 8 ,   S C I   R E C O G N I T I O N   C O M M 	 1 1 6 	 7 9 	 8 0 	 2 	 2 9 	 A S L I B 	 L O N D O N 	 2 0 - 2 4   O L D   S T ,   L O N D O N ,   E N G L A N D   E C 1 V   9 A P 	 0 0 2 2 - 0 4 1 8 	 	 	 J   D O C 	 J .   D o c . 	 D E C 	 1 9 9 3 	 4 9 	 4 	 	 	 	 	 3 7 0 	 4 0 8 	 	 1 0 . 1 1 0 8 / e b 0 2 6 9 2 0 	 	 3 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 M Q 3 2 1 	 W O S : A 1 9 9 3 M Q 3 2 1 0 0 0 0 3 	 	 
 
 J 	 G e o r g h i o u ,   L ;   R o e s s n e r ,   D 	 	 	 	 G e o r g h i o u ,   L ;   R o e s s n e r ,   D 	 	 	 E v a l u a t i n g   t e c h n o l o g y   p r o g r a m s :   t o o l s   a n d   m e t h o d s 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t e c h n o l o g y   p r o g r a m s ;   t o o l s ;   m e t h o d s 	 I N D U S T R I A L   M O D E R N I Z A T I O N ;   A C A D E M I C   R E S E A R C H ;   S E M A T E C H ;   B E N E F I T S ;   S C I E N C E 	 T h i s   a r t i c l e   r e v i e w s   t h e   a n a l y t i c a l   t o o l s ,   m e t h o d s ,   a n d   d e s i g n s   b e i n g   u s e d   t o   e v a l u a t e   p u b l i c   p r o g r a m s   i n t e n d e d   t o   s t i m u l a t e   t e c h n o l o g i c a l   a d v a n c e .   T h e   r e v i e w   i s   o r g a n i z e d   a r o u n d   b r o a d   p o l i c y   c a t e g o r i e s   r a t h e r   t h a n   p a r t i c u l a r   t y p e s   o f   p o l i c y   i n t e r v e n t i o n ,   b e c a u s e   m e t h o d s   u s e d   a r e   r a r e l y   c h o s e n   i n d e p e n d e n t   o f   c o n t e x t .   T h e   c a t e g o r i e s   a d d r e s s e d   i n c l u d e   p u b l i c l y - s u p p o r t e d   r e s e a r c h   c o n d u c t e d   i n   u n i v e r s i t i e s   a n d   p u b l i c   s e c t o r   r e s e a r c h   o r g a n i z a t i o n s ;   e v a l u a t i o n s   o f   l i n k a g e s ,   e s p e c i a l l y   t h o s e   p r o g r a m s   s e e k i n g   t o   p r o m o t e   a c a d e m i c - i n d u s t r i a l   a n d   p u b l i c - p r i v a t e   p a r t n e r s h i p s ;   a n d   t h e   e v a l u a t i o n   o f   d i f f u s i o n   a n d   i n d u s t r i a l   e x t e n s i o n   p r o g r a m s .   T h e   i n t e r n a l   e v a l u a t i o n   p r o c e d u r e s   o f   s c i e n c e   s u c h   a s   p e e r   r e v i e w   a n d   b i b l i o m e t r i c s   a r e   n o t   c o v e r e d ,   n o r   a r e   m e t h o d s   u s e d   t o   e v a l u a t e   p r o j e c t s   a n d   i n d i v i d u a l s   e x   a n t e .   A m o n g   t h e   c o n c l u s i o n   i s   t h e   o b s e r v a t i o n   t h a t   e v a l u a t i o n   w o r k   h a s   h a d   l e s s   o f   a n   i m p a c t   i n   t h e   l i t e r a t u r e   t h a n   i t   d e s e r v e s ,   i n   p a r t   b e c a u s e   m u c h   o f   t h e   m o s t   d e t a i l e d   a n d   v a l u a b l e   w o r k   i s   n o t   e a s i l y   o b t a i n a b l e .   A   s e c o n d   c o n c l u s i o n   i s   t h a t   p r o g r a m   e v a l u a t i o n s   a n d   p e r f o r m a n c e   r e v i e w s ,   w h i c h   h a v e   d i s t i n c t i v e   o b j e c t i v e s ,   m e a s u r e s ,   a n d   t o o l s ,   a r e   b e c o m i n g   e n t a n g l e d ,   w i t h   t h e   l i n e s   b e t w e e n   t h e   t w o   b e c o m i n g   b l u r r e d .   F i n a l l y ,   n e w   a p p r o a c h e s   t o   m e a s u r i n g   t h e   p a y o f f s   f r o m   r e s e a r c h   t h a t   f o c u s   o n   l i n k a g e s   b e t w e e n   k n o w l e d g e   p r o d u c e r s   a n d   u s e r s ,   a n d   o n   t h e   c h a r a c t e r i s t i c s   o f   r e s e a r c h   n e t w o r k s ,   a p p e a r   p r o m i s i n g   a s   t h e   l i m i t a t i o n s   o f   t h e   p r o d u c t i o n   f u n c t i o n   a n d   r e l a t e d   m e t h o d s   h a v e   b e c o m e   a p p a r e n t .   ( C )   2 0 0 0   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 G e o r g i a   I n s t   T e c h n o l ,   D e p t   P u b l   P o l i c y ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   S R I   I n t ,   S c i   &   T e c h n o l   P o l i c y   P r o g r a m ,   A r l i n g t o n ,   V A   2 2 2 0 9   U S A 	 R o e s s n e r ,   D   ( r e p r i n t   a u t h o r ) ,   G e o r g i a   I n s t   T e c h n o l ,   D e p t   P u b l   P o l i c y ,   A t l a n t a ,   G A   3 0 3 3 2   U S A . 	 	 G e o r g h i o u ,   L u k e / J - 1 3 4 5 - 2 0 1 4 ;   K u m a r ,   A j i t / J - 1 6 1 7 - 2 0 1 5 ;   	 K u m a r ,   A j i t / 0 0 0 0 - 0 0 0 3 - 3 2 5 5 - 5 0 5 4 ;   G e o r g h i o u ,   L u k e / 0 0 0 0 - 0 0 0 2 - 3 3 2 4 - 4 9 5 5 	 	 	 F e l l e r   I . ,   1 9 9 7 ,   I M P A C T   I N D   I N T E R A C T I ;   A i r a g h i   A . ,   1 9 9 9 ,   O P T I O N S   L I M I T S   A S S E S ;   B a c h   L ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 0 3 ;   B a t t e l l e - C o l u m b u s   L a b o r a t o r i e s ,   1 9 7 3 ,   I N T   S C I   T E C H N   I N N   P R ;   B O Z E M A N   B ,   1 9 9 8 ,   R   D   V A L U E   M A P P I N G   P R ;   B O Z E M A N   B ,   1 9 9 9 ,   U S E   A N D   T R A N S F O R M A T I ;   B o z e m a n   B . ,   1 9 9 5 ,   I N D   P E R S P E C T I V E S   C O M ;   B U I S S E R E T   T J ,   1 9 9 5 ,   I N T   J   T E C H N O L   M A N A G E ,   V 1 0 ,   P 5 8 7 ;   C a l l o n   M . ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E M E N T ;   C A M E R O N   H ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E M E N T ;   C O N S A D ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 5 3 ;   C O Z Z E N S   S ,   1 9 9 4 ,   D R U 8 7 5 2 C T I   R A N D C T I ;   D a l e   A .   J . ,   1 9 9 4 ,   R E S   E V A L U A T I O N ,   V 4 ,   P 6 6 ;   D A S G U P T A   P ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 4 8 7 ;   D e n i s o n   E . F ,   1 9 7 9 ,   A C C O U N T I N G   S L O W E R   E C ;   D Z I C Z E K   K ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 1 1 6 1 3 ;   F A Y L   G ,   1 9 9 8 ,   R E S   E V A L U A T I O N ,   V 7 ;   F E L L E R   I ,   1 9 9 5 ,   I S S U E S   S C I   T E C H N O L ,   V 1 2 ,   P 8 0 ;   F e l l e r   I ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 3 4 - 9 ;   G e o r g h i o u   L . ,   1 9 9 5 ,   E V A L U A T I O N ,   V 1 ,   P 1 7 1 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 6 3 8 9 0 9 5 0 0 1 0 0 2 0 4 ;   G e o r g h i o u   L . ,   1 9 9 9 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 4 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 7 2 4 8 0 4 2 8 8 ;   G e o r g h i o u   L . ,   1 9 9 8 ,   E V A L U A T I O N ,   V 4 ,   P 3 7 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 3 5 6 3 8 9 9 8 2 2 2 0 8 3 7 4 ;   G i b b o n s   M . ,   1 9 8 7 ,   E V A L U A T I O N   R E S   S E L E C ;   G R I L I C H E S   Z ,   1 9 5 8 ,   J   P O L I T I C A L   E C ;   G R I N D L E Y   P ,   1 9 9 4 ,   J   P O L I C Y   A N A L   M A N A G ,   V 1 3 ,   P 7 2 3 ,   D O I   1 0 . 2 3 0 7 / 3 3 2 5 4 9 5 ;   G U Y   K ,   1 9 8 6 ,   P A R A L L E L   C O N V E R G E N C E ,   P 3 2 ;   G U Z Z E T T I   L ,   1 9 9 5 ,   B R I E F   H I S T   E U R O P E A N ,   P 7 6 ;   H A L L   B H ,   1 9 9 5 ,   A E I   B R O O K   C   C O N T R   R E ;   H E R T Z F E L D   H R ,   1 9 9 2 ,   S P A C E   E C ;   H I L L S   P V ,   1 9 9 5 ,   R E S   E V A L U A T ,   V 5 ,   P 3 5 ;   * I L L   I   T E C H N   R E S   I ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ;   I R W I N   D ,   J   I N T   E C ,   V 4 0 ,   P 3 2 3 ;   J A F F E   A B ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 9 5 7 ;   J a f f e   A .   B . ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 9 8 8 8 ;   J a r m i n   R S ,   1 9 9 9 ,   J   P O L I C Y   A N A L   M A N A G ,   V 1 8 ,   P 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 5 2 0 - 6 6 8 8 ( 1 9 9 9 2 4 ) 1 8 : 1 < 9 9 : : A I D - P A M 6 > 3 . 0 . C O ; 2 - S ;   K U H L M A N N ,   1 9 9 9 ,   F I N A L   R E P O R T   A D V   S C I ;   K u h l m a n n   S ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 1 3 ;   K u h l m a n n   S t e f a n ,   1 9 9 5 ,   E V A L U A T I O N   T E C H N O L O G ;   L A I D L A W   F J ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 9 8 9 0 ;   L A R E D O   P ,   1 9 9 0 ,   I M P A C T   P R O G R A M M E S   C O ;   L A R E D O   P ,   1 9 9 5 ,   R E S   E V A L U A T I O N ,   V 5 ;   L E V Y   D M ,   1 9 8 3 ,   B E L L   J   E C O N ,   V 1 4 ,   P 5 5 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 3 6 5 6 ;   L i n k   A . ,   1 9 9 6 ,   E V A L U A T I N G   P U B L I C   S E ;   L i n k   A N ,   1 9 9 6 ,   R E V   I N D   O R G A N ,   V 1 1 ,   P 7 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 2 1 4 8 3 2 ;   L I N K   A N ,   1 9 8 1 ,   A M   E C O N   R E V ,   V 7 1 ,   P 1 1 1 1 ;   L I N K   A N ,   1 9 8 2 ,   I E E E   T   E N G   M A N A G E ,   V 2 9 ,   P 1 6 6 ;   L i n k   A .   N . ,   1 9 9 8 ,   P U B L I C   A C C O U N T A B I L I T ;   L i n k   A . N . ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 9 8 9 1 ;   M A N S F I E L D   E ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 8 0 - A ;   M A N S F I E L D   E ,   1 9 7 7 ,   Q   J   E C O N ,   V 9 1 ,   P 2 2 1 ,   D O I   1 0 . 2 3 0 7 / 1 8 8 5 4 1 5 ;   M A N S F I E L D   E ,   1 9 8 0 ,   A M   E C   R E V ,   V 7 0 ;   M A R T I N   B ,   1 9 8 3 ,   A S S E S S I N G   B A S I C   R E S ;   M E Y E R K R A H M E R   F ,   1 9 9 0 ,   R E S   P O L I C Y ,   V 1 8 ,   P 3 1 3 ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   * N A T   A U D   O F F ,   1 9 9 5 ,   D E P   T R A D   I N D   S U P P   I N ;   O L D S   B J ,   1 9 9 2 ,   T E C H N O L O G I C A L   E U R P H O ;   O R M A L A   E ,   1 9 9 3 ,   E V A L U A T I O N   E U R E K A   I N ;   O R M A L A   E ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 3 4 3 ;   P A P A C O N S T A N T I N O . G ,   1 9 9 7 ,   O E C D   P   P O L   E V   I N N   T E ;   P a v i t t   K e i t h ,   1 9 9 8 ,   R E S   E V A L U A T ,   V 7 ,   P 1 0 5 ;   P E T E R S O N   J ,   1 9 9 8 ,   T E C H N O L O G Y   P O L I C Y   E U ,   P 2 1 0 ;   R o e s s n e r   D ,   1 9 9 8 ,   R E S   T E C H N O L   M A N A G E ,   V 4 1 ,   P 4 0 ;   R O E S S N E R   D ,   1 9 9 7 ,   J   E V A L U A T I O N   P R O G R A M ,   V 2 0 ;   R O E S S N E R   D ,   1 9 9 4 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 0 ;   R O E S S N E R   D ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ;   R O E S S N E R   D ,   1 9 9 9 ,   I N   P R E S S   A N A L   S Y N T H E ;   R O G E R S   J ,   1 9 9 8 ,   W O R K S H   R E S   E V   E C   M I N ;   R U E G G   R T ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 9 8 8 6 ;   R U E G G   R T ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 9 8 8 7 ;   S A N D   F ,   1 9 9 8 ,   P   A P E C   S   E V   S   T   P R O G ;   S E N K E R   J ,   1 9 9 7 ,   S C I   P U B L I C   P O L I C Y ,   V 2 4 ;   S h a p i r a   P ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 8 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 6 2 - 4 ;   S h a p i r a   P ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 6 3 - 2 ;   S h a p i r a   P . ,   1 9 9 8 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 3 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 1 1 6 1 2 ;   S H E R W I N   C W ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 6 ,   P 1 5 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 6 . 3 7 8 2 . 1 5 7 1 ;   T E W K S B U R Y   J G ,   1 9 8 0 ,   S C I E N C E ,   V 2 0 9 ,   P 6 5 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 0 9 . 4 4 5 7 . 6 5 8 ;   * U S   C   G A O ,   1 9 9 6 ,   G A O R C E D 9 6 4 7   U S   C ;   * U S   C   O F F   T E C H N   A S ,   1 9 8 6 ,   R E S   F U N D   I N V   C A N   W E 	 7 8 	 7 7 	 8 2 	 2 	 2 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 1 8 7 3 - 7 6 2 5 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 A P R 	 2 0 0 0 	 2 9 	 4 - 5 	 	 	 	 	 6 5 7 	 6 7 8 	 	 1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 9 4 - 3 	 	 2 2 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 3 0 9 B E 	 W O S : 0 0 0 0 8 6 7 4 6 7 0 0 0 1 2 	 	 
 
 J 	 K a j i k a w a ,   Y ;   Y o s h i k a w a ,   J ;   T a k e d a ,   Y ;   M a t s u s h i m a ,   K 	 	 	 	 K a j i k a w a ,   Y u y a ;   Y o s h i k a w a ,   J u n t a ;   T a k e d a ,   Y o s h i y u k i ;   M a t s u s h i m a ,   K a t s u m o r i 	 	 	 T r a c k i n g   e m e r g i n g   t e c h n o l o g i e s   i n   e n e r g y   r e s e a r c h :   T o w a r d   a   r o a d m a p   f o r   s u s t a i n a b l e   e n e r g y 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e m e r g i n g   t e c h n o l o g i e s ;   f o r e c a s t i n g ;   c i t a t i o n   n e t w o r k ;   b i b l i o m e t r i c s ;   s u s t a i n a b l e   e n e r g y ;   r e n e w a b l e   e n e r g y 	 R E N E W A B L E   E N E R G Y ;   D A T A B A S E   T O M O G R A P H Y ;   H Y D R O G E N   F U T U R E S ;   B I B L I O M E T R I C S ;   S C I E N C E ;   P O L I C Y ;   M E C H A N I S M S ;   P R I O R I T I E S 	 S c i e n c e   a n d   t e c h n o l o g y   f o r   r e n e w a b l e   a n d   s u s t a i n a b l e   e n e r g y   a r e   i n d i s p e n s a b l e   f o r   o u r   f u t u r e   s o c i e t y   a n d   e c o n o m i c s .   T o   m e e t   t h e   g o a l   o f   s u s t a i n a b l e   e n e r g y   d e v e l o p m e n t ,   t h e r e   i s   a   g r o w i n g   b o d y   o f   r e s e a r c h   e f f o r t s   w o r l d   w i d e .   T h e   p l a n n e r   o f   e n e r g y   r e s e a r c h   h a s   t o   g r a s p   t h e   b r o a d e r   c o v e r a g e   o f   s c i e n t i f i c   a n d   t e c h n o l o g i c a l   r e s e a r c h ,   a n d   m a k e   d e c i s i o n s   o n   e f f e c t i v e   i n v e s t m e n t   i n   p r o m i s i n g   a n d   e m e r g i n g   t e c h n o l o g i e s   e s p e c i a l l y   u n d e r   c i r c u m s t a n c e s   o f   l i m i t e d   r e s o u r c e s .   I n   t h i s   p a p e r ,   w e   t r a c k   e m e r g i n g   r e s e a r c h   d o m a i n s   i n   e n e r g y   r e s e a r c h   b y   u s i n g   c i t a t i o n   n e t w o r k   a n a l y s i s .   O u r   a n a l y s i s   c o n f i r m s   t h a t   t h e   f u e l   c e l l   a n d   s o l a r   c e l l   a r e   r a p i d l y   g r o w i n g   d o m a i n s   i n   e n e r g y   r e s e a r c h .   W e   f u r t h e r   i n v e s t i g a t e   t h e   d e t a i l e d   s t r u c t u r e   o f   t h e s e   t w o   d o m a i n s   b y   c l u s t e r i n g   p u b l i c a t i o n s   i n   t h e s e   d o m a i n s .   E a c h   c i t a t i o n   c l u s t e r   h a s   c h a r a c t e r i s t i c   r e s e a r c h   t o p i c s ,   a n d   t h e r e   i s   a   v a r i e t y   o f   g r o w t h   t r e n d s   a m o n g   t h e   c l u s t e r s .   B y   u s i n g   c i t a t i o n   n e t w o r k   a n a l y s i s ,   w e   c a n   t r a c k   e m e r g i n g   r e s e a r c h   d o m a i n s   a m o n g   a   p i l e   o f   p u b l i c a t i o n s   e f f i c i e n t l y   a n d   e f f e c t i v e l y .   ( C )   2 0 0 7   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ K a j i k a w a ,   Y u y a ;   Y o s h i k a w a ,   J u n t a ;   T a k e d a ,   Y o s h i y u k i ;   M a t s u s h i m a ,   K a t s u m o r i ]   U n i v   T o k y o ,   S c h   E n g n ,   I n s t   E n g n   I n n o v a t ,   B u n k y o   K u ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n 	 K a j i k a w a ,   Y   ( r e p r i n t   a u t h o r ) ,   U n i v   T o k y o ,   S c h   E n g n ,   I n s t   E n g n   I n n o v a t ,   B u n k y o   K u ,   2 - 1 1 - 1 6   Y a y o i ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n . 	 k a j i @ b i z - m o d e l . t . u - t o k y o . a c . j p 	 K a j i k a w a ,   Y u y a / C - 1 9 9 6 - 2 0 1 5 	 K a j i k a w a ,   Y u y a / 0 0 0 0 - 0 0 0 3 - 3 5 7 7 - 5 1 6 7 	 	 	 A r a t a n i   F ,   2 0 0 5 ,   P R O G   P H O T O V O L T A I C S ,   V 1 3 ,   P 4 6 3 ,   D O I   1 0 . 1 0 0 2 / p i p . 6 4 8 ;   B e c c a l i   M ,   2 0 0 7 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 1 ,   P 2 8 2 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 0 5 . 0 2 . 0 0 1 ;   B e n g i s u   M ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 9 . 0 0 1 ;   B r a n s c o m b   L e w i s   M . ,   1 9 9 8 ,   I N V E S T I N G   I N N O V A T I O N ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   C l i f t   R ,   2 0 0 7 ,   E N E R G Y ,   V 3 2 ,   P 2 6 2 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 6 . 0 7 . 0 3 1 ;   C o r m i o   C ,   2 0 0 3 ,   R E N E W   S U S T   E N E R G   R E V ,   V 7 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 6 4 - 0 3 2 1 ( 0 3 ) 0 0 0 0 4 - 2 ;   D a i m   T U ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 4 . 0 0 4 ;   D A L P E   R ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 5 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 4 ) 0 0 7 8 7 - X ;   d e l   R i o   P ,   2 0 0 5 ,   E N E R G   P O L I C Y ,   V 3 3 ,   P 2 0 1 0 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 4 . 0 3 . 0 2 2 ;   D u n n   S ,   2 0 0 2 ,   I N T   J   H Y D R O G E N   E N E R G ,   V 2 7 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 3 1 9 9 ( 0 1 ) 0 0 1 3 1 - 8 ;   G a l v i n   R ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 0 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 3 . 0 9 . 0 0 7 ;   H e n n i c k e   P ,   2 0 0 6 ,   E N E R G   P O L I C Y ,   V 3 4 ,   P 1 2 6 0 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 5 . 1 2 . 0 1 6 ;   J e f f e r s o n   M ,   2 0 0 6 ,   R E N E W   E N E R G ,   V 3 1 ,   P 5 7 1 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 0 5 . 0 9 . 0 0 2 ;   K o s t o f f   R N ,   2 0 0 5 ,   E N E R G Y ,   V 3 0 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 5 8 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K o s t o f f   R . N . ,   2 0 0 4 ,   A D A 4 2 1 7 8 9   D T I C   N A T   T ;   L u n d   H ,   2 0 0 6 ,   E N E R G Y ,   V 3 1 ,   P 2 3 2 5 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 6 . 0 1 . 0 1 0 ;   M a r t i n o   J P ,   2 0 0 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 0 ,   P 7 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 2 ) 0 0 3 7 5 - X ;   M c D o w a l l   W ,   2 0 0 6 ,   E N E R G   P O L I C Y ,   V 3 4 ,   P 1 2 3 6 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 5 . 1 2 . 0 0 6 ;   N e m e t   G F ,   2 0 0 7 ,   E N E R G   P O L I C Y ,   V 3 5 ,   P 7 4 6 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 5 . 1 2 . 0 1 2 ;   P h a a l   R ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 7 2 - 6 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   T e r r a d o s   J ,   2 0 0 7 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 1 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 0 5 . 0 8 . 0 0 3 ;   T I J S S E N   R J W ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 2 5 - Y ;   U d d i n   S N ,   2 0 0 6 ,   N A T   R E S O U R   F O R U M ,   V 3 0 ,   P 1 7 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 7 - 8 9 4 7 . 2 0 0 6 . 0 0 1 1 3 . x ;   * U N D P   U N D E S A   W E C ,   2 0 0 4 ,   W O R L D   E N   A S S   O V   2 0 0 4 ;   U z u n   A ,   2 0 0 2 ,   E N E R G   P O L I C Y ,   V 3 0 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 1 - 4 2 1 5 ( 0 1 ) 0 0 0 8 4 - 2 ;   W a t t   M ,   2 0 0 1 ,   R E N E W   E N E R G ,   V 2 2 ,   P 2 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 0 - 1 4 8 1 ( 0 0 ) 0 0 0 6 4 - 1 	 3 1 	 7 6 	 7 7 	 9 	 6 6 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J U L 	 2 0 0 8 	 7 5 	 6 	 	 	 	 	 7 7 1 	 7 8 2 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 5 . 0 0 5 	 	 1 2 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 3 2 8 Z Z 	 W O S : 0 0 0 2 5 7 8 3 8 0 0 0 0 0 3 	 	 
 
 J 	 W a l t m a n ,   L ;   v a n   E c k ,   N J 	 	 	 	 W a l t m a n ,   L u d o ;   v a n   E c k ,   N e e s   J a n 	 	 	 A   n e w   m e t h o d o l o g y   f o r   c o n s t r u c t i n g   a   p u b l i c a t i o n - l e v e l   c l a s s i f i c a t i o n   s y s t e m   o f   s c i e n c e 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   b i b l i o m e t r i c s 	 C O M M U N I T Y   S T R U C T U R E ;   S C I E N T I F I C   L I T E R A T U R E S ;   M A P P I N G   S C I E N C E ;   N E T W O R K S ;   C I T A T I O N ;   S P E C I A L T I E S ;   C O C I T A T I O N S 	 C l a s s i f y i n g   j o u r n a l s   o r   p u b l i c a t i o n s   i n t o   r e s e a r c h   a r e a s   i s   a n   e s s e n t i a l   e l e m e n t   o f   m a n y   b i b l i o m e t r i c   a n a l y s e s .   C l a s s i f i c a t i o n   u s u a l l y   t a k e s   p l a c e   a t   t h e   l e v e l   o f   j o u r n a l s ,   w h e r e   t h e   W e b   o f   S c i e n c e   s u b j e c t   c a t e g o r i e s   a r e   t h e   m o s t   p o p u l a r   c l a s s i f i c a t i o n   s y s t e m .   H o w e v e r ,   j o u r n a l - l e v e l   c l a s s i f i c a t i o n   s y s t e m s   h a v e   t w o   i m p o r t a n t   l i m i t a t i o n s :   T h e y   o f f e r   o n l y   a   l i m i t e d   a m o u n t   o f   d e t a i l ,   a n d   t h e y   h a v e   d i f f i c u l t i e s   w i t h   m u l t i d i s c i p l i n a r y   j o u r n a l s .   T o   a v o i d   t h e s e   l i m i t a t i o n s ,   w e   i n t r o d u c e   a   n e w   m e t h o d o l o g y   f o r   c o n s t r u c t i n g   c l a s s i f i c a t i o n   s y s t e m s   a t   t h e   l e v e l   o f   i n d i v i d u a l   p u b l i c a t i o n s .   I n   t h e   p r o p o s e d   m e t h o d o l o g y ,   p u b l i c a t i o n s   a r e   c l u s t e r e d   i n t o   r e s e a r c h   a r e a s   b a s e d   o n   c i t a t i o n   r e l a t i o n s .   T h e   m e t h o d o l o g y   i s   a b l e   t o   d e a l   w i t h   v e r y   l a r g e   n u m b e r s   o f   p u b l i c a t i o n s .   W e   p r e s e n t   a n   a p p l i c a t i o n   i n   w h i c h   a   c l a s s i f i c a t i o n   s y s t e m   i s   p r o d u c e d   t h a t   i n c l u d e s   a l m o s t   1 0   m i l l i o n   p u b l i c a t i o n s .   B a s e d   o n   a n   e x t e n s i v e   a n a l y s i s   o f   t h i s   c l a s s i f i c a t i o n   s y s t e m ,   w e   d i s c u s s   t h e   s t r e n g t h s   a n d   t h e   l i m i t a t i o n s   o f   t h e   p r o p o s e d   m e t h o d o l o g y .   I m p o r t a n t   s t r e n g t h s   a r e   t h e   t r a n s p a r e n c y   a n d   r e l a t i v e   s i m p l i c i t y   o f   t h e   m e t h o d o l o g y   a n d   i t s   f a i r l y   m o d e s t   c o m p u t i n g   a n d   m e m o r y   r e q u i r e m e n t s .   T h e   m a i n   l i m i t a t i o n   o f   t h e   m e t h o d o l o g y   i s   i t s   e x c l u s i v e   r e l i a n c e   o n   d i r e c t   c i t a t i o n   r e l a t i o n s   b e t w e e n   p u b l i c a t i o n s .   T h e   a c c u r a c y   o f   t h e   m e t h o d o l o g y   c a n   p r o b a b l y   b e   i n c r e a s e d   b y   a l s o   t a k i n g   i n t o   a c c o u n t   o t h e r   t y p e s   o f   r e l a t i o n s f o r   i n s t a n c e ,   b a s e d   o n   b i b l i o g r a p h i c   c o u p l i n g . 	 [ W a l t m a n ,   L u d o ;   v a n   E c k ,   N e e s   J a n ]   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   L e i d e n ,   N e t h e r l a n d s 	 W a l t m a n ,   L   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   L e i d e n ,   N e t h e r l a n d s . 	 w a l t m a n l r @ c w t s . l e i d e n u n i v . n l ;   e c k n j p v a n @ c w t s . l e i d e n u n i v . n l 	 v a n   E c k ,   N e e s   J a n / B - 6 0 4 2 - 2 0 0 8 	 v a n   E c k ,   N e e s   J a n / 0 0 0 0 - 0 0 0 1 - 8 4 4 8 - 4 5 2 1 	 	 	 A h l g r e n   P ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 4 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 1 1 . 0 0 3 ;   A r c h a m b a u l t   E ,   2 0 1 1 ,   P R O   I N T   C O N F   S C I   I N F ,   P 6 6 ;   B l o n d e l   V D ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 8 / 1 0 / P 1 0 0 0 8 ;   B o y a c k   K W ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 8 0 2 9 ;   B o y a c k   K W ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 3 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 1 9 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   C o l l i a n d e r   C ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 0 ,   P 6 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 9 1 - x ;   G a r f i e l d   E ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 6 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 7 8 8 0 4 0 8 7 ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   J a n s s e n s   F ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 6 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 0 2 - 7 ;   J a n s s e n s   F ,   2 0 0 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 5 ,   P 6 8 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 9 . 0 6 . 0 0 3 ;   K l a v a n s   R ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 7 4 ;   K l a v a n s   R ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 5 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 8 8 - 6 ;   K l a v a n s   R ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 9 1 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 7 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 5 6 1 3 1 ;   R a f o l s   I ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 8 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 6 ;   R e i c h a r d t   J ,   2 0 0 6 ,   P H Y S   R E V   E ,   V 7 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 4 . 0 1 6 1 1 0 ;   R o s v a l l   M ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 1 1 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 6 8 5 1 1 0 5 ;   R o s v a l l   M ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 8 2 0 9 ;   R o t t a   R ,   2 0 1 1 ,   J   E X P T   A L G O R I T H M I C S ,   V 1 6 ,   P 2 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 9 6 3 1 9 0 . 1 9 7 0 3 7 6 ;   S h i b a t a   N ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 5 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 9 4 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   T r a a g   V A ,   2 0 1 1 ,   P H Y S   R E V   E ,   V 8 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 4 . 0 1 6 1 1 4 ;   v a n   E c k   N J ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 4 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 2 1 ;   v a n   E c k   N J ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 5 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 4 6 - 3 ;   W a l l a c e   M L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 8 7 ;   W a l t m a n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 6 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 7 . 0 0 2 ;   Z h a n g   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 1 . 0 0 5 	 3 4 	 7 4 	 7 4 	 1 2 	 1 0 3 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 1 2 	 6 3 	 1 2 	 	 	 	 	 2 3 7 8 	 2 3 9 2 	 	 1 0 . 1 0 0 2 / a s i . 2 2 7 4 8 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 4 7 P S 	 W O S : 0 0 0 3 1 1 8 5 3 6 0 0 0 0 3 	 	 
 
 J 	 D ' A n g e l o ,   C A ;   G i u f f r i d a ,   C ;   A b r a m o ,   G 	 	 	 	 D ' A n g e l o ,   C i r i a c o   A n d r e a ;   G i u f f r i d a ,   C r i s t i a n o ;   A b r a m o ,   G i o v a n n i 	 	 	 A   H e u r i s t i c   A p p r o a c h   t o   A u t h o r   N a m e   D i s a m b i g u a t i o n   i n   B i b l i o m e t r i c s   D a t a b a s e s   f o r   L a r g e - S c a l e   R e s e a r c h   A s s e s s m e n t s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 R E S E A R C H   P R O D U C T I V I T Y ;   H O M O N Y M S ;   I M P A C T 	 N a t i o n a l   e x e r c i s e s   f o r   t h e   e v a l u a t i o n   o f   r e s e a r c h   a c t i v i t y   b y   u n i v e r s i t i e s   a r e   b e c o m i n g   r e g u l a r   p r a c t i c e   i n   e v e r   m o r e   c o u n t r i e s .   T h e s e   e x e r c i s e s   h a v e   m a i n l y   b e e n   c o n d u c t e d   t h r o u g h   t h e   a p p l i c a t i o n   o f   p e e r - r e v i e w   m e t h o d s .   B i b l i o m e t r i c s   h a s   n o t   b e e n   a b l e   t o   o f f e r   a   v a l i d   l a r g e - s c a l e   a l t e r n a t i v e   b e c a u s e   o f   a l m o s t   o v e r w h e l m i n g   d i f f i c u l t i e s   i n   i d e n t i f y i n g   t h e   t r u e   a u t h o r   o f   e a c h   p u b l i c a t i o n .   W e   w i l l   a d d r e s s   t h i s   p r o b l e m   b y   p r e s e n t i n g   a   h e u r i s t i c   a p p r o a c h   t o   a u t h o r   n a m e   d i s a m b i g u a t i o n   i n   b i b l i o m e t r i c   d a t a s e t s   f o r   l a r g e - s c a l e   r e s e a r c h   a s s e s s m e n t s .   T h e   a p p l i c a t i o n   p r o p o s e d   c o n c e r n s   t h e   I t a l i a n   u n i v e r s i t y   s y s t e m ,   c o m p r i s i n g   8 0   u n i v e r s i t i e s   a n d   a   r e s e a r c h   s t a f f   o f   o v e r   6 0 , 0 0 0   s c i e n t i s t s .   T h e   k e y   a d v a n t a g e   o f   t h e   p r o p o s e d   a p p r o a c h   i s   t h e   e a s e   o f   i m p l e m e n t a t i o n .   T h e   a l g o r i t h m s   a r e   o f   p r a c t i c a l   a p p l i c a t i o n   a n d   h a v e   c o n s i d e r a b l y   b e t t e r   s c a l a b i l i t y   a n d   e x p a n d a b i l i t y   p r o p e r t i e s   t h a n   s t a t e - o f - t h e - a r t   u n s u p e r v i s e d   a p p r o a c h e s .   M o r e o v e r ,   t h e   p e r f o r m a n c e   i n   t e r m s   o f   p r e c i s i o n   a n d   r e c a l l ,   w h i c h   c a n   b e   f u r t h e r   i m p r o v e d ,   s e e m s   t h o r o u g h l y   a d e q u a t e   f o r   t h e   t y p i c a l   n e e d s   o f   l a r g e - s c a l e   b i b l i o m e t r i c   r e s e a r c h   a s s e s s m e n t s . 	 [ D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ G i u f f r i d a ,   C r i s t i a n o ]   V r i j e   U n i v   A m s t e r d a m ,   D e p t   C o m p   S c i ,   N L - 1 0 8 1   H V   A m s t e r d a m ,   N e t h e r l a n d s ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   I - 0 0 1 3 3   R o m e ,   I t a l y 	 D ' A n g e l o ,   C A   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 d a n g e l o @ d i s p . u n i r o m a 2 . i t ;   c . g i u f f r i d a @ f e w . v u . n l ;   a b r a m o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   G i u f f r i d a ,   C r i s t i a n o / 0 0 0 0 - 0 0 0 2 - 8 3 2 9 - 5 9 2 9 	 	 	 A b r a m o   G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 2 - 2 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 1 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 0 4 - 0 ;   A k s n e s   D W ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 8 8 ;   B a l c o n i   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 3 ) 0 0 1 0 8 - 2 ;   C O R N E L L   L L ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 1 0 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 3 0 2 0 9 ;   C U L O T T A   A ,   2 0 0 7 ,   P   A A A I   6   I N T   W O R K S H ,   P 3 2 ;   H a n   H ,   2 0 0 5 ,   P R O C E E D I N G S   O F   T H E   5 T H   A C M / I E E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P R O C E E D I N G S ,   P 3 3 4 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 5 3 8 5 . 1 0 6 5 4 6 2 ;   H a n   H ,   2 0 0 4 ,   J C D L   2 0 0 4 :   P R O C E E D I N G S   O F   T H E   F O U R T H   A C M / I E E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P 2 9 6 ,   D O I   1 0 . 1 1 4 5 / 9 9 6 3 5 0 . 9 9 6 4 1 9 ;   H a n   H . ,   2 0 0 5 ,   P   2 0 0 5   A C M   S   A P P L   C O ,   P 1 0 6 5 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 6 6 7 7 . 1 0 6 6 9 2 0 ;   H A R M A N   G ,   2 0 0 0 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 2 2 ,   P 1 1 ;   H u a n g   J i a n ,   2 0 0 6 ,   P   1 0   E U R   C   P R I N C   P R A ,   P 5 3 6 ;   I v e r s e n   E J ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 3 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 2 0 9 - 2 ;   K A N A N I   P ,   2 0 0 7 ,   P   2 0   I N T   J O I N T   C   A R T ,   P 4 2 9 ;   L i   X ,   2 0 0 5 ,   A I   M A G ,   V 2 6 ,   P 4 5 ;   S h a d b o l t   N .   R . ,   2 0 0 6 ,   P   A C M   I E E E   J O I N T   C   D ,   P 5 3 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 1 7 5 3 . 1 1 4 1 7 6 2 ;   M e y e r   M ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 7 3 5 ;   O n   B W ,   2 0 0 5 ,   P r o c e e d i n g s   o f   t h e   5 t h   A C M / I E E E   J o i n t   C o n f e r e n c e   o n   D i g i t a l   L i b r a r i e s ,   P r o c e e d i n g s ,   P 3 4 4 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 5 3 8 5 . 1 0 6 5 4 6 3 ;   R a d i c c h i   F ,   2 0 0 9 ,   P H Y S   R E V   E ,   V 8 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 0 . 0 5 6 1 0 3 ;   S o l e r   J M ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 3 0 - z ;   S o n g   Y ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   7 T H   A C M / I E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P 3 4 2 ,   D O I   1 0 . 1 1 4 5 / 1 2 5 5 1 7 5 . 1 2 5 5 2 4 3 ;   T a n   Y .   F . ,   2 0 0 6 ,   P   A C M   I E E E   J O I N T   C   D ,   P 3 1 4 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 1 7 5 3 . 1 1 4 1 8 2 6 ;   T o r v i k   V I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 4 0 ,   D O I   [ 1 0 . 1 0 0 2 / a s i . 2 0 1 0 5 ,   1 0 . 1 0 0 2 / a s i / 2 0 1 0 5 ] ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 5 ;   W o o d i n g   S ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 2 - 7 	 2 5 	 7 4 	 7 5 	 1 2 	 4 3 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 F E B 	 2 0 1 1 	 6 2 	 2 	 	 	 	 	 2 5 7 	 2 6 9 	 	 1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 1 2 S U 	 W O S : 0 0 0 2 8 6 6 8 7 3 0 0 0 0 5 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   D i   C o s t a ,   F 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a 	 	 	 R e s e a r c h   c o l l a b o r a t i o n   a n d   p r o d u c t i v i t y :   i s   t h e r e   c o r r e l a t i o n ? 	 H I G H E R   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   c o l l a b o r a t i o n ;   P r o d u c t i v i t y ;   U n i v e r s i t i e s ;   B i b l i o m e t r i c s 	 P U B L I C A T I O N   P R O D U C T I V I T Y ;   U N I V E R S I T I E S ;   S C I E N T I S T S ;   I M P A C T 	 T h e   i n c i d e n c e   o f   e x t r a m u r a l   c o l l a b o r a t i o n   i n   a c a d e m i c   r e s e a r c h   a c t i v i t i e s   i s   i n c r e a s i n g   a s   a   r e s u l t   o f   v a r i o u s   f a c t o r s .   T h e s e   f a c t o r s   i n c l u d e   p o l i c y   m e a s u r e s   a i m e d   a t   f o s t e r i n g   p a r t n e r s h i p   a n d   n e t w o r k i n g   a m o n g   t h e   v a r i o u s   c o m p o n e n t s   o f   t h e   r e s e a r c h   s y s t e m ,   p o l i c i e s   w h i c h   a r e   i n   t u r n   j u s t i f i e d   b y   t h e   i d e a   t h a t   k n o w l e d g e   s h a r i n g   c o u l d   i n c r e a s e   t h e   e f f e c t i v e n e s s   o f   t h e   s y s t e m .   O v e r   t h e   l a s t   t w o   d e c a d e s ,   t h e   s c i e n t i f i c   c o m m u n i t y   h a s   a l s o   s t e p p e d   u p   a c t i v i t i e s   t o   a s s e s s   t h e   a c t u a l   i m p a c t   o f   c o l l a b o r a t i o n   i n t e n s i t y   o n   t h e   p e r f o r m a n c e   o f   r e s e a r c h   s y s t e m s .   T h i s   s t u d y   d r a w s   o n   a   n u m b e r   o f   e m p i r i c a l   a n a l y s e s ,   w i t h   t h e   i n t e n t i o n   o f   m e a s u r i n g   t h e   e f f e c t s   o f   e x t r a m u r a l   c o l l a b o r a t i o n   o n   r e s e a r c h   p e r f o r m a n c e   a n d ,   i n d i r e c t l y ,   v e r i f y i n g   t h e   l e g i t i m a c y   o f   p o l i c i e s   t h a t   s u p p o r t   t h i s   t y p e   o f   c o l l a b o r a t i o n .   T h e   a n a l y s i s   f o c u s e s   o n   t h e   I t a l i a n   a c a d e m i c   r e s e a r c h   s y s t e m .   T h e   a i m   o f   t h e   w o r k   i s   t o   a s s e s s   t h e   l e v e l   o f   c o r r e l a t i o n ,   a t   i n s t i t u t i o n a l   l e v e l ,   b e t w e e n   s c i e n t i f i c   p r o d u c t i v i t y   a n d   c o l l a b o r a t i o n   i n t e n s i t y   a s   a   w h o l e ,   b o t h   i n t e r n a t i o n a l l y   a n d   w i t h   p r i v a t e   o r g a n i z a t i o n s .   T h i s   w i l l   b e   c a r r i e d   o u t   u s i n g   a   b i b l i o m e t r i c   t y p e   o f   a p p r o a c h ,   w h i c h   e q u a t e s   c o l l a b o r a t i o n   w i t h   t h e   c o - a u t h o r s h i p   o f   s c i e n t i f i c   p u b l i c a t i o n s . 	 [ A b r a m o ,   G i o v a n n i ]   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   I t a l i a n   R e s   C o u n c i l ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A B R A M O   G ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 ;   A d a m s   J D ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 1 . 0 1 4 ;   B a l c o n i   M ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 1 8 ;   B a r j a c k   F . ,   2 0 0 7 ,   S O C I A L   G E O G R A P H Y   D I S ,   V 3 ,   P 1 2 1 ;   B E L K H O D J A   O ,   2 0 0 5 ,   5   T R I P L   H E L   C   T U R   I T ;   B o r d o n s   M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 2 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 5 ;   * C O M M   E U R   C O M M ,   2 0 0 4 ,   3 5 3   C O M   C O M M   E U R   C O M ;   * C O M M   E U R   C O M M ,   2 0 0 7 ,   1 6 1   C O M   C O M M   E U R   C O M ;   D u n d a r   H ,   1 9 9 8 ,   R E S   H I G H   E D U C ,   V 3 9 ,   P 6 0 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 8 7 0 5 8 2 3 7 6 3 ;   F O X   M F ,   1 9 8 3 ,   S O C   S T U D   S C I ,   V 1 3 ,   P 2 8 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 3 0 1 3 0 0 2 0 0 5 ;   F O X   M F ,   1 9 9 2 ,   S O C I O L   E D U C ,   V 6 5 ,   P 2 9 3 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 7 7 2 ;   F o x   M .   F . ,   1 9 9 2 ,   R E S   H I G H E R   E D ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   L a n d r y   R ,   1 9 9 6 ,   H I G H   E D U C ,   V 3 2 ,   P 2 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 1 3 8 8 6 8 ;   L e e   S ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 6 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 5 0 5 2 3 5 9 ;   L e e   S .   Y . ,   2 0 0 0 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 5 ,   P 1 1 1 ;   M a i r e s s e   J . ,   2 0 0 5 ,   N B E R   W O R K I N G   P A P E R   S ;   M a r t i n - S e m p e r e   M J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 7 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 6 2 7 1 2 9 2 3 ;   R A M S D E N   P ,   1 9 9 4 ,   H I G H   E D U C ,   V 2 8 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 3 8 3 7 2 9 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 4 2 3 ;   V e u g e l e r s   R ,   2 0 0 5 ,   I N T   J   I N D   O R G A N ,   V 2 3 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / j . i j i n d o r g . 2 0 0 5 . 0 1 . 0 0 8 	 2 1 	 7 4 	 7 4 	 1 1 	 6 4 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 0 1 8 - 1 5 6 0 	 	 	 H I G H   E D U C 	 H i g h .   E d u c . 	 F E B 	 2 0 0 9 	 5 7 	 2 	 	 	 	 	 1 5 5 	 1 7 1 	 	 1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 8 - 9 1 3 9 - z 	 	 1 7 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 3 9 5 U G 	 W O S : 0 0 0 2 6 2 5 4 8 4 0 0 0 0 3 	 	 
 
 J 	 M e y e r ,   M 	 	 	 	 M e y e r ,   M a r t i n 	 	 	 A r e   p a t e n t i n g   s c i e n t i s t s   t h e   b e t t e r   s c h o l a r s ?   A n   e x p l o r a t o r y   c o m p a r i s o n   o f   i n v e n t o r - a u t h o r s   w i t h   t h e i r   n o n - i n v e n t i n g   p e e r s   i n   n a n o - s c i e n c e   a n d   t e c h n o l o g y 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 7 t h   T r i p l e   H e l e x   C o n f e r e n c e 	 M A Y   1 8 - 2 1 ,   2 0 0 5 	 T u r i n ,   I T A L Y 	 I t a l i a n   M i n i s t 	 	 p a t e n t - p u b l i c a t i o n   t r a d e - o f f ;   s c i e n c e - t e c h n o l o g y   l i n k a g e ;   s t a r   s c i e n t i s t s ;   b i b l i o m e t r i c s 	 E N T R E P R E N E U R I A L   U N I V E R S I T I E S ;   A C A D E M I C   I N V E N T O R S ;   P U B L I C   S C I E N C E ;   T R I P L E - H E L I X ;   I N N O V A T I O N ;   N A N O T E C H N O L O G Y ;   B I O T E C H N O L O G Y ;   K N O W L E D G E ;   N E T W O R K S ;   P A T T E R N S 	 T h i s   p a p e r   e x p l o r e s   t h e   r e l a t i o n s h i p   b e t w e e n   s c i e n t i f i c   p u b l i c a t i o n   a n d   p a t e n t i n g   a c t i v i t y .   M o r e   s p e c i f i c a l l y ,   i t   e x a m i n e s   f o r   t h e   f i e l d   o f   n a n o - s c i e n c e   a n d   n a n o - t e c h n o l o g y   w h e t h e r   r e s e a r c h e r s   w h o   b o t h   p u b l i s h   a n d   p a t e n t   a r e   m o r e   p r o d u c t i v e   a n d   m o r e   h i g h l y   c i t e d   t h a n   t h e i r   p e e r s   w h o   c o n c e n t r a t e   o n   s c h o l a r l y   p u b l i c a t i o n   i n   c o m m u n i c a t i n g   t h e i r   r e s e a r c h   r e s u l t s .   T h i s   s t u d y   i s   b a s e d   o n   a n   a n a l y s i s   o f   t h e   n a n o - s c i e n c e   p u b l i c a t i o n s   a n d   n a n o - t e c h n o l o g y   p a t e n t s   o f   a   s m a l l   s e t   o f   E u r o p e a n   c o u n t r i e s .   W h i l e   o n l y   a   v e r y   f e w   n a n o - s c i e n t i s t s   a p p e a r   t o   h o l d   p a t e n t s   i n   n a n o - t e c h n o l o g y ,   m a n y   n a n o - i n v e n t o r s   s e e m   t o   b e   a c t i v e l y   p u b l i s h i n g   n a n o - s c i e n c e   r e s e a r c h .   O v e r a l l ,   t h e   p a t e n t i n g   s c i e n t i s t s   a p p e a r   t o   o u t p e r f o r m   t h e i r   s o l e l y   p u b l i s h i n g   ( n o n - i n v e n t i n g )   p e e r s   i n   t e r m s   o f   p u b l i c a t i o n   c o u n t s   a n d   c i t a t i o n   f r e q u e n c y .   H o w e v e r ,   a   c l o s e r   e x a m i n a t i o n   o f   t h e   h i g h l y   a c t i v e   a n d   h i g h l y   c i t e d   n a n o - a u t h o r s   p o i n t s   t o   a   s l i g h t l y   d i f f e r e n t   s i t u a t i o n .   W h i l e   s t i l l   o v e r - r e p r e s e n t e d   a m o n g   t h e   h i g h l y   c i t e d   a u t h o r s ,   i n v e n t o r - a u t h o r s   a p p e a r   n o t   t o   b e   a m o n g   t h e   m o s t   h i g h l y   c i t e d   a u t h o r s   i n   t h a t   c a t e g o r y ,   w i t h   a   s i n g l e   n o t a b l e   e x c e p t i o n .   O n e   p o l i c y   i m p l i c a t i o n   i s   t h a t ,   g e n e r a l l y   s p e a k i n g ,   p a t e n t i n g   a c t i v i t y   d o e s   n o t   a p p e a r   t o   h a v e   a n   a d v e r s e   i m p a c t   o n   t h e   p u b l i c a t i o n   a n d   c i t a t i o n   p e r f o r m a n c e   o f   r e s e a r c h e r s .   ( c )   2 0 0 6   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   S u s s e x ,   F r e e m a n   C t r ,   S P R U ,   B r i g h t o n   B N 1   9 Q E ,   E   S u s s e x ,   E n g l a n d ;   K a t h o l i e k e   U n i v   L e u v e n ,   L o u v a i n ,   B e l g i u m ;   H e l s i n k i   U n i v   T e c h n o l ,   I n s t   S t r a t e g y   &   I n t   B u s i n e s s ,   E s p o o ,   F i n l a n d 	 M e y e r ,   M   ( r e p r i n t   a u t h o r ) ,   U n i v   S u s s e x ,   F r e e m a n   C t r ,   S P R U ,   B r i g h t o n   B N 1   9 Q E ,   E   S u s s e x ,   E n g l a n d . 	 m . s . m e y e r @ s u s s e x . a c . u k 	 M e y e r ,   M a r t i n / A - 2 1 4 3 - 2 0 1 3 ;   	 M e y e r ,   M a r t i n / 0 0 0 0 - 0 0 0 2 - 5 5 9 8 - 9 4 8 0 	 	 	 A s t e b r o   T ,   2 0 0 3 ,   E C O N   J ,   V 1 1 3 ,   P 2 2 6 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 0 2 9 7 . 0 0 0 8 9 ;   A Z A G R A - C A R O   J .   M . ,   2 0 0 6 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 3 1 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 5 - 6 1 1 0 - 3 ;   A Z A G R A C A R O   J M ,   2 0 0 3 ,   C   K N O W L   E C   S O C   C H A N G ;   B a l c o n i   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 3 ) 0 0 1 0 8 - 2 ;   B a s s e c o u l a r d   E ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 6 6 5 ;   B h a t t a c h a r y a   S ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 2 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 8 4 5 1 0 1 0 4 ;   B L A U W H O F   G ,   1 9 9 5 ,   T H E S I S   U   A M S T E R D A M   A ;   B l u m e n t h a l   D ,   1 9 9 6 ,   N E W   E N G L   J   M E D ,   V 3 3 5 ,   P 1 7 3 4 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 6 1 2 0 5 3 3 5 2 3 0 5 ;   B r u s o n i   S ,   2 0 0 1 ,   A D M I N   S C I   Q U A R T ,   V 4 6 ,   P 5 9 7 ,   D O I   1 0 . 2 3 0 7 / 3 0 9 4 8 2 5 ;   B U D W O R T H   D W ,   1 9 9 6 ,   O V E R V I E W   A C T I V I T I E S ;   C A L D E R I N I   M ,   2 0 0 4 ,   1 6 2   C E S P R I   U   B O C C   M I ;   C A L D E R I N I   M ,   2 0 0 5 ,   5   I N T   T R I P   H E L   C   T U R ;   C a l v e r t   H ,   2 0 0 3 ,   S E M I N   O N C O L ,   V 3 0 ,   P 2 ,   D O I   1 0 . 1 0 5 3 / s o n c . 2 0 0 3 . 3 7 2 6 7 ;   C l a r k   B ,   1 9 9 8 ,   C R E A T I N G   E N T R E P R E N E U ;   C O W A R D   H R ,   1 9 8 9 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 4 ,   P 5 0 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 8 9 0 1 4 0 0 1 0 6 ;   D A R B Y   M R ,   2 0 0 5 ,   1 1 1 8 1   N B E R ;   Z u c k e r   L .   G . ,   2 0 0 3 ,   9 8 2 5   N B E R ;   E L L I S   P ,   1 9 7 8 ,   J   D O C ,   V 3 4 ,   P 1 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 5 0 ;   E L L I S   P ,   1 9 7 7 ,   P   I N T   S   P A T   I N F   D O C ;   E T K O W I T Z   H ,   1 9 9 7 ,   U   G L O B A L   K N O W L E D G E   E ;   E T Z K O W I T Z   H ,   1 9 8 3 ,   M I N E R V A ,   V 2 1 ,   P 1 9 8 ;   G e u n a   A ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 7 9 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 4 . 0 0 5 ;   G i b b o n s   M . ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G i t t e l m a n   M ,   2 0 0 3 ,   M A N A G E   S C I ,   V 4 9 ,   P 3 6 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 9 . 4 . 3 6 6 . 1 4 4 2 0 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 1 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 4 8 9 2 9 6 6 8 ;   G l a n z e l   W . ,   2 0 0 3 ,   N A N O T E C H N O L O G Y   A N A L ;   G l a s e r   J ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 1 9 ;   G o d i n   B ,   1 9 9 8 ,   S O C   S T U D   S C I ,   V 2 8 ,   P 4 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 8 0 2 8 0 0 3 0 0 4 ;   G o d i n   B ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 5 8 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 5 9 - 4 ;   G O D I N   B ,   1 9 9 3 ,   T H E S I S   U   S U S S E X   B R I G ;   G r a n s t r a n d   O ,   1 9 9 7 ,   C A L I F   M A N A G E   R E V ,   V 3 9 ,   P 8 ;   G u l b r a n d s e n   M ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 9 3 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 5 . 0 0 4 ;   G U L B R A N D S E N   M ,   2 0 0 2 ,   4   T R I P L   H E L   C   C O P   N O ;   H e i n z e   T . ,   2 0 0 4 ,   N A N O T E C H N O L O G Y   L A W   B ,   V 1 ,   P 4 2 7 ;   H e l l e r   M A ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 6 9 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 0 . 5 3 6 4 . 6 9 8 ;   H i c k s   D ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 7 8 ;   H i c k s   D ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 6 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 1 4 7 - 5 ;   H u l l m a n n   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 0 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 7 . 4 5 4 6 7 . a 7 ;   K L I T K O U   A ,   I N   P R E S S   S C I E N T O M E T R ,   V 7 0 ;   K U M A R A M A N G A L A M   K ,   2 0 0 4 ,   A S L I B   P ,   V 5 7 ,   P 2 6 1 ;   K u u s i   O ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 9 ,   P 6 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 2 ) 0 0 1 8 2 - 8 ;   L a n g l o i s   R .   N . ,   1 9 9 2 ,   I N D   C O R P   C H A N G E ,   V 1 ,   P 9 9 ,   D O I   D O I   1 0 . 1 0 9 3 / I C C / 1 . 1 . 9 9 ;   L e s s i g   L . ,   2 0 0 1 ,   F U T U R E   I D E A S   F A T E   C O ;   L e y d e s d o r f f   L ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 7 6 3 0 8 2 8 7 ;   M a l o   S ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 3 1 2 7 5 5 1 ;   M a l s c h   I ,   1 9 9 9 ,   N A N O T E C H N O L O G Y ,   V 1 0 ,   P 1 ,   D O I   1 0 . 1 0 8 8 / 0 9 5 7 - 4 4 8 4 / 1 0 / 1 / 0 0 2 ;   M a l s c h   I . ,   1 9 9 7 ,   N A N O T E C H N O L O G Y   E U R O P ;   M a r k i e w i c z   K . ,   2 0 0 4 ,   C O M M E R C I A L I Z I N G   L A B ;   M a r t i n   B e n   R . ,   2 0 0 0 ,   V E S T ,   V 1 3 ,   P 9 ;   M c M i l l a n   G S ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 0 - X ;   M e y e r   M ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 7 3 5 ;   M e y e r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 4 0 7 2 7 8 5 1 ;   M e y e r   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 1 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 5 7 7 2 7 2 0 9 ;   M e y e r   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 5 5 ;   M e y e r   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 1 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 2 6 2 1 1 0 5 ;   M e y e r   M . ,   2 0 0 5 ,   W O R L D   P A T E N T   I N F O R M ,   V 2 7 ,   P 1 1 3 ,   D O I   D O I   1 0 . 1 0 1 6 / J . W P I . 2 0 0 4 . 1 0 . 0 1 2 ;   M e y e r   M . ,   2 0 0 2 ,   M A P P I N G   E X C E L L E N C E   N ;   M E Y E R   M ,   2 0 0 4 ,   C O N T I N U O U S   P R O F E S S I O ;   M e y e r   M S ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 2 9 1 4 0 3 3 ;   M E Y E R   M S ,   2 0 0 2 ,   T H E S I S   U   S U S S E X   B R I G ;   M u r r a y   F ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 6 4 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 1 3 ;   M u r r a y   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 3 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 7 0 - 7 ;   M U R R A Y   F ,   2 0 0 3 ,   S P R U   C   H O N   K E I T H   P A V ;   N A R I N   F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 5 ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   N a r i n   F . ,   1 9 9 5 ,   R E S   E V A L U A T ,   V 5 ,   P 1 8 3 ;   N O Y O N S   E C M ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 4 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 0 7 - 8 ;   N o y o n s   E . C . M . ,   2 0 0 4 ,   M A P P I N G   E X C E L L E N C E   S ;   O p p e n h e i m   C ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 4 0 5 ;   P R I C E   D J D ,   1 9 6 5 ,   T E C H N O L   C U L T ,   V 6 ,   P 5 5 3 ;   R a b e h a r i s o a   V . ,   1 9 9 2 ,   D Y N A M I C S   S C I   B A S E D   I ,   P 4 5 ;   R a n g a   L M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 8 8 6 1 1 0 1 3 ;   R A P M U N D   A ,   2 0 0 4 ,   9   N O R D   W O R K S H   B I B L   I ;   R i p   A . ,   1 9 9 2 ,   T E C H N O L O G I C A L   D E V   S C ,   P 2 3 1 ;   S a r a g o s s i   S . ,   2 0 0 3 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 8 ,   P 4 7 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 6 7 8 7 1 9 5 6 7 ;   S c h m o c h   U ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 7 1 7 ;   S C H M O C H   U ,   2 0 0 6 ,   5   I N T   C   H I G H   E D   C U B ;   S c h u m m e r   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 2 . 7 1 3 1 4 . 3 8 ;   S T E P H A N   P E ,   2 0 0 5 ,   I N   P R E S S   E C   I N N O V A T I ;   S t o k e s   D .   E . ,   1 9 9 7 ,   P A S T E U R S   Q U A D R A N T   B A ;   T i j s s e n   R J W ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 6 9 5 ;   T i j s s e n   R J W ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 2 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 0 8 - 0 ;   V a n   L o o y   B ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 4 2 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 3 . 0 9 . 0 0 4 ;   V e r b e e k   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 4 5 1 6 7 3 1 ;   W H A L L E Y   P ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 2 0 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 2 0 5 ;   Z I T T   M ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ;   Z i t t   M ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 6 ;   Z U C K E R   G L ,   1 9 9 5 ,   5 3 4 2   N B E R ;   Z u c k e r   L G ,   1 9 9 8 ,   A M   E C O N   R E V ,   V 8 8 ,   P 2 9 0 ;   Z u c k e r   L G ,   1 9 9 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 3 ,   P 1 2 7 0 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 3 . 2 3 . 1 2 7 0 9 	 9 0 	 7 3 	 7 4 	 8 	 6 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 D E C 	 2 0 0 6 	 3 5 	 1 0 	 	 	 	 	 1 6 4 6 	 1 6 6 2 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 1 3 	 	 1 7 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 1 2 2 Q I 	 W O S : 0 0 0 2 4 3 2 4 1 1 0 0 0 1 5 	 	 
 
 J 	 P e n d l e b u r y ,   D A 	 	 	 	 P e n d l e b u r y ,   D a v i d   A . 	 	 	 T h e   u s e   a n d   m i s u s e   o f   j o u r n a l   m e t r i c s   a n d   o t h e r   c i t a t i o n   i n d i c a t o r s 	 A R C H I V U M   I M M U N O L O G I A E   E T   T H E R A P I A E   E X P E R I M E N T A L I S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i m p a c t   f a c t o r ;   b i b l i o m e t r i c   i n d i c a t o r s ;   p e e r   r e v i e w ;   c i t a t i o n   a n a l y s i s 	 I M P A C T - F A C T O R S ;   S U B J E C T   C A T E G O R I E S ;   S C I E N C E ;   I N D E X ;   I N F O R M A T I O N ;   P E R F O R M A N C E ;   I N S T I T U T E ;   G A R F I E L D ;   T O O L ;   W E B 	 T h i s   a r t i c l e   r e v i e w s   t h e   n a t u r e   a n d   u s e   o f   t h e   j o u r n a l   i m p a c t   f a c t o r   a n d   o t h e r   c o m m o n   b i b l i o m e t r i c   m e a s u r e s   f o r   a s s e s s i n g   r e s e a r c h   i n   t h e   s c i e n c e s   a n d   s o c i a l   s c i e n c e s   b a s e d   o n   d a t a   c o m p i l e d   b y   T h o m s o n   R e u t e r s .   J o u r n a l   i m p a c t   f a c t o r s   a r e   f r e q u e n t l y   m i s u s e d   t o   a s s e s s   t h e   i n f l u e n c e   o f   i n d i v i d u a l   p a p e r s   a n d   a u t h o r s ,   b u t   s u c h   u s e s   w e r e   n e v e r   i n t e n d e d .   T h o m s o n   R e u t e r s   a l s o   e m p l o y s   o t h e r   m e a s u r e s   o f   j o u r n a l   i n f l u e n c e ,   w h i c h   a r e   c o n t r a s t e d   w i t h   t h e   i m p a c t   f a c t o r .   F i n a l l y ,   t h e   a u t h o r   c o m m e n t s   o n   t h e   p r o p e r   u s e   o f   c i t a t i o n   d a t a   i n   g e n e r a l ,   o f t e n   a s   a   s u p p l e m e n t   t o   p e e r   r e v i e w .   T h i s   r e v i e w   m a y   h e l p   g o v e r n m e n t   p o l i c y m a k e r s ,   u n i v e r s i t y   a d m i n i s t r a t o r s ,   a n d   i n d i v i d u a l   r e s e a r c h e r s   b e c o m e   b e t t e r   a c q u a i n t e d   w i t h   t h e   p o t e n t i a l   b e n e f i t s   a n d   l i m i t a t i o n s   o f   b i b l i o m e t r i c s   i n   t h e   e v a l u a t i o n   o f   r e s e a r c h . 	 T h o m s o n   R e u t e r s ,   P h i l a d e l p h i a ,   P A   U S A 	 P e n d l e b u r y ,   D A   ( r e p r i n t   a u t h o r ) ,   T h o m s o n   R e u t e r s ,   P h i l a d e l p h i a ,   P A   U S A . 	 d a v i d . p e n d l e b u r y @ t h o m s o n r e u t e r s . c o m 	 P e n d l e b u r y ,   D a v i d / C - 7 5 8 5 - 2 0 0 9 	 	 	 	 A d l e r   R . ,   2 0 0 8 ,   C I T A T I O N   S T A T   R E P O R T ;   B A N K S   M A ,   2 0 0 8 ,   O C L C   S Y S T E M S   S E R V I C E ,   V 2 4 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B e n s m a n   S J ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 9 0 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 6 2 ;   B e n s m a n   S J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 9 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 1 0 ;   B e r g s t r o m   C . ,   2 0 0 7 ,   C   R L   N E W S ,   V 6 8 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B r a u n   T ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 8 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B U T L E R   L i n d a ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 8 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 7 ;   E g g h e   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 3 0 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 2 ;   E g g h e   L ,   2 0 0 2 ,   C A N   J   I N F O R M   L I B   S C I ,   V 2 7 ,   P 2 9 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 2 6 2 3 ,   D O I   1 0 . 1 0 9 6 / f j . 0 8 - 1 0 7 9 3 8 ;   G A R F I E L D   E ,   1 9 7 6 ,   N A T U R E ,   V 2 6 4 ,   P 6 0 9 ,   D O I   1 0 . 1 0 3 8 / 2 6 4 6 0 9 a 0 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G L A N Z E L   W ,   2 0 0 8 ,   P   W I S   2 0 0 8   B E R L   4   I N ;   H a r n a d   S . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 1 0 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 8 ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a s c o   P . ,   2 0 0 5 ,   C U R R E N T   S C I ,   V 8 9 ,   P 1 5 3 7 ;   K e t c h a m   C M ,   2 0 0 7 ,   L A B   I N V E S T ,   V 8 7 ,   P 1 1 7 4 ,   D O I   1 0 . 1 0 3 8 / l a b i n v e s t . 3 7 0 0 6 8 8 ;   K R A U Z E   T ,   1 9 7 7 ,   S O C I O L O G Y   S C I   E U R O P E ,   P 1 9 3 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   M a r k p i n   T ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 6 0 - 3 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 7 ;   M o e d   H F ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 9 9 0 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M o e d   H F ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 3 ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   M o n a s t e r s k y   R i c h a r d ,   2 0 0 5 ,   C H R O N   H I G H E R   E D U C ,   V 5 8 ,   p A 1 2 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N i c o l a i s e n   J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 6 0 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 2 0 ;   O S S O W S K A   M ,   1 9 3 6 ,   O R G A N O N ,   V 1 ,   P 1 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P u d o v k i n   A I ,   2 0 0 4 ,   P   A S I S T   A N N U ,   V 4 1 ,   P 5 0 7 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 4 1 0 1 5 9 ;   R o u s s e a u   R ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 3 - 1 ;   R o u s s e a u   R ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 1 8 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S o m b a t s o m p o p   N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 7 5 - 2 ;   S o m b a t s o m p o p   N ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 6 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 5 0 ;   S o m b a t s o m p o p   N ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 7 9 4 . 9 8 8 5 4 . f 6 ;   S t r i n g e r   M J ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 1 6 8 3 ;   V A I D Y A   J S ,   2 0 0 5 ,   B M J   R A P I D   R E S P O N S E ;   v a n   L e e u w e n   T N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 7 - z ;   V a n   L e e u w e n   T N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 8 7 0 9 6 9 4 ;   v a n   L e e u w e n   T N ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 4 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 6 0 5 ;   V i n k l e r   P ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 9 1 ;   W O U T E R S   P ,   1 9 9 9 ,   C I T A T I O N   C U L T U R E ,   P 8 2 ;   Z i t t   M . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 4 9 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 9 2 ;   Z i t t   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 0 	 6 5 	 7 2 	 7 5 	 3 	 5 4 	 B I R K H A U S E R   V E R L A G   A G 	 B A S E L 	 V I A D U K S T R A S S E   4 0 - 4 4 ,   P O   B O X   1 3 3 ,   C H - 4 0 1 0   B A S E L ,   S W I T Z E R L A N D 	 0 0 0 4 - 0 6 9 X 	 	 	 A R C H   I M M U N O L   T H E R   E X 	 A r c h .   I m m u n o l .   T h e r .   E x p . 	 F E B 	 2 0 0 9 	 5 7 	 1 	 	 	 	 	 1 	 1 1 	 	 1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y 	 	 1 1 	 I m m u n o l o g y 	 I m m u n o l o g y 	 4 0 9 N I 	 W O S : 0 0 0 2 6 3 5 1 2 0 0 0 0 0 1 	 1 9 2 1 9 5 2 6 	 
 
 J 	 v o n   W a r t b u r g ,   I ;   T e i c h e r t ,   T ;   R o s t ,   K 	 	 	 	 v o n   W a r t b u r g ,   I ;   T e i c h e r t ,   T ;   R o s t ,   K 	 	 	 I n v e n t i v e   p r o g r e s s   m e a s u r e d   b y   m u l t i - s t a g e   p a t e n t   c i t a t i o n   a n a l y s i s 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 p a t e n t s ;   t e c h n o l o g i c a l   c h a n g e ;   b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   s o c i a l   n e t w o r k   a n a l y s i s 	 T E C H N O L O G I C A L - C H A N G E ;   C O M B I N E D   C O C I T A T I O N ;   W O R D   A N A L Y S I S ;   S C I E N C E ;   I N D I C A T O R S ;   E X P L O R A T I O N ;   N E T W O R K S ;   I N N O V A T I O N S ;   S T A T I S T I C S ;   F R E Q U E N C Y 	 S t u d i e s   o f   t e c h n o l o g i c a l   c h a n g e   c o n s t i t u t e   a   f i e l d   o f   g r o w i n g   i m p o r t a n c e   a n d   s o p h i s t i c a t i o n .   I n   t h i s   p a p e r   w e   c o n t r i b u t e   t o   t h e   d i s c u s s i o n   w i t h   a   m e t h o d o l o g i c a l   r e f l e c t i o n   a n d   a p p l i c a t i o n   o f   m u l t i - s t a g e   p a t e n t   c i t a t i o n   a n a l y s i s   f o r   t h e   m e a s u r e m e n t   o f   i n v e n t i v e   p r o g r e s s .   I n v e s t i g a t i n g   s p e c i f i c   p a t t e r n s   o f   p a t e n t   c i t a t i o n   d a t a ,   w e   c o n c l u d e   t h a t   s i n g l e - s t a g e   c i t a t i o n   a n a l y s i s   c a n n o t   r e v e a l   t e c h n o l o g i c a l   p a t h s   o r   l i n e a g e s .   T h e r e f o r e ,   o n e   s h o u l d   a l s o   m a k e   u s e   o f   i n d i r e c t   c i t a t i o n s   a n d   b i b l i o g r a p h i c a l   c o u p l i n g .   T o   m e a s u r e   a s p e c t s   o f   c u m u l a t i v e   i n v e n t i v e   p r o g r e s s ,   w e   d e v e l o p   a   " s h a r e d   s p e c i a l i z a t i o n   m e a s u r e "   o f   p a t e n t   f a m i l i e s .   W e   r e l a t e   t h i s   m e a s u r e   t o   a n   e x p e r t   r a t i n g   o f   t h e   t e c h n o l o g i c a l   v a l u e   a d d e d   i n   t h e   f i e l d   o f   v a r i a b l e   v a l v e   a c t u a t i o n   f o r   i n t e r n a l   c o m b u s t i o n   e n g i n e s .   I n   s u m ,   t h e   s t u d y   p r e s e n t s   p r o m i s i n g   e v i d e n c e   f o r   m u l t i - s t a g e   p a t e n t   c i t a t i o n   a n a l y s i s   i n   o r d e r   t o   e x p l a i n   a s p e c t s   o f   t e c h n o l o g i c a l   c h a n g e .   ( c )   2 0 0 5   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   H a m b u r g ,   D - 2 0 1 4 6   H a m b u r g ,   G e r m a n y ;   U n i v   Z u r i c h ,   Z u r i c h ,   S w i t z e r l a n d 	 v o n   W a r t b u r g ,   I   ( r e p r i n t   a u t h o r ) ,   U n i v   H a m b u r g ,   V o n   M e l l e   P k   5 ,   D - 2 0 1 4 6   H a m b u r g ,   G e r m a n y . 	 W a r t b u r g @ e c o n . u n i - h a m b u r g . d e 	 R o s t ,   K a t j a / N - 3 4 2 0 - 2 0 1 3 	 R o s t ,   K a t j a / 0 0 0 0 - 0 0 0 2 - 7 7 5 2 - 7 8 1 8 	 	 	 A k e r s   N . ,   2 0 0 0 ,   W O R L D   P A T E N T   I N F O R M ,   V 2 2 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 0 ) 0 0 0 6 5 - X ;   A L B E R T   M B ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 5 5 - U ;   A r c h i b u g i   D . ,   1 9 9 2 ,   S C I   P U B L   P O L I C Y ,   V 1 9 ,   P 3 5 7 ;   A r u n d e l   A ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 3 3 - X ;   B a l c o n i   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 3 ) 0 0 1 0 8 - 2 ;   B A S B E R G   B L ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 7 - 8 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B r e i t z m a n   A ,   2 0 0 2 ,   R E S   T E C H N O L   M A N A G E ,   V 4 5 ,   P 2 8 ;   C a r p e n t e r   M .   P . ,   1 9 8 1 ,   W O R L D   P A T E N T   I N F O R M A ,   V 3 ,   P 1 6 0 ,   D O I   1 0 . 1 0 1 6 / 0 1 7 2 - 2 1 9 0 ( 8 1 ) 9 0 0 9 8 - 3 ;   C O C K B U R N   I M ,   2 0 0 3 ,   P A T E N T S   K N O W L E D G E   B A ,   P 1 ;   C O H E N   W M ,   2 0 0 3 ,   P A T E N T S   K N O W L E D G E   B A ,   P 1 ;   D e n g   Z . ,   1 9 9 9 ,   F I N A N C I A L   A N A L   J ,   V 5 5 ,   P 2 0 ,   D O I   1 0 . 2 4 6 9 / f a j . v 5 5 . n 3 . 2 2 6 9 ;   D O S I   G ,   1 9 8 2 ,   R E S   P O L I C Y ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 2 ) 9 0 0 1 6 - 6 ;   E g g h e   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 5 8 6 1 2 0 1 4 ;   * E P O ,   2 0 0 5 ,   G U I D   E X   B ,   p C H 4 ;   F l e m i n g   L ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 1 0 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 1 3 5 - 9 ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G O O D M A N   L A ,   1 9 6 1 ,   A N N   M A T H   S T A T ,   V 3 2 ,   P 1 4 8 ,   D O I   1 0 . 1 2 1 4 / a o m s / 1 1 7 7 7 0 5 1 4 8 ;   G R I L I C H E S   Z ,   1 9 9 0 ,   J   E C O N   L I T ,   V 2 8 ,   P 1 6 6 1 ;   G r u p p   H . ,   1 9 9 8 ,   F D N   E C   I N N O V A T I O N ;   H A L L   B ,   2 0 0 0 ,   N B E R   W O R K I N G   P A P E R ,   V 7 7 4 1 ;   H A L L   B H ,   2 0 0 1 ,   8 4 9 8   N B E R   W O R K I N G   P A ;   H A N N I B A L   W ,   1 9 9 3 ,   V E R G L E I C H E N D E   U N T E R S ;   H a r h o f f   D ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 3 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 1 2 4 - 5 ;   H a r h o f f   D ,   1 9 9 9 ,   R E V   E C O N   S T A T ,   V 8 1 ,   P 5 1 1 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 9 5 5 8 2 6 5 ;   H e n d e r s o n   R ,   1 9 9 8 ,   R E V   E C O N   S T A T ,   V 8 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 8 5 5 7 2 2 1 ;   J A F F E   A B ,   1 9 9 3 ,   Q   J   E C O N ,   V 1 0 8 ,   P 5 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 8 4 0 1 ;   L a n j o u w   J O ,   1 9 9 8 ,   J   I N D   E C O N ,   V 4 6 ,   P 4 0 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 6 4 5 1 . 0 0 0 8 1 ;   M A C R O B E R T S   M ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ;   M A N S F I E L D   E ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 7 3 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 7 3 ;   M e y e r   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 1 3 3 2 5 6 4 8 ;   M i c h e l   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 0 3 0 8 7 1 ;   N A R I N   F ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 8 - X ;   N A R I N   F ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 9 ;   P A V I T T   K ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 4 2 ;   P O D O L N Y   J M ,   1 9 9 5 ,   A M   J   S O C I O L ,   V 1 0 0 ,   P 1 2 2 4 ,   D O I   1 0 . 1 0 8 6 / 2 3 0 6 3 7 ;   C e c i l   D . Q u i l l e n ,   2 0 0 1 ,   F E D E R A L   C I R C U I T   B A R ,   V 1 1 ,   P 1 ;   R o s e n b e r g   N . ,   1 9 9 6 ,   M O S A I C   E C   G R O W T H ;   R o s e n b e r g   N . ,   1 9 8 2 ,   I N S I D E   B L A C K   B O X   T E C ;   R o s e n k o p f   L ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 2 8 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 6 0 ;   S A H A L   D ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 5 - 0 ;   S c h m o o k l e r   J . ,   1 9 6 6 ,   I N V E N T I O N   E C   G R O W T H ;   S c h u m p e t e r   J A ,   1 9 3 9 ,   B U S I N E S S   C Y C L E S ;   T i j s s e n   R J W ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 8 0 - 3 ;   T R A J T E N B E R G   M ,   1 9 9 0 ,   R A N D   J   E C O N ,   V 2 1 ,   P 1 7 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 5 0 2 ;   T r a j t e n b e r g   M ,   1 9 9 7 ,   E C   I N N O V A T I O N   N E W   T E ,   V 5 ,   P 1 9 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 3 8 5 9 9 7 0 0 0 0 0 0 0 6 ;   V A N V I A N E N   B G ,   1 9 9 0 ,   R E S   P O L I C Y ,   V 1 9 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 0 ) 9 0 0 3 4 - 4 ;   W a s s e r m a n n   S . ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L 	 5 0 	 7 1 	 7 1 	 5 	 6 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 D E C 	 2 0 0 5 	 3 4 	 1 0 	 	 	 	 	 1 5 9 1 	 1 6 0 7 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 1 	 	 1 7 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 9 9 3 N J 	 W O S : 0 0 0 2 3 3 9 6 0 5 0 0 0 0 8 	 	 
 
 J 	 Z u c k e r ,   L G ;   D a r b y ,   M R ;   F u r n e r ,   J ;   L i u ,   R C ;   M a ,   H Y 	 	 	 	 Z u c k e r ,   L y n n e   G . ;   D a r b y ,   M i c h a e l   R . ;   F u r n e r ,   J o n a t h a n ;   L i u ,   R o b e r t   C . ;   M a ,   H o n g y a n 	 	 	 M i n e r v a   u n b o u n d :   K n o w l e d g e   s t o c k s ,   k n o w l e d g e   f l o w s   a n d   n e w   k n o w l e d g e   p r o d u c t i o n 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b o u n d a r y   s p a n n i n g ;   c o l l a b o r a t i o n ;   n a n o t e c h n o l o g y ;   o r g a n i z a t i o n   t y p e 	 R E S E A R C H - A N D - D E V E L O P M E N T ;   C U L T U R A L   E N T R E P R E N E U R S H I P ;   T E C H N O L O G I C A L   O P P O R T U N I T Y ;   1 9 T H - C E N T U R Y   B O S T O N ;   S P I L L O V E R S ;   B I O T E C H N O L O G Y ;   E C O N O M I C S ;   P A T E N T S ;   S C I E N C E ;   F I R M S 	 R e g i o n a l   g r o w t h   o f   n e w   k n o w l e d g e   i n   n a n o t e c h n o l o g y ,   a s   m e a s u r e d   b y   c o u n t s   o f   a r t i c l e s   a n d   p a t e n t s   i n   t h e   o p e n - a c c e s s   d i g i t a l   l i b r a r y   N a n o B a n k ,   i s   s h o w n   t o   b e   p o s i t i v e l y   a f f e c t e d   b o t h   b y   t h e   s i z e   o f   e x i s t i n g   r e g i o n a l   s t o c k s   o f   r e c o r d e d   k n o w l e d g e   i n   a l l   s c i e n t i f i c   f i e l d s ,   a n d   t h e   e x t e n t   t o   w h i c h   t a c i t   k n o w l e d g e   i n   a l l   f i e l d s   f l o w s   b e t w e e n   i n s t i t u t i o n s   o f   d i f f e r e n t   o r g a n i z a t i o n a l   t y p e s .   T h e   l e v e l   o f   f e d e r a l   f u n d i n g   h a s   a   l a r g e ,   r o b u s t   i m p a c t   o n   b o t h   p u b l i c a t i o n   a n d   p a t e n t i n g .   T h e   d a t a   p r o v i d e   s u p p o r t   f o r   t h e   c u m u l a t i v e   a d v a n t a g e   m o d e l   o f   k n o w l e d g e   p r o d u c t i o n ,   a n d   f o r   o n g o i n g   e f f o r t s   t o   i n s t i t u t i o n a l i z e   c h a n n e l s   t h r o u g h   w h i c h   c r o s s - o r g a n i z a t i o n a l   c o l l a b o r a t i o n   m a y   b e   a c h i e v e d .   ( C )   2 0 0 7   P u b l i s h e d   b y   E l s e v i e r   B . V . 	 U n i v   C a l i f   L o s   A n g e l e s ,   D e p t   S o c i o l ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   U n i v   C a l i f   L o s   A n g e l e s ,   D e p t   P u b l   P o l i c y ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   U n i v   C a l i f   L o s   A n g e l e s ,   A n d e r s o n   S c h   M a n a g e m e n t ,   D e p t   M a n a g e m e n t ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   U n i v   C a l i f   L o s   A n g e l e s ,   A n d e r s o n   S c h   M a n a g e m e n t ,   D e p t   E c o n   &   P u b l   P o l i c y ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   U n i v   C a l i f   L o s   A n g e l e s ,   D e p t   I n f o r m a t   S t u d i e s ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   D e l o i t t e   C o n s u l t i n g   L L P ,   L o s   A n g e l e s ,   C A   9 0 0 7 1   U S A ;   U n i v   C a l i f   L o s   A n g e l e s ,   S c h   P u b l   A f f a i r s ,   C t r   I n t   S c i   T e c h n o l   &   C u l t u r a l   P o l i c y ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   N a t l   B u r   E c o n   R e s ,   C a m b r i d g e ,   M A   0 2 1 3 8   U S A 	 Z u c k e r ,   L G   ( r e p r i n t   a u t h o r ) ,   U n i v   C a l i f   L o s   A n g e l e s ,   D e p t   S o c i o l ,   U C L A   B o x   9 5 1 5 5 1 ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A . 	 z u c k e r @ u c l a . e d u ;   d a r b y @ u c l a . e d u ;   j f u r n e r @ u c l a . e d u ;   r o b c l i u @ u c l a . e d u ;   h y m @ u c l a . e d u 	 Z u c k e r ,   L y n n e / C - 1 4 6 7 - 2 0 0 8 ;   D a r b y ,   M i c h a e l / C - 1 4 5 7 - 2 0 0 8 ;   	 Z u c k e r ,   L y n n e / 0 0 0 0 - 0 0 0 2 - 1 8 5 2 - 6 6 1 2 ;   D a r b y ,   M i c h a e l / 0 0 0 0 - 0 0 0 3 - 4 5 6 5 - 2 6 7 0 ;   F u r n e r ,   J o n a t h a n / 0 0 0 0 - 0 0 0 1 - 8 8 3 9 - 9 9 3 0 	 	 	 A d a m s   J D ,   1 9 9 6 ,   R A N D   J   E C O N ,   V 2 7 ,   P 7 0 0 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 8 7 8 ;   A D A M S   J D ,   1 9 9 0 ,   J   P O L I T   E C O N ,   V 9 8 ,   P 6 7 3 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 7 0 2 ;   A n t o n e l l i   C . ,   2 0 0 1 ,   M I C R O E C O N O M I C S   T E C H N ;   A r r o w   K . ,   1 9 6 2 ,   R A T E   D I R E C T I O N   I N V E N ,   P 6 0 9 ;   A u d r e t s c h   D B ,   1 9 9 6 ,   A M   E C O N   R E V ,   V 8 6 ,   P 6 3 0 ;   D A R B Y   M R ,   2 0 0 1 ,   C O M P   S T U D I E S   T E C H N O L ,   V 7 ,   P 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 3 7 - 1 0 7 1 ( 0 1 ) 0 1 0 0 5 - 8 ;   D I M A G G I O   P ,   1 9 8 2 ,   M E D I A   C U L T   S O C ,   V 4 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 3 4 4 3 7 8 2 0 0 4 0 0 1 0 4 ;   D I M A G G I O   P ,   1 9 8 2 ,   M E D I A   C U L T   S O C ,   V 4 ,   P 3 0 3 ;   E c c l e s   R .   G . ,   1 9 8 8 ,   D O I N G   D E A L S   I N V E S T M E ;   E f t h i m i a d i s   E N ,   1 9 9 6 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 1 ,   P 1 2 1 ;   F o r a y   D ,   2 0 0 4 ,   E C   K N O W L E D G E ;   G A R T R E L L   C D ,   1 9 8 7 ,   A N N U   R E V   S O C I O L ,   V 1 3 ,   P 4 9 ;   G R A N O V E T T E R   M ,   1 9 8 5 ,   A M   J   S O C I O L ,   V 9 1 ,   P 4 8 1 ,   D O I   1 0 . 1 0 8 6 / 2 2 8 3 1 1 ;   G R I L I C H E S   Z ,   1 9 9 0 ,   J   E C O N   L I T ,   V 2 8 ,   P 1 6 6 1 ;   G u l a t i   R ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 9 0 5 ) 2 0 : 5 < 3 9 7 : : A I D - S M J 3 5 > 3 . 0 . C O ; 2 - K ;   H e n d e r s o n   R ,   1 9 9 8 ,   R E V   E C O N   S T A T ,   V 8 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 8 5 5 7 2 2 1 ;   H u l l m a n n   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 0 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 7 . 4 5 4 6 7 . a 7 ;   J A F F E   A B ,   1 9 9 3 ,   Q   J   E C O N ,   V 1 0 8 ,   P 5 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 8 4 0 1 ;   J A F F E   A B ,   1 9 8 6 ,   A M   E C O N   R E V ,   V 7 6 ,   P 9 8 4 ;   J A F F E   A B ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 9 5 7 ;   J A F F E   A B ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 9 ) 9 0 0 0 7 - 3 ;   J o h n s o n   K P ,   2 0 0 4 ,   S U R V   C U R R   B U S ,   P 6 8 ;   K E N N E D Y   P . ,   1 9 9 8 ,   G U I D E   E C O N O M E T R I C S ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   M a c h l u p   F . ,   1 9 8 4 ,   K N O W L E D G E   I T S   C R E A T I ,   V I I I ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   P o w e l l   W .   W . ,   1 9 9 0 ,   R E S   O R G   B E H A V ;   S e b a s t i a n i   F ,   2 0 0 2 ,   A C M   C O M P U T   S U R V ,   V 3 4 ,   P 1 ,   D O I   1 0 . 1 1 4 5 / 5 0 5 2 8 2 . 5 0 5 2 8 3 ;   S t e p h a n   P E ,   1 9 9 6 ,   J   E C O N   L I T ,   V 3 4 ,   P 1 1 9 9 ;   S T I G L E R   G J ,   1 9 8 3 ,   J   P O L I T   E C O N ,   V 9 1 ,   P 5 2 9 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 1 6 5 ;   T Y R E E   A ,   1 9 7 9 ,   A M   S O C I O L   R E V ,   V 4 4 ,   P 4 1 0 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 8 8 4 ;   V a n   R i j s b e r g e n   C . ,   1 9 7 9 ,   I N F O R M   R E T R I E V A L ;   W a l d   A ,   1 9 4 3 ,   T   A M   M A T H   S O C ,   V 5 4 ,   P 4 2 6 ,   D O I   1 0 . 2 3 0 7 / 1 9 9 0 2 5 6 ;   Z u c k e r   L . ,   1 9 9 1 ,   R E S   S O C I O L O G Y   O R G ,   V 8 ,   P 1 5 7 ;   Z U C K E R   L G ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 7 2 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 8 6 2 ;   Z u c k e r   L G ,   1 9 9 8 ,   A M   E C O N   R E V ,   V 8 8 ,   P 2 9 0 ;   Z u c k e r   L G ,   1 9 9 8 ,   E C O N   I N Q ,   V 3 6 ,   P 6 5 ;   Z u c k e r   L G ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 3 8 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 1 3 8 . 1 4 2 7 4 ;   Z u c k e r   L . G . ,   2 0 0 1 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 6 ,   P 3 7 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 8 3 2 1 2 7 8 1 3 ;   Z u c k e r   L . G . ,   2 0 0 6 ,   1 2 6 6 9   N B E R ;   Z u c k e r   L .   G . ,   1 9 9 6 ,   T R U S T   O R G   F R O N T I E R S ,   P 9 0 ;   Z u c k e r   L   G ,   2 0 0 6 ,   S O C   I M P L I C A T I O N S   N A N 	 4 2 	 7 0 	 7 2 	 6 	 5 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 J U L 	 2 0 0 7 	 3 6 	 6 	 	 	 	 	 8 5 0 	 8 6 3 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 2 . 0 0 7 	 	 1 4 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 1 9 1 P E 	 W O S : 0 0 0 2 4 8 1 4 2 6 0 0 0 0 4 	 	 
 
 J 	 N i e l s e n ,   F A ;   B a l s l e v ,   D ;   H a n s e n ,   L K 	 	 	 	 N i e l s e n ,   F A ;   B a l s l e v ,   D ;   H a n s e n ,   L K 	 	 	 M i n i n g   t h e   p o s t e r i o r   c i n g u l a t e :   S e g r e g a t i o n   b e t w e e n   m e m o r y   a n d   p a i n   c o m p o n e n t s 	 N E U R O I M A G E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 m e t a - a n a l y s i s ;   P u b M e d ;   p o s i t r o n   e m i s s i o n   t o m o g r a p h y ;   m a g n e t i c   r e s o n a n c e   i m a g i n g ;   c i n g u l a t e   g y r u s ;   b r a i n   m a p p i n g ;   m e m o r y ;   p a i n ;   A l z h e i m e r ' s   d i s e a s e ;   a u t o m a t i c   d a t a   p r o c e s s i n g ;   b i b l i o m e t r i c s 	 P O S I T R O N - E M I S S I O N - T O M O G R A P H Y ;   P O S T T R A U M A T I C - S T R E S S - D I S O R D E R ;   C E R E B R A L - B L O O D - F L O W ;   C H I L D H O O D   S E X U A L - A B U S E ;   N O N N E G A T I V E   M A T R I X   F A C T O R I Z A T I O N ;   I R R I T A B L E - B O W E L - S Y N D R O M E ;   C O N S C I O U S   R E S T I N G   S T A T E ;   E P I S O D I C   M E M O R Y ;   H U M A N   B R A I N ;   A U T O B I O G R A P H I C A L   M E M O R Y 	 W e   p r e s e n t   a   g e n e r a l   m e t h o d   f o r   a u t o m a t i c   m e t a - a n a l y s e s   i n   n e u r o s c i e n c e   a n d   a p p l y   i t   o n   t e x t   d a t a   f r o m   p u b l i s h e d   f u n c t i o n a l   i m a g i n g   s t u d i e s   t o   e x t r a c t   m a i n   f u n c t i o n s   a s s o c i a t e d   w i t h   a   b r a i n   a r e a - t h e   p o s t e r i o r   c i n g u l a t e   c o r t e x   ( P C C ) .   A b s t r a c t s   f r o m   P u b M e d   a r e   d o w n - l o a d e d ,   w o r d s   e x t r a c t e d   a n d   c o n v e r t e d   t o   a   b a g - o f - w o r d s   m a t r i x   r e p r e s e n t a t i o n .   T h e   c o m b i n e d   d a t a   a r e   a n a l y z e d   w i t h   h i e r a r c h i c a l   n o n - n e g a t i v e   m a t r i x   f a c t o r i z a t i o n .   W e   f i n d   t h a t   t h e   p r o m i n e n t   t h e m e s   i n   t h e   P C C   c o r p u s   a r e   e p i s o d i c   m e m o r y   r e t r i e v a l   a n d   p a i n .   W e   f u r t h e r   c h a r a c t e r i z e   t h e   d i s t r i b u t i o n   i n   P C C   o f   t h e   T a l a i r a c h   c o o r d i n a t e s   a v a i l a b l e   i n   s o m e   o f   t h e   a r t i c l e s .   T h i s   s h o w s   a   t e n d e n c y   t o   f u n c t i o n a l   s e g r e g a t i o n   b e t w e e n   m e m o r y   a n d   p a i n   c o m p o n e n t s   w h e r e   m e m o r y   a c t i v a t i o n s   a r e   p r e d o m i n a n t l y   i n   t h e   c a u d a l   p a r t   a n d   p a i n   i n   t h e   r o s t r a l   p a r t   o f   P C C .   ( c )   2 0 0 5   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   C o p e n h a g e n   H o s p ,   C t r   N e u r o s c i ,   R i g s h o s p ,   D e p t   N e u r o l , N e u r o b i o l   R e s   U n i t ,   D K - 2 1 0 0   C o p e n h a g e n ,   D e n m a r k ;   D a n i s h   R e s   C t r   M a g n e t   R e s o n a n c e ,   H v i d o v r e ,   D e n m a r k ;   T e c h   U n i v   D e n m a r k ,   D K - 2 8 0 0   L y n g b y ,   D e n m a r k 	 N i e l s e n ,   F A   ( r e p r i n t   a u t h o r ) ,   U n i v   C o p e n h a g e n   H o s p ,   C t r   N e u r o s c i ,   R i g s h o s p ,   D e p t   N e u r o l , N e u r o b i o l   R e s   U n i t ,   B l d g   9 2 0 1 , B l e g d a m s v e j   9 ,   D K - 2 1 0 0   C o p e n h a g e n ,   D e n m a r k . 	 f n @ i m m . d t u . d k 	 H a n s e n ,   L a r s / E - 3 1 7 4 - 2 0 1 3 ;   N i e l s e n ,   F i n n / L - 4 6 9 7 - 2 0 1 3 	 N i e l s e n ,   F i n n / 0 0 0 0 - 0 0 0 1 - 6 1 2 8 - 3 3 5 6 	 	 	 A b e l   K M ,   2 0 0 3 ,   N E U R O R E P O R T ,   V 1 4 ,   P 3 8 7 ,   D O I   1 0 . 1 0 9 7 / 0 1 . w n r . 0 0 0 0 0 5 8 0 3 1 . 2 9 6 0 0 . 3 1 ;   A d l e r   L J ,   1 9 9 7 ,   A N E S T H   A N A L G ,   V 8 4 ,   P 1 2 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 3 9 - 1 9 9 7 0 1 0 0 0 - 0 0 0 2 3 ;   A N D R E A S E N   N C ,   1 9 9 5 ,   A M   J   P S Y C H I A T ,   V 1 5 2 ,   P 1 5 7 6 ;   A n d r e a s e n   N C ,   1 9 9 5 ,   N E U R O I M A G E ,   V 2 ,   P 2 9 6 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 5 . 1 0 3 7 ;   A r n o l d   J T ,   1 9 9 7 ,   B L O O D ,   V 8 9 ,   P 8 2 3 ;   B a c i u   M V ,   1 9 9 9 ,   A M   J   N E U R O R A D I O L ,   V 2 0 ,   P 1 9 2 0 ;   B a l s l e v   D ,   2 0 0 2 ,   H U M   B R A I N   M A P P ,   V 1 5 ,   P 1 3 5 ,   D O I   1 0 . 1 0 0 2 / h b m . 1 0 0 1 5 ;   B a r t e l s   A ,   2 0 0 0 ,   N E U R O R E P O R T ,   V 1 1 ,   P 3 8 2 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 7 5 6 - 2 0 0 0 1 1 2 7 0 - 0 0 0 4 6 ;   B e c e r r a   L R ,   1 9 9 9 ,   M A G N E T   R E S O N   M E D ,   V 4 1 ,   P 1 0 4 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 5 2 2 - 2 5 9 4 ( 1 9 9 9 0 5 ) 4 1 : 5 < 1 0 4 4 : : A I D - M R M 2 5 > 3 . 0 . C O ; 2 - M ;   B e n t l e y   D E ,   2 0 0 2 ,   C L I N   N E U R O P H Y S I O L ,   V 1 1 3 ,   P 1 3 5 1 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 8 - 2 4 5 7 ( 0 2 ) 0 0 1 4 9 - 9 ;   B e r m a n   R A ,   1 9 9 9 ,   H U M   B R A I N   M A P P ,   V 8 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 1 9 3 ( 1 9 9 9 ) 8 : 4 < 2 0 9 : : A I D - H B M 5 > 3 . 0 . C O ; 2 - 0 ;   B e r t h o z   A ,   1 9 9 7 ,   P H I L O S   T   R   S O C   B ,   V 3 5 2 ,   P 1 4 3 7 ,   D O I   1 0 . 1 0 9 8 / r s t b . 1 9 9 7 . 0 1 3 0 ;   B i n d e r   J R ,   1 9 9 9 ,   J   C O G N I T I V E   N E U R O S C I ,   V 1 1 ,   P 8 0 ,   D O I   1 0 . 1 1 6 2 / 0 8 9 8 9 2 9 9 9 5 6 3 2 6 5 ;   B o x e r   A L ,   2 0 0 3 ,   A R C H   N E U R O L - C H I C A G O ,   V 6 0 ,   P 9 4 9 ,   D O I   1 0 . 1 0 0 1 / a r c h n e u r . 6 0 . 7 . 9 4 9 ;   B r e m n e r   J   D o u g l a s ,   2 0 0 2 ,   C u r r   P s y c h i a t r y   R e p ,   V 4 ,   P 2 5 4 ,   D O I   1 0 . 1 0 0 7 / s 1 1 9 2 0 - 9 9 6 - 0 0 4 4 - 9 ;   B r e m n e r   J D ,   1 9 9 9 ,   A M   J   P S Y C H I A T ,   V 1 5 6 ,   P 1 7 8 7 ;   B r e m n e r   J D ,   2 0 0 3 ,   B I O L   P S Y C H I A T ,   V 5 3 ,   P 8 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 6 - 3 2 2 3 ( 0 2 ) 0 1 8 9 1 - 7 ;   B r e m n e r   J D ,   1 9 9 9 ,   B I O L   P S Y C H I A T ,   V 4 5 ,   P 8 0 6 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 6 - 3 2 2 3 ( 9 8 ) 0 0 2 9 7 - 2 ;   B r e t t   M ,   2 0 0 1 ,   N E U R O I M A G E ,   V 1 3 ,   P 8 5 ,   D O I   1 0 . 1 0 1 6 / S 1 0 5 3 - 8 1 1 9 ( 0 1 ) 9 1 4 2 8 - 4 ;   B r o m m   B ,   2 0 0 1 ,   N E W S   P H Y S I O L   S C I ,   V 1 6 ,   P 2 4 4 ;   B u r g e s s   N ,   2 0 0 1 ,   N E U R O I M A G E ,   V 1 4 ,   P 4 3 9 ,   D O I   1 0 . 1 0 0 6 / n i m g . 2 0 0 1 . 0 8 0 6 ;   B u s h   G ,   2 0 0 0 ,   T R E N D S   C O G N   S C I ,   V 4 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / S 1 3 6 4 - 6 6 1 3 ( 0 0 ) 0 1 4 8 3 - 2 ;   C a b e z a   R ,   2 0 0 0 ,   J   C O G N I T I V E   N E U R O S C I ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 6 2 / 0 8 9 8 9 2 9 0 0 5 1 1 3 7 5 8 5 ;   C h e n   A C N ,   2 0 0 2 ,   N E U R O S C I   L E T T ,   V 3 2 8 ,   P 1 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 3 9 4 0 ( 0 2 ) 0 0 5 1 2 - 8 ;   C h r i s t o f f   K ,   2 0 0 0 ,   P S Y C H O B I O L O G Y ,   V 2 8 ,   P 1 6 8 ;   C i p o l o t t i   L ,   2 0 0 3 ,   N E U R O P S Y C H O L O G I A ,   V 4 1 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 8 - 3 9 3 2 ( 0 3 ) 0 0 0 3 2 - 0 ;   C l a r k   V P ,   1 9 9 6 ,   N E U R O I M A G E ,   V 4 ,   P 1 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 6 . 0 0 2 5 ;   C O M M I T T E R I   G ,   2 0 0 3 ,   N E U R O I M A G E ,   P 1 9 ;   C o r n e t t e   L ,   1 9 9 8 ,   B R A I N ,   V 1 2 1 ,   P 1 4 3 ,   D O I   1 0 . 1 0 9 3 / b r a i n / 1 2 1 . 1 . 1 4 3 ;   C r e a c ' h   C ,   2 0 0 0 ,   A M   J   N E U R O R A D I O L ,   V 2 1 ,   P 1 4 0 2 ;   D a s e l a a r   S M ,   2 0 0 3 ,   B R A I N ,   V 1 2 6 ,   P 4 3 ,   D O I   1 0 . 1 0 9 3 / b r a i n / a w g 0 0 5 ;   D e s g r a n g e s   B ,   1 9 9 8 ,   N E U R O I M A G E ,   V 8 ,   P 1 9 8 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 8 . 0 3 5 9 ;   D h i l l o n   I S ,   2 0 0 1 ,   M A C H   L E A R N ,   V 4 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 6 1 2 9 2 0 9 7 1 ;   D O B R O K H O T O V   P ,   2 0 0 3 ,   S T U D I E S   H L T H   T E C H N O L ,   V 9 5 ;   D O N O H O   D ,   2 0 0 4 ,   A D V   N E U R A L   I N F O R M   P R ,   P 1 6 ;   D u n c a n   J ,   2 0 0 0 ,   T R E N D S   N E U R O S C I ,   V 2 3 ,   P 4 7 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 2 2 3 6 ( 0 0 ) 0 1 6 3 3 - 7 ;   D u z e l   E ,   1 9 9 9 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 6 ,   P 1 7 9 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 6 . 4 . 1 7 9 4 ;   D W A S S   M ,   1 9 5 7 ,   A N N   M A T H   S T A T ,   V 2 8 ,   P 1 8 1 ,   D O I   1 0 . 1 2 1 4 / a o m s / 1 1 7 7 7 0 7 0 4 5 ;   E D G I N G T O N   E S ,   1 9 8 6 ,   S T A T   T X B   M O N O G R A P H S ,   V 7 7 ;   E l k a s h e f   A M ,   2 0 0 0 ,   P S Y C H I A T   R E S - N E U R O I M ,   V 1 0 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 4 9 2 7 ( 0 0 ) 0 0 0 6 4 - 0 ;   F a r r i s   J T ,   2 0 0 1 ,   H O U S   P O L I C Y   D E B A T E ,   V 1 2 ,   P 1 ;   F i n k   G R ,   1 9 9 6 ,   J   N E U R O S C I ,   V 1 6 ,   P 4 2 7 5 ;   F o x   G C ,   2 0 0 1 ,   C O N C U R R   C O M P - P R A C T   E ,   V 1 3 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / c p e . 5 8 2 ;   F o x   P T ,   2 0 0 2 ,   N A T   R E V   N E U R O S C I ,   V 3 ,   P 3 1 9 ,   D O I   1 0 . 1 0 3 8 / n r n 7 8 9 ;   F r a n c i s   S T ,   2 0 0 0 ,   N E U R O I M A G E ,   V 1 1 ,   P 1 8 8 ,   D O I   1 0 . 1 0 0 6 / n i m g . 2 0 0 0 . 0 5 4 1 ;   F R E D R I K S O N   M ,   1 9 9 5 ,   P S Y C H O P H Y S I O L O G Y ,   V 3 2 ,   P 4 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 9 - 8 9 8 6 . 1 9 9 5 . t b 0 3 4 0 4 . x ;   F r e d r i k s o n   M ,   1 9 9 7 ,   J   C L I N   P S Y C H I A T ,   V 5 8 ,   P 1 6 ;   F u j i i   T ,   2 0 0 2 ,   N E U R O I M A G E ,   V 1 5 ,   P 5 0 1 ,   D O I   1 0 . 1 0 0 6 / n i m g . 2 0 0 1 . 0 9 9 5 ;   G a u s s i e r   E ,   2 0 0 2 ,   L E C T   N O T E S   C O M P U T   S C ,   V 2 2 9 1 ,   P 2 2 9 ;   G a u t i e r   J F ,   1 9 9 9 ,   A M   J   C L I N   N U T R ,   V 7 0 ,   P 8 0 6 ;   G e l n a r   P A ,   1 9 9 9 ,   N E U R O I M A G E ,   V 1 0 ,   P 4 6 0 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 9 . 0 4 8 2 ;   G h a e m   O ,   1 9 9 7 ,   N E U R O R E P O R T ,   V 8 ,   P 7 3 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 7 5 6 - 1 9 9 7 0 2 1 0 0 - 0 0 0 3 2 ;   G o l d m a n   J A ,   1 9 9 9 ,   M E T H O D   I N F O R M   M E D ,   V 3 8 ,   P 9 6 ;   G o u t t e   C ,   1 9 9 9 ,   N E U R O I M A G E ,   V 9 ,   P 2 9 8 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 8 . 0 3 9 1 ;   G o u t t e   C ,   2 0 0 1 ,   H U M   B R A I N   M A P P ,   V 1 3 ,   P 1 6 5 ,   D O I   1 0 . 1 0 0 2 / h b m . 1 0 3 1 ;   G r o n   G ,   2 0 0 0 ,   N A T   N E U R O S C I ,   V 3 ,   P 4 0 4 ;   H A N S E N   L K ,   2 0 0 0 ,   P   I C A S S P 2 0 0 0   T U R K   I E ;   H O F M A N N   T ,   1 9 9 9 ,   P   1 5   C   U N C   A R T   I N T ,   P 2 8 9 ;   H S I E H   J C ,   1 9 9 5 ,   P A I N ,   V 6 3 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 5 ) 0 0 0 4 8 - W ;   H u n k i n   N M ,   2 0 0 2 ,   N E U R O P S Y C H O L O G I A ,   V 4 0 ,   P 1 4 5 6 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 8 - 3 9 3 2 ( 0 1 ) 0 0 2 0 0 - 7 ;   I n g v a r   M ,   1 9 9 9 ,   P H I L O S   T   R   S O C   B ,   V 3 5 4 ,   P 1 3 4 7 ,   D O I   1 0 . 1 0 9 8 / r s t b . 1 9 9 9 . 0 4 8 3 ;   I n o u e   K ,   1 9 9 8 ,   J   N E U R O P H Y S I O L ,   V 7 9 ,   P 1 1 7 ;   I s b e l l   C L ,   1 9 9 9 ,   A D V   N E U R   I N ,   V 1 1 ,   P 4 8 0 ;   J e r n i g a n   T L ,   1 9 9 8 ,   N E U R O I M A G E ,   V 8 ,   P 9 3 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 8 . 0 3 5 0 ;   K e r t z m a n   C ,   1 9 9 7 ,   E X P   B R A I N   R E S ,   V 1 1 4 ,   P 1 7 0 ,   D O I   1 0 . 1 0 0 7 / P L 0 0 0 0 5 6 1 7 ;   K I L T S   C D ,   1 9 9 6 ,   N E U R O I M A G E ,   V 3 ,   P 2 2 7 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K o b a y a s h i   S ,   2 0 0 0 ,   B I O M A C R O M O L E C U L E S ,   V 1 ,   P 3 ,   D O I   1 0 . 1 0 2 1 / b m 9 9 0 0 0 7 c ;   K o l e n d a   T . ,   2 0 0 0 ,   A D V   I N D E P E N D E N T   C O M P ;   K r a u s e   B J ,   1 9 9 9 ,   E U R   J   N E U R O S C I ,   V 1 1 ,   P 3 2 9 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 6 0 - 9 5 6 8 . 1 9 9 9 . 0 0 7 2 3 . x ;   L a n g e   N ,   1 9 9 9 ,   N E U R O I M A G E ,   V 1 0 ,   P 2 8 2 ,   D O I   1 0 . 1 0 0 6 / n i m g . 1 9 9 9 . 0 4 7 2 ;   L a n i u s   R A ,   2 0 0 1 ,   A M   J   P S Y C H I A T ,   V 1 5 8 ,   P 1 9 2 0 ,   D O I   1 0 . 1 1 7 6 / a p p i . a j p . 1 5 8 . 1 1 . 1 9 2 0 ;   L e e   D D ,   1 9 9 9 ,   N A T U R E ,   V 4 0 1 ,   P 7 8 8 ;   L e e   D D ,   2 0 0 1 ,   A D V   N E U R   I N ,   V 1 3 ,   P 5 5 6 ;   L e k a n d e r   M ,   2 0 0 0 ,   N E U R O S C I   L E T T ,   V 2 8 2 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 3 9 4 0 ( 0 0 ) 0 0 9 0 1 - 0 ;   L u n a   B ,   2 0 0 2 ,   N E U R O L O G Y ,   V 5 9 ,   P 8 3 4 ;   M a d d o c k   R F ,   2 0 0 1 ,   N E U R O S C I E N C E ,   V 1 0 4 ,   P 6 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 2 2 ( 0 1 ) 0 0 1 0 8 - 7 ;   M a d d o c k   R J ,   1 9 9 7 ,   P S Y C H I A T   R E S - N E U R O I M ,   V 7 5 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 4 9 2 7 ( 9 7 ) 0 0 0 1 8 - 8 ;   M a d d o c k   R J ,   1 9 9 9 ,   T R E N D S   N E U R O S C I ,   V 2 2 ,   P 3 1 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 2 2 3 6 ( 9 8 ) 0 1 3 7 4 - 5 ;   M a d d o c k   R J ,   2 0 0 3 ,   H U M   B R A I N   M A P P ,   V 1 8 ,   P 3 0 ,   D O I   1 0 . 1 0 0 2 / h b m . 1 0 0 7 5 ;   M a g u i r e   E A ,   2 0 0 1 ,   B R A I N ,   V 1 2 4 ,   P 1 1 5 6 ,   D O I   1 0 . 1 0 9 3 / b r a i n / 1 2 4 . 6 . 1 1 5 6 ;   M a g u i r e   E A ,   1 9 9 9 ,   H I P P O C A M P U S ,   V 9 ,   P 5 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 8 - 1 0 6 3 ( 1 9 9 9 ) 9 : 1 < 5 4 : : A I D - H I P O 6 > 3 . 0 . C O ; 2 - O ;   M a g u i r e   E A ,   2 0 0 1 ,   S C A N D   J   P S Y C H O L ,   V 4 2 ,   P 2 2 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 4 5 0 . 0 0 2 3 3 ;   M A R D I A   K V ,   1 9 7 0 ,   B I O M E T R I K A ,   V 5 7 ,   P 5 1 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 3 4 7 7 0 ;   M a r d i a   K .   V . ,   1 9 7 9 ,   M U L T I V A R I A T E   A N A L   P R ;   M a z o y e r   B ,   2 0 0 1 ,   B R A I N   R E S   B U L L ,   V 5 4 ,   P 2 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 1 - 9 2 3 0 ( 0 0 ) 0 0 4 3 7 - 8 ;   M C D O N A L D   C R ,   2 0 0 1 ,   N E U R O C A S E ,   V 7 ,   P 4 0 5 ;   M e a d   L A ,   2 0 0 2 ,   J   I N T   N E U R O P S Y C H   S O C ,   V 8 ,   P 7 3 5 ,   D O I   1 0 . 1 0 1 7 / S 1 3 5 5 6 1 7 7 0 2 8 6 0 0 1 5 ;   M e s u l a m   M M ,   2 0 0 1 ,   N E U R O I M A G E ,   V 1 3 ,   P 1 0 6 5 ,   D O I   1 0 . 1 0 0 6 / n i m g . 2 0 0 1 . 0 7 6 8 ;   M I N O S H I M A   S ,   1 9 9 4 ,   L A N C E T ,   V 3 4 4 ,   P 8 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 4 ) 9 2 8 7 1 - 1 ;   N a l i b o f f   B D ,   2 0 0 1 ,   P S Y C H O S O M   M E D ,   V 6 3 ,   P 3 6 5 ;   N i c h o l s   T . E . ,   2 0 0 1 ,   H U M   B R A I N   M A P P ,   V 1 5 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / H B M . 1 0 5 8 ;   N i e l s e n   F A ,   2 0 0 2 ,   H U M   B R A I N   M A P P ,   V 1 5 ,   P 1 4 6 ,   D O I   1 0 . 1 0 0 2 / h b m . 1 0 0 1 2 ;   N i e l s e n   F A ,   2 0 0 4 ,   A R T I F   I N T E L L   M E D ,   V 3 0 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 3 3 - 3 6 5 7 ( 0 3 ) 0 0 0 4 1 - 1 ;   N I E L S E N   F A ,   2 0 0 2 ,   N E U R O I M A G E ,   P 1 6 ;   N I E L S E N   F A ,   2 0 0 4 ,   P   1 3   D A N S K   K   M O N S T   B ,   P 1 2 1 ;   N i e l s e n   F . ,   2 0 0 0 ,   V D E 2 0 0 0   V I S U A L I Z A T I O ,   P 7 6 ;   N I E L S E N   F A ,   2 0 0 3 ,   N E U R O I M A G E ,   P 1 9 ;   N Y B A C K   H ,   1 9 9 1 ,   J   N E U R O L   N E U R O S U R   P S ,   V 5 4 ,   P 6 7 3 ;   N y b e r g   L ,   1 9 9 6 ,   J   N E U R O S C I ,   V 1 6 ,   P 3 7 5 3 ;   O l s o n   C R ,   1 9 9 6 ,   J   N E U R O P H Y S I O L ,   V 7 6 ,   P 3 2 8 5 ;   O n o e   H ,   2 0 0 1 ,   N E U R O I M A G E ,   V 1 3 ,   P 3 7 ,   D O I   1 0 . 1 0 0 6 / n i m g . 2 0 0 0 . 0 6 7 0 ;   P a s c a   M .   A . ,   2 0 0 1 ,   S I G I R   F o r u m ;   P e i f f e r   C ,   2 0 0 1 ,   A M   J   R E S P   C R I T   C A R E ,   V 1 6 3 ,   P 9 5 1 ;   P e r e z - I r a t x e t a   C ,   2 0 0 1 ,   T R E N D S   B I O C H E M   S C I ,   V 2 6 ,   P 5 7 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 8 - 0 0 0 4 ( 0 1 ) 0 1 9 2 6 - 0 ;   P e t r o v i c   P ,   1 9 9 9 ,   P A I N ,   V 8 3 ,   P 4 5 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 3 9 5 9 ( 9 9 ) 0 0 1 5 0 - 5 ;   P e y r o n   R ,   2 0 0 0 ,   N E U R O P H Y S I O L   C L I N ,   V 3 0 ,   P 2 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 8 7 - 7 0 5 3 ( 0 0 ) 0 0 2 2 7 - 6 ;   P h i l l i p s   M L ,   1 9 9 8 ,   P S Y C H I A T   R E S - N E U R O I M ,   V 8 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 4 9 2 7 ( 9 8 ) 0 0 0 3 6 - 5 ;   P i e f k e   M ,   2 0 0 3 ,   B R A I N ,   V 1 2 6 ,   P 6 5 0 ,   D O I   1 0 . 1 0 9 3 / b r a i n / a w g 0 6 4 ;   P i s s i o t a   A ,   2 0 0 2 ,   E U R   A R C H   P S Y   C L I N   N ,   V 2 5 2 ,   P 6 8 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 0 6 0 2 0 0 0 1 4 ;   P o l   H E H ,   2 0 0 1 ,   A R C H   G E N   P S Y C H I A T ,   V 5 8 ,   P 1 1 1 8 ;   R a i c h l e   M E ,   2 0 0 1 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 8 ,   P 6 7 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 8 . 2 . 6 7 6 ;   R a i n v i l l e   P ,   1 9 9 9 ,   J   C O G N I T I V E   N E U R O S C I ,   V 1 1 ,   P 1 1 0 ,   D O I   1 0 . 1 1 6 2 / 0 8 9 8 9 2 9 9 9 5 6 3 1 7 5 ;   R e h m   K ,   1 9 9 8 ,   M e d   I m a g e   A n a l ,   V 2 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / S 1 3 6 1 - 8 4 1 5 ( 9 8 ) 8 0 0 2 0 - 0 ;   R O S E N   S D ,   1 9 9 4 ,   L A N C E T ,   V 3 4 4 ,   P 1 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 4 ) 9 2 7 5 5 - 3 ;   S A L T O N   G ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 1 - 0 ;   S A L T O N   G ,   1 9 7 5 ,   C O M M U N   A C M ,   V 1 8 ,   P 6 1 3 ,   D O I   1 0 . 1 1 4 5 / 3 6 1 2 1 9 . 3 6 1 2 2 0 ;   S h a h   N J ,   2 0 0 1 ,   B R A I N ,   V 1 2 4 ,   P 8 0 4 ,   D O I   1 0 . 1 0 9 3 / b r a i n / 1 2 4 . 4 . 8 0 4 ;   S H A L L I C E   T ,   1 9 9 4 ,   N A T U R E ,   V 3 6 8 ,   P 6 3 3 ,   D O I   1 0 . 1 0 3 8 / 3 6 8 6 3 3 a 0 ;   S H I B A T A   H ,   2 0 0 3 ,   E U R   J   N E U R O S C I ,   V 1 8 ,   P 1 5 1 6 ;   S h i n   L M ,   1 9 9 9 ,   A M   J   P S Y C H I A T ,   V 1 5 6 ,   P 5 7 5 ;   S h i n   L M ,   1 9 9 7 ,   A R C H   G E N   P S Y C H I A T ,   V 5 4 ,   P 2 3 3 ;   S h u l m a n   G L ,   1 9 9 7 ,   J   C O G N I T I V E   N E U R O S C I ,   V 9 ,   P 6 4 8 ,   D O I   1 0 . 1 1 6 2 / j o c n . 1 9 9 7 . 9 . 5 . 6 4 8 ;   S m a l l   D M ,   2 0 0 3 ,   N E U R O I M A G E ,   V 1 8 ,   P 6 3 3 ,   D O I   1 0 . 1 0 1 6 / S 1 0 5 3 - 8 1 1 9 ( 0 2 ) 0 0 0 1 2 - 5 ;   S o w e l l   E R ,   2 0 0 0 ,   A M   J   P S Y C H I A T ,   V 1 5 7 ,   P 1 4 7 5 ,   D O I   1 0 . 1 1 7 6 / a p p i . a j p . 1 5 7 . 9 . 1 4 7 5 ;   S p r e n g e l m e y e r   R ,   1 9 9 8 ,   P   R O Y   S O C   B - B I O L   S C I ,   V 2 6 5 ,   P 1 9 2 7 ;   T a l a i r a c h   J . ,   1 9 8 8 ,   C O P L A N A R   S T E R O T A X I C ;   T i l l f o r s   M ,   2 0 0 1 ,   A M   J   P S Y C H I A T ,   V 1 5 8 ,   P 1 2 2 0 ,   D O I   1 0 . 1 1 7 6 / a p p i . a j p . 1 5 8 . 8 . 1 2 2 0 ;   T o l l e   T R ,   1 9 9 9 ,   A N N   N E U R O L ,   V 4 5 ,   P 4 0 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 1 - 8 2 4 9 ( 1 9 9 9 0 1 ) 4 5 : 1 < 4 0 : : A I D - A R T 8 > 3 . 0 . C O ; 2 - L ;   T z o u r i o - M a z o y e r   N ,   2 0 0 2 ,   N E U R O I M A G E ,   V 1 5 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 6 / n i m g . 2 0 0 1 . 0 9 7 8 ;   V a n   H o r n   J D ,   1 9 9 8 ,   B R A I N   R E S ,   V 7 9 3 ,   P 2 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 6 - 8 9 9 3 ( 9 8 ) 0 0 0 5 1 - 1 ;   V e r n e   G N ,   2 0 0 3 ,   P A I N ,   V 1 0 3 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 3 9 5 9 ( 0 2 ) 0 0 4 1 6 - 5 ;   V o g t   B A ,   2 0 0 1 ,   J   C O M P   N E U R O L ,   V 4 3 8 ,   P 3 5 3 ,   D O I   1 0 . 1 0 0 2 / c n e . 1 3 2 0 ;   V o g t   B A ,   1 9 9 6 ,   E U R   J   N E U R O S C I ,   V 8 ,   P 1 4 6 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 0 - 9 5 6 8 . 1 9 9 6 . t b 0 1 6 0 8 . x ;   V o g t   B A ,   2 0 0 0 ,   T R E N D S   N E U R O S C I ,   V 2 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 2 2 3 6 ( 0 0 ) 0 1 5 7 9 - 4 ;   V o g t   B r e n t   A . ,   1 9 9 2 ,   C e r e b r a l   C o r t e x ,   V 2 ,   P 4 3 5 ,   D O I   1 0 . 1 0 9 3 / c e r c o r / 2 . 6 . 4 3 5 ;   V o l k o w   N D ,   2 0 0 2 ,   P S Y C H I A T   R E S - N E U R O I M ,   V 1 1 4 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 4 9 2 7 ( 0 1 ) 0 0 1 3 0 - 5 ;   W i g g s   C L ,   1 9 9 9 ,   N E U R O P S Y C H O L O G I A ,   V 3 7 ,   P 1 0 3 ;   W I K   G ,   1 9 9 3 ,   P S Y C H I A T   R E S - N E U R O I M ,   V 5 0 ,   P 1 5 ;   W i l l o c h   F ,   2 0 0 0 ,   A N N   N E U R O L ,   V 4 8 ,   P 8 4 2 ;   Y a m a s a k i   H ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 1 1 4 4 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 8 2 1 7 6 4 9 9 	 1 4 1 	 6 9 	 7 2 	 1 	 1 4 	 A C A D E M I C   P R E S S   I N C   E L S E V I E R   S C I E N C E 	 S A N   D I E G O 	 5 2 5   B   S T ,   S T E   1 9 0 0 ,   S A N   D I E G O ,   C A   9 2 1 0 1 - 4 4 9 5   U S A 	 1 0 5 3 - 8 1 1 9 	 	 	 N E U R O I M A G E 	 N e u r o i m a g e 	 S E P 	 2 0 0 5 	 2 7 	 3 	 	 	 	 	 5 2 0 	 5 3 2 	 	 1 0 . 1 0 1 6 / j . n e u r o i m a g e . 2 0 0 5 . 0 4 . 0 3 4 	 	 1 3 	 N e u r o s c i e n c e s ;   N e u r o i m a g i n g ;   R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 9 5 9 U A 	 W O S : 0 0 0 2 3 1 5 4 3 6 0 0 0 0 4 	 1 5 9 4 6 8 6 4 	 
 
 J 	 V a u g h a n ,   L ;   S h a w ,   D 	 	 	 	 V a u g h a n ,   L ;   S h a w ,   D 	 	 	 W e b   c i t a t i o n   d a t a   f o r   i m p a c t   a s s e s s m e n t :   A   c o m p a r i s o n   o f   f o u r   s c i e n c e   d i s c i p l i n e s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S E A R C H   E N G I N E S ;   O N L I N E   I M P A C T ;   C O M M U N I C A T I O N ;   S I T E S ;   L I N K S ;   C L A S S I F I C A T I O N ;   B I B L I O M E T R I C S ;   C O V E R A G E ;   I N T E R N E T 	 T h e   n u m b e r   a n d   t y p e   o f   W e b   c i t a t i o n s   t o   j o u r n a l   a r t i c l e s   i n   f o u r   a r e a s   o f   s c i e n c e   a r e   e x a m i n e d :   b i o l o g y ,   g e n e t i c s ,   m e d i c i n e ,   a n d   m u l t i d i s c i p l i n a r y   s c i e n c e s .   F o r   a   s a m p l e   o f   5 , 9 7 2   a r t i c l e s   p u b l i s h e d   i n   1 1 4   j o u r n a l s ,   t h e   m e d i a n   W e b   c i t a t i o n   c o u n t s   p e r   j o u r n a l   a r t i c l e   r a n g e   f r o m   6 . 2   i n   m e d i c i n e   t o   1 0 . 4   i n   g e n e t i c s .   A b o u t   3 0 %   o f   W e b   c i t a t i o n s   i n   e a c h   a r e a   i n d i c a t e   i n t e l l e c t u a l   i m p a c t   ( c i t a t i o n s   f r o m   a r t i c l e s   o r   c l a s s   r e a d i n g s ,   i n   c o n t r a s t   t o   c i t a t i o n s   f r o m   b i b l i o g r a p h i c   s e r v i c e s   o r   t h e   a u t h o r ' s   o r   j o u r n a l ' s   h o m e   p a g e ) .   J o u r n a l s   r e c e i v i n g   m o r e   W e b   c i t a t i o n s   a l s o   h a v e   h i g h e r   p e r c e n t a g e s   o f   c i t a t i o n s   i n d i c a t i n g   i n t e l l e c t u a l   i m p a c t .   T h e r e   i s   s i g n i f i c a n t   c o r r e l a t i o n   b e t w e e n   t h e   n u m b e r   o f   c i t a t i o n s   r e p o r t e d   i n   t h e   d a t a b a s e s   f r o m   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( I S I ,   n o w   T h o m s o n   S c i e n t i f i c )   a n d   t h e   n u m b e r   o f   c i t a t i o n s   r e t r i e v e d   u s i n g   t h e   G o o g l e   s e a r c h   e n g i n e   ( W e b   c i t a t i o n s ) .   T h e   c o r r e l a t i o n   i s   m u c h   w e a k e r   f o r   j o u r n a l s   p u b l i s h e d   o u t s i d e   t h e   U n i t e d   K i n g d o m   o r   U n i t e d   S t a t e s   a n d   f o r   m u l t i d i s c i p l i n a r y   j o u r n a l s .   W e b   c i t a t i o n   n u m b e r s   a r e   h i g h e r   t h a n   I S I   c i t a t i o n   c o u n t s ,   s u g g e s t i n g   t h a t   W e b   s e a r c h e s   m i g h t   b e   c o n d u c t e d   f o r   a n   e a r l i e r   o r   a   m o r e   f i n e - g r a i n e d   a s s e s s m e n t   o f   a n   a r t i c l e ' s   i m p a c t .   T h e   W e b - e v i d e n t   i m p a c t   o f   n o n - U K / U S A   p u b l i c a t i o n s   m i g h t   p r o v i d e   a   b a l a n c e   t o   t h e   g e o g r a p h i c   o r   c u l t u r a l   b i a s e s   o b s e r v e d   i n   I S I ' s   d a t a ,   a l t h o u g h   t h e   s t a b i l i t y   o f   W e b   c i t a t i o n   c o u n t s   i s   d e b a t a b l e . 	 U n i v   W e s t e r n   O n t a r i o ,   F a c   I n f o r m a t   &   M e d i a   S t u d i e s ,   L o n d o n ,   O N   N 6 A   5 B 7 ,   C a n a d a ;   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 V a u g h a n ,   L   ( r e p r i n t   a u t h o r ) ,   U n i v   W e s t e r n   O n t a r i o ,   F a c   I n f o r m a t   &   M e d i a   S t u d i e s ,   L o n d o n ,   O N   N 6 A   5 B 7 ,   C a n a d a . 	 l v a u g h a n @ u w o . c a ;   s h a w d @ i n d i a n a . e d u 	 	 	 	 	 A C K E R S O N   L G ,   C O L L   R E S   L I B ,   V 6 4 ,   P 4 6 8 ;   B A I G E T   T ,   2 0 0 4 ,   V A L P A R A I S O   D E C L A R A T I ;   B a r - I l a n   J ,   2 0 0 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 8 ,   P 2 3 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 8 0 1 0 6 ;   B A R I L A N   J ,   2 0 0 1 ,   P   8   I N T   C   S C I E N T   I N F ,   P 6 3 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B O W K E R   R R ,   2 0 0 4 ,   U L R I C H S   P E R I O D I C A L   D ;   B R O W N S Y E D   C ,   1 9 9 9 ,   E H I T S   T E N U R E   O P E N   L I ;   K n o r r   C e t i n a   K . ,   1 9 9 9 ,   E P I S T E M I C   C U L T U R E S   S ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 9 5 3 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - C ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C R O N I N   B ,   2 0 0 3 ,   M   A S S   R E S   L I B   W A S H   D ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   G a r f i e l d   E ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 2 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 6 ;   G A R V E Y   W D ,   1 9 7 2 ,   I N F O R M   S T O R A G E   R E T ,   V 8 ,   P 1 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 2 ) 9 0 0 4 1 - 1 ;   G I B B S   W W ,   1 9 9 5 ,   S C I   A M ,   V 2 7 3 ,   P 9 2 ;   H y l a n d   K ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 0 4 ;   H y l a n d   K e n ,   2 0 0 0 ,   D I S C I P L I N A R Y   D I S C O U R ;   K l i n g   R ,   2 0 0 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 8 ,   P 5 9 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 8 0 1 1 3 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   K L I N G   R ,   1 9 9 7 ,   T Y P O L O G Y   E L E C T   J   C H A ;   K R E T S C H M E R   H ,   2 0 0 4 ,   C O L L N E T   1 ,   P 1 5 0 ;   L a t o u r   B . ,   1 9 8 6 ,   L A B   L I F E   C O N S T R U C T I O ;   N i s o n g e r   T E ,   2 0 0 4 ,   C O L L   R E S   L I B R ,   V 6 5 ,   P 1 5 2 ;   N o t e s s   G .   R . ,   2 0 0 3 ,   S E A R C H   E N G I N E   S T A T   R ;   O G L E S   J ,   2 0 0 4 ,   K E R R Y   G O O G L E   B O M B E D ;   R O U S S E A U   R ,   2 0 0 2 ,   D A I L Y   T I M E   S E R I E S   C O ;   S I N H A   S ,   2 0 0 1 ,   A N N   L I B   S C I   D O C U M E N T ,   V 4 7 ,   P 6 3 ;   S L O A N   B ,   2 0 0 1 ,   P E R S O N A L   C I T A T I O N   I N ;   S M I T H   A ,   2 0 0 4 ,   W E B   L I N K S   A N A L O G U E S ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   S U B E R   P ,   2 0 0 4 ,   T I M E L I N E   O P E N   A C C E S S ;   S U L L I V A N   D ,   2 0 0 3 ,   M A J O R   S E A R C H   E N G I N E S ;   T h e l w a l l   M ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 2 ;   T h e l w a l l   M ,   2 0 0 3 ,   O N L I N E   I N F O R M   R E V ,   V 2 7 ,   P 3 3 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 3 1 0 5 0 2 2 9 8 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 6 1 ;   T H E L W A L L   M ,   2 0 0 5 ,   R E V   I N F   S C I   T E C H N O L O ,   V 3 9 ,   P 8 1 ;   T H E L W A L L   M ,   2 0 0 1 ,   R E S P O N S I V E N E S S   S E A R C ;   * T H O M P S   S C I ,   2 0 0 5 ,   I S I   J   C I T   R E P   T U T   V E ;   * T H O M P S   S C I ,   2 0 0 2 ,   J   C I T   R E P ;   U N I S I S T ,   1 9 7 1 ,   S T U D   R E P   F E A S   W O R L D ;   V a n   K D ,   2 0 0 3 ,   E S I S   P U B L ,   V 3 1 ,   P 3 ;   v a n   L e e u w e n   T N ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 9 7 1 9 4 8 4 ;   V a u g h a n   L ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 6 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 3 ) 0 0 0 4 3 - 8 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 3 8 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   V a u g h a n   L ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 3 5 6 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 5 2 5 5 5 ;   V A U G H A N   L ,   2 0 0 4 ,   P   A N N   M   A M   S O C   I N F   S ,   P 5 1 6 ;   W E L L E R   A C ,   1 9 9 6 ,   P R I N T   E L E C T   T R A N S F O R ,   P 3 5 ;   W I L S O N   T ,   2 0 0 2 ,   W E B   C I T A T I O N   P O S T I N G 	 5 0 	 6 9 	 7 0 	 3 	 2 4 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 A U G 	 2 0 0 5 	 5 6 	 1 0 	 	 	 	 	 1 0 7 5 	 1 0 8 7 	 	 1 0 . 1 0 0 2 / a s i . 2 0 1 9 9 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 4 6 W K 	 W O S : 0 0 0 2 3 0 6 0 3 8 0 0 0 0 8 	 	 
 
 J 	 M u c i n a ,   L 	 	 	 	 M u c i n a ,   L 	 	 	 C l a s s i f i c a t i o n   o f   v e g e t a t i o n :   P a s t ,   p r e s e n t   a n d   f u t u r e 	 J O U R N A L   O F   V E G E T A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 M e e t i n g   o f   t h e   S o c i e t a - I t a l i a n a - d i - F i t o s o c i o l o g i a 	 1 9 9 4 	 R O M E ,   I T A L Y 	 S o c   I t a l i a n a   F i t o s o c i o l 	 	 b i b l i o m e t r i c s ;   B r a u n - B l a n q u e t   a p p r o a c h ;   f o r m a l i s m ;   f u n c t i o n a l i t y ;   i n n o v a t i o n   p e r i o d ;   n u m e r i c a l   s y n t a x o n o m y ;   s c i e n t o m e t r y ;   v e g e t a t i o n   t h e o r y 	 E C O L O G I C A L   C O M M U N I T I E S ;   P L A N T - C O M M U N I T I E S ;   C U R R E N T   S T A T E ;   F U Z Z Y - L O G I C ;   P H Y T O S O C I O L O G Y ;   S Y N T A X O N O M Y ;   S C I E N C E ;   O R D I N A T I O N ;   P R E D I C T I O N ;   M A P 	 T h i s   p a p e r   i s   a   r e p o r t   o n   t h e   p a s t ,   s t a t u s - q u o   a n d   p e r s p e c t i v e s   o f   v e g e t a t i o n   c l a s s i f i c a t i o n ,   s t i l l   a   m a j o r   o c c u p a t i o n   o f   m a n y   v e g e t a t i o n   s c i e n t i s t s .   T h e   h i s t o r y   o f   v e g e t a t i o n   c l a s s i f i c a t i o n   i s   d i s c u s s e d   a g a i n s t   a   b a c k g r o u n d   o f   s e v e r a l   c o n t r o v e r s i a l   i s s u e s   s u c h   a s   t h e   p r o b l e m   o f   c o n t i n u u m   v s .   d i s c o n t i n u u m ,   n a t u r a l n e s s   v s .   a r b i t r a r i n e s s   o f   t h e   n a t u r e   o f   p l a n t   c o m m u n i t i e s ,   u n i v e r s a l i t y   v s .   a d   h o c   c h a r a c t e r   o f   s y n t a x o n o m i c   s c h e m e s ,   a s   w e l l   a s   c l a s s i c a l   v e r s u s   n u m e r i c a l   a p p r o a c h e s   t o   d a t a   a n a l y s i s   f o r   c l a s s i f i c a t i o n   p u r p o s e s .   T h e   d e v e l o p m e n t   o f   t h e   m e t h o d o l o g y   o f   v e g e t a t i o n   s c i e n c e   a n d   t h e   p r e s e n t   i m a g e   o f   v e g e t a t i o n   c l a s s i f i c a t i o n   i s   d o c u m e n t e d   b y   a   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   p u b l i c a t i o n   r e c o r d   o f   f o u r   m a j o r   j o u r n a l s :   J o u r n a l   o f   v e g e t a t i o n   S c i e n c e ;   V e g e t a t i o ,   P h y t o c o e n o l o g i a   a n d   T u e x e n i a .   T h i s   a n a l y s i s   r e v e a l e d   a   p e r s i s t i n g   c o n t r o v e r s y   b e t w e e n   t r a d i t i o n a l   a n d   n u m e r i c a l   a p p r o a c h e s   t o   v e g e t a t i o n   c l a s s i f i c a t i o n .   A   s e r i e s   o f   i m p o r t a n t   c h a n g e s   i n   v e g e t a t i o n   s c i e n c e   ( f o u n d a t i o n   o f   n e w   j o u r n a l s ,   c h a n g e   o f   e d i t o r i a l   p o l i c y   b y   t h e   e s t a b l i s h e d ,   i m p o r t a n t   m e e t i n g s )   p u n c t u a t e   a   p e r i o d   c a l l e d   t h e   ' I n n o v a t i o n   p e r i o d ' .   S e v e r a l   t r e n d s   i n   t h e   d e v e l o p m e n t   o f   m e t h o d s   o f   v e g e t a t i o n   s y s t e m a t i c s   a r e   s u m m a r i z e d   u n d e r   t h e   h e a d i n g s   f o r m a l i s m ,   p l u r a l i s m ,   f u n c t i o n a l i s m ,   p r a g m a t i s m   a n d   i m d e t e r m i n i s m .   S o m e   n e w   f e a t u r e s ,   s u c h   a s   t h e   d e v e l o p m e n t   a n d   i m p r o v e m e n t   o f   n u m e r i c a l   t o o l s ,   u s e   o f   l a r g e   d a t a   b a n k s   a n d   a t t e m p t s   t o   s u m m a r i z e   t h e   t h e o r y   o f   v e g e t a t i o n   c l a s s i f i c a t i o n   a r e   d i s c u s s e d .   T h e   n e w   g r o w t h - f o r m   s y s t e m   o f   B a r k m a n   i n i t i a t e d   a   r e v i v a l   o f   p h y s i o g n o m y - b a s e d   v e g e t a t i o n   c l a s s i f i c a t i o n .   W i t h i n   t h i s   f r a m e w o r k   t h e   u s e   o f   t h e   c h a r a c t e r - t y p e   c o n c e p t   a n d   t h e   d e v e l o p m e n t   o f   n e w   n u m e r i c a l   m e t h o d s   f o r   s t u d y i n g   t h e   h i e r a r c h i c a l   s t r u c t u r e   o f   c h a r a c t e r - s e t   t y p e s   s e e m s   t o   b e   a   p r o m i s i n g   a p p r o a c h .   T h e   a c h i e v e m e n t s   o f   p o p u l a t i o n   b i o l o g y   a n d   e c o p h y s i o l o g y   h a v e   a f f e c t e d   v e g e t a t i o n   s c i e n c e   b y   e m p h a s i z i n g   t h e   f u n c t i o n a l i t y   o f   s p e c i e s   w i t h i n   p l a n t   c o m m u n i t i e s .   T h e   u s e   o f   g u i l d s   a n d   o t h e r   f u n c t i o n a l   g r o u p s   h a s   e x p e r i e n c e d   a n   i n c r e a s i n g   i n t e r e s t   f r o m   v e g e t a t i o n   s c i e n t i s t s .   A p p l i e d   i n   v e g e t a t i o n   s c i e n c e ,   f u z z y - s e t   t h e o r y   h a s   b r i d g e d   t h e   t e c h n i q u e s   o f   c l a s s i f i c a t i o n   a n d   o r d i n a t i o n   o f   p l a n t   c o m m u n i t i e s . 	 U n i v   V i e n n a ,   I n s t   B o t ,   D e p t   P l a n t   C h o r o l   &   V e g e t a t   S c i ,   A - 1 0 3 0   V i e n n a ,   A u s t r i a ;   U n i v   P r e t o r i a ,   D e p t   B o t ,   Z A - 0 0 0 2   P r e t o r i a ,   S o u t h   A f r i c a 	 M u c i n a ,   L   ( r e p r i n t   a u t h o r ) ,   K u w a i t   U n i v ,   D e p t   B i o l   S c i ,   P O B   5 9 6 9 ,   S a f a t   1 3 0 6 0 ,   K u w a i t . 	 	 M u c i n a ,   L a d i s l a v / B - 6 2 7 8 - 2 0 1 2 ;   M u c i n a ,   L a d i s l a v / H - 5 4 9 0 - 2 0 1 4 	 M u c i n a ,   L a d i s l a v / 0 0 0 0 - 0 0 0 3 - 0 3 1 7 - 8 8 8 6 ;   M u c i n a ,   L a d i s l a v / 0 0 0 0 - 0 0 0 3 - 0 3 1 7 - 8 8 8 6 	 	 	 A L E K S A N D R O V A   V D ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ,   P 4 9 3 ;   A U S T I N   M P ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 3 ,   P 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 1 6 7 9 ;   B A N Y I K W A   F F ,   1 9 9 0 ,   J   V E G   S C I ,   V 1 ,   P 9 7 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 0 5 9 ;   B A R K M A N   J J ,   1 9 8 6 ,   V E G E T A T I O ,   V 6 7 ,   P 1 4 5 ;   B A R K M A N   J J ,   1 9 9 0 ,   V E G E T A T I O ,   V 8 6 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 1 7 2 9 ;   B a r k m a n   J J ,   1 9 8 8 ,   P L A N T   F O R M   V E G E T A T I O ,   P 9 ;   B a r k m a n   J . J . ,   1 9 7 9 ,   S T U D Y   V E G E T A T I O N ,   P 1 2 3 ;   B a r k m a n   J J ,   1 9 8 7 ,   V E G E T A T I O N   L A N D   S E A ,   P 1 2 0 ;   B A R K M A N   J J ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ,   P 4 3 5 ;   B e a r d   J .   S . ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ,   P 3 5 5 ;   B O H N   U ,   1 9 9 5 ,   A N N   B O T   R O M A ,   V 5 3 ,   P 1 4 3 ;   B R A U N - B L A N Q U E T   J . ,   1 9 3 9 ,   C h r o n i c a   b o t a n i c a ,   V 5 ,   P 3 9 1 ;   B r a u n - B l a n q u e t   J ,   1 9 6 4 ,   P F L A N Z E N S O Z I O L O G I E   G ;   D A G N E L I E   P . ,   1 9 6 0 ,   B u l l .   S e r v .   C a r t e   p h y t o g e o g r . ,   S e r .   B ,   V 5 ,   P 9 3 ;   D A L E   M B ,   1 9 9 4 ,   J   V E G   S C I ,   V 5 ,   P 2 8 5 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 1 6 4 ;   D A L E   M B ,   1 9 8 8 ,   F O L I A   G E O B O T   P H Y T O T X ,   V 2 3 ,   P 2 3 9 ;   D A N S E R E A . P ,   1 9 6 8 ,   B O T   R E V ,   V 3 4 ,   P 2 5 3 ;   D i e r s c h k e   H . ,   1 9 9 4 ,   P F L A N Z E N S O Z I O L O G I E ;   D O I N G   H ,   1 9 7 0 ,   M E D E D   B O T   T U I N   B E L M O ,   V 1 2 ,   P 5 3 ;   E L L E N B E R G   H ,   1 9 5 6 ,   G R U N D L A G E N   V E G E T A T I O ,   P 1 ;   F e o l i   E . ,   1 9 8 8 ,   C O E N O S E S ,   V 3 ,   P 1 4 1 ;   F E O L I   E ,   1 9 9 1 ,   C O M P U T E R   A S S I S T E D   V E ,   P 2 6 5 ;   F E O L I   E ,   1 9 8 1 ,   S Y N T A X O N O M I E ,   P 3 5 ;   F E O L I   E ,   1 9 8 6 ,   A B S T R   B O T ,   V 1 0 ,   P 2 0 3 ;   F e o l i   E ,   1 9 8 5 ,   A B S T R   B O T ,   V 9 ,   P 1 ;   F e o l i   E . ,   1 9 8 4 ,   S T U D   G E O B O T ,   V 4 ,   P 7 ;   F e o l i   E ,   1 9 8 5 ,   A B S T R   B O T ,   V 9 ,   P 1 7 ;   F I S C H E R   H S ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 1 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 4 5 5 1 0 ;   G l e a s o n   H .   A . ,   1 9 2 6 ,   B   T O R R E Y   B O T   C L U B ,   V 5 3 ,   P 7 ,   D O I   D O I   1 0 . 2 3 0 7 / 2 4 7 9 9 3 3 ;   H I L L   M . O . ,   1 9 7 9 ,   T W I N S P A N   F O R T R A N   P R O ;   H O E K S T R A   T W ,   1 9 9 1 ,   B I O S C I E N C E ,   V 4 1 ,   P 1 4 8 ,   D O I   1 0 . 2 3 0 7 / 1 3 1 1 4 5 4 ;   H O H E N E S T E R   A ,   1 9 7 0 ,   B E R   D E U T   B O T   G E S ,   V 8 3 ,   P 6 4 1 ;   H o l d r i d g e   L R ,   1 9 7 1 ,   F O R E S T   E N V   T R O P I C A L ;   J U R K O   A ,   1 9 7 3 ,   P r e s l i a   ( P r a g u e ) ,   V 4 5 ,   P 4 1 ;   K E D D Y   P ,   1 9 9 3 ,   J   V E G   S C I ,   V 4 ,   P 1 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 5 7 4 1 ;   K E N K E L   N   C ,   1 9 8 7 ,   C o e n o s e s ,   V 2 ,   P 2 5 ;   K E N K E L   N C ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 1 6 9 2 ;   K E N T   M ,   1 9 8 8 ,   V E G E T A T I O ,   V 7 8 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 3 4 2 1 ;   L o w   A .   B . ,   1 9 9 6 ,   V E G E T A T I O N   S   A F R I C A ;   M I R K I N   B M ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 2 ,   P 3 5 ;   M I R K I N   B M ,   1 9 8 7 ,   V E G E T A T I O ,   V 6 8 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 1 1 4 7 1 3 ;   M I R K I N   B M ,   1 9 8 6 ,   Z H   O B S H C H   B I O L ,   V 4 7 ,   P 4 9 4 ;   M I R K I N   B M ,   1 9 9 4 ,   J   V E G   S C I ,   V 5 ,   P 2 8 3 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 1 6 3 ;   M O O R E   J J ,   1 9 7 0 ,   J   E C O L ,   V 5 0 ,   P 7 6 1 ;   M O R A C Z E W S K I   I R ,   1 9 9 3 ,   V E G E T A T I O ,   V 1 0 6 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 4 4 8 5 5 ;   M O R A C Z E W S K I   I R ,   1 9 9 3 ,   V E G E T A T I O ,   V 1 0 6 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 4 4 8 5 4 ;   M O R A V E C   J ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 1 ,   P 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 4 5 5 1 1 ;   M O R A V E C   J ,   1 9 8 1 ,   S Y N T A X O N O M I E ,   P 4 3 ;   M U C I N A   L ,   1 9 9 3 ,   J   V E G   S C I ,   V 4 ,   P 4 2 9 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 5 6 0 3 ;   M U C I N A   L ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 1 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 4 5 5 0 9 ;   M u c i n a   L . ,   1 9 9 3 ,   P F L A N Z E N G E S E L L S C H A   1 ;   M u c i n a   L . ,   1 9 9 3 ,   P F L A N Z E N G E S E L L S C H A   1 ,   P 1 9 ;   N E U H A U S L   R ,   1 9 9 1 ,   J   V E G   S C I ,   V 2 ,   P 1 3 1 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 5 9 0 6 ;   N O Y M E I R   I ,   1 9 8 7 ,   V E G E T A T I O ,   V 6 9 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 8 6 8 2 ;   O R L O C I   L . ,   1 9 8 5 ,   A N N   B O T   R O M A ,   V 4 3 ,   P 2 7 5 ;   O R L O C I   L ,   1 9 8 6 ,   A N N   A R I D   Z O N E ,   V 2 4 5 ,   P 1 1 1 ;   P A L M E R   M W ,   1 9 9 4 ,   J   V E G   S C I ,   V 5 ,   P 2 7 9 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 1 6 2 ;   P I G N A T T I   S ,   1 9 9 0 ,   J   V E G   S C I ,   V 1 ,   P 4 2 5 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 5 7 2 0 ;   P I G N A T T I   S ,   1 9 9 5 ,   J   V E G   S C I ,   V 6 ,   P 1 4 3 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 2 6 5 ;   P O D A N I   J ,   1 9 9 0 ,   S Y N   T A X   4   C O M P U T E R   P ;   R a u n k i a e r   C . ,   1 9 3 4 ,   L I F E   F O R M S   P L A N T S   S T ;   R O D W E L L   J S ,   1 9 9 5 ,   J   V E G   S C I ,   V 6 ,   P 7 5 9 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 4 4 7 ;   S c a m o n i   A . ,   1 9 5 9 ,   A r c h .   F o r s t w . ,   V 8 ,   P 3 8 6 ;   S h e l y a g - S o s o n k o   Y .   R . ,   1 9 8 9 ,   U k r a i n s ' k i i   B o t a n i c h n i i   Z h u r n a l ,   V 4 6 ,   P 5 ;   S H I P L E Y   B ,   1 9 8 7 ,   V E G E T A T I O ,   V 6 9 ,   P 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 8 6 8 6 ;   T R A S S   H ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ,   P 5 2 9 ;   T U X E N   R ,   1 9 7 8 ,   A S S O Z I A T I O N S K O M P L E X E ;   V A H L E   H C ,   1 9 8 8 ,   T U E X E N I A ,   V 8 ,   P 4 0 7 ;   V A N D E R M A A R E L   E ,   1 9 7 8 ,   V E G E T A T I O ,   V 3 8 ,   P 1 4 3 ;   V A N D E R M A A R E L   E ,   1 9 8 2 ,   V E G E T A T I O ,   V 5 0 ,   P 7 1 ;   V A N D E R M A A R E L   E ,   1 9 7 4 ,   V E G E T A T I O ,   V 2 9 ,   P 6 3 ;   v a n   d e r   M a a r e l   E . ,   1 9 9 3 ,   A B S T R   B O T ,   V 1 7 ,   P 1 7 3 ;   V A N D E R M A A R E L   E ,   1 9 7 1 ,   V E G E T A T I O ,   V 2 2 ,   P 2 6 9 ;   V A N D E R M A A R E L   E ,   1 9 7 2 ,   G R U N D F R A G E N   M E T H O D E N ;   v a n   d e r s M a a r e l   E . ,   1 9 7 5 ,   V E G E T A T I O ,   V 3 0 ,   P 2 1 3 ;   V A N D E R M A A R E L   E ,   1 9 6 6 ,   W E N T I A ,   V 1 5 ,   P 4 7 ;   V A N D E R V L I E T   P C ,   1 9 9 0 ,   E U K A R Y O T I C   N U C L E U S ,   V 1 ,   P 1 ;   V O N G L A H N   H ,   1 9 6 5 ,   B E R   G E O B O T   I   E I D G   T E ,   V 3 6 ,   P 1 4 ;   W A L K E R   D A ,   1 9 9 5 ,   J   V E G   S C I ,   V 6 ,   P 4 2 7 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 2 4 2 ;   W e s t h o f f   V ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ,   P 6 1 7 ;   W H I T T A K E R   R H ,   1 9 7 2 ,   G R U N D F R A G E N   M E T H O D E N ,   P 3 9 ;   W h i t t a k e r   R .   H . ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ;   W H I T T A K E R   R H ,   1 9 7 3 ,   O R D I N A T I O N   C L A S S I F I C ,   P 3 8 7 ;   W I E G L E B   G ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 3 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 3 1 6 7 8 ;   W I L D I   O ,   1 9 8 9 ,   V E G E T A T I O ,   V 8 1 ,   P 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 4 5 5 1 5 ;   W I L S O N   J B ,   1 9 9 1 ,   J   V E G   S C I ,   V 2 ,   P 2 8 9 ;   W I L S O N   J B ,   1 9 9 4 ,   J   V E G   S C I ,   V 5 ,   P 2 7 5 ,   D O I   1 0 . 2 3 0 7 / 3 2 3 6 1 6 1 ;   Z O B E L   M ,   1 9 9 2 ,   O I K O S ,   V 6 5 ,   P 3 1 4 ,   D O I   1 0 . 2 3 0 7 / 3 5 4 5 0 2 4 	 8 8 	 6 9 	 7 6 	 5 	 3 3 	 O P U L U S   P R E S S   U P P S A L A   A B 	 U P P S A L A 	 B O X   2 5 1 3 7 ,   S   7 5 2   2 5   U P P S A L A ,   S W E D E N 	 1 1 0 0 - 9 2 3 3 	 	 	 J   V E G   S C I 	 J .   V e g .   S c i . 	 D E C 	 1 9 9 7 	 8 	 6 	 	 	 	 	 7 5 1 	 7 6 0 	 	 1 0 . 2 3 0 7 / 3 2 3 7 0 1 9 	 	 1 0 	 P l a n t   S c i e n c e s ;   E c o l o g y ;   F o r e s t r y 	 P l a n t   S c i e n c e s ;   E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y ;   F o r e s t r y 	 Y U 8 5 4 	 W O S : 0 0 0 0 7 1 7 6 2 7 0 0 0 0 1 	 	 
 
 J 	 M i y a z a k i ,   K ;   I s l a m ,   N 	 	 	 	 M i y a z a k i ,   K u m i k o ;   I s l a m ,   N a z r u l 	 	 	 N a n o t e c h n o l o g y   s y s t e m s   o f   i n n o v a t i o n   -   A n   a n a l y s i s   o f   i n d u s t r y   a n d   a c a d e m i a   r e s e a r c h   a c t i v i t i e s 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 3 r d   A S I A L I C S   I n t e r n a t i o n a l   C o n f e r e n c e 	 2 0 0 6 	 S h a n g h a i ,   P E O P L E S   R   C H I N A 	 	 	 n a n o t e c h n o l o g y ;   i n n o v a t i o n   s y s t e m ;   b i b l i o m e t r i c s   a n d   t e c h   m i n i n g ;   n a n o t e c h n o l o g y   r e s e a r c h ;   s c i e n c e   a n d   t e c h n o l o g y   p o l i c y 	 T E C H N O L O G Y ;   G O V E R N M E N T ;   S C I E N C E 	 N a n o t e c h n o l o g y   p r o m i s e s   s i g n i f i c a n t   i m p r o v e m e n t s   o f   a d v a n c e d   m a t e r i a l s   a n d   m a n u f a c t u r i n g   t e c h n i q u e s ,   w h i c h   a r e   c r i t i c a l   f o r   t h e   f u t u r e   c o m p e t i t i v e n e s s   o f   n a t i o n a l   i n d u s t r i e s .   T h i s   p a p e r   i s   c o n c e r n e d   w i t h   t h e   s e c t o r a l   i n n o v a t i o n   s y s t e m   i n   n a n o t e c h n o l o g y   i n   a   g l o b a l   p e r s p e c t i v e   w i t h   a n   a i m   t o   u n d e r s t a n d   w o r l d w i d e   d e v e l o p m e n t s   i n   n a n o t e c h n o l o g y   r e s e a r c h   f r o m   i t s   e m e r g i n g   s t a g e .   T h e   r e s e a r c h   h i g h l i g h t s   c r o s s - c o u n t r y   c o m p a r i s o n s ,   a c t o r s   a n d   i n s t i t u t i o n s   i n   t h e   i n n o v a t i o n   s y s t e m   b a s e d   o n   q u a n t i t a t i v e   m e t h o d   ( b i b l i o m e t r i c s   a n d   t e c h   m i n i n g ) .   T h e   a u t h o r s   p r e s e n t   a l s o   t h e   v a r y i n g   i n v o l v e m e n t   o f   a c a d e m i a ,   p u b l i c   r e s e a r c h   i n s t i t u t i o n s   a n d   c o m m e r c i a l   c o m p a n i e s   i n   r e l e v a n t   r e s e a r c h   b y   f i n d i n g   m a i n   r e s e a r c h   c o n t r i b u t o r s ,   d i s c o u r s e   d e v e l o p m e n t ,   a s   w e l l   a s   c l u s t e r s   o r   k n o w l e d g e   n e t w o r k s   o f   a f f i l i a t i o n s   a n d   c o u n t r i e s .   T h e   r e s e a r c h   f i n d i n g s   s h o w   t h a t   t h e   s i g n i f i c a n t   o u t p u t   o f   c o m m e r c i a l   c o m p a n i e s   i n   J a p a n   a n d   t h e   U n i t e d   S t a t e s   i s   d i f f e r e n t   f r o m   t h e   s i t u a t i o n   i n   t h e   E u r o p e a n   U n i o n ,   w h e r e   t h e   r e l e v a n t   s c i e n t i f i c   a c t i v i t i e s   a r e   d o m i n a t e d   b y   a c a d e m i c   a n d   g o v e r n m e n t   r e s e a r c h   i n s t i t u t i o n s .   T h e   r e s e a r c h   r e v e a l s   t h e   l e a r n i n g   p a t t e r n s   o f   n a n o t e c h   i n n o v a t i o n   s t r u c t u r e   f o r   t h e   s c i e n c e   p o l e .   T h e   f i n d i n g s   c a n   b e   p a r t i c u l a r l y   u s e f u l   f o r   f o r m i n g   t e c h n o l o g y   s t r a t e g i e s ,   s c i e n c e   a n d   t e c h n o l o g y   p o l i c i e s   b y   r e v e a l i n g   s t r e n g t h s   a n d   w e a k n e s s e s   o f   t h e   e m e r g i n g   i n n o v a t i o n   s y s t e m   i n   n a n o t e c h ,   e x i s t i n g   c o u n t r y - l e v e l   c o m p e t e n c i e s   a n d   d i f f e r e n c e s .   ( C )   2 0 0 7   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 T o k y o   I n s t   T e c h n o l ,   G r a d   S c h   I n n o v a t   M a n a g e m e n t ,   D e p t   I n n o v a t ,   M e g u r o   K u ,   T o k y o   1 5 2 8 5 5 0 ,   J a p a n 	 I s l a m ,   N   ( r e p r i n t   a u t h o r ) ,   T o k y o   I n s t   T e c h n o l ,   G r a d   S c h   I n n o v a t   M a n a g e m e n t ,   D e p t   I n n o v a t ,   M e g u r o   K u ,   2 - 1 2 - 1   O o k a y a m a ,   T o k y o   1 5 2 8 5 5 0 ,   J a p a n . 	 i s l a m . n . a a @ m . t i t e c h . a c . j p 	 	 	 	 	 B E L L A M Y   C ,   1 9 9 4 ,   P U B L I C   M O N E Y   M A N A G E ,   V 1 4 ,   P 5 9 ;   B h a t   J S A ,   2 0 0 5 ,   T E C H N O V A T I O N ,   V 2 5 ,   P 4 5 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 3 . 0 9 . 0 0 1 ;   C a n t w e l l   J . ,   1 9 9 3 ,   I N D   C O N C E N T R A T I O N   E C ;   C a r l s s o n   B ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 3 8 - X ;   H u l l m a n n   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 0 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 7 . 4 5 4 6 7 . a 7 ;   H u n g   S C ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 1 0 4 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 0 7 . 0 1 8 ;   I K E Z A W A   N ,   2 0 0 1 ,   3 7   N R I ;   K E A R N E S   M ,   C H A O S   C O N T R O L   N A N O T E ;   K L I N C E W I C Z   K ,   2 0 0 5 ,   2 0 0 5   S T E P I   I N T   S   S C I ;   K o d a m a   F ,   1 9 9 9 ,   I N D U S T R I A L I Z I N G   K N O W L E D G E ,   P 3 ;   K u m a r e s a n   N ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 5 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 1 2 8 - 0 ;   L A S T R E S   H ,   1 9 9 4 ,   A D V   M A T   J A P A N E S E   S Y S ;   M a l e r b a   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 3 9 - 1 ;   M e y e r   M S ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 2 9 1 4 0 3 3 ;   M i y a z a k i   K . ,   1 9 9 5 ,   B U I L D I N G   C O M P E T E N C E S ;   N i c o l a u   D a n a ,   2 0 0 4 ,   N A N O T E C H N O L O G Y   L A W   B ,   V 1 ;   * N S T C ,   2 0 0 2 ,   N A T   N A N   I N   I N   I T S   I M ;   P a t e l   P ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 0 5 - X ;   P o r t e r   A . L . ,   2 0 0 5 ,   T E C H   M I N I N G   E X P L O I T I ;   R o c o   M C ,   2 0 0 5 ,   J   N A N O P A R T   R E S ,   V 7 ,   P 7 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 3 1 4 1 - 5 ;   R o s e n b e r g   N . ,   2 0 0 4 ,   I N S I D E   B L A C K   B O X   T E C ;   * R O Y A L   S O C   R O Y A L   A ,   2 0 0 4 ,   N A N   N A N   O P P   U N C   R E P ;   W o n g l i m p i y a r a t   J ,   2 0 0 5 ,   T E C H N O V A T I O N ,   V 2 5 ,   P 1 3 4 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 0 7 . 0 0 2 ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 	 2 4 	 6 8 	 6 8 	 1 	 5 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 6 - 4 9 7 2 	 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 N O V 	 2 0 0 7 	 2 7 	 1 1 	 	 	 	 	 6 6 1 	 6 7 5 	 	 1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 7 . 0 5 . 0 0 9 	 	 1 5 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 2 3 0 N Q 	 W O S : 0 0 0 2 5 0 8 8 3 6 0 0 0 0 3 	 	 
 
 J 	 L e y d e s d o r f f ,   L ;   B o r n m a n n ,   L 	 	 	 	 L e y d e s d o r f f ,   L o e t ;   B o r n m a n n ,   L u t z 	 	 	 I n t e g r a t e d   I m p a c t   I n d i c a t o r s   C o m p a r e d   W i t h   I m p a c t   F a c t o r s :   A n   A l t e r n a t i v e   R e s e a r c h   D e s i g n   W i t h   P o l i c y   I m p l i c a t i o n s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W O R S H I P I N G   F A L S E   I D O L S ;   C I T A T I O N   A N A L Y S I S ;   F A C T O R   D I L E M M A ;   S C I E N C E ;   J O U R N A L S ;   L I B R A R Y 	 I n   b i b l i o m e t r i c s ,   t h e   a s s o c i a t i o n   o f   " i m p a c t "   w i t h   c e n t r a l - t e n d e n c y   s t a t i s t i c s   i s   m i s t a k e n .   I m p a c t s   a d d   u p ,   a n d   c i t a t i o n   c u r v e s   t h e r e f o r e   s h o u l d   b e   i n t e g r a t e d   i n s t e a d   o f   a v e r a g e d .   F o r   e x a m p l e ,   t h e   j o u r n a l s   M I S   Q u a r t e r l y   a n d   J o u r n a l   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e   a n d   T e c h n o l o g y   d i f f e r   b y   a   f a c t o r   o f   2   i n   t e r m s   o f   t h e i r   r e s p e c t i v e   i m p a c t   f a c t o r s   ( I F ) ,   b u t   t h e   j o u r n a l   w i t h   t h e   l o w e r   I F   h a s   t h e   h i g h e r   i m p a c t .   U s i n g   p e r c e n t i l e   r a n k s   ( e .   g . ,   t o p - 1 % ,   t o p - 1 0 % ,   e t c . ) ,   a n   I n t e g r a t e d   I m p a c t   I n d i c a t o r   ( I 3 )   c a n   b e   b a s e d   o n   i n t e g r a t i o n   o f   t h e   c i t a t i o n   c u r v e s ,   b u t   a f t e r   n o r m a l i z a t i o n   o f   t h e   c i t a t i o n   c u r v e s   t o   t h e   s a m e   s c a l e .   T h e   r e s u l t s   a c r o s s   d o c u m e n t   s e t s   c a n   b e   c o m p a r e d   a s   p e r c e n t a g e s   o f   t h e   t o t a l   i m p a c t   o f   a   r e f e r e n c e   s e t .   T o t a l   n u m b e r   o f   c i t a t i o n s ,   h o w e v e r ,   s h o u l d   n o t   b e   u s e d   i n s t e a d   b e c a u s e   t h e   s h a p e   o f   t h e   c i t a t i o n   c u r v e s   i s   t h e n   n o t   a p p r e c i a t e d .   I 3   c a n   b e   a p p l i e d   t o   a n y   d o c u m e n t   s e t   a n d   a n y   c i t a t i o n   w i n d o w .   T h e   r e s u l t s   o f   t h e   i n t e g r a t i o n   ( s u m m a t i o n )   a r e   f u l l y   d e c o m p o s a b l e   i n   t e r m s   o f   j o u r n a l s   o r   i n s t i t u t i o n a l   u n i t s   s u c h   a s   n a t i o n s ,   u n i v e r s i t i e s ,   a n d   s o   o n   b e c a u s e   p e r c e n t i l e   r a n k s   a r e   d e t e r m i n e d   a t   t h e   p a p e r   l e v e l .   I n   t h i s   s t u d y ,   w e   f i r s t   c o m p a r e   I 3   w i t h   I F s   f o r   t h e   j o u r n a l s   i n   t w o   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   s u b j e c t   c a t e g o r i e s   ( " I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e "   a n d   " M u l t i d i s c i p l i n a r y   S c i e n c e s " ) .   T h e   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e   s e t   i s   a d d i t i o n a l l y   d e c o m p o s e d   i n   t e r m s   o f   n a t i o n s .   P o l i c y   i m p l i c a t i o n s   o f   t h i s   p o s s i b l e   p a r a d i g m   s h i f t   i n   c i t a t i o n   i m p a c t   a n a l y s i s   a r e   s p e c i f i e d . 	 [ L e y d e s d o r f f ,   L o e t ]   U n i v   A m s t e r d a m ,   A m s t e r d a m   S c h   C o m m u n   R e s ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s ;   [ B o r n m a n n ,   L u t z ]   M a x   P l a n c k   S o c ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y 	 L e y d e s d o r f f ,   L   ( r e p r i n t   a u t h o r ) ,   U n i v   A m s t e r d a m ,   A m s t e r d a m   S c h   C o m m u n   R e s ,   K l o v e n i e r b u r g w a l   4 8 ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s . 	 l o e t @ l e y d e s d o r f f . n e t ;   b o r n m a n n @ g v . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   L e y d e s d o r f f ,   L o e t / E - 2 9 0 3 - 2 0 1 0 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   L e y d e s d o r f f ,   L o e t / 0 0 0 0 - 0 0 0 2 - 7 8 3 5 - 3 0 9 8 	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   B e n s m a n   S J ,   1 9 9 8 ,   L I B R   R E S O U R   T E C H   S E R ,   V 4 2 ,   P 1 4 7 ;   B e n s m a n   S J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 9 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 1 0 ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 1 8 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 9 ;   B o r n m a n n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 4 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 4 . 0 0 4 ;   B o r n m a n n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 0 . 0 0 4 ;   B r u m b a c k   R A ,   2 0 0 8 ,   J   C H I L D   N E U R O L ,   V 2 3 ,   P 1 0 9 2 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 3 0 7 3 8 0 8 3 2 2 3 3 1 ;   B r u m b a c k   R A ,   2 0 0 8 ,   J   C H I L D   N E U R O L ,   V 2 3 ,   P 3 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 3 0 7 3 8 0 8 3 1 5 1 7 0 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G i n g r a s   Y ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 5 ;   G l a n z e l   W ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 1 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K A M A D A   T ,   1 9 8 9 ,   I N F O R M   P R O C E S S   L E T T ,   V 3 1 ,   P 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 1 9 0 ( 8 9 ) 9 0 1 0 2 - 6 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   L e v i n e   G ,   1 9 9 1 ,   G U I D E   S P S S   A N A L   V A R I ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 3 4 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 9 . 0 0 2 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 3 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 2 4 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N a t i o n a l   S c i e n c e   B o a r d ,   2 0 1 0 ,   S C I   E N G   I N D ;   N i s o n g e r   T E ,   2 0 0 5 ,   C O L L   R E S   L I B R ,   V 6 6 ,   P 3 4 1 ;   N i s o n g e r   T E ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 1 0 0 4 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   O p t h o f   T ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 2 . 0 0 3 ;   P r i n g l e   J ,   2 0 0 8 ,   J   C H I L D   N E U R O L ,   V 2 3 ,   P 1 0 9 2 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 3 0 7 3 8 0 8 3 2 2 3 3 5 ;   P u d o v k i n   A I ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 1 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 5 3 ;   P u d o v k i n   A .   I . ,   2 0 0 9 ,   C O L L N E T   J   S C I E N T O M E T ,   V 3 ,   P 3 ;   R a f o l s   I ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 8 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 6 ;   R o s s n e r   M ,   2 0 0 8 ,   J   G E N   P H Y S I O L ,   V 1 3 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 8 5 / j g p . 2 0 0 8 0 9 9 5 7 ;   R o s s n e r   M ,   2 0 0 7 ,   J   C E L L   B I O L ,   V 1 7 9 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 8 3 / j c b . 2 0 0 7 1 1 1 4 0 ;   R o u s s e a u   R . ,   2 0 1 1 ,   I S S I   N E W S L E T T E R ,   V 7 ,   P 1 0 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   v a n   d e n   B e s s e l a a r   P ,   2 0 0 9 ,   R E S   E V A L U A T ,   V 1 8 ,   P 2 7 3 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 9 X 4 7 5 3 6 0 ;   v a n   R a a n   A F J ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 3 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 8 ;   V a n   R a a n   A . F . J . ,   2 0 1 0 ,   1 1   I N T   C   S C I   T E C H N   I ,   P 2 9 1 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 0 	 4 3 	 6 7 	 6 8 	 1 0 	 1 1 7 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 N O V 	 2 0 1 1 	 6 2 	 1 1 	 	 	 	 	 2 1 3 3 	 2 1 4 6 	 	 1 0 . 1 0 0 2 / a s i . 2 1 6 0 9 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 4 0 P Y 	 W O S : 0 0 0 2 9 6 4 5 3 9 0 0 0 0 5 	 	 
 
 J 	 D u r i e u x ,   V ;   G e v e n o i s ,   P A 	 	 	 	 D u r i e u x ,   V a l e r i e ;   G e v e n o i s ,   P i e r r e   A l a i n 	 	 	 B i b l i o m e t r i c   I n d i c a t o r s :   Q u a l i t y   M e a s u r e m e n t s   o f   S c i e n t i f i c   P u b l i c a t i o n 	 R A D I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I M P A C T   F A C T O R ;   E I G E N F A C T O R ( T M )   M E T R I C S ;   R A D I O L O G Y   R E S E A R C H ;   R E S E A R C H   A R T I C L E S ;   H I R S C H - I N D E X ;   H - I N D E X ;   J O U R N A L S ;   P R O D U C T I V I T Y ;   C I T A T I O N S ;   S C I E N C E 	 B i b l i o m e t r i c s   i s   a   s e t   o f   m a t h e m a t i c a l   a n d   s t a t i s t i c a l   m e t h o d s   u s e d   t o   a n a l y z e   a n d   m e a s u r e   t h e   q u a n t i t y   a n d   q u a l i t y   o f   b o o k s ,   a r t i c l e s ,   a n d   o t h e r   f o r m s   o f   p u b l i c a t i o n s .   T h e r e   a r e   t h r e e   t y p e s   o f   b i b l i o m e t r i c   i n d i c a t o r s :   q u a n t i t y   i n d i c a t o r s ,   w h i c h   m e a s u r e   t h e   p r o d u c t i v i t y   o f   a   p a r t i c u l a r   r e s e a r c h e r ;   q u a l i t y   i n d i c a t o r s ,   w h i c h   m e a s u r e   t h e   q u a l i t y   ( o r   " p e r f o r m a n c e " )   o f   a   r e s e a r c h e r ' s   o u t p u t ;   a n d   s t r u c t u r a l   i n d i c a t o r s ,   w h i c h   m e a s u r e   c o n n e c t i o n s   b e t w e e n   p u b l i c a t i o n s ,   a u t h o r s ,   a n d   a r e a s   o f   r e s e a r c h .   B i b l i o m e t r i c   i n d i c a t o r s   a r e   e s p e c i a l l y   i m p o r t a n t   f o r   r e s e a r c h e r s   a n d   o r g a n i z a t i o n s ,   a s   t h e s e   m e a s u r e m e n t s   a r e   o f t e n   u s e d   i n   f u n d i n g   d e c i s i o n s ,   a p p o i n t m e n t s ,   a n d   p r o m o t i o n s   o f   r e s e a r c h e r s .   A s   m o r e   a n d   m o r e   s c i e n t i f i c   d i s c o v e r i e s   o c c u r   a n d   p u b l i s h e d   r e s e a r c h   r e s u l t s   a r e   r e a d   a n d   t h e n   q u o t e d   b y   o t h e r   r e s e a r c h e r s ,   b i b l i o m e t r i c   i n d i c a t o r s   a r e   b e c o m i n g   i n c r e a s i n g l y   i m p o r t a n t .   T h i s   a r t i c l e   p r o v i d e s   a n   o v e r v i e w   o f   t h e   c u r r e n t l y   u s e d   b i b l i o m e t r i c   i n d i c a t o r s   a n d   s u m m a r i z e s   t h e   c r i t i c a l   e l e m e n t s   a n d   c h a r a c t e r i s t i c s   o n e   s h o u l d   b e   a w a r e   o f   w h e n   e v a l u a t i n g   t h e   q u a n t i t y   a n d   q u a l i t y   o f   s c i e n t i f i c   o u t p u t .   ( C )   R S N A ,   2 0 1 0 	 [ G e v e n o i s ,   P i e r r e   A l a i n ]   U n i v   L i b r e   B r u x e l l e s ,   H o p   E r a s m e ,   D e p t   R a d i o l ,   B - 1 0 7 0   B r u s s e l s ,   B e l g i u m ;   [ G e v e n o i s ,   P i e r r e   A l a i n ]   U n i v   L i b r e   B r u x e l l e s ,   H o p   E r a s m e ,   B o a r d   M e d   D i r e c t o r s ,   B - 1 0 7 0   B r u s s e l s ,   B e l g i u m ;   [ D u r i e u x ,   V a l e r i e ]   U n i v   L i b r e   B r u x e l l e s ,   R e s   U n i t   I n f o r m a t   &   C o m m u n ,   D e p t   I n f o r m a t   &   C o m m u n   S c i ,   B - 1 0 7 0   B r u s s e l s ,   B e l g i u m 	 G e v e n o i s ,   P A   ( r e p r i n t   a u t h o r ) ,   U n i v   L i b r e   B r u x e l l e s ,   H o p   E r a s m e ,   D e p t   R a d i o l ,   R o u t e   L e n n i k   8 0 8 ,   B - 1 0 7 0   B r u s s e l s ,   B e l g i u m . 	 p i e r r e . a l a i n . g e v e n o i s @ u l b . a c . b e 	 	 	 	 	 A g r a w a l   A A ,   2 0 0 5 ,   T R E N D S   E C O L   E V O L ,   V 2 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 5 . 0 2 . 0 0 2 ;   A l - S h a h i   R ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 1 4 6 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 2 7 . 1 4 6 1 ;   A L T H O U S E   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 7 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B E R G S T R O M   C ,   2 0 0 7 ,   E I G E N F A C T O R   O R G   R A N K ;   B e r g s t r o m   C T ,   2 0 0 8 ,   J   N E U R O S C I ,   V 2 8 ,   P 1 1 4 3 3 ,   D O I   1 0 . 1 5 2 3 / J N E U R O S C I . 0 0 0 3 - 0 8 . 2 0 0 8 ;   B e r g s t r o m   C T ,   2 0 0 8 ,   N E U R O L O G Y ,   V 7 1 ,   P 1 8 5 0 ,   D O I   1 0 . 1 2 1 2 / 0 1 . w n l . 0 0 0 0 3 3 8 9 0 4 . 3 7 5 8 5 . 6 6 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B r a u n   T ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 8 ;   C H E W   F S ,   1 9 8 8 ,   A M   J   R O E N T G E N O L ,   V 1 5 0 ,   P 3 1 ;   C h e w   M ,   2 0 0 7 ,   J   R O Y   S O C   M E D ,   V 1 0 0 ,   P 1 4 2 ,   D O I   1 0 . 1 2 5 8 / j r s m . 1 0 0 . 3 . 1 4 2 ;   D o n g   P e n g ,   2 0 0 5 ,   B i o m e d   D i g i t   L i b r ,   V 2 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 2 - 7 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 3 - 8 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   H e n d e r s o n   S O ,   2 0 0 3 ,   A C A D   E M E R G   M E D ,   V 1 0 ,   P 1 0 0 9 ,   D O I   1 0 . 1 1 9 7 / S 1 0 6 9 - 6 5 6 3 ( 0 3 ) 0 0 3 2 3 - 3 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I t a g a k i   M W ,   2 0 0 8 ,   R A D I O L O G Y ,   V 2 4 7 ,   P 2 1 3 ,   D O I   1 0 . 1 1 4 8 / r a d i o l . 2 4 7 1 0 7 0 7 4 5 ;   I t a g a k i   M W ,   2 0 0 5 ,   R A D I O L O G Y ,   V 2 3 7 ,   P 7 7 4 ,   D O I   1 0 . 1 1 4 8 / r a d i o l . 2 3 7 3 0 4 1 5 0 8 ;   J a c s o   P ,   2 0 0 6 ,   O N L I N E   I N F O R M   R E V ,   V 3 0 ,   P 1 8 8 ,   D O I   [ 1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 6 1 0 6 5 9 2 0 1 ,   1 0 . 1 1 0 8 / 1 4 6 9 4 5 2 0 6 1 0 6 5 9 2 0 1 ] ;   J a c s o   P ,   2 0 0 9 ,   O N L I N E   I N F O R M   R E V ,   V 3 3 ,   P 6 0 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 9 1 0 9 6 9 9 8 9 ;   K E R M A R R E C   A M ,   2 0 0 7 ,   Q U E   M E S U R E N T   I N D I C A T ;   L o w y   C ,   1 9 9 7 ,   L A N C E T ,   V 3 5 0 ,   P 1 0 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 4 0 9 1 - 3 ;   L u n d b e r g   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 1 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 1 3 - 4 ;   L u n d b e r g   J . ,   2 0 0 6 ,   B I B L I O M E T R I C S   R E S   A S ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M U S S U R A K I S   S ,   1 9 9 4 ,   A M   J   R O E N T G E N O L ,   V 1 6 3 ,   P 9 7 3 ;   N e u b e r g e r   J ,   2 0 0 2 ,   E U R   J   G A S T R O E N   H E P A T ,   V 1 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 2 7 3 7 - 2 0 0 2 0 3 0 0 0 - 0 0 0 0 1 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R a h m a n   M ,   2 0 0 5 ,   A C A D   R A D I O L ,   V 1 2 ,   P 8 2 5 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 0 5 . 0 3 . 0 6 1 ;   R a h m a n   M ,   2 0 0 2 ,   N E W   E N G L   J   M E D ,   V 3 4 7 ,   P 1 2 1 1 ,   D O I   1 0 . 1 0 5 6 / N E J M 2 0 0 2 1 0 1 0 3 4 7 1 5 2 3 ;   R H E N   C ,   2 0 0 6 ,   B I B L I O M E T R I C   H D B   K A R ;   R o g e r s   L F ,   2 0 0 2 ,   A M   J   R O E N T G E N O L ,   V 1 7 8 ,   P 5 4 1 ;   R O U S S E A U   R ,   2 0 0 2 ,   J   E V A L U A T I O N   T E C H N I C ;   R o w l a n d s   I ,   2 0 0 7 ,   A S L I B   P R O C ,   V 5 9 ,   P 2 2 2 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 7 1 0 7 5 2 0 2 5 ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S m i t h   R . ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 6 1 ;   * T H O M S   R E U T ,   2 0 0 7 ,   J   C I T A   R E P   W E B   S I T ;   * T H O M S   R E U T ,   2 0 0 7 ,   I M M   I N D   J   C I T   R E P   W E ;   * T H O M S   R E U T ,   2 0 0 8 ,   5   J   I M P   F A C T   J   C I T A ;   * T H O M S   R E U T ,   2 0 0 8 ,   C I T   J   G R A P H   J   C I T   R E ;   * T H O M S   R E U T ,   2 0 0 9 ,   W E B   S C I   O V   I S I   W E B   K ;   * T H O M S   R E U T ,   2 0 0 8 ,   G L O S S   T H O M S   S C I ;   * T H O M S   R E U T ,   2 0 0 9 ,   J   C I T   R E P   O V   T H O M S   R ;   I S I   W e b   o f   K n o w l e d g e ,   2 0 0 8 ,   J   C I T   R E P ;   V a n   L e e u w e n   T N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 8 7 0 9 6 9 4 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W h i t e h o u s e   G ,   2 0 0 1 ,   B R I T   J   R A D I O L ,   V 7 4 ,   P 1 ;   Y a n g   T ,   2 0 0 7 ,   L A S E R   F O C U S   W O R L D ,   V 4 3 ,   P 1 5 ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   N A T U R E ,   V 4 3 5 ,   P 1 0 0 3 	 5 7 	 6 6 	 6 9 	 4 	 3 5 	 R A D I O L O G I C A L   S O C   N O R T H   A M E R I C A 	 O A K   B R O O K 	 8 2 0   J O R I E   B L V D ,   O A K   B R O O K ,   I L   6 0 5 2 3   U S A 	 0 0 3 3 - 8 4 1 9 	 	 	 R A D I O L O G Y 	 R a d i o l o g y 	 M A Y 	 2 0 1 0 	 2 5 5 	 2 	 	 	 	 	 3 4 2 	 3 5 1 	 	 1 0 . 1 1 4 8 / r a d i o l . 0 9 0 9 0 6 2 6 	 	 1 0 	 R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 5 8 7 F U 	 W O S : 0 0 0 2 7 6 9 7 6 2 0 0 0 0 5 	 2 0 4 1 3 7 4 9 	 
 
 J 	 A r c h a m b a u l t ,   E ;   L a r i v i e r e ,   V 	 	 	 	 A r c h a m b a u l t ,   E r i c ;   L a r i v i e r e ,   V i n c e n t 	 	 	 H i s t o r y   o f   t h e   j o u r n a l   i m p a c t   f a c t o r :   C o n t i n g e n c i e s   a n d   c o n s e q u e n c e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S U B J E C T   C A T E G O R I E S ;   S C I E N C E ;   P E R F O R M A N C E 	 T h i s   p a p e r   e x a m i n e s   t h e   g e n e s i s   o f   j o u r n a l   i m p a c t   m e a s u r e s   a n d   h o w   t h e i r   e v o l u t i o n   c u l m i n a t e d   i n   t h e   j o u r n a l   i m p a c t   f a c t o r   ( J I F )   p r o d u c e d   b y   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n .   T h e   p a p e r   s h o w s   h o w   t h e   v a r i o u s   b u i l d i n g   b l o c k s   o f   t h e   d o m i n a n t   J I F   ( p u b l i s h e d   i n   t h e   J o u r n a l   C i t a t i o n   R e p o r t   -   J C R )   c a m e   i n t o   b e i n g .   T h e   p a p e r   a r g u e s   t h a t   t h e s e   b u i l d i n g   b l o c k s   w e r e   a l l   c o n s t r u c t e d   f a i r l y   a r b i t r a r i l y   o r   f o r   d i f f e r e n t   p u r p o s e s   t h a n   t h o s e   t h a t   g o v e r n   t h e   c o n t e m p o r a r y   u s e   o f   t h e   J I F .   T h e   r e s u l t s   a r e   a   f a u l t y   m e t h o d ,   w i d e l y   o p e n   t o   m a n i p u l a t i o n   b y   j o u r n a l   e d i t o r s   a n d   m i s u s e   b y   u n c r i t i c a l   p a r t i e s .   T h e   d i s c u s s i o n   e x a m i n e s   s o m e   s o l u t i o n   o f f e r e d   t o   t h e   b i b l i o m e t r i c s   a n d   s c i e n t i f i c   c o m m u n i t i e s   c o n s i d e r i n g   t h e   w i d e   u s e   o f   t h i s   i n d i c a t o r   a t   p r e s e n t . 	 [ A r c h a m b a u l t ,   E r i c ]   S c i   M e t r i x ,   M o n t r e a l ,   P Q   H 2 J   1 Y 6 ,   C a n a d a ;   [ A r c h a m b a u l t ,   E r i c ;   L a r i v i e r e ,   V i n c e n t ]   U n i v   Q u e b e c ,   C I R S T ,   O S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a ;   [ L a r i v i e r e ,   V i n c e n t ]   M c G i l l   U n i v ,   S c h   I n f o r m a t   S t u d i e s ,   M o n t r e a l ,   P Q ,   C a n a d a 	 A r c h a m b a u l t ,   E   ( r e p r i n t   a u t h o r ) ,   S c i   M e t r i x ,   1 3 3 5   A   A v e   M o n t   R o y a l   E ,   M o n t r e a l ,   P Q   H 2 J   1 Y 6 ,   C a n a d a . 	 e r i c . a r c h a m b a u l t @ s c i e n c e - m e t r i x . c o m 	 	 	 	 	 A l l e n   E   S ,   1 9 2 9 ,   S c i e n c e ,   V 7 0 ,   P 5 9 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 0 . 1 8 2 5 . 5 9 2 ;   B e n s m a n   S J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 9 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 1 0 ;   B r o d m a n   E ,   1 9 4 4 ,   B u l l   M e d   L i b r   A s s o c ,   V 3 2 ,   P 4 7 9 ;   B R O W N   C H ,   1 9 5 6 ,   A C R L   M O N O G R A P H ,   V 1 6 ;   C u n n i n g h a m   E   R ,   1 9 3 5 ,   B u l l   M e d   L i b r   A s s o c ,   V 2 4 ,   P 6 4 ;   F a s s o u l a k i   A ,   2 0 0 2 ,   A C T A   A N A E S T H   S C A N D ,   V 4 6 ,   P 9 0 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 2 . 4 6 0 7 2 3 . x ;   F u y u n o   I ,   2 0 0 6 ,   N A T U R E ,   V 4 4 1 ,   P 7 9 2 ,   D O I   1 0 . 1 0 3 8 / 4 4 1 7 9 2 b ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 6 3 ,   G E N E T I C S   C I T A T I O N   I N ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G r e g o r y   J ,   1 9 3 7 ,   B u l l   M e d   L i b r   A s s o c ,   V 2 5 ,   P 1 7 2 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   G r o s s   P   L ,   1 9 3 1 ,   S c i e n c e ,   V 7 3 ,   P 6 6 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 3 . 1 9 0 3 . 6 6 0 ;   H a c k h   I ,   1 9 3 6 ,   B u l l   M e d   L i b r   A s s o c ,   V 2 5 ,   P 1 0 9 ;   H e n k l e   H   H ,   1 9 3 8 ,   B u l l   M e d   L i b r   A s s o c ,   V 2 7 ,   P 1 3 9 ;   H u t h   E J ,   2 0 0 1 ,   C R O A T   M E D   J ,   V 4 2 ,   P 1 4 ;   L I N D S E Y   D ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 8 ;   M a r t y n   J . ,   1 9 6 8 ,   E V A L U A T I O N   B R I T   S C I ;   M c N e e l y   J K ,   1 9 3 0 ,   S C I E N C E ,   V 7 2 ,   P 8 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 2 . 1 8 5 6 . 8 1 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   P u d o v k i n   A I ,   2 0 0 4 ,   P   A S I S T   A N N U ,   V 4 1 ,   P 5 0 7 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 4 1 0 1 5 9 ;   R A I S I G   L M ,   1 9 6 0 ,   S C I E N C E ,   V 1 3 1 ,   P 1 4 1 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 1 . 3 4 1 1 . 1 4 1 7 ;   R a m i r e z   A M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 0 0 8 0 7 2 9 2 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 7 ;   S c h w a r t z   S ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 2 3 6 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 ;   S E N   B K ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 ;   S m i t h   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 6 3 ;   S o m b a t s o m p o p   N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 7 5 - 2 ;   v a n   L e e u w e n   T N ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 6 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 7 - 5 ;   W E S T B R O O K   J H ,   1 9 6 0 ,   S C I E N C E ,   V 1 3 2 ,   P 1 2 2 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 2 . 3 4 3 5 . 1 2 2 9 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A B   B E H A V   P R I N C I P L 	 3 7 	 6 6 	 7 0 	 6 	 5 2 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 0 9 	 7 9 	 3 	 	 	 	 	 6 3 5 	 6 4 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 3 6 - x 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 5 7 F S 	 W O S : 0 0 0 2 6 6 9 1 4 5 0 0 0 1 1 	 	 
 
 J 	 Z i t t ,   M ;   B a s s e c o u l a r d ,   E 	 	 	 	 Z i t t ,   M i c h e l ;   B a s s e c o u l a r d ,   E l i s e 	 	 	 D e l i n e a t i n g   c o m p l e x   s c i e n t i f i c   f i e l d s   b y   a n   h y b r i d   l e x i c a l - c i t a t i o n   m e t h o d :   A n   a p p l i c a t i o n   t o   n a n o s c i e n c e s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i n f o r m a t i o n   r e t r i e v a l ;   l e x i c a l   q u e r y ;   c i t a t i o n   n e t w o r k ;   n a n o s c i e n c e s ;   s c i e n t i f i c   a r e a   d e l i n e a t i o n ;   b i b l i o m e t r i c s 	 I N F O R M E T R I C   D I S T R I B U T I O N S ;   W O R D   A N A L Y S I S ;   S C I E N C E ;   C O C I T A T I O N ;   N A N O T E C H N O L O G Y ;   L A W S ;   S P E C I A L T I E S ;   P A T E N T S ;   S Y S T E M S 	 R e l e v a n c e   o f   b i b l i o m e t r i c   i n d i c a t o r s   o n   s c i e n t i f i c   a r e a s   c r i t i c a l l y   d e p e n d s   o n   t h e   q u a l i t y   o f   t h e i r   d e l i n e a t i o n .   M a c r o - l e v e l   s t u d i e s ,   o f t e n   b a s e d   o n   a   s e l e c t e d   l i s t   o f   j o u r n a l s ,   a c c e p t   a   h i g h   d e g r e e   o f   f u z z i n e s s .   M i c r o - l e v e l   s t u d i e s   r e l y   o n   s e t s   o f   i n d i v i d u a l   a r t i c l e s   i n   o r d e r   t o   r e d u c e   n o i s e   a n d   e n h a n c e   p r e c i s i o n   o f   r e t r i e v a l .   T h e   m o s t   u s u a l   i n f o r m a t i o n   r e t r i e v a l   p r o c e s s   i s   b a s e d   o n   l e x i c a l   q u e r i e s   w i t h   v a r i o u s   l e v e l s   o f   s o p h i s t i c a t i o n .   I n   t h e   e x p e r i m e n t   o n   N a n o s c i e n c e s   r e p o r t e d   h e r e ,   t h i s   p r o c e s s   w a s   u s e d   a s   a   f i r s t   s t e p ,   t o   d e l i n e a t e   a   ' s e e d '   o f   l i t e r a t u r e .   I t   h a s   s t r o n g   l i m i t a t i o n s ,   e s p e c i a l l y   f o r   e m e r g i n g   o r   t r a n s v e r s a l   f i e l d s .   I n   a   s e c o n d   s t e p ,   t h e   a l t e r n a t i v e   a p p r o a c h   o f   c i t a t i o n   l i n k a g e s ,   w a s   u s e d   t o   e x p a n d   t h e   b i b l i o g r a p h y   s t a r t i n g   f r o m   l e x i c a l   s e e d .   T h e   e x t e n s i o n   p r o c e s s   p r e s e n t e d   i s   r u l e d   b y   t h r e e   p a r a m e t e r s ,   t w o   d e a l   w i t h   t h e   c i t e d   s i d e   ( t h r e s h o l d   o n   c i t a t i o n   s c o r e ,   a n d   s p e c i f i c i t y   t o w a r d s   t h e   f i e l d ) ,   o n e   w i t h   t h e   c i t i n g   s i d e   ( t h r e s h o l d   o n   t h e   n u m b e r   o f   r e l e v a n t   r e f e r e n c e s )   i n t e r p l a y i n g   i n   t h e   ' r e f e r e n c i n g   s t r u c t u r e '   f u n c t i o n   ( R S F )   i n t r o d u c e d   i n   a   p r e v i o u s   w o r k .   T h i s   t y p e   o f   c o m b i n a t i o n   p r o v e s   e f f e c t i v e   f o r   d e l i n e a t i n g   t h e   t r a n s v e r s a l   f i e l d   o f   N a n o s c i e n c e s .   F u r t h e r   i m p r o v e m e n t s   o f   t h e   m e t h o d   a r e   d i s c u s s e d .   ( c )   2 0 0 6   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 O b s e r v   S c i   &   T e c h ,   F - 7 5 0 1 5   P a r i s ,   F r a n c e 	 Z i t t ,   M   ( r e p r i n t   a u t h o r ) ,   O b s e r v   S c i   &   T e c h ,   9 3   R u e   V a u g i r a r d ,   F - 7 5 0 1 5   P a r i s ,   F r a n c e . 	 z i t t @ n a n t e s . i n r a . f r ;   b a s s e c o u @ n a n t e s . i n r a . f r 	 	 	 	 	 B a c h m a n n   G . ,   1 9 9 8 ,   I N N O V A T I O N S S C H U B   N A N ;   B a s s e c o u l a r d   E ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 6 6 5 ;   B O N A C C O R S I   A ,   2 0 0 2 ,   I   S C I   C   S I E N   I T ;   B O O K S T E I N   A ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 7 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 7 ) 4 1 : 5 < 3 7 6 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - E ;   B O O K S T E I N   A ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 7 ) 4 1 : 5 < 3 6 8 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - C ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B r a u n   T ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 7 ;   B r i n   S . ,   1 9 9 8 ,   C O M P U T E R   N E T W O R K S   I S ,   V 3 0 ,   P 1 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   Z u c k e r   L .   G . ,   2 0 0 3 ,   9 8 2 5   N B E R ;   E g g h e   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 5 8 ;   E G G H E   L ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 0 0 1 6 0 0 1 0 5 ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   F O G E L B E R G   H ,   2 0 0 3 ,   B R I N G I N G   V I S A B I L I T Y ,   P 2 9 ;   F R A N K S   A ,   1 9 8 7 ,   J   P H Y S   E   S C I   I N S T R U M ,   V 2 0 ,   P 1 4 4 2 ,   D O I   1 0 . 1 0 8 8 / 0 0 2 2 - 3 7 3 5 / 2 0 / 1 2 / 0 0 1 ;   G a r f i e l d   E ,   1 9 6 7 ,   J   L I B R A R Y   H I S T O R Y ,   V 2 ,   P 2 3 5 ;   G L A E N Z E L   W ,   2 0 0 3 ,   N A N O T E C H N O L O G Y   A N A L ;   K a t z   J S ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 5 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 1 0 - 4 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   L A R E D O   P ,   2 0 0 2 ,   4   T R I P L   H E L   C   C O P ;   L e y d e s d o r f f   L ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 4 5 ;   M A L S C H   I ,   1 9 9 7 ,   1 7 7 1 0 E N   E U R   J R C ;   M a r s l a n d   A   M ,   2 0 0 1 ,   S k i n   T h e r a p y   L e t t ,   V 6 ,   P 3 ;   M e y e r   M ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 4 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 4 0 - 2 ;   M e y e r   M . ,   2 0 0 1 ,   N A N O T E C H N O L O G Y   E X P E R ;   M O E D   H F ,   1 9 8 9 ,   J   I N F O R M   S C I ,   V 1 5 ,   P 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 9 0 1 5 0 0 2 0 5 ;   M U R U G E S A N   P ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 0 7 ;   N A R A N A N   S ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 3 1 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 3 1 a 0 ;   N o y o n s   E . ,   2 0 0 3 ,   M A P P I N G   E X C E L L E N C E   S ;   N o y o n s   E .   C .   M . ,   1 9 9 9 ,   B I B L I O M E T R I C   M A P P I N G ;   P A O   M L ,   1 9 9 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 9 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 3 ) 9 0 0 2 6 - A ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   R i p   A . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 2 5 3 ;   R o c o   M . ,   2 0 0 2 ,   C O N V E R G I N G   T E C H N O L O G ;   R O U S S E A U   R ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 1 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 4 ) 4 1 : 3 < 1 9 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - X ;   R O U S S E A U   R ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ,   P 7 ;   S a l t o n   G . ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M ;   S C H M I D   G ,   2 0 0 3 ,   E U R O P A E I S C H E   A K A D   G R ,   V 3 5 ,   P 1 ;   S c h u m m e r   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 2 . 7 1 3 1 4 . 3 8 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 7 3 2 8 4 6 0 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 0 1 8 2 0 3 9 3 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 7 5 6 2 0 7 5 2 ;   Z i t t   M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 2 ;   Z i t t   M . ,   2 0 0 5 ,   M E A S U R E M E N T   I N T E R D I S ,   V 3 ,   P 3 8 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 	 5 0 	 6 6 	 6 6 	 3 	 2 5 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 D E C 	 2 0 0 6 	 4 2 	 6 	 	 	 	 	 1 5 1 3 	 1 5 3 1 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 6 	 	 1 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 2 T I 	 W O S : 0 0 0 2 3 8 9 6 7 1 0 0 0 1 1 	 	 
 
 J 	 P o r t e r ,   A L ;   Y o u t i e ,   J 	 	 	 	 P o r t e r ,   A l a n   L . ;   Y o u t i e ,   J a n 	 	 	 H o w   i n t e r d i s c i p l i n a r y   i s   n a n o t e c h n o l o g y ? 	 J O U R N A L   O F   N A N O P A R T I C L E   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 N a n o t e c h n o l o g y   r e s e a r c h   a c t i v i t y   p a t t e r n s ;   N a n o t e c h n o l o g y   t r e n d s ;   N a n o s c a l e   s c i e n c e   a n d   e n g i n e e r i n g ;   I n t e r d i s c i p l i n a r i t y ;   B i b l i o m e t r i c s ;   S c i e n c e   m a p p i n g 	 C O N V E R G I N G   T E C H N O L O G I E S ;   S C I E N C E ;   N A N O S C A L E ;   J O U R N A L S ;   T E R M S ;   C O C I T A T I O N ;   G O V E R N A N C E ;   C A T E G O R I E S ;   A R E A S 	 F a c i l i t a t i n g   c r o s s - d i s c i p l i n a r y   r e s e a r c h   h a s   a t t r a c t e d   m u c h   a t t e n t i o n   i n   r e c e n t   y e a r s ,   w i t h   s p e c i a l   c o n c e r n s   i n   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y .   A l t h o u g h   p o l i c y   d i s c o u r s e   h a s   e m p h a s i z e d   t h a t   n a n o t e c h n o l o g y   i s   s u b s t a n t i v e l y   i n t e g r a t i v e ,   s o m e   a n a l y s t s   h a v e   c o u n t e r e d   t h a t   i t   i s   r e a l l y   a   l o o s e   a m a l g a m   o f   r e l a t i v e l y   t r a d i t i o n a l   p o c k e t s   o f   p h y s i c s ,   c h e m i s t r y ,   a n d   o t h e r   d i s c i p l i n e s   t h a t   i n t e r r e l a t e   o n l y   w e a k l y .   W e   a r e   d e v e l o p i n g   e m p i r i c a l   m e a s u r e s   t o   g a u g e   a n d   v i s u a l i z e   t h e   e x t e n t   a n d   n a t u r e   o f   i n t e r d i s c i p l i n a r y   i n t e r c h a n g e .   S u c h   r e s u l t s   s p e a k   t o   r e s e a r c h   o r g a n i z a t i o n ,   f u n d i n g ,   a n d   m e c h a n i s m s   t o   b o l s t e r   k n o w l e d g e   t r a n s f e r .   I n   t h i s   s t u d y ,   w e   a d d r e s s   t h e   n a t u r e   o f   c r o s s - d i s c i p l i n a r y   l i n k a g e s   u s i n g   " s c i e n c e   o v e r l a y   m a p s "   o f   a r t i c l e s ,   a n d   t h e i r   r e f e r e n c e s ,   t h a t   h a v e   b e e n   c a t e g o r i z e d   i n t o   s u b j e c t   c a t e g o r i e s .   W e   f i n d   s i g n s   t h a t   t h e   r a t e   o f   i n c r e a s e   i n   n a n o   r e s e a r c h   i s   s l o w i n g ,   a n d   t h a t   i t s   c o m p o s i t i o n   i s   c h a n g i n g   ( f o r   o n e ,   i n c r e a s i n g   c h e m i s t r y - r e l a t e d   a c t i v i t y ) .   O u r   r e s u l t s   s u g g e s t   t h a t   n a n o t e c h n o l o g y   r e s e a r c h   e n c o m p a s s e s   m u l t i p l e   d i s c i p l i n e s   t h a t   d r a w   k n o w l e d g e   f r o m   d i s c i p l i n a r i l y   d i v e r s e   k n o w l e d g e   s o u r c e s .   N a n o   r e s e a r c h   i s   h i g h l y ,   a n d   i n c r e a s i n g l y ,   i n t e g r a t i v e - b u t   s o   i s   m u c h   o f   s c i e n c e   t h e s e   d a y s .   T a b u l a t i n g   a n d   m a p p i n g   n a n o   r e s e a r c h   a c t i v i t y   s h o w   a   d o m i n a n t   c o r e   i n   m a t e r i a l s   s c i e n c e s ,   b r o a d l y   d e f i n e d .   A d d i t i o n a l   a n a l y s e s   a n d   m a p s   s h o w   t h a t   n a n o   r e s e a r c h   d r a w s   e x t e n s i v e l y   u p o n   k n o w l e d g e   p r e s e n t e d   i n   o t h e r   a r e a s ;   i t   i s   n o t   c o n s t r i c t e d   w i t h i n   n a r r o w   s i l o s . 	 [ P o r t e r ,   A l a n   L . ]   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ Y o u t i e ,   J a n ]   G e o r g i a   I n s t   T e c h n o l ,   E n t e r p r i s e   I n n o v a t   I n s t ,   A t l a n t a ,   G A   3 0 3 3 2   U S A 	 P o r t e r ,   A L   ( r e p r i n t   a u t h o r ) ,   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A . 	 a p o r t e r @ i s y e . g a t e c h . e d u ;   j a n . y o u t i e @ i n n o v a t e . g a t e c h . e d u 	 Y o u t i e ,   J a n / Q - 4 1 8 0 - 2 0 1 6 ;   p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 	 Y o u t i e ,   J a n / 0 0 0 0 - 0 0 0 2 - 9 7 5 9 - 5 2 5 2 ;   p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 	 N a t i o n a l   S c i e n c e   F o u n d a t i o n   [ 0 5 3 1 1 9 4 ,   E E C - 0 4 3 8 6 8 4 ] ;   N a t i o n a l   P a r t n e r s h i p   f o r   M a n a g i n g   U p s t r e a m   I n n o v a t i o n 	 S i g n i f i c a n t   r e s e a r c h   a s s i s t a n c e   i n   d a t a   t r e a t m e n t ,   s o f t w a r e   t o   f a c i l i t a t e   t h e   a n a l y s e s ,   a n d   d e v e l o p m e n t   o f   v i s u a l i z a t i o n s   w a s   p r o v i d e d   b y   J o n   G a r n e r   a n d   W e b b   M y e r s .   T h e   a u t h o r s   r e c e i v e d   h e l p f u l   c o m m e n t s   a n d   a d v i c e   f r o m   I s m a e l   R a f o l s   a n d   P h i l i p   S h a p i r a .   T h i s   r e s e a r c h   w a s   u n d e r t a k e n   a t   G e o r g i a   T e c h   w i t h   s u p p o r t   b y   t h e   C e n t e r   f o r   N a n o t e c h n o l o g y   i n   S o c i e t y   ( A r i z o n a   S t a t e   U n i v e r s i t y ) ,   s u p p o r t e d   b y   t h e   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( A w a r d   N o .   0 5 3 1 1 9 4 )   a n d   t h e   N a t i o n a l   P a r t n e r s h i p   f o r   M a n a g i n g   U p s t r e a m   I n n o v a t i o n :   T h e   C a s e   o f   N a n o s c i e n c e   a n d   T e c h n o l o g y   ( N o r t h   C a r o l i n a   S t a t e   U n i v e r s i t y ;   N S F   A w a r d   N o .   E E C - 0 4 3 8 6 8 4 ) .   T h e   f i n d i n g s   a n d   o b s e r v a t i o n s   c o n t a i n e d   i n   t h i s   p a p e r   a r e   t h o s e   o f   t h e   a u t h o r s   a n d   d o   n o t   n e c e s s a r i l y   r e f l e c t   t h e   v i e w s   o f   t h e   N a t i o n a l   S c i e n c e   F o u n d a t i o n . 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   C h e n   C . ,   2 0 0 3 ,   M A P P I N G   S C I   F R O N T I E R ;   E t o   H ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 2 3 4 0 6 6 4 3 ;   G l a n z e l   W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 8 8 ;   G r o d a l   S . ,   2 0 0 8 ,   N B E R   C   E M   I N D   N A N   N A ;   H i c k s   D M ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 3 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 4 0 1 ;   K a t z   J S ,   1 9 9 5 ,   P   5   I N T   C   I N T   S O C   S C ;   K h u s h f   G ,   2 0 0 4 ,   A N N   N Y   A C A D   S C I ,   V 1 0 1 3 ,   P 1 2 4 ,   D O I   1 0 . 1 1 9 6 / a n n a l s . 1 3 0 5 . 0 0 7 ;   T h o m p s o n   K l e i n   J u l i e ,   1 9 9 9 ,   C R O S S I N G   B O U N D A R I E S ;   L E Y D E S D O R F F   L ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 5 4 - X ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 6 0 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 2 2 ;   L E Y D E S D O R F F   L ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 9 7 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 7 ;   L o v e r i d g e   D ,   2 0 0 8 ,   T E C H N O L   A N A L   S T R A T E G ,   V 2 0 ,   P 2 9 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 7 0 1 7 2 6 5 4 4 ;   M E Y E R   M ,   2 0 0 6 ,   2 0 0 6   T E C H N   T R A N S F   S O ;   M o r i l l o   F ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 6 ;   M o y a - A n e g o n   F ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 1 2 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 7 3 6 8 . 3 1 2 1 7 . 3 4 ;   M o y a - A n e g o n   F . ,   2 0 0 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 8 ,   P 2 1 6 7 ,   D O I   D O I   1 0 . 1 0 0 2 / A S I . 2 0 6 8 3 ;   N a t i o n a l   A c a d e m i e s   C o m m i t t e e   o n   F a c i l i t a t i n g   I n t e r d i s c i p l i n a r y   R e s e a r c h   C o m m i t t e e   o n   S c i e n c e   E n g i n e e r i n g   a n d   P u b l i c   P o l i c y   ( C O S E P U P ) ,   2 0 0 5 ,   F A C   I N T   R E S ;   * N A T   S C I   T E C H N   C O U ,   1 9 9 9 ,   N A N   S C I   T E C H N   W O R L D W ;   P o r t e r   A L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 7 3 0 2 9 2 5 8 ;   P O R T E R   A L ,   2 0 0 8 ,   N B E R   C   N A N   N A N   C A M B R ;   P O R T E R   A L ,   2 0 0 8 ,   W O R K S H   N A T   S C I   F D N   W ;   P O R T E R   A L ,   R E S   E V A L   I N   P R E S S ;   P O R T E R   A L ,   S C I E N T O M E T R   I N   P R E S S ;   P o r t e r   A L ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 6 6 - y ;   P o r t e r   A L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 0 0 - 5 ;   P o r t e r   A L ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 1 8 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 5 8 4 1 ;   R A F O L S   I ,   S C I E N T O M E T R   I N   P R E S S ;   R a f o l s   I ,   2 0 0 7 ,   I N N O V A T I O N - A B I N G D O N ,   V 2 0 ,   P 3 9 5 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 1 1 6 1 0 7 0 1 7 6 0 7 7 0 ;   R o c o   M C ,   2 0 0 4 ,   A I C H E   J ,   V 5 0 ,   P 8 9 0 ,   D O I   1 0 . 1 0 0 2 / a i c . 1 0 0 8 7 ;   R o c o   M C ,   2 0 0 3 ,   C U R R   O P I N   B I O T E C H ,   V 1 4 ,   P 3 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 8 - 1 6 6 9 ( 0 3 ) 0 0 0 6 8 - 5 ;   R o c o   M C ,   2 0 0 2 ,   J   N A N O P A R T   R E S ,   V 4 ,   P 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 1 5 7 0 2 7 7 9 2 ;   R o c o   M . C . ,   2 0 0 3 ,   C O N V E R G I N G   T E C H N O L O G ;   R o c o   M C ,   2 0 0 6 ,   A N N   N Y   A C A D   S C I ,   V 1 0 9 3 ,   P 1 ,   D O I   1 0 . 1 1 9 6 / a n n a l s . 1 3 8 2 . 0 0 2 ;   R o c o   M C ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 6 9 - 8 ;   S a l t o n   G . ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M ;   S c h m i d t   J C ,   2 0 0 8 ,   T E C H N O L   A N A L   S T R A T E G ,   V 2 0 ,   P 4 5 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 7 0 1 7 2 6 5 7 7 ;   S c h u m m e r   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 2 . 7 1 3 1 4 . 3 8 ;   S c h u m m e r   J ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 7 - 1 ;   S t i r l i n g   A ,   2 0 0 7 ,   J   R   S O C   I N T E R F A C E ,   V 4 ,   P 7 0 7 ,   D O I   1 0 . 1 0 9 8 / r s i f . 2 0 0 7 . 0 2 1 3 ;   V A N R A A N   A F J ,   1 9 9 9 ,   P R A C T I S I N G   I N T E R D I S C ;   Z i e g l e r   A S ,   2 0 0 6 ,   A N N   N Y   A C A D   S C I ,   V 1 0 9 3 ,   P 3 3 9 ,   D O I   1 0 . 1 1 9 6 / a n n a l s . 1 3 8 2 . 0 2 2 ;   Z i t t   M . ,   2 0 0 5 ,   M E A S U R E M E N T   I N T E R D I S ,   V 3 ,   P 3 8 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 	 4 5 	 6 5 	 6 9 	 4 	 4 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 1 3 8 8 - 0 7 6 4 	 	 	 J   N A N O P A R T   R E S 	 J .   N a n o p a r t .   R e s . 	 J U L 	 2 0 0 9 	 1 1 	 5 	 	 	 	 	 1 0 2 3 	 1 0 4 1 	 	 1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 6 0 7 - 0 	 	 1 9 	 C h e m i s t r y ,   M u l t i d i s c i p l i n a r y ;   N a n o s c i e n c e   &   N a n o t e c h n o l o g y ;   M a t e r i a l s   S c i e n c e ,   M u l t i d i s c i p l i n a r y 	 C h e m i s t r y ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   M a t e r i a l s   S c i e n c e 	 4 5 9 M O 	 W O S : 0 0 0 2 6 7 1 0 7 1 0 0 0 0 1 	 	 
 
 J 	 O p p e n h e i m ,   C 	 	 	 	 O p p e n h e i m ,   C h a r l e s 	 	 	 U s i n g   t h e   h - i n d e x   t o   r a n k   i n f l u e n t i a l   B r i t i s h   r e s e a r c h e r s   i n   i n f o r m a t i o n   s c i e n c e   a n d   l i b r a r i a n s h i p 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N T I S T S 	 T h e   r e c e n t l y   d e v e l o p e d   h - i n d e x   h a s   b e e n   a p p l i e d   t o   t h e   l i t e r a t u r e   p r o d u c e d   b y   s e n i o r   B r i t i s h - b a s e d   a c a d e m i c s   i n   l i b r a r i a n s h i p   a n d   i n f o r m a t i o n   s c i e n c e .   T h e   m a j o r i t y   o f   t h o s e   e v a l u a t e d   c u r r e n t l y   h o l d   s e n i o r   p o s i t i o n s   i n   U K   i n f o r m a t i o n   s c i e n c e   a n d   l i b r a r i a n s h i p   d e p a r t m e n t s ;   h o w e v e r ,   a   s m a l l   n u m b e r   o f   s t a f f   i n   o t h e r   d e p a r t m e n t s   a n d   r e t i r e d   ' '   f o u n d i n g   f a t h e r s   ' '   w e r e   a n a l y z e d   a s   w e l l .   T h e   a n a l y s i s   w a s   c a r r i e d   o u t   u s i n g   t h e   W e b   o f   S c i e n c e   ( T h o m s o n   S c i e n t i f i c ,   P h i l a d e l p h i a ,   P A )   f o r   t h e   y e a r s   f r o m   1 9 9 2   t o   O c t o b e r   2 0 0 5 ,   a n d   i n c l u d e d   b o t h   s e c o n d   a u t h o r e d   p a p e r s   a n d   s e l f - c i t a t i o n s .   T h e   t o p - r a n k i n g   B r i t i s h   i n f o r m a t i o n   s c i e n t i s t ,   P e t e r   W i l l e t t ,   h a s   a n   h - i n d e x   o f   3 1 .   H o w e v e r ,   i t   w a s   f o u n d   t h a t   E u g e n e   G a r f i e l d ,   t h e   f o u n d e r   o f   m o d e r n   c i t a t i o n   s t u d i e s ,   h a s   a n   e v e n   h i g h e r   h - i n d e x   o f   3 6 .   T h e s e   r e s u l t s   s u p p o r t   o t h e r   s t u d i e s   s u g g e s t i n g   t h a t   t h e   1 7 - i n d e x   i s   a   u s e f u l   t o o l   i n   t h e   a r m o r y   o f   b i b l i o m e t r i c s . 	 U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h   L E 1 1   3 T U ,   L e i c s ,   E n g l a n d 	 O p p e n h e i m ,   C   ( r e p r i n t   a u t h o r ) ,   U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h   L E 1 1   3 T U ,   L e i c s ,   E n g l a n d . 	 c . o p p e n h e i m @ l b o r o . a c . u k 	 	 	 	 	 B A I R D   L M ,   1 9 9 4 ,   J   I N F O R M   S C I ,   V 2 0 ,   P 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 4 0 2 0 0 0 1 0 2 ;   B A T I S T A   P D ,   I S   I T   P O S S I B L E   C O M P A ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   B R A U N   T ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 2 5 ;   B r i t t a i n   J M ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 2 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 0 0 2 6 0 0 4 0 7 ;   * C I L I P ,   C O U R S   L I B   I N F   S T U D   A ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 1 5 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 1 2 ;   H i r s c h   J E ,   2 0 0 5 ,   I N D E X   Q U A N T I F Y   I N D I V ;   K A L Y A N E   V L ,   2 0 0 4 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 9 ,   P 8 1 ;   K A L Y A N E   V L ,   1 9 9 8 ,   M A L A Y S I A N   J   L I B   I N F O ,   V 3 ,   P 2 5 ;   K O M A T S U   S ,   1 9 9 8 ,   P H A R M   L I B   B   J A P A N ,   V 4 3 ,   P 2 6 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   N o r r i s   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 7 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 7 3 4 ;   P E T E R S   H P F ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 1 1 5 ;   R U S T R U M   R ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 1 1 7 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W e l l e r   A C ,   2 0 0 1 ,   E D I T O R I A L   P E E R   R E V 	 1 9 	 6 5 	 6 9 	 1 1 	 3 5 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J A N   1 5 	 2 0 0 7 	 5 8 	 2 	 	 	 	 	 2 9 7 	 3 0 1 	 	 1 0 . 1 0 0 2 / a s i . 2 0 4 6 0 	 	 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 6 6 L C 	 W O S : 0 0 0 2 4 6 3 7 9 3 0 0 0 1 4 	 	 
 
 J 	 N A R I N ,   F ;   O L I V A S T R O ,   D ;   S T E V E N S ,   K A 	 	 	 	 N A R I N ,   F ;   O L I V A S T R O ,   D ;   S T E V E N S ,   K A 	 	 	 B I B L I O M E T R I C S   T H E O R Y ,   P R A C T I C E   A N D   P R O B L E M S 	 E V A L U A T I O N   R E V I E W 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 T h i s   a r t i c l e   p r e s e n t s   t h e   t h e o r y   b e h i n d   m o d e r n   e v a l u a t i v e   b i b l i o m e t r i c   t e c h n i q u e s   a t   t h r e e   l e v e l s   P o l i c y   a p p l i c a t i o n s   w h i c h   c h a r a c t e r i z e s   t h e   s c i e n t i f i c   a n d   t e c h n o l o g i c a l   o u t p u t   o f   n a t i o n s   o r   r e g i o n s ;   s t r a t e g i c   a n a l y s e s ,   w h i c h   d e a l s   w i t h   a r t i c l e s   a n d   p a t e n t s   a t   t h e   l e v e l   o f   a   u n i v e r s i t y   o r   c o m p a n y ;   a n d   t a c t i c a l   a n a l y s e s ,   w h i c h   a d d r e s s e s   q u e s t i o n s   c o n c e r n i n g   a   s i n g l e   s u b j e c t .   T h e   a r t i c l e   e x p l a i n s   t h e   n e w e r   t e c h n i q u e s   t h a t   h a v e   b e e n   d e v e l o p e d   a t   e a c h   l e v e l ,   a s   w e l l   a s   t h e   m o r e   i m p o r t a n t   l i m i t a t i o n s . 	 	 N A R I N ,   F   ( r e p r i n t   a u t h o r ) ,   C H I   R E S   I N C , H A D D O N   H T S , N J   0 8 0 3 5 ,   U S A . 	 	 	 	 	 	 A N D E R S O N   R C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 2 0 8 ;   B R O A D   W ,   1 9 9 1 ,   N Y   T I M E S                 0 5 2 8 ,   p C 8 ;   B R O A D   W J ,   1 9 9 1 ,   N Y   T I M E S                 0 6 1 8 ,   p C 1 ;   B U D E R I   R ,   1 9 9 2 ,   B U S I N E S S   W E E K       0 8 0 3 ,   P 6 8 ;   C a r t t e r   A .   M . ,   1 9 6 6 ,   A S S E S S M E N T   Q U A L I T Y   G ;   * C H I   R E S ,   1 9 9 2 ,   T E C H   L I N E T M   O V ;   M A R T I N   B R ,   1 9 8 7 ,   N A T U R E ,   V 3 3 0 ,   P 1 2 3 ,   D O I   1 0 . 1 0 3 8 / 3 3 0 1 2 3 a 0 ;   N A R I N   F ,   1 9 9 1 ,   S E R I A L S   L I B R ,   V 2 1 ,   P 3 3 ,   D O I   1 0 . 1 3 0 0 / J 1 2 3 v 2 1 n 0 2 _ 0 5 ;   N a r i n   F . ,   1 9 9 3 ,   C H E M T E C H ,   P 5 2 ;   N A R I N   F ,   1 9 9 0 ,   E U R 1 2 9 0 C   E N 1   O F F   O F F ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R o o s e   K .   D . ,   1 9 7 0 ,   R A T I N G   G R A D U A T E   P R O G ;   T U R N E Y   J ,   1 9 9 1 ,   N E W   S C I ,   V 1 6 ,   P 3 5 ;   * U S   N A T   S C I   B O A R D ,   1 9 7 3 ,   1 9 7 2   S C I   I N D   R E P 	 1 4 	 6 5 	 7 2 	 3 	 2 9 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0 	 0 1 9 3 - 8 4 1 X 	 	 	 E V A L U A T I O N   R E V 	 E v a l .   R e v . 	 F E B 	 1 9 9 4 	 1 8 	 1 	 	 	 	 	 6 5 	 7 6 	 	 1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 	 	 1 2 	 S o c i a l   S c i e n c e s ,   I n t e r d i s c i p l i n a r y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 M U 1 6 0 	 W O S : A 1 9 9 4 M U 1 6 0 0 0 0 0 7 	 	 
 
 J 	 G o d i n ,   B 	 	 	 	 G o d i n ,   B 	 	 	 R e s e a r c h   a n d   t h e   p r a c t i c e   o f   p u b l i c a t i o n   i n   i n d u s t r i e s 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S E C T O R A L   P A T T E R N S ;   B A S I C   R E S E A R C H ;   T E C H N O L O G Y ;   S C I E N C E ;   P E R F O R M A N C E ;   S C I E N T I S T S ;   E N G I N E E R S ;   C I T A T I O N S ;   L I N K A G E ;   P A T E N T S 	 I n d u s t r y   p u b l i s h e s   r e l a t i v e l y   f e w   s c i e n t i f i c   p a p e r s .   C o n s e q u e n t l y ,   i t   i s   u s u a l l y   b e l i e v e d   t h a t   b i b l i o m e t r i c s   i s   n o t   v e r y   w e l l   s u i t e d   t o   m e a s u r e   i n d u s t r i a l   s c i e n c e .   T h e   p r e s e n t   a r t i c l e   t r i e s   t o   a s s e s s   t h e   u s e f u l n e s s   o f   b i b l i o m e t r i c s   f o r   m e a s u r i n g   i n d u s t r i a l   s c i e n t i f i c   a c t i v i t i e s .   1 1   8 1 4   p a p e r s   a n d   8 4   6 5 8   p a t e n t s   o r i g i n a t i n g   f r o m   1 9 9   m u l t i n a t i o n a l s   a r e   s t a t i s t i c a l l y   a n a l y z e d   i n   o r d e r   t o   u n d e r s t a n d   ( 1 )   t h e   i m p o r t a n c e   o f   i n d u s t r i a l   p u b l i c a t i o n s ,   ( 2 )   t h e   f i e l d s   o f   s c i e n c e   p r i v i l e g e d ,   ( 3 )   t h e   l e v e l   o f   s c i e n c e   u s e f u l   t o   i n d u s t r y ,   a n d   ( 4 )   t h e   s c i e n c e - t e c h n o l o g y   r e l a t i o n s h i p s . 	 	 G o d i n ,   B   ( r e p r i n t   a u t h o r ) ,   I N R S , C I R S T , 3 4 6 5   R U E   D U R O C H E R , M O N T R E A L , P Q   H 2 X   2 C 6 , C A N A D A . 	 	 	 	 	 	 A l l e n   T .   J . ,   1 9 7 7 ,   M A N A G I N G   F L O W   T E C H N O ;   A L O N I   M ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 2 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 4 ;   A R C H I B U G I   D ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 9 1 - 4 ;   A r r o w   K . ,   1 9 6 2 ,   R A T E   D I R E C T I O N   I N V E N ;   C A R P E N T E R   M P ,   1 9 8 0 ,   R E S   M A N A G E ,   V 2 3 ,   P 3 0 ;   C A R P E N T E R   M P ,   1 9 8 3 ,   A M   A S S   A D V   S C I   A A A S ;   C O L L I N S   P ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 2 2 - 4 ;   D E S M E T   E ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 5 ,   P 1 0 1 ;   H A L P E R I N   M R ,   1 9 8 7 ,   R & D   M A N A G E ,   V 1 7 ,   P 1 6 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 8 7 . t b 0 0 0 5 1 . x ;   H I C K S   D ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 3 7 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 0 2 - 7 ;   I r v i n e   J . ,   1 9 8 4 ,   F O R E S I G H T   S C I   P I C K I N ;   K E N N E D Y   K J ,   1 9 8 9 ,   I N T   J   T E C H N O L O G Y   M A N ,   V 4 6 ,   P 6 6 5 ;   M O W E R Y   D C ,   1 9 8 3 ,   P O L I C Y   S C I ,   V 1 6 ,   P 2 9 ;   N A R I N   F ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 1 8 - Y ;   N A R I N   F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 5 ;   N A R I N   F ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 1 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 3 9 - X ;   N A R I N   F ,   1 9 8 4 ,   I E E E   T   E N G   M A N A G E ,   V 3 1 ,   P 1 7 2 ;   N A R I N   F ,   1 9 8 9 ,   S C I   T E C H N O L O G Y   I N D I C ,   P 3 5 ;   N E L S O N   R R ,   1 9 5 9 ,   J   P O L I T   E C O N ,   V 6 7 ,   P 2 9 7 ,   D O I   1 0 . 1 0 8 6 / 2 5 8 1 7 7 ;   N E L S O N   R R ,   1 9 9 0 ,   R E S   P O L I C Y ,   V 1 9 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 0 ) 9 0 0 3 6 - 6 ;   N E L S O N   R R ,   1 9 8 9 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 4 ,   P 2 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 8 9 0 1 4 0 0 3 0 2 ;   P A T E L   P ,   1 9 8 9 ,   6 6   S P R U ;   P A V I T T   K ,   1 9 8 4 ,   R E S   P O L I C Y ,   V 1 3 ,   P 3 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 4 ) 9 0 0 1 8 - 0 ;   P a v i t t   K . ,   1 9 8 7 ,   S C I   P U B L   P O L I C Y ,   V 1 4 ,   P 1 8 2 ;   P R I C E   D J D ,   1 9 6 5 ,   T E C H N O L   C U L T ,   V 6 ,   P 5 5 3 ;   R O B S O N   M ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 1 7 - 0 ;   R O S E N B E R G   N ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 3 8 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 3 5 - 3 ;   R O S E N B E R G   N ,   1 9 9 0 ,   R E S   P O L I C Y ,   V 1 9 ,   P 1 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 0 ) 9 0 0 4 6 - 9 ;   R u b e n s t e i n   A . H . ,   1 9 8 9 ,   M A N A G I N G   T E C H N O L O G Y ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S M A L L   H ,   1 9 7 7 ,   C I T A T I O N   P U B L I C A T I O N ;   V A N V I A N E N   B G ,   1 9 9 0 ,   R E S   P O L I C Y ,   V 1 9 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 0 ) 9 0 0 3 4 - 4 	 3 2 	 6 3 	 6 4 	 0 	 1 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 J U N 	 1 9 9 6 	 2 5 	 4 	 	 	 	 	 5 8 7 	 6 0 6 	 	 1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 5 9 - 4 	 	 2 0 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 U T 5 7 9 	 W O S : A 1 9 9 6 U T 5 7 9 0 0 0 0 6 	 	 
 
 J 	 H A R S A N Y I ,   M A 	 	 	 	 H A R S A N Y I ,   M A 	 	 	 M U L T I P L E   A U T H O R S ,   M U L T I P L E   P R O B L E M S   B I B L I O M E T R I C S   A N D   T H E   S T U D Y   O F   S C H O L A R L Y   C O L L A B O R A T I O N   -   A   L I T E R A T U R E - R E V I E W 	 L I B R A R Y   &   I N F O R M A T I O N   S C I E N C E   R E S E A R C H 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 I N F O R M A T I O N - S C I E N C E   L I T E R A T U R E ;   S C I E N T I F I C   C O L L A B O R A T I O N ;   P R O D U C T I V I T Y   D I F F E R E N C E S ;   M U L T I A U T H O R E D   P A P E R S ;   A C A D E M I C   L I B R A R I A N S ;   C I T A T I O N   M E A S U R E S ;   P U B L I C A T I O N ;   S I N G L E ;   F A C U L T Y ;   P A T T E R N S 	 T h i s   l i t e r a t u r e   r e v i e w   c o v e r s   m u l t i p l e   a u t h o r s h i p   a s   i t   r e l a t e s   t o   r e s e a r c h   o n   s c h o l a r l y   p u b l i s h i n g   w i t h i n   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e .   T h e   a r t i c l e   e x a m i n e s   t h e   r e s e a r c h   o n   c o l l a b o r a t i o n   i n   o t h e r   d i s c i p l i n e s   a n d   c o n s i d e r s   t h e   m e t h o d o l o g i c a l   i m p a c t   o f   v a r i o u s   w a y s   o f   a l l o t t i n g   ' ' c r e d i t ' '   f o r   m u l t i - a u t h o r e d   w o r k s   a n d   t h e   r e l a t i o n s h i p s   b e t w e e n   m u l t i p l e   a u t h o r s h i p   a n d   o t h e r   p u b l i c a t i o n   v a r i a b l e s ,   s u c h   a s   q u a l i t y   a n d   i m p a c t .   G i v e n   t h e   c o m p l e x   r e l a t i o n s h i p   b e t w e e n   c o l l a b o r a t i o n   a n d   p r o d u c t i v i t y ,   t h e   c o n c o m i t a n t   u s e   o f   n o n b i b l i o m e t r i c   m e t h o d s   o f   s t u d y i n g   c o l l a b o r a t i o n ,   a s   w e l l   a s   t h e   a p p l i c a t i o n   o f   m e t a - a n a l y s i s ,   i s   s u g g e s t e d . 	 	 H A R S A N Y I ,   M A   ( r e p r i n t   a u t h o r ) ,   I N D I A N A   U N I V , C T R   M E D I A   &   T E A C H I N G   R E S O U R C E S , B L O O M I N G T O N , I N   4 7 4 0 5 ,   U S A . 	 	 	 	 	 	 A B T   H A ,   1 9 8 4 ,   P U B L   A S T R O N   S O C   P A C ,   V 9 6 ,   P 7 4 6 ,   D O I   1 0 . 1 0 8 6 / 1 3 1 4 1 5 ;   A D A M S O N   M C ,   1 9 8 1 ,   C O L L   R E S   L I B R ,   V 4 2 ,   P 2 3 5 ;   A J I F E R U K E   I ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 4 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 0 0 ;   A L L I S O N   P ,   1 9 8 0 ,   P R O C E S S E S   S T R A T I F I C A ;   A L L I S O N   P D ,   1 9 7 4 ,   A M   S O C I O L   R E V ,   V 3 9 ,   P 5 9 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 4 2 4 ;   A N D E R S O N   C ,   1 9 9 2 ,   N A T U R E ,   V 3 5 5 ,   P 1 0 1 ;   B A Y E R   A E ,   1 9 8 2 ,   J   M A R R I A G E   F A M ,   V 4 4 ,   P 5 2 7 ,   D O I   1 0 . 2 3 0 7 / 3 5 1 5 7 7 ;   B A Y E R   A E ,   1 9 6 6 ,   S O C I O L   E D U C ,   V 3 9 ,   P 3 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 1 9 2 0 ;   B e a v e r   D .   d e B . ,   1 9 7 8 ,   S c i e n t o m e t r i c s ,   V 1 ,   P 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 4 0 ;   B E A V E R   D D ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 2 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 0 8 ;   B E G H T O L   C ,   1 9 8 6 ,   J   E D U C   L I B R   I N F   S C I ,   V 2 7 ,   P 1 2 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 4 3 4 ;   B E G U M   K J ,   1 9 8 8 ,   I N T   L I B R   R E V ,   V 2 0 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 7 8 3 7 ( 8 8 ) 9 0 0 4 4 - 1 ;   B e l l   R . ,   1 9 9 2 ,   I M P U R E   S C I   F R A U D   C O M ;   B L O O M F I E L D   M ,   1 9 7 9 ,   D R E X E L   L I B R   Q U A R T ,   V 1 5 ,   P 2 4 ;   B O T T L E   R T ,   1 9 8 4 ,   J   I N F O R M   S C I ,   V 9 ,   P 1 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 4 0 0 9 0 0 3 0 4 ;   B R I D G S T O C K   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 1 8 1 ;   B R I D G W A T E R   C A ,   1 9 8 1 ,   A M   P S Y C H O L ,   V 3 6 ,   P 5 2 4 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 3 6 . 5 . 5 2 4 ;   B R O A D   W J ,   1 9 8 1 ,   S C I E N C E ,   V 2 1 1 ,   P 1 1 3 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 0 0 8 1 9 9 ;   C H O I   J M ,   1 9 8 8 ,   B E H A V   S O C   S C I   L I B R ,   V 6 ,   P 8 5 ,   D O I   1 0 . 1 3 0 0 / J 1 0 3 v 0 6 n 0 3 _ 0 5 ;   C H U B I N   D E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 6 9 ;   C L I N E   G S ,   1 9 8 2 ,   C O L L   R E S   L I B R ,   V 4 3 ,   P 2 0 8 ;   C O L E   J ,   1 9 7 1 ,   A M   S O C I O L ,   V 6 ,   P 2 3 ;   C o l e   J .   R . ,   1 9 7 3 ,   S O C I A L   S T R A T I F I C A T I O ;   C R A N E   D ,   1 9 6 7 ,   A M   S O C I O L ,   V 2 ,   P 1 9 5 ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   C R O L L   R P ,   1 9 8 4 ,   P E R S P E C T   B I O L   M E D ,   V 2 7 ,   P 4 0 1 ;   C R O N I N   B ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 2 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 0 9 ;   D I A M O N D   A M ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 1 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 6 ;   E G G H E   L ,   1 9 9 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 7 ,   P 1 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 1 ) 9 0 0 4 8 - Q ;   E N G L I S C H   H ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 6 6 ;   F I D E L   R ,   1 9 8 7 ,   C A N   J   I N F O R M   S C I ,   V 1 2 ,   P 5 4 ;   F O X   M F ,   1 9 8 3 ,   S O C   S T U D   S C I ,   V 1 3 ,   P 2 8 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 3 0 1 3 0 0 2 0 0 5 ;   F O X   M F ,   1 9 8 4 ,   J   H I G H   E D U C ,   V 5 5 ,   P 3 4 7 ,   D O I   1 0 . 2 3 0 7 / 1 9 8 1 8 8 8 ;   F R A M E   J D ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 4 8 1 ;   G A R F I E L D   E ,   1 9 8 2 ,   E S S A Y S   I N F O R M   S C I ,   V 5 ,   P 6 2 2 ;   G A R F I E L D   E ,   1 9 7 9 ,   C I T A T I O N   A N A L ,   P 2 4 0 ;   G A R L A N D   K ,   1 9 8 7 ,   J   E D U C   L I B R   I N F   S C I ,   V 2 8 ,   P 8 7 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 6 2 0 ;   G A R L A N D   K ,   1 9 9 1 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 3 ,   P 4 9 ;   G L A D D I N G   S T ,   1 9 8 4 ,   P E R S   G U I D   J ,   V 6 2 ,   P 6 2 8 ;   G O R D O N   M D ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 9 7 ;   H A G S T R O M   W O ,   1 9 6 5 ,   S C I E N T I F I C   C O M M U N I T Y ;   H A R S A N Y I   M A ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 7 ,   P 9 5 ;   H A R T   R ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 7 1 ;   H E F F N E R   A G ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 8 6 0 ;   H E F F N E R   A G ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 3 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 9 0 0 9 0 0 3 0 5 ;   H O U K   V N ,   1 9 9 1 ,   S C H O L A R L Y   P U B L ,   V 2 3 ,   P 5 1 ;   K O R Y T N Y K   C A ,   1 9 8 8 ,   L I B R   Q U A R T ,   V 5 8 ,   P 5 2 ;   K R E T S C H M E R   H ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 9 5 ;   K Y V I K   S ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 9 ;   L A T O U R   B ,   1 9 8 6 ,   L A B O R A T O R Y   L I F E   S O C I ;   L A W A N I   S M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 4 ;   L I N D S E Y   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 2 ;   L I N D S E Y   D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 4 ;   L O G A N   E L ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 7 6 2 ;   L O N G   J S ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 5 ;   L O N G   J S ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 2 7 ;   L O N G   J S ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 3 ;   M A D R O N   T W ,   1 9 6 9 ,   S M A L L   G R O U P   M E T H O D S ;   M E N D E N H A L L   M ,   1 9 8 2 ,   P S Y C H O L   R E P ,   V 5 1 ,   P 1 0 1 9 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ,   P 4 3 9 ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N E D E R H O F   A J ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 7 ,   P 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 5 4 ;   N u d e l m a n   A .   E . ,   1 9 7 2 ,   A M   S O C I O L ,   V 7 ,   P 9 ;   O L S G A A R D   J N ,   1 9 8 0 ,   C O L L   R E S   L I B R ,   V 4 1 ,   P 4 9 ;   O L S G A A R D   J N ,   1 9 8 4 ,   C O L L   R E S   L I B R ,   V 4 5 ,   P 5 ;   O R O M A N E R   M ,   1 9 7 4 ,   S O C   S C I   I N F O R M ,   V 1 4 ,   P 1 4 7 ;   O V E R   R ,   1 9 8 2 ,   A M   P S Y C H O L ,   V 3 7 ,   P 9 9 6 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 3 7 . 9 . 9 9 6 ;   P A G E   I H ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 1 3 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 5 . 1 3 9 ;   P A O   M L ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 9 6 - I ;   P a t e l   N . ,   1 9 7 2 ,   S O C   S C I   I N F O R M ,   V 1 2 ,   P 7 7 ;   P O R T E R   A L ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 5 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 7 ;   P R E S S E R   S ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 1 0 5 ;   P R I C E   D D ,   1 9 8 1 ,   S C I E N C E ,   V 2 1 2 ,   P 9 8 6 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 1 1 ;   P R I C E   D J D ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 5 5 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   R A P T I S   P ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 3 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 1 . 3 5 ;   R E S K I N   B F ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 4 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 7 5 3 ;   R O B I N O V E   C J ,   1 9 9 2 ,   J   I R R E P R O D U C I B L E   R E S ,   V 3 7 ,   P 1 4 ;   R O U S S E A U   R ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 7 9 ;   R O U S S E A U   R ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 2 ) 4 3 : 1 0 < 6 4 5 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - X ;   R O Y   R ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 7 2 8 5 7 ;   R U D D   E ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 6 8 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 8 ;   S A T Y A N A R A Y A N A   K ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 1 8 ;   S c h u l t z   B . G . ,   1 9 8 9 ,   C O M M U N I C A T I N G   S M A L L ;   S E R E B N I C K   J ,   1 9 9 0 ,   L I B R   Q U A R T ,   V 6 0 ,   P 9 1 ;   S I M O N   J L ,   1 9 7 0 ,   A M   S O C I O L ,   V 5 ,   P 2 6 5 ;   S M A R T   J C ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 7 6 ;   S P I E G E L   D ,   1 9 7 0 ,   A M   P S Y C H O L ,   V 2 5 ,   P 7 3 8 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 9 7 6 9 ;   S T E F A N I A K   B ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 3 1 ;   S T O K E S   T D ,   1 9 8 9 ,   S O C   S T U D   S C I ,   V 1 9 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 9 0 1 9 0 0 1 0 0 3 ;   S T R A H A N   R F ,   1 9 8 2 ,   J   C O U N S   P S Y C H O L ,   V 2 9 ,   P 4 3 0 ,   D O I   1 0 . 1 0 3 7 / / 0 0 2 2 - 0 1 6 7 . 2 9 . 4 . 4 3 0 ;   S U B R A M A N Y A M   K ,   1 9 8 3 ,   J   I N F O R M   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 3 0 0 6 0 0 1 0 5 ;   T R A H A N   E ,   1 9 9 3 ,   L I B R   Q U A R T ,   V 6 3 ,   P 7 3 ;   T R E N C H A R D   P M ,   1 9 9 2 ,   J   I N F O R M   S C I ,   V 1 8 ,   P 6 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 2 0 1 8 0 0 1 0 8 ;   V A R L E J S   J ,   1 9 8 6 ,   J   E D U C   L I B R   I N F   S C I ,   V 2 7 ,   P 7 1 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 5 1 1 ;   V I N K L E R   P ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 2 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 0 1 ;   W A L L A C E   D P ,   1 9 9 0 ,   L I B R   J ,   V 1 1 5 ,   P 6 1 ;   W A T S O N   P D ,   1 9 8 5 ,   C O L L   R E S   L I B R ,   V 4 6 ,   P 3 3 4 ;   W a t s o n   P . D . S . ,   1 9 7 7 ,   C O L L   R E S   L I B R ,   V 3 8 ,   P 3 7 5 ;   W H I T E   A ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 8 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 8 4 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - G ;   W I L L I A M S O N   E ,   1 9 8 9 ,   S E   L I B ,   V 3 9 ,   P 1 3 ;   W I L S O N   P ,   1 9 7 9 ,   J   E D U C   L I B R A R I A N S H I P ,   V 2 0 ,   P 3 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 2 8 6 0 ;   Z I M A N   J ,   1 9 8 1 ,   B   S C I   T E C H N O L   S O C ,   V 1 ,   P 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 2 7 0 4 6 7 6 8 1 0 0 1 0 0 1 0 6 ;   Z O O K   A ,   1 9 8 7 ,   J   C O U N S   P S Y C H O L ,   V 3 4 ,   P 7 7 ;   Z U C K E R M A N   H ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 6 ;   Z U C K E R M A N   H A ,   1 9 6 8 ,   A M   J   S O C I O L ,   V 7 4 ,   P 2 7 6 ,   D O I   1 0 . 1 0 8 6 / 2 2 4 6 4 1 ;   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 4 ,   P 4 2 4 ;   1 9 9 0 ,   A C A D E M E ,   V 7 6 ,   P 4 1 	 1 1 2 	 6 3 	 6 4 	 9 	 5 3 	 A B L E X   P U B L   C O R P 	 N O R W O O D 	 3 5 5   C H E S T N U T   S T ,   N O R W O O D ,   N J   0 7 6 4 8 	 0 7 4 0 - 8 1 8 8 	 	 	 L I B R   I N F O R M   S C I   R E S 	 L i b r .   I n f o r .   S c i .   R e s . 	 F A L 	 1 9 9 3 	 1 5 	 4 	 	 	 	 	 3 2 5 	 3 5 4 	 	 	 	 3 0 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 M N 2 4 5 	 W O S : A 1 9 9 3 M N 2 4 5 0 0 0 0 3 	 	 
 
 J 	 S t r i n g e r ,   M J ;   S a l e s - P a r d o ,   M ;   A m a r a l ,   L A N 	 	 	 	 S t r i n g e r ,   M i c h a e l   J . ;   S a l e s - P a r d o ,   M a r t a ;   A m a r a l ,   L u i s   A .   N u n e s 	 	 	 E f f e c t i v e n e s s   o f   J o u r n a l   R a n k i n g   S c h e m e s   a s   a   T o o l   f o r   L o c a t i n g   I n f o r m a t i o n 	 P L O S   O N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   R O C   C U R V E ;   I M P A C T ;   B I B L I O M E T R I C S ;   S C I E N C E ;   P A P E R ;   J U D G E ;   A R E A ;   W E B 	 B a c k g r o u n d :   T h e   r i s e   o f   e l e c t r o n i c   p u b l i s h i n g   [ 1 ] ,   p r e p r i n t   a r c h i v e s ,   b l o g s ,   a n d   w i k i s   i s   r a i s i n g   c o n c e r n s   a m o n g   p u b l i s h e r s ,   e d i t o r s ,   a n d   s c i e n t i s t s   a b o u t   t h e   p r e s e n t   d a y   r e l e v a n c e   o f   a c a d e m i c   j o u r n a l s   a n d   t r a d i t i o n a l   p e e r   r e v i e w   [ 2 ] .   T h e s e   c o n c e r n s   a r e   e s p e c i a l l y   f u e l l e d   b y   t h e   a b i l i t y   o f   s e a r c h   e n g i n e s   t o   a u t o m a t i c a l l y   i d e n t i f y   a n d   s o r t   i n f o r m a t i o n   [ 1 ] .   I t   a p p e a r s   t h a t   a c a d e m i c   j o u r n a l s   c a n   o n l y   r e m a i n   r e l e v a n t   i f   a c c e p t a n c e   o f   r e s e a r c h   f o r   p u b l i c a t i o n   w i t h i n   a   j o u r n a l   a l l o w s   r e a d e r s   t o   i n f e r   i m m e d i a t e ,   r e l i a b l e   i n f o r m a t i o n   o n   t h e   v a l u e   o f   t h a t   r e s e a r c h .   M e t h o d o l o g y / P r i n c i p a l   F i n d i n g s :   H e r e ,   w e   s y s t e m a t i c a l l y   e v a l u a t e   t h e   e f f e c t i v e n e s s   o f   j o u r n a l s ,   t h r o u g h   t h e   w o r k   o f   e d i t o r s   a n d   r e v i e w e r s ,   a t   e v a l u a t i n g   u n p u b l i s h e d   r e s e a r c h .   W e   f i n d   t h a t   t h e   d i s t r i b u t i o n   o f   t h e   n u m b e r   o f   c i t a t i o n s   t o   a   p a p e r   p u b l i s h e d   i n   a   g i v e n   j o u r n a l   i n   a   s p e c i f i c   y e a r   c o n v e r g e s   t o   a   s t e a d y   s t a t e   a f t e r   a   j o u r n a l - s p e c i f i c   t r a n s i e n t   t i m e ,   a n d   d e m o n s t r a t e   t h a t   i n   t h e   s t e a d y   s t a t e   t h e   l o g a r i t h m   o f   t h e   n u m b e r   o f   c i t a t i o n s   h a s   a   j o u r n a l - s p e c i f i c   t y p i c a l   v a l u e .   W e   t h e n   d e v e l o p   a   m o d e l   f o r   t h e   a s y m p t o t i c   n u m b e r   o f   c i t a t i o n s   a c c r u e d   b y   p a p e r s   p u b l i s h e d   i n   a   j o u r n a l   t h a t   c l o s e l y   m a t c h e s   t h e   d a t a .   C o n c l u s i o n s / S i g n i f i c a n c e :   O u r   m o d e l   e n a b l e s   u s   t o   q u a n t i f y   b o t h   t h e   t y p i c a l   i m p a c t   a n d   t h e   r a n g e   o f   i m p a c t s   o f   p a p e r s   p u b l i s h e d   i n   a   j o u r n a l .   F i n a l l y ,   w e   p r o p o s e   a   j o u r n a l - r a n k i n g   s c h e m e   t h a t   m a x i m i z e s   t h e   e f f i c i e n c y   o f   l o c a t i n g   h i g h   i m p a c t   r e s e a r c h . 	 [ S a l e s - P a r d o ,   M a r t a ;   A m a r a l ,   L u i s   A .   N u n e s ]   N o r t h w e s t e r n   U n i v ,   D e p t   C h e m   &   B i o l   E n g n ,   E v a n s t o n ,   I L   U S A ;   [ S t r i n g e r ,   M i c h a e l   J . ]   N o r t h w e s t e r n   U n i v ,   D e p t   P h y s   &   A s t r o n ,   E v a n s t o n ,   I L   U S A ;   [ S t r i n g e r ,   M i c h a e l   J . ;   S a l e s - P a r d o ,   M a r t a ;   A m a r a l ,   L u i s   A .   N u n e s ]   N o r t h w e s t e r n   U n i v ,   N o r t h w e s t e r n   I n s t   C o m p l e x   S y s t   ( N I C O ) ,   E v a n s t o n ,   I L   U S A 	 A m a r a l ,   L A N   ( r e p r i n t   a u t h o r ) ,   N o r t h w e s t e r n   U n i v ,   D e p t   C h e m   &   B i o l   E n g n ,   E v a n s t o n ,   I L   U S A . 	 a m a r a l @ n o r t h w e s t e r n . e d u 	 A m a r a l ,   L u i s / A - 4 9 8 0 - 2 0 0 8 ;   S a l e s - P a r d o ,   M a r t a / C - 1 7 2 5 - 2 0 0 8 ;   A m a r a l ,   L u i s   N . / C - 5 4 8 5 - 2 0 0 9 	 A m a r a l ,   L u i s / 0 0 0 0 - 0 0 0 2 - 3 7 6 2 - 7 8 9 X ;   S a l e s - P a r d o ,   M a r t a / 0 0 0 0 - 0 0 0 2 - 8 1 4 0 - 6 5 2 5 ;   	 	 	 B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   C r o n i n   B l a i s e ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ;   F a w c e t t   T ,   2 0 0 6 ,   P A T T E R N   R E C O G N   L E T T ,   V 2 7 ,   P 8 6 1 ,   D O I   1 0 . 1 0 1 6 / j . p a t r e c . 2 0 0 5 . 1 0 . 0 1 0 ;   F u y u n o   I ,   2 0 0 6 ,   N A T U R E ,   V 4 4 1 ,   P 7 9 2 ,   D O I   1 0 . 1 0 3 8 / 4 4 1 7 9 2 b ;   G i g e r e n z e r   G . ,   1 9 9 9 ,   S I M P L E   H E U R I S T I C S   M A ;   G i l e s   J ,   2 0 0 7 ,   N A T U R E ,   V 4 4 5 ,   P 9 ,   D O I   1 0 . 1 0 3 8 / 4 4 5 0 0 9 a ;   H A M I L T O N   D P ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 9 8 6 4 0 9 ;   H a n d   D J ,   2 0 0 1 ,   M A C H   L E A R N ,   V 4 5 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 9 2 0 8 1 9 8 3 1 ;   H A N L E Y   J A ,   1 9 8 2 ,   R A D I O L O G Y ,   V 1 4 3 ,   P 2 9 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J o n e s   K .   S . ,   2 0 0 0 ,   I n f o r m a t i o n   P r o c e s s i n g   &   M a n a g e m e n t ,   V 3 6 ,   P 7 7 9 ;   L A E M M L I   U K ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 8 0 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 8 0 a 0 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M e n c z e r   F ,   2 0 0 4 ,   E U R   P H Y S   J   B ,   V 3 8 ,   P 2 1 1 ,   D O I   1 0 . 1 1 4 0 / e p j b / e 2 0 0 4 - 0 0 1 1 4 - 1 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   N i c o l a i s e n   J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 6 0 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 2 0 ;   P e n n o c k   D M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 5 2 0 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 2 0 8 5 6 9 9 ;   P r e s s   W . ,   2 0 0 2 ,   N U M E R I C A L   R E C I P E S   C ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R e d n e r   S ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 3 5 9 ;   S a l e s - P a r d o   M ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 5 2 2 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 3 7 4 0 1 0 4 ;   S a l g a n i k   M J ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 1 ,   P 8 5 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 1 0 6 6 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 ;   T o m l i n   S ,   2 0 0 5 ,   N A T U R E ,   V 4 3 8 ,   P 5 4 7 ,   D O I   1 0 . 1 0 3 8 / 4 3 8 5 4 7 a ;   V i n k l e r   P ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 9 1 ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   Z h a n g   S D ,   2 0 0 6 ,   N A T U R E ,   V 4 4 2 ,   P 2 6 ,   D O I   1 0 . 1 0 3 8 / 4 4 2 0 2 6 b 	 2 9 	 6 2 	 6 3 	 3 	 2 0 	 P U B L I C   L I B R A R Y   S C I E N C E 	 S A N   F R A N C I S C O 	 1 8 5   B E R R Y   S T ,   S T E   1 3 0 0 ,   S A N   F R A N C I S C O ,   C A   9 4 1 0 7   U S A 	 1 9 3 2 - 6 2 0 3 	 	 	 P L O S   O N E 	 P L o S   O n e 	 F E B   2 7 	 2 0 0 8 	 3 	 2 	 	 	 	 	 	 	 e 1 6 8 3 	 1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 1 6 8 3 	 	 8 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 3 6 7 X S 	 W O S : 0 0 0 2 6 0 5 8 6 5 0 0 0 2 7 	 1 8 3 0 1 7 6 0 	 
 
 J 	 K o s t o f f ,   R N ;   T o o t h m a n ,   D R ;   E b e r h a r t ,   H J ;   H u m e n i k ,   J A 	 	 	 	 K o s t o f f ,   R N ;   T o o t h m a n ,   D R ;   E b e r h a r t ,   H J ;   H u m e n i k ,   J A 	 	 	 T e x t   m i n i n g   u s i n g   d a t a b a s e   t o m o g r a p h y   a n d   b i b l i o m e t r i c s :   A   r e v i e w 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 d a t a b a s e   t o m o g r a p h y ;   t e x t   m i n i n g ;   b i b l i o m e t r i c s ;   i n n o v a t i o n ;   i n f o r m a t i o n   r e t r i e v a l ;   i n f o r m a t i o n   e x t r a c t i o n ;   c l u s t e r ;   t a x o n o m i e s 	 T E C H N I C A L   I N T E L L I G E N C E ;   S C I E N C E ;   R O A D M A P S ;   C I T A T I O N 	 D a t a b a s e   t o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   ( 1 )   a l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   ( 2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   h a s   b e e n   u s e d   t o   d e r i v e   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a   v a r i e t y   o f   t e x t u a l   d a t a b a s e   s o u r c e s ,   m o s t   r e c e n t l y   t h e   p u b l i s h e d   t e c h n i c a l   l i t e r a t u r e   a s   e x e m p l i f i e d   b y   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   a n d   t h e   E n g i n e e r i n g   C o m p e n d e x   ( E C ) .   P h r a s e   f r e q u e n c y   a n a l y s i s   ( t h e   o c c u r r e n c e   f r e q u e n c y   o f   m u l t i w o r d   t e c h n i c a l   p h r a s e s )   p r o v i d e s   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s   o f   t h e   t o p i c a l   d a t a b a s e s   o f   i n t e r e s t ,   a n d   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e s   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   I n   t h e   s t r u c t u r e d   p u b l i s h e d   l i t e r a t u r e   d a t a b a s e s ,   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   d a t a b a s e   r e c o r d s   s u p p l e m e n t s   t h e   D T   r e s u l t s   b y   i d e n t i f y i n g   t h e   r e c e n t   m o s t   p r o l i f i c   t o p i c a l   a r e a   a u t h o r s ;   t h e   j o u r n a l s   t h a t   c o n t a i n   n u m e r o u s   t o p i c a l   a r e a   p a p e r s ;   t h e   i n s t i t u t i o n s   t h a t   p r o d u c e   n u m e r o u s   t o p i c a l   a r e a   p a p e r s ;   t h e   k e y w o r d s   s p e c i f i e d   m o s t   f r e q u e n t l y   b y   t h e   t o p i c a l   a r e a   a u t h o r s ;   t h e   a u t h o r s   w h o s e   w o r k s   a r e   c i t e d   m o s t   f r e q u e n t l y   i n   t h e   t o p i c a l   a r e a   p a p e r s ;   a n d   t h e   p a r t i c u l a r   p a p e r s   a n d   j o u r n a l s   c i t e d   m o s t   f r e q u e n t l y   i n   t h e   t o p i c a l   a r e a   p a p e r s .   T h i s   r e v i e w   p a p e r   s u m m a r i z e s :   ( 1 )   t h e   t h e o r y   a n d   b a c k g r o u n d   d e v e l o p m e n t   o f   D T ;   ( 2 )   p a s t   p u b l i s h e d   a n d   u n p u b l i s h e d   l i t e r a t u r e   s t u d y   r e s u l t s ;   ( 3 )   p r e s e n t   a p p l i c a t i o n   a c t i v i t i e s ;   ( 4 )   p o t e n t i a l   e x p a n s i o n   t o   n e w   D T   a p p l i c a t i o n s .   I n   a d d i t i o n ,   a p p l i c a t i o n   o f   D T   t o   t e c h n o l o g y   f o r e c a s t i n g   i s   a d d r e s s e d .   ( C )   2 0 0 1   E l s e v i e r   S c i e n c e   I n c .   A l l   r i g h t s   r e s e r v e d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   R S I S   I n c ,   M c l e a n ,   V A   2 2 1 0 2   U S A ;   N O E S I S   I n c ,   M a n a s s a s ,   V A   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 K u m a r ,   A j i t / J - 1 6 1 7 - 2 0 1 5 	 K u m a r ,   A j i t / 0 0 0 0 - 0 0 0 3 - 3 2 5 5 - 5 0 5 4 	 	 	 B r a d f o r d   S a m u e l   C . ,   1 9 3 4 ,   E N G I N E E R I N G ,   V 1 3 7 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 5 2 7 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K O S T O F F   R N ,   1 9 9 1 ,   P   P O R T L   I N T   C   M A N   E N ;   K O S T O F F   R N ,   U N P U B   J   S H I P   R E S ;   K O S T O F F   R N ,   S C I   T E C H N O L O G Y   I N N O V ;   K O S T O F F   R N ,   1 9 9 2 ,   P   3   I N T   C   M A N   T E C H N ;   K O S T O F F   R N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 1 ,   5 0 0 0   O N R ;   L O T K A   A ,   1 9 2 6 ,   J   W A S H   A C A D   S C I ,   V 1 6 ;   M A C R O B E R T S   M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   S M A L H E I S E R   N R ,   1 9 9 8 ,   A R C H   G E N   P S Y C H I A T ,   V 5 5 ;   S M A L H E I S E R   N R ,   1 9 9 4 ,   N E U R O S C I   R E S   C O M M U N ,   V 1 5 ;   S M A L H E I S E R   N R ,   1 9 9 8 ,   C O M P U T   M E T H O D S   P R O G R ,   V 5 7 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ;   S W A N S O N   D R ,   1 9 9 9 ,   C O M P U T E R   A S S I S T E D   S E ,   P 2 1 7 ;   S W A N S O N   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ;   Z a m i r   O . ,   1 9 9 9 ,   T H E S I S   U   W A S H I N G T O N ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 2 7 	 6 2 	 6 5 	 5 	 6 1 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 1 	 6 8 	 3 	 	 	 	 	 2 2 3 	 2 5 3 	 	 1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 	 	 3 1 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 4 9 8 U T 	 W O S : 0 0 0 1 7 2 5 2 9 4 0 0 0 0 1 	 	 
 
 J 	 T A G U E S U T C L I F F E ,   J 	 	 	 	 T A G U E S U T C L I F F E ,   J 	 	 	 I N F O R M E T R I C S   -   I N T R O D U C T I O N 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 	 S T A T I O N A R Y   S C I E N T O M E T R I C   D I S T R I B U T I O N S 	 T h e   s c o p e   a n d   s i g n i f i c a n c e   o f   t h e   f i e l d   o f   i n f o r m e t r i c s   i s   d e f i n e d   a n d   r e l a t e d   t o   t h e   e a r l i e r   f i e l d s   o f   b i b l i o m e t r i c s   a n d   s c i e n t o m e t r i c s .   T h e   p h e n o m e n a   s t u d i e d   b y   i n f o r m e t r i c i a n s   a r e   i d e n t i f i e d .   T h e   m a j o r   c o n t r i b u t o r s   t o   t h e   f i e l d   i n   t h e   p a s t   a r e   d e s c r i b e d   a n d   c u r r e n t   e m p h a s e s   a r e   r e l a t e d   t o   t h e   c o n t r i b u t i o n s   i n   t h i s   S p e c i a l   I s s u e . 	 	 T A G U E S U T C L I F F E ,   J   ( r e p r i n t   a u t h o r ) ,   U N I V   W E S T E R N   O N T A R I O , S C H   L I B   &   I N F O R M A T   S C I , L O N D O N   N 6 G   1 H 1 , O N T A R I O , C A N A D A . 	 	 	 	 	 	 B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ;   E g g h e   L . ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ;   E G G H E   L ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 8 0 0 3 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 0 5 9 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 4 8 ;   L E I M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 3 0 ;   L O S E E   R M ,   1 9 9 0 ,   S C I   I N F O R M A T I O N   M E A S ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M A N D E L B R O T   B ,   1 9 6 1 ,   S T R U C T U R E   L A N G U A G E   I ,   P 1 2 ;   N A R I N   F ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 5 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O R   P R I N C 	 1 7 	 6 2 	 7 3 	 0 	 1 8 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D ,   E N G L A N D   O X 5   1 G B 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 	 1 9 9 2 	 2 8 	 1 	 	 	 	 	 1 	 3 	 	 1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G 	 	 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 H B 6 9 4 	 W O S : A 1 9 9 2 H B 6 9 4 0 0 0 0 1 	 	 
 
 J 	 N E D E R H O F ,   A J ;   V A N R A A N ,   A F J 	 	 	 	 N E D E R H O F ,   A J ;   V A N R A A N ,   A F J 	 	 	 A   B I B L I O M E T R I C   A N A L Y S I S   O F   6   E C O N O M I C S   R E S E A R C H   G R O U P S   -   A   C O M P A R I S O N   W I T H   P E E R - R E V I E W 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 U N I V E R S I T Y - R E S E A R C H   P E R F O R M A N C E ;   C U M   L A U D E   D O C T O R A T E S ;   S C I E N T I F I C   P E R F O R M A N C E ;   B R I T I S H - U N I V E R S I T I E S ;   I N D I C A T O R S ;   D E P A R T M E N T S ;   H U M A N I T I E S 	 T h e   r e s e a r c h   p e r f o r m a n c e   o f   r e s e a r c h   u n i t s   i n   e c o n o m i c s   h a s   b e e n   e v a l u a t e d   b y   s i m u l t a n e o u s   e f f o r t s   o f   p e e r s   a n d   b i b l i o m e t r i c i a n s ,   w i t h   e x t e n s i v e   i n t e r a c t i v e   c o m p a r i s o n   o f   r e s u l t s   a f t e r w a r d s .   W e   s t u d i e d   t r e n d s   i n   p r o d u c t i v i t y   a n d   i m p a c t   o f   s i x   e c o n o m i c s   r e s e a r c h   g r o u p s   i n   t h e   p e r i o d   1 9 8 0 - 1 9 8 8 .   T h e s e   g r o u p s   p a r t i c i p a t e   i n   a   l a r g e   ( a b o v e   o n e   m i l l i o n   p o u n d s )   r e s e a r c h   p r o g r a m m e   o f   a   n a t i o n a l   R e s e a r c h   C o u n c i l .   R e s e a r c h   p e r f o r m a n c e   o f   t h e   g r o u p s   w a s   c o m p a r e d   t o   t h e   w o r l d   a v e r a g e   b y   m e a n s   o f   t h e   J o u r n a l   C i t a t i o n   S c o r e   m e t h o d .   I n   o r d e r   t o   i n v e s t i g a t e   t h e   i n f l u e n c e   o f   o n e   k e y   s c i e n t i s t s   ( t h e   ' ' s t a r   e f f e c t ' ' )   w e   a p p l i e d   a   s e n s i t i v i t y   a n a l y s i s   t o   t h e   p e r f o r m a n c e   o f   t h e   r e s e a r c h   g r o u p s   b y   e l i m i n a t i o n   o f   t h e   p a p e r s   ( a n d   s u b s e q u e n t   c i t a t i o n s )   o f   o n e   k e y   m e m b e r .   F u r t h e r m o r e ,   t o   p r o v i d e   i n s i g h t   i n t o   t h e   f i e l d s   t o   w h i c h   a   g r o u p   d i r e c t s   i t s   w o r k ,   a n d   t h e   f i e l d s   i n   w h i c h   a   g r o u p   h a s   i t s   m o s t   i m p o r t a n t   c o n t r i b u t i o n s ,   c o m p a r i s o n s   w e r e   m a d e   o f   p u b l i s h i n g   a n d   c i t i n g   j o u r n a l   p a c k e t s .   S i m i l a r l y ,   c i t a t i o n s   t o   t h e   w o r k   o f   t h e   r e s e a r c h   g r o u p s   w e r e   a n a l y s e d   f o r   c o u n t r y   o f   o r i g i n .   W e   c o m p a r e d   t h e   r e s u l t s   o f   t h e   b i b l i o m e t r i c   p a r t   o f   t h i s   s t u d y   w i t h   t h o s e   o f   a   s i m u l t a n e o u s   p e e r   r e v i e w   s t u d y .   T h e   b i b l i o m e t r i c   s t u d y   y i e l d e d   c l e a r   a n d   m e a n i n g f u l   r e s u l t s ,   n o t w i t h s t a n d i n g   t h e   i n c r e a s i n g l y   a p p l i e d   n a t u r e   o f   t h e   r e s e a r c h   g r o u p s .   R e s u l t s   f r o m   p e e r   r e v i e w   a n d   b i b l i o m e t r i c   s t u d i e s   a p p e a r   t o   b e   c o m p l e m e n t a r y   a n d   m u t u a l l y   s u p p o r t i v e .   T h e   p a r t i c i p a n t s   o f   t h e   b i b l i o m e t r i c s   p e e r   r e v i e w   ' ' c o n f r o n t a t i o n ' '   m e e t i n g   r e g a r d e d   t h e   e x e r c i s e   a s   m o s t   v a l u a b l e ,   w i t h   l e s s o n s   f o r   t h e   R e s e a r c h   C o u n c i l   b o t h   f o r   t h e   f u t u r e   o f   r e s e a r c h   p r o g r a m m e s   a n d   t h e   f o r m   o f   e v a l u a t i o n   u s e d   f o r   l a r g e   a w a r d s . 	 	 N E D E R H O F ,   A J   ( r e p r i n t   a u t h o r ) ,   L E I D E N   U N I V , C T R   S C I   &   T E C H N O L   S T U D I E S , P O B   9 5 5 5 , 2 3 0 0   R B   L E I D E N , N E T H E R L A N D S . 	 	 	 	 	 	 D A V I S   P ,   1 9 8 4 ,   A M   E C O N   R E V ,   V 7 4 ,   P 1 2 2 5 ;   H a r n a d   S . ,   1 9 8 2 ,   P E E R   C O M M E N T A R Y   P E E R ;   H I C K S   D ,   1 9 9 1 ,   S O C   S T U D   S C I ,   V 2 1 ,   P 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 1 0 2 1 0 0 3 0 0 3 ;   I R V I N E   J ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 3 ,   P 2 4 7 ;   J O H N E S   G ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 4 1 - 8 ;   L I E B O W I T Z   S J ,   1 9 8 8 ,   Q   R E V   E C O N   B U S ,   V 2 8 ,   P 8 8 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M O E D   H F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 4 9 ;   N E D E R H O F   A J ,   1 9 8 9 ,   A M   P S Y C H O L ,   V 4 4 ,   P 7 3 4 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 4 4 . 4 . 7 3 4 ;   N E D E R H O F   A J ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 4 ) 4 3 : 3 < 2 4 9 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - I ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 3 ;   N E D E R H O F   A J ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 7 9 3 5 3 ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 4 6 3 ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I   T E C H N O L O G Y   I N D I C ;   N e d e r h o f   A .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 1 9 3 ;   P E T E R S   H P F ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 1 7 6 ;   P H I L L I M O R E   A J ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 2 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 9 ) 9 0 0 5 3 - X ;   S P A N G E N B E R G   J F A ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 8 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 6 4 	 1 9 	 6 1 	 6 1 	 4 	 2 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 A U G 	 1 9 9 3 	 2 2 	 4 	 	 	 	 	 3 5 3 	 3 6 8 	 	 1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 0 5 - 3 	 	 1 6 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 L W 2 6 7 	 W O S : A 1 9 9 3 L W 2 6 7 0 0 0 0 5 	 	 
 
 J 	 P o n c e ,   F A ;   L o z a n o ,   A M 	 	 	 	 P o n c e ,   F r a n c i s c o   A . ;   L o z a n o ,   A n d r e s   M . 	 	 	 H i g h l y   c i t e d   w o r k s   i n   n e u r o s u r g e r y .   P a r t   I :   t h e   1 0 0   t o p - c i t e d   p a p e r s   i n   n e u r o s u r g i c a l   j o u r n a l s   A   r e v i e w 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   n e u r o s u r g e r y ;   b i b l i o m e t r i c s ;   l a n d m a r k   a r t i c l e s 	 I M P A C T   F A C T O R S 	 O b j e c t .   T h e   n u m b e r   o f   c i t a t i o n s   a   p u b l i s h e d   a r t i c l e   r e c e i v e s   i s   a   m e a s u r e   o f   i t s   i m p a c t   i n   t h e   s c i e n t i f i c   c o m m u n i t y .   T h i s   S t u d y   i d e n t i f i e s   a n d   c h a r a c t e r i z e s   t h e   c u r r e n t   1 0 0   t o p - c i t e d   a r t i c l e s   i n   j o u r n a l s   s p e c i f i c a l l y   d e d i c a t e d   t o   n e u r o s u r g e r y .   M e t h o d s .   N e u r o s u r g i c a l   j o u r n a l s   w e r e   i d e n t i f i e d   u s i n g   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   J o u r n a l   C i t a t i o n   R e p o r t s .   A   s e a r c h   w a s   p e r f o r m e d   u s i n g   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   W e b   o f   S c i e n c e   f o r   a r t i c l e s   a p p e a r i n g   i n   e a c h   o f   t h e s e   j o u r n a l s .   T h e   1 0 0   t o p - c i t e d   a r t i c l e s   w e r e   s e l e c t e d   a n d   a n a l y z e d .   R e s u l t s .   T h e   1 0 0   m o s t   c i t e d   m a n u s c r i p t s   i n   n e u r o s u r g i c a l   j o u r n a l s   a p p e a r e d   i n   3   o f   1 3   j o u r n a l s   d e d i c a t e d   t o   n e u r o s u r g e r y .   T h e s e   i n c l u d e d   7 9   i n   t h e   J o u r n a l   o f   N e u r o s u r g e r y ,   1 1   i n   t h e   J o u r n a l   o f   N e u r o l o g y ,   N e u r o s u r g e r y ,   a n d   P s y c h i a t r y ,   a n d   1 0   i n   N e u r o s u r g e r y .   T h e   i n d i v i d u a l   c i t a t i o n   C o u n t s   f o r   t h e s e   a r t i c l e s   r a n g e d   f r o m   2 8 7   t o   1 5 1 5 .   S e v e n t y - s e v e n   p e r c e n t   o f   a r t i c l e s   w e r e   p u b l i s h e d   b e t w e e n   1 9 7 6   a n d   1 9 9 5 .   R e p r e s e n t a t i o n   v a r i e d   w i d e l y   a c r o s s   n e u r o s u r g i c a l   d i s c i p l i n e s ,   w i t h   c e r e b r o v a s c u l a r   d i s e a s e s   l e a d i n g   ( 4 3   a r t i c l e s ) ,   f o l l o w e d   b y   t r a u m a   ( 2 7   a r t i c l e s ) ,   s t e r e o t a c t i c   a n d   f u n c t i o n a l   n e u r o s u r g e r y   ( 1 3   a r t i c l e s ) ,   a n d   n e u r o o n c o l o g y   ( 1 2   a r t i c l e s ) .   T h e   s t u d y   t y p e s   i n c l u d e d   5   r a n d o m i z e d   t r i a l s ,   5   c o o p e r a t i v e   S t u d i e s ,   1   o b s e r v a t i o n a l   c o h o r t   S t u d y ,   6 9   c a s e   s e r i e s ,   8   r e v i e w   a r t i c l e s ,   a n d   1 2   a n i m a l   s t u d i e s .   T h i r t y   a r t i c l e s   d e a l t   w i t h   s u r g i c a l   m a n a g e m e n t   a n d   1 2   w i t h   n o n s u r g i c a l   m a n a g e m e n t .   T h e r e   w e r e   1 5   S t u d i e s   o f   n a t u r a l   h i s t o r y   o f   d i s e a s e   o r   o u t c o m e s   a f t e r   t r a u m a ,   1 1   c l a s s i f i c a t i o n   o r   g r a d i n g   s c a l e s ,   a n d   1 0   S t u d i e s   o f   h u m a n   p a t h o p h y s i o l o g y .   C o n c l u s i o n s .   T h e   m o s t   c i t e d   a r t i c l e s   i n   n e u r o s u r g i c a l   j o u r n a l s   a r e   t r i a l s   e v a l u a t i n g   s u r g i c a l   o r   m e d i c a l   t h e r a p i e s ,   d e s c r i p t i o n s   o f   n o v e l   t e c h n i q u e s ,   o r   s y s t e m s   f o r   c l a s s i f y i n g   o r   g r a d i n g   d i s e a s e .   T h e   t i m e   o f   p u b l i c a t i o n ,   f i e l d   O f   S t u d y ,   n a t u r e   o f   t h e   w o r k ,   a n d   t h e   j o u r n a l   i n   w h i c h   t h e   w o r k   a p p e a r s   a r e   p o s s i b l e   d e t e r m i n a n t s   o f   t h e   l i k e l i h o o d   o f   c i t a t i o n   a n d   i m p a c t .   ( D O I :   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 J N S 0 9 1 5 9 9 ) 	 [ P o n c e ,   F r a n c i s c o   A . ;   L o z a n o ,   A n d r e s   M . ]   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a ;   [ P o n c e ,   F r a n c i s c o   A . ]   S t   J o s e p h s   H o s p ,   B a r r o w   N e u r o l   I n s t ,   D i v   N e u r o l   S u r g ,   P h o e n i x ,   A Z   8 5 0 1 3   U S A ;   [ P o n c e ,   F r a n c i s c o   A . ]   M e d   C t r ,   P h o e n i x ,   A Z   U S A ;   [ L o z a n o ,   A n d r e s   M . ]   M e d t r o n i c   I n c ,   M i n n e a p o l i s ,   M N   U S A 	 L o z a n o ,   A M   ( r e p r i n t   a u t h o r ) ,   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   3 9 9   B a t h u r s t   S t , W W   4 - 4 4 7 ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a . 	 l o z a n o @ u h n r e s . u t o r o n t o . c a 	 	 	 	 	 B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   D u n n   I F ,   2 0 0 3 ,   N E U R O S U R G E R Y ,   V 5 2 ,   P 1 4 1 1 ,   D O I   1 0 . 1 2 2 7 / 0 1 . N E U . 0 0 0 0 0 6 4 8 0 8 . 2 7 5 1 2 . C F ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   G a r f i e l d   E . ,   W H A T   I S   C I T A T I O N   C L A ;   G i s v o l d   S E ,   1 9 9 9 ,   A C T A   A N A E S T H   S C A N D ,   V 4 3 ,   P 9 7 1 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 1 9 9 9 . 4 3 1 0 0 1 . x ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 3 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 6 0 0 ;   Q i n   J ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 6 ,   P 9 5 4 ;   S e g l e n   P O ,   1 9 9 8 ,   A C T A   O R T H O P   S C A N D ,   V 6 9 ,   P 2 2 4 ,   D O I   1 0 . 3 1 0 9 / 1 7 4 5 3 6 7 9 8 0 9 0 0 0 9 2 0 ;   S o n n t a g   V K H ,   2 0 0 7 ,   N E U R O S U R G E R Y ,   V 6 0 ,   P 5 8 7 ;   W i l k i n s   R H ,   1 9 9 2 ,   N E U R O S U R G I C A L   C L A S S I ;   Y a s a r g i l   M ,   1 9 8 4 ,   M I C R O N E U R O S U R G E R Y 	 1 1 	 5 9 	 5 9 	 0 	 1 0 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 F E B 	 2 0 1 0 	 1 1 2 	 2 	 	 	 	 	 2 2 3 	 2 3 2 	 	 1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 5 9 9 	 	 1 0 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 5 5 0 C X 	 W O S : 0 0 0 2 7 4 1 0 7 0 0 0 0 0 4 	 2 0 0 7 8 1 9 2 	 
 
 J 	 S m a l l ,   H 	 	 	 	 S m a l l ,   H 	 	 	 P a r a d i g m s ,   c i t a t i o n s ,   a n d   m a p s   o f   s c i e n c e :   A   p e r s o n a l   h i s t o r y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C O - C I T A T I O N ;   D O C U M E N T S 	 C a n   m a p s   o f   s c i e n c e   t e l l   u s   a n y t h i n g   a b o u t   p a r a d i g m s ?   T h e   a u t h o r   r e v i e w s   h i s   e a r l i e r   w o r k   o n   t h i s   q u e s t i o n ,   i n c l u d i n g   K u h n ' s   r e a c t i o n   t o   i t .   K u h n ' s   v i e w   o f   t h e   r o l e   o f   b i b l i o m e t r i c s   d i f f e r s   s u b s t a n t i a l l y   f r o m   t h e   k i n d s   o f   r e i n t e r p r e t a t i o n s   o f   p a r a d i g m s   t h a t   i n f o r m a t i o n   s c i e n t i s t s   a r e   c u r r e n t l y   a d v o c a t i n g .   B u t   t h e s e   r e i n t e r p r e t a t i o n s   a r e   n e c e s s a r y   i f   h i s   t h e o r y   w i l l   e v e r   b e   e m p i r i c a l l y   t e s t e d ,   a n d   f u r t h e r   p r o g r e s s   i s   t o   b e   m a d e   i n   u n d e r s t a n d i n g   t h e   g r o w t h   o f   s c i e n t i f i c   k n o w l e d g e .   A   n e w   W e b   t o o l   i s   d i s c u s s e d   t h a t   h i g h l i g h t s   r a p i d l y   c h a n g i n g   s p e c i a l t i e s   t h a t   m a y   l e a d   t o   n e w   w a y s   o f   m o n i t o r i n g   r e v o l u t i o n a r y   c h a n g e   i n   r e a l   t i m e .   I t   i s   s u g g e s t e d   t h a t   r e v o l u t i o n a r y   a n d   n o r m a l   s c i e n c e   b e   s e e n   a s   e x t r e m e s   o n   a   c o n t i n u u m   o f   r a t e s   o f   c h a n g e   r a t h e r   t h a n ,   a s   K u h n   o r i g i n a l l y   a s s e r t e d ,   a s   a n   a l l   o r   n o n e   p r o p o s i t i o n . 	 U n i v   C i t y   S c i   C t r ,   I n s t   I n f o r m a t   S c i ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 S m a l l ,   H   ( r e p r i n t   a u t h o r ) ,   U n i v   C i t y   S c i   C t r ,   I n s t   I n f o r m a t   S c i ,   3 5 0 1   M a r k e t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 	 S m a l l ,   H e n r y / A - 1 0 2 6 - 2 0 0 7 	 	 	 	 B a u g h m a n   R H ,   2 0 0 2 ,   S C I E N C E ,   V 2 9 7 ,   P 7 8 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 6 0 9 2 8 ;   B o y a c k   K W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 6 6 ;   C a l l o n   M i c h e l ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ,   P 1 0 3 ;   C h e n   C M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 6 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 5 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   G A R F I E L D   E ,   1 9 8 4 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 7 ,   P 5 4 6 ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G a r f i e l d   E . ,   1 9 8 3 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 5 ,   P 2 7 9 ;   G R I F F I T H   B C ,   1 9 7 9 ,   A S L I B   P ,   V 3 1 ,   P 2 3 4 ;   H u l l   D . ,   1 9 8 8 ,   S C I   P R O C E S S ;   K A P L A N   N ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 5 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K o h o n e n   T ,   2 0 0 1 ,   S E L F   O R G   M A P S ;   K R U S K A L   J B ,   1 9 6 4 ,   P S Y C H O M E T R I K A ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 8 9 5 6 5 ;   K u h n   T .   S . ,   1 9 7 7 ,   S T R U C T U R E   S C I   T H E O R I ,   P 4 5 9 ;   K U H N   T S ,   1 9 7 0 ,   P O S T S C R I P T   1 9 6 9 ,   P 1 7 4 ;   M a s t e r m a n   M ,   1 9 7 0 ,   C R I T I C I S M   G R O W T H   K N O ,   P 5 9 ;   P o p p e r   K a r l   R a i m u n d ,   1 9 7 2 ,   O B J E C T I V E   K N O W L E D G E ;   P R I C E   D ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ,   P 2 5 4 ;   S C H I M I N O V I C H   S ,   1 9 7 1 ,   I N F O R M   S T O R A G E   R E T ,   V 6 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 1 ) 9 0 0 0 8 - 8 ;   S c h v a n e v e l d t   R .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ;   S H A P E R E   D ,   1 9 6 4 ,   P H I L O S   R E V ,   V 7 3 ,   P 3 8 3 ,   D O I   1 0 . 2 3 0 7 / 2 1 8 3 6 6 4 ;   S M A L L   H ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S m a l l   H ,   1 9 9 9 ,   L I B R   T R E N D S ,   V 4 8 ,   P 7 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 8 9 ;   S M A L L   H ,   1 9 7 2 ,   U N P U B   P H Y S I C A L   R E V   1 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M A L L   H G ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 2 ;   T h a g a r d   P ,   1 9 9 2 ,   C O N C E P T U A L   R E V O L U T I O ;   T o u l m i n   S . ,   1 9 7 2 ,   H U M A N   U N D E R S T A N D I N G ;   W i l s o n   E O ,   1 9 9 8 ,   C O N S I L I E N C E   U N I T Y   K N 	 3 5 	 5 9 	 6 7 	 0 	 3 6 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A R 	 2 0 0 3 	 5 4 	 5 	 	 	 	 	 3 9 4 	 3 9 9 	 	 1 0 . 1 0 0 2 / a s i . 1 0 2 2 5 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 4 9 Z R 	 W O S : 0 0 0 1 8 1 2 3 8 3 0 0 0 0 6 	 	 
 
 J 	 L U U K K O N E N ,   T 	 	 	 	 L U U K K O N E N ,   T 	 	 	 B I B L I O M E T R I C S   A N D   E V A L U A T I O N   O F   R E S E A R C H   P E R F O R M A N C E 	 A N N A L S   O F   M E D I C I N E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 	 	 	 L U U K K O N E N ,   T   ( r e p r i n t   a u t h o r ) ,   A C A D   F I N L A N D , P O B   5 7 , S F - 0 0 5 5 1   H E L S I N K I , F I N L A N D . 	 	 	 	 	 	 A R V A N I T I S   R ,   1 9 8 8 ,   S O C   S T U D   S C I ,   V 1 8 ,   P 1 1 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 8 0 1 8 0 0 1 0 0 5 ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 4 0 2 ;   C A R P E N T E R   M P ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 2 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 7 6 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C O L E   S ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 7 8 ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   F R A M E   J D ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 2 0 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 4 9 - 2 ;   F r a n k l i n   J .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 3 2 5 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G A R F I E L D   E ,   1 9 7 6 ,   C U R R E N T   C O N T E N T S ,   V 3 4 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   H A G S T R O M   W O ,   1 9 6 5 ,   S C I E N T I F I C   C O M M U N I T Y ;   I R V I N E   J ,   1 9 8 5 ,   S O C   S T U D   S C I ,   V 1 5 ,   P 2 9 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 5 0 1 5 0 0 2 0 0 4 ;   I R V I N E   J ,   1 9 8 9 ,   C I B A   F   S ,   V 1 4 2 ;   L U U K K O N E N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 9 ;   L U U K K O N E N   T ,   1 9 9 0 ,   I N   P R E S S   S C I E N T O M E T R ;   L U U K K O N E N   T ,   1 9 8 9 ,   2 1 9 8 9   A C   F I N L   P U B L ;   L U U K K O N E N   T ,   1 9 8 9 ,   S C I   T E C H N O L O G Y   I N D I C ,   P 2 2 3 ;   L U U K K O N E N G R O N O W   T ,   1 9 8 8 ,   F P R   P U B L I K A T I O N ,   V 8 ;   L U U K K O N E N G R O N O W   T ,   1 9 8 8 ,   R M F   E V A L U E R E R   H J E R   2 ;   M A C R O B E R T S   M H ,   1 9 8 6 ,   S O C   S T U D   S C I ,   V 1 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 6 0 1 6 0 0 1 0 0 8 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   N A R I N   F ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 5 ;   N A R I N   F ,   1 9 8 7 ,   U N P U B   A S S E S S M E N T   F A C ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   P r i c e   D e r e k   J ,   1 9 7 5 ,   S C I   B A B Y L O N ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   d e   S o l l a   P r i c e   D e r e k   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I   B ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R O Y   R ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 7 2 8 5 7 ;   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 	 3 5 	 5 9 	 6 5 	 2 	 8 	 B L A C K W E L L   S C I E N C E   L T D 	 O X F O R D 	 O S N E Y   M E A D ,   O X F O R D ,   O X O N ,   E N G L A N D   O X 2   0 E L 	 0 7 8 5 - 3 8 9 0 	 	 	 A N N   M E D 	 A n n .   M e d . 	 J U N 	 1 9 9 0 	 2 2 	 3 	 	 	 	 	 1 4 5 	 1 5 0 	 	 1 0 . 3 1 0 9 / 0 7 8 5 3 8 9 9 0 0 9 1 4 7 2 5 9 	 	 6 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 D Q 2 3 5 	 W O S : A 1 9 9 0 D Q 2 3 5 0 0 0 0 3 	 2 3 9 3 5 4 9 	 
 
 J 	 L o z a n o ,   G A ;   L a r i v i e r e ,   V ;   G i n g r a s ,   Y 	 	 	 	 L o z a n o ,   G e o r g e   A . ;   L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s 	 	 	 T h e   w e a k e n i n g   r e l a t i o n s h i p   b e t w e e n   t h e   i m p a c t   f a c t o r   a n d   p a p e r s '   c i t a t i o n s   i n   t h e   d i g i t a l   a g e 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   i m p a c t   f a c t o r 	 J O U R N A L S 	 H i s t o r i c a l l y ,   p a p e r s   h a v e   b e e n   p h y s i c a l l y   b o u n d   t o   t h e   j o u r n a l   i n   w h i c h   t h e y   w e r e   p u b l i s h e d ;   b u t   i n   t h e   d i g i t a l   a g e   p a p e r s   a r e   a v a i l a b l e   i n d i v i d u a l l y ,   n o   l o n g e r   t i e d   t o   t h e i r   r e s p e c t i v e   j o u r n a l s .   H e n c e ,   p a p e r s   n o w   c a n   b e   r e a d   a n d   c i t e d   b a s e d   o n   t h e i r   o w n   m e r i t s ,   i n d e p e n d e n t l y   o f   t h e   j o u r n a l ' s   p h y s i c a l   a v a i l a b i l i t y ,   r e p u t a t i o n ,   o r   i m p a c t   f a c t o r   ( I F ) .   W e   c o m p a r e   t h e   s t r e n g t h   o f   t h e   r e l a t i o n s h i p   b e t w e e n   j o u r n a l s '   I F s   a n d   t h e   a c t u a l   c i t a t i o n s   r e c e i v e d   b y   t h e i r   r e s p e c t i v e   p a p e r s   f r o m   1 9 0 2   t o   2 0 0 9 .   T h r o u g h o u t   m o s t   o f   t h e   2 0 t h   c e n t u r y ,   p a p e r s '   c i t a t i o n   r a t e s   w e r e   i n c r e a s i n g l y   l i n k e d   t o   t h e i r   r e s p e c t i v e   j o u r n a l s '   I F s .   H o w e v e r ,   s i n c e   1 9 9 0 ,   t h e   a d v e n t   o f   t h e   d i g i t a l   a g e ,   t h e   r e l a t i o n   b e t w e e n   I F s   a n d   p a p e r   c i t a t i o n s   h a s   b e e n   w e a k e n i n g .   T h i s   b e g a n   f i r s t   i n   p h y s i c s ,   a   f i e l d   t h a t   w a s   q u i c k   t o   m a k e   t h e   t r a n s i t i o n   i n t o   t h e   e l e c t r o n i c   d o m a i n .   F u r t h e r m o r e ,   s i n c e   1 9 9 0   t h e   o v e r a l l   p r o p o r t i o n   o f   h i g h l y   c i t e d   p a p e r s   c o m i n g   f r o m   h i g h l y   c i t e d   j o u r n a l s   h a s   b e e n   d e c r e a s i n g   a n d ,   o f   t h e s e   h i g h l y   c i t e d   p a p e r s ,   t h e   p r o p o r t i o n   n o t   c o m i n g   f r o m   h i g h l y   c i t e d   j o u r n a l s   h a s   b e e n   i n c r e a s i n g .   S h o u l d   t h i s   p a t t e r n   c o n t i n u e ,   i t   m i g h t   b r i n g   a n   e n d   t o   t h e   u s e   o f   t h e   I F   a s   a   w a y   t o   e v a l u a t e   t h e   q u a l i t y   o f   j o u r n a l s ,   p a p e r s ,   a n d   r e s e a r c h e r s . 	 [ L o z a n o ,   G e o r g e   A . ;   L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s ]   U n i v   Q u e b e c ,   O S T ,   C I R S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a ;   [ L o z a n o ,   G e o r g e   A . ]   E s t o n i a n   C t r   E v o l u t i o n a r y   E c o l ,   E E - 5 0 1 0 8   T a r t u ,   E s t o n i a ;   [ L a r i v i e r e ,   V i n c e n t ]   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   M o n t r e a l ,   P Q   H 3 C   3 J 7 ,   C a n a d a 	 L o z a n o ,   G A   ( r e p r i n t   a u t h o r ) ,   U n i v   Q u e b e c ,   O S T ,   C I R S T ,   C P   8 8 8 8 , S u c c   C t r   V i l l e ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a . 	 d r . g e o r g e . l o z a n o @ g m a i l . c o m ;   v i n c e n t . l a r i v i e r e @ u m o n t r e a l . c a ;   g i n g r a s . y v e s @ u q a m . c a 	 	 L o z a n o ,   G e o r g e   A / 0 0 0 0 - 0 0 0 2 - 1 3 6 9 - 1 4 0 8 	 	 	 A k s n e s   D W ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 6 4 5 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 3 6 - x ;   A V E R C H   H A ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 1 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 9 ) 9 0 0 0 4 - 8 ;   G o n z a l e z - P e r e i r a   B o r j a ,   2 0 0 9 ,   S J R   I N D I C A T O R   N E W   I N ;   L a r i v i e r e   V ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 4 2 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 3 2 ;   L a r i v i e r e   V ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 8 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 1 1 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 9 ;   L o z a n o   G A ,   2 0 1 0 ,   C U R R   S C I   I N D I A ,   V 9 9 ,   P 1 1 8 7 ;   L u n d b e r g   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ;   M o e d   H F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 2 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M o r g a n   V . ,   2 0 0 0 ,   A U S T R A L A S   P S Y C H I A T R Y ,   V 8 ,   P 2 3 0 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 6 6 5 . 2 0 0 0 . 0 0 2 6 3 . x ;   P o d e r   E ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 5 9 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 3 8 ;   R o s s n e r   M ,   2 0 0 7 ,   J   C E L L   B I O L ,   V 1 7 9 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 8 3 / j c b . 2 0 0 7 1 1 1 4 0 ;   R o t h e n b e r g   R ,   2 0 0 8 ,   E P I D E M I O L O G Y ,   V 1 9 ,   P 3 7 2 ,   D O I   1 0 . 1 0 9 7 / E D E . 0 b 0 1 3 e 3 1 8 1 6 b 6 a 8 c ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   V a k i l   N ,   2 0 0 5 ,   A M   J   G A S T R O E N T E R O L ,   V 1 0 0 ,   P 2 4 3 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 7 2 - 0 2 4 1 . 2 0 0 5 . 0 0 3 2 4 . x ;   W e s t   J D ,   2 0 1 0 ,   C O L L   R E S   L I B R ,   V 7 1 ,   P 2 3 6 ;   W h i t e h o u s e   G ,   2 0 0 1 ,   B R I T   J   R A D I O L ,   V 7 4 ,   P 1 	 1 9 	 5 8 	 5 9 	 1 8 	 6 9 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 N O V 	 2 0 1 2 	 6 3 	 1 1 	 	 	 	 	 2 1 4 0 	 2 1 4 5 	 	 1 0 . 1 0 0 2 / a s i . 2 2 7 3 1 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 3 0 D U 	 W O S : 0 0 0 3 1 0 5 5 0 0 0 0 0 0 2 	 	 
 
 J 	 S A N D S T R O M ,   P E 	 	 	 	 S A N D S T R O M ,   P E 	 	 	 A N   O P T I M A L   F O R A G I N G   A P P R O A C H   T O   I N F O R M A T I O N - S E E K I N G   A N D   U S E 	 L I B R A R Y   Q U A R T E R L Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 I N V I S I B L E - C O L L E G E S ;   S C I E N C E ;   C I T A T I O N ;   B E H A V I O R ;   B I B L I O M E T R I C S ;   M O D E L ;   R E T R I E V A L ;   D O C U M E N T S ;   N E E D S 	 T h i s   a r t i c l e   e x p l o r e s   o p t i m a l   f o r a g i n g   t h e o r y ,   d e r i v e d   f r o m   e v o l u t i o n a r y   e c o l o g y ,   f o r   i t s   p o t e n t i a l   t o   c l a r i f y   a n d   o p e r a t i o n a l i z e   s t u d i e s   o f   s c h o l a r l y   c o m m u n i c a t i o n .   T h i s   a p p r o a c h   a s s u m e s   t h a t   s c h o l a r s   m a k e   s t r a t e g i c   d e c i s i o n s   i n   e x p l o i t i n g   t h e i r   i n f o r m a t i o n   e n v i r o n m e n t s   a n d   t h a t   t h e s e   d e c i s i o n s   c a n   b e   m o d e l e d   m a t h e m a t i c a l l y .   S p e c i f i c   p a r a l l e l s   b e t w e e n   t h e   w o r l d s   o f   s u b s i s t e n c e   f o r a g e r s   a n d   s c h o l a r l y   i n f o r m a t i o n   s e e k e r s   a r e   d r a w n   i n   t h e   a r e a s   o f   p r e y   c h o i c e   a n d   d i e t   b r e a d t h ,   t i m e   a l l o c a t i o n   a n d   p a t c h   c h o i c e ,   a n d   g r o u p   f o r m a t i o n   a n d   s e t t l e m e n t .   R e c o m m e n d a t i o n s   o f   h y p o t h e s e s   t o   t e s t   t h e   m o d e l s   a r e   o f f e r e d ,   a l o n g   w i t h   a   d i s c u s s i o n   o f   t h e   p l a c e   o f   e t h n o g r a p h i c   a n d   b i b l i o m e t r i c   t e c h n i q u e s   i n   m o d e l i n g   p r o c e s s e s   o f   s c h o l a r s h i p . 	 	 S A N D S T R O M ,   P E   ( r e p r i n t   a u t h o r ) ,   I N D I A N A   U N I V ,   S C H   L I B   &   I N F O R M A T   S C I ,   B L O O M I N G T O N ,   I N   4 7 4 0 5   U S A . 	 	 	 S a n d s t r o m ,   P a m e l a / 0 0 0 0 - 0 0 0 2 - 1 4 6 2 - 6 9 3 1 	 	 	 A T K I N S O N   R ,   1 9 8 4 ,   L I B R   R E S O U R   T E C H   S E R ,   V 2 8 ,   P 1 0 9 ;   A T K I N S O N   R ,   1 9 9 1 ,   C O L L E C T I O N   M A N A G E M E N ,   P 2 9 ;   B e l l   W J ,   1 9 9 1 ,   S E A R C H I N G   B E H A V I O U R ;   B L U R T O N J O N E S   N G ,   1 9 8 6 ,   R E V   A N T H R ,   V 1 3 ,   P 1 5 1 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B o u a z z a   A . ,   1 9 8 9 ,   E N C Y   L I B   I N F O R M   S   S 9 ,   V 4 4 ,   P 1 4 4 ;   B R O W N   M E ,   1 9 9 1 ,   P   A S I S   A N N U   M E E T ,   V 2 8 ,   P 9 ;   B U C K L A N D   M K ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 5 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 3 ;   C a m p b e l l   D .   T . ,   1 9 6 9 ,   I N T E R D I S C I P L I N A R Y   R E ,   P 3 2 8 ;   C A S E   D O ,   1 9 9 1 ,   L I B R   Q U A R T ,   V 6 1 ,   P 6 1 ;   C A S E   D O ,   1 9 8 8 ,   P   A S I S   A N N U   M E E T ,   V 2 5 ,   P 8 7 ;   C H A N G   S J ,   1 9 9 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 8 ,   P 2 3 1 ;   C H A R N O V   E L ,   1 9 7 6 ,   T H E O R   P O P U L   B I O L ,   V 9 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 5 8 0 9 ( 7 6 ) 9 0 0 4 0 - X ;   C H O I   J M ,   1 9 8 6 ,   T H E S I S   R U T G E R S   U ;   C O P P E R   W S ,   1 9 8 7 ,   P S Y C H O L   R E V ,   V 9 4 ,   P 3 9 5 ;   C R A N E   D ,   1 9 7 0 ,   I N T   S O C   S C I   J ,   V 2 2 ,   P 2 8 ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   D E R V I N   B ,   1 9 8 6 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 1 ,   P 3 ;   E L L I S   D ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 1 7 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 4 3 ;   E M L E N   J M ,   1 9 6 6 ,   A M   N A T ,   V 1 0 0 ,   P 6 1 1 ,   D O I   1 0 . 1 0 8 6 / 2 8 2 4 5 5 ;   F O L E Y   R ,   1 9 8 5 ,   M A N ,   V 2 0 ,   P 2 2 2 ,   D O I   1 0 . 2 3 0 7 / 2 8 0 2 3 8 2 ;   G A R F I E L D   E ,   1 9 7 5 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R V E Y   W D ,   1 9 7 6 ,   C O M M U N I C A T I O N   E S S E N C ,   P 3 0 0 ;   G a r v e y   W i l l i a m   D . ,   1 9 7 9 ,   C O M M U N I C A T I O N   E S S E N C ,   P 1 4 8 ;   G A R V E Y   W .   D . ,   1 9 7 9 ,   C O M M U N I C A T I O N   E S S E N C ;   G I E R Y N   T ,   1 9 7 8 ,   S O C I O L   I N Q ,   P 9 6 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   G R I F F I T H   B C ,   1 9 8 8 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 3 ,   P 3 5 1 ;   H A R D I N   G ,   1 9 6 8 ,   S C I E N C E ,   V 1 6 2 ,   P 1 2 4 3 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   H O R N   H S ,   1 9 6 8 ,   E C O L O G Y ,   V 4 9 ,   P 6 8 2 ,   D O I   1 0 . 2 3 0 7 / 1 9 3 5 5 3 2 ;   K A N T O R   P B ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 5 ) 3 8 : 3 < 2 1 1 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - U ;   K a p l a n   H . ,   1 9 9 2 ,   E V O L U T I O N A R Y   E C O L O G Y ,   P 1 6 7 ;   K A P L A N   N ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 5 ;   K l a p p   O .   E . ,   1 9 7 8 ,   O P E N I N G   C L O S I N G   S T R A ;   K O C H E N   M ,   1 9 8 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 8 ,   P 2 7 7 ;   K O C H E N   M ,   1 9 7 9 ,   P R O G R   C O M M U N I C A T I O N ,   V 1 ,   P 1 ;   K O H E N   M ,   1 9 8 7 ,   J   D O C ,   V 4 3 ,   P 5 4 ;   K R I K E L A S   J ,   1 9 8 3 ,   D R E X E L   L I B R   Q U A R T ,   V 1 9 ,   P 5 ;   K U H L T H A U   C C ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 5 ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   K W A S N I K   B H ,   1 9 9 1 ,   J   D O C ,   V 4 7 ,   P 3 8 9 ;   L A N C A S T E R   F W ,   1 9 7 9 ,   I N F O R M A T I O N   R E T R I E V A ;   L A T O U R   B ,   1 9 8 6 ,   L A B O R A T O R Y   L I F E   S O C I ;   L I E V R O U W   L A ,   1 9 8 7 ,   S O C   N E T W O R K S ,   V 9 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 7 ) 9 0 0 2 1 - 9 ;   L I E V R O U W   L A ,   1 9 8 8 ,   P   A S I S   A N N U   M E E T ,   V 2 5 ,   P 5 4 ;   L I E V R O U W   L A ,   1 9 8 8 ,   K N O W L E D G E   S O C ,   V 1 ,   P 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 8 7 2 1 0 ;   L i e v r o u w   L . A . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 5 9 ;   L I N E   M B ,   1 9 7 4 ,   J   D O C ,   V 3 0 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 8 3 ;   M A C A R T H U R   R H ,   1 9 6 6 ,   A M   N A T ,   V 1 0 0 ,   P 6 0 3 ,   D O I   1 0 . 1 0 8 6 / 2 8 2 4 5 4 ;   M A N N   T ,   1 9 9 3 ,   L I B R A R Y   R E S   M O D E L S   G ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 1 1 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 3 ) 4 0 : 2 < 1 1 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - T ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M e r t o n   R o b e r t   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ,   P 2 8 6 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ,   P 4 3 9 ;   M I T H E N   S J ,   1 9 8 9 ,   H U M   E C O L ,   V 1 7 ,   P 5 9 ;   M o o r e   J .   A . ,   1 9 8 1 ,   H U N T E R   G A T H E R E R   F O R A ,   P 1 9 4 ;   M O R S E   P M ,   1 9 7 0 ,   L I B R   Q U A R T ,   V 4 0 ,   P 3 9 1 ;   N O N A C S   P ,   1 9 9 3 ,   O I K O S ,   V 6 7 ,   P 3 7 1 ,   D O I   1 0 . 2 3 0 7 / 3 5 4 5 4 8 4 ;   O C O N N O R   D O ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 9 ;   O P P E N H E I M   C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 4 ;   P a i s l e y   W i l l i a m   J . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 2 8 1 ;   P i a n k a   E .   R ,   1 9 7 8 ,   E V O L U T I O N A R Y   E C O L O G Y ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 7 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 7 4 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   P R I C E   D J S ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ,   P 1 1 9 ;   R O G G E   A E ,   1 9 7 6 ,   A M   A N T H R O P O L ,   V 7 8 ,   P 8 2 9 ,   D O I   1 0 . 1 5 2 5 / a a . 1 9 7 6 . 7 8 . 4 . 0 2 a 0 0 0 7 0 ;   S A R A C E V I C   T ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 5 ) 3 9 : 3 < 1 7 7 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - F ;   S c h n e i d e r   H .   K . ,   1 9 7 4 ,   E C   M A N   A N T H R   E C ;   S c h o e n e r   T .   W . ,   1 9 7 1 ,   A N N U   R E V   E C O L   S Y S T ,   V 2 ,   P 3 6 9 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . e s . 0 2 . 1 1 0 1 7 1 . 0 0 2 1 0 1 ;   S i m o n   H A ,   1 9 5 5 ,   Q   J   E C O N ,   V 6 9 ,   P 9 9 ,   D O I   1 0 . 2 3 0 7 / 1 8 8 4 8 5 2 ;   S M A L L   H ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 5 ;   S M A L L   H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 5 ) 4 0 : 3 < 1 5 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - K ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M A L L   H G ,   1 9 7 6 ,   I N T   C L A S S I F ,   V 3 ,   P 6 7 ;   S M I T H   E A ,   1 9 8 3 ,   C U R R   A N T H R O P O L ,   V 2 4 ,   P 6 2 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 3 0 6 6 ;   S m i t h   E .   A . ,   1 9 8 1 ,   H U N T E R   G A T H E R E R   F O R A ,   P 1 ;   S m i t h   E . A . ,   1 9 9 1 ,   I N U J J U A M I U T   F O R A G I N G ;   S m i t h   E . ,   1 9 9 2 ,   E V O L U T I O N A R Y   E C O L O G Y ,   P 2 5 ;   S m i t h   E .   A . ,   1 9 9 2 ,   E V O L U T I O N A R Y   E C O L O G Y ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S O P E R   M E ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 3 9 7 ;   S T I N C H C O M B E   A L ,   1 9 8 2 ,   A M   S O C I O L ,   V 1 7 ,   P 2 ;   S w a n s o n   D R ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 1 2 9 ;   W E R S I G   G ,   1 9 8 5 ,   S O C   S C I   I N F O R M   S T U D ,   V 5 ,   P 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 5 ) 9 0 0 0 3 - 1 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W H I T E   H D ,   1 9 9 2 ,   I N F O R M A T I O N   S P E C I A L I ,   P 2 4 9 ;   W H I T E   H D ,   1 9 9 2 ,   I N F O R M A T I O N   S P E C I A L I ,   P 2 7 ;   W H I T E   M D ,   1 9 7 5 ,   L I B R   Q U A R T ,   V 4 5 ,   P 3 3 7 ;   W i l s o n   P . ,   1 9 7 7 ,   P U B L I C   K N O W L E D G E   P R I ;   W i l s o n   P . ,   1 9 9 2 ,   I N F O R M A T I O N   S P E C I A L I ,   P 1 5 3 ;   W I L S O N   T D ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 2 ;   W I L S O N   T D ,   1 9 8 4 ,   S O C   S C I   I N F O R M   S T U D ,   V 4 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 4 ) 9 0 0 7 6 - 0 ;   W i n t e r h a l d e r   B . ,   1 9 8 1 ,   H U N T E R   G A T H E R E R   F O R A ;   W i n t e r h a l d e r   B . ,   1 9 8 1 ,   H U N T E R   G A T H E R E R   F O R A ,   P 1 3 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O R   P R I N C 	 1 0 2 	 5 8 	 5 7 	 2 	 2 2 	 U N I V   C H I C A G O   P R E S S 	 C H I C A G O 	 1 4 2 7   E   6 0 T H   S T ,   C H I C A G O ,   I L   6 0 6 3 7 - 2 9 5 4   U S A 	 0 0 2 4 - 2 5 1 9 	 1 5 4 9 - 6 5 2 X 	 	 L I B R   Q U A R T 	 L i b r .   Q . 	 O C T 	 1 9 9 4 	 6 4 	 4 	 	 	 	 	 4 1 4 	 4 4 9 	 	 	 	 3 6 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 P P 0 7 8 	 W O S : A 1 9 9 4 P P 0 7 8 0 0 0 0 3 	 	 
 
 J 	 W i l k i n s o n ,   D ;   H a r r i e s ,   G ;   T h e l w a l l ,   M ;   P r i c e ,   L 	 	 	 	 W i l k i n s o n ,   D ;   H a r r i e s ,   G ;   T h e l w a l l ,   M ;   P r i c e ,   L 	 	 	 M o t i v a t i o n s   f o r   a c a d e m i c   w e b   s i t e   i n t e r l i n k i n g :   e v i d e n c e   f o r   t h e   W e b   a s   a   n o v e l   s o u r c e   o f   i n f o r m a t i o n   o n   i n f o r m a l   s c h o l a r l y   c o m m u n i c a t i o n 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I M P A C T - F A C T O R S ;   C R A W L E R ;   B I B L I O M E T R I C S ;   D O C U M E N T A T I O N ;   S C I E N C E ;   L I N K S 	 T h e   n e e d   t o   u n d e r s t a n d   a u t h o r s '   m o t i v a t i o n s   f o r   c r e a t i n g   l i n k s   b e t w e e n   u n i v e r s i t y   w e b   s i t e s   i s   a d d r e s s e d   b y   a   s u r v e y   o f   a   r a n d o m   c o l l e c t i o n   o f   4 1 4   s u c h   l i n k s   f r o m   t h e   a c . u k   d o m a i n .   A   c l a s s i f i c a t i o n - s c h e m e   w a s   c r e a t e d   a n d   a p p l i e d   t o   t h i s   c o l l e c t i o n .   O b t a i n i n g   i n t e r - c l a s s i f i e r   a g r e e m e n t   a s   t o   t h e   s i n g l e   m a i n   l i n k   c r e a t i o n   c a u s e   w a s   v e r y   d i f f i c u l t   b e c a u s e   o f   m u l t i p l e   p o t e n t i a l .   m o t i v a t i o n s   a n d   t h e   f l u i d i t y   o f   g e n r e   o n   t h e   W e b .   N e v e r t h e l e s s ,   i t   w a s   c l e a r   t h a t ,   w h i l s t   t h e   v a s t   m a j o r i t y ,   o v e r   9 0 % ,   w a s   c r e a t e d   f o r   b r o a d l y   s c h o l a r l y   r e a s o n s ,   o n l y   t w o   W e r e   e q u i v a l e n t   t o   j o u r n a l   c i t a t i o n s .   I t   i s   c o n c l u d e d   t h a t   a c a d e m i c   w e b   l i n k   m e t r i c s   w i l l   b e   d o m i n a t e d   b y   a   r a n g e   o f   i n f o r m a l   t y p e s   o f   s c h o l a r l y   c o m m u n i c a t i o n .   S i n c e   f o r m a l   c o m m u n i c a t i o n   c a n   b e   e x t e n s i v e l y   s t u d i e d   t h r o u g h   c i t a t i o n   a n a l y s i s ,   t h i s   p r o v i d e s   a n   e x c i t i n g   n e w   w i n d o w   t h r o u g h   w h i c h   t o   i n v e s t i g a t e   a   f a c e t   o f   a   p r e v i o u s l y   o b s c u r e d   t y p e   o f   c o m m u n i c a t i o n   a c t i v i t y . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 W i l k i n s o n ,   D   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d . 	 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A r a s u   A . ,   2 0 0 1 ,   A C M   T   I N T E R N E T   T E C H N ,   V 1 ,   P 2 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 8 3 0 3 4 . 3 8 3 0 3 5 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B a r - I l a n   J . ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 / 3 ,   P 1 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 1 8 1 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ;   C O O P E R   W S ,   1 9 6 9 ,   A M   D O C ,   V 2 0 ,   P 2 6 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 0 0 3 1 4 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C R O N I N   B ,   I N   P R E S S   J   A M   S O C   I N ;   C r o w s t o n   K ,   2 0 0 0 ,   I N F O R M   S O C ,   V 1 6 ,   P 2 0 1 ;   D a v e n p o r t   E ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 5 1 7 ;   H a a s   S W ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 8 1 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - # ;   H e t i n g   C h u ,   2 0 0 2 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 4 3 ,   P 1 1 0 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 9 7 2 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   O P P E N H E I M   C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 4 ;   P e t e r s o n   I ,   2 0 0 1 ,   S C I   C O M M U N ,   V 2 2 ,   P 2 4 6 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 0 1 0 2 2 0 0 3 0 0 2 ;   R e h m   G . ,   2 0 0 2 ,   P   H A W   I N T   C   S Y S T   S C I ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S L O A N   B ,   2 0 0 1 ,   P E R S O N A L   C I T A T I O N   I N ;   S m i t h   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 0 4 1 5 8 2 2 ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   T a n g   R ,   2 0 0 2 ,   P   A S I S T   A N N U ,   V 3 9 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 3 9 0 1 4 6 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 1 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 1 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 1 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 6 8 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 4 8 2 1 9 ;   T h e l w a l l   M ,   2 0 0 2 ,   I N T E R N E T   R E S ,   V 1 2 ,   P 1 2 4 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 2 1 0 4 2 2 5 0 3 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 5 6 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 4 1 5 8 6 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 5 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 1 9 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T H E L W A L L   M ,   2 0 0 1 ,   C Y B E R M E T R I C S ,   V 5 ;   T h e l w a l l   M . ,   2 0 0 2 ,   J   I N F   S C I ,   V 2 8 ,   P 4 8 5 ;   T h e l w a l l   M . ,   2 0 0 1 ,   P U B L I C L Y   A C C E S S I B L E ;   T H E L W A L L   M ,   1 9 9 9 ,   I N T   J   E D   T E C H N O L O G Y ,   V 1 ;   T h o m a s   O ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 3 8 ;   T r u m b o   C W ,   2 0 0 1 ,   S C I   C O M M U N ,   V 2 2 ,   P 3 4 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 0 1 0 2 2 0 0 4 0 0 1 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   W h i t e   M D ,   1 9 9 7 ,   L I B R   Q U A R T ,   V 6 7 ,   P 1 2 2 ;   W I L S O N   T ,   2 0 0 2 ,   W E B   C I T A T I O N   J E S S E   D ;   2 0 0 2 ,   C Y B E R M E T R I C S   E L E C T   J 	 4 9 	 5 7 	 5 7 	 3 	 1 6 	 B O W K E R - S A U R 	 E   G R I N S T E A D 	 W I N D S O R   C O U R T ,   E A S T   G R I N S T E A D   H O U S E ,   E   G R I N S T E A D   R H 1 9   1 X A ,   W   S U S S E X ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F O R M   S C I 	 J .   I n f .   S c i . 	 	 2 0 0 3 	 2 9 	 1 	 	 	 	 	 4 9 	 5 6 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 5 3 A Y 	 W O S : 0 0 0 1 8 1 4 1 4 1 0 0 0 0 5 	 	 
 
 J 	 P R A T T ,   A D 	 	 	 	 P R A T T ,   A D 	 	 	 M E A S U R E   O F   C L A S S   C O N C E N T R A T I O N   I N   B I B L I O M E T R I C S 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 I N D I A N A   U N I V , B L O O M I N G T O N , I N   4 7 4 0 1 ;   R O Y A L   S C H   L I B R A R I A N S H I P , C O P E N H A G E N , D E N M A R K 	 	 	 	 	 	 	 A I Y E P E K U   W O ,   1 9 7 2 ,   L I B R I ,   V 2 2 ,   P 1 6 9 ;   B r a d f o r d   S .   C . ,   1 9 5 3 ,   D O C U M E N T A T I O N ;   B R O O K E S   B C ,   T O   B E   P U B L I S H E D ;   B U C K L A N D   M K ,   1 9 7 5 ,   B O O K   A V A I L A B I L I T Y   L I ;   G o o d   I .   J . ,   1 9 6 9 ,   E N C Y   L I N G U I S T I C S   I N F ,   P 5 6 7 ;   S I N G L E T O N   A ,   1 9 7 6 ,   P H Y S I C S   B ,   V 2 7 ,   P 4 9 3 ;   W H I T W O R T H   W A ,   1 9 4 8 ,   C H O I C E   C H A N C E ,   P 2 0 5 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O R   P R I N C 	 8 	 5 7 	 5 8 	 0 	 6 	 J O H N   W I L E Y   &   S O N S   I N C 	 N E W   Y O R K 	 6 0 5   T H I R D   A V E ,   N E W   Y O R K ,   N Y   1 0 1 5 8 - 0 0 1 2 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 	 1 9 7 7 	 2 8 	 5 	 	 	 	 	 2 8 5 	 2 9 2 	 	 1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 5 0 8 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 E D 1 4 3 	 W O S : A 1 9 7 7 E D 1 4 3 0 0 0 0 7 	 	 
 
 J 	 B a r r e t o ,   S M ;   M i r a n d a ,   J J ;   F i g u e r o a ,   J P ;   S c h m i d t ,   M I ;   M u n o z ,   S ;   K u r i - M o r a l e s ,   P P ;   S i l v a ,   J B 	 	 	 	 B a r r e t o ,   S a n d h i   M . ;   M i r a n d a ,   J a i m e   J . ;   F i g u e r o a ,   J .   P e t e r ;   S c h m i d t ,   M a r i a   I n e s ;   M u n o z ,   S e r g i o ;   P a b l o   K u r i - M o r a l e s ,   P . ;   S i l v a ,   J a r b a s   B . ,   J r . 	 	 	 E p i d e m i o l o g y   i n   L a t i n   A m e r i c a   a n d   t h e   C a r i b b e a n :   c u r r e n t   s i t u a t i o n   a n d   c h a l l e n g e s 	 I N T E R N A T I O N A L   J O U R N A L   O F   E P I D E M I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 E p i d e m i o l o g y ;   L a t i n   A m e r i c a   a n d   C a r i b b e a n ;   h e a l t h   s t a t u s ;   h e a l t h   i n e q u a l i t y ;   g l o b a l   h e a l t h 	 H E A L T H   R E S E A R C H   S Y S T E M S ;   S O C I A L   M E D I C I N E ;   P U B L I C - H E A L T H ;   D I S E A S E S ;   B U R D E N ;   C O U N T R I E S ;   P O P U L A T I O N ;   I N E Q U A L I T Y ;   M O R T A L I T Y ;   F R A M E W O R K 	 B a c k g r o u n d   T h i s   a r t i c l e   a n a l y s e s   t h e   e p i d e m i o l o g i c a l   r e s e a r c h   d e v e l o p m e n t s   i n   L a t i n   A m e r i c a   a n d   t h e   C a r i b b e a n   (   L A C ) .   I t   i n t e g r a t e s   t h e   s e r i e s   c o m m i s s i o n e d   b y   t h e   I n t e r n a t i o n a l   E p i d e m i o l o g i c a l   A s s o c i a t i o n   t o   a l l   W H O   R e g i o n s   t o   i d e n t i f y   g l o b a l   o p p o r t u n i t i e s   t o   p r o m o t e   t h e   d e v e l o p m e n t   o f   e p i d e m i o l o g y .   M e t h o d s   H e a l t h   s i t u a t i o n s   o f   t h e   r e g i o n s   w e r e   a n a l y s e d   b a s e d   o n   p u b l i s h e d   d a t a   o n   s e l e c t e d   m o r t a l i t y ,   m o r b i d i t y   a n d   r i s k   f a c t o r s .   E p i d e m i o l o g i c a l   p u b l i c a t i o n   o u t p u t   b y   c o u n t r y   w a s   e s t i m a t e d   b y   M e d l i n e   b i b l i o m e t r i c s .   I n t e r n e t   a n d   l i t e r a t u r e   s e a r c h e s   a n d   d a t a   p r o v i d e d   b y   k e y   i n f o r m a n t s   w e r e   u s e d   t o   d e s c r i b e   p e r s p e c t i v e s   o n   e p i d e m i o l o g i c a l   t r a i n i n g ,   r e s e a r c h   a n d   f u n d i n g .   F i n d i n g s   D e s p i t e   i m p o r t a n t   a d v a n c e s   i n   r e c e n t   d e c a d e s ,   L A C   r e m a i n s   t h e   w o r l d ' s   m o s t   u n e q u a l   r e g i o n .   I n   2 0 1 0 ,   1 0 %   o f   t h e   L A C ' s   p e o p l e   s t i l l   l i v e d   i n   c o n d i t i o n s   o f   m u l t i d i m e n s i o n a l   p o v e r t y ,   w i t h   h u g e   v a r i a t i o n   a m o n g   c o u n t r i e s .   T h e   r e g i o n   h a s   e x p e r i e n c e d   f a s t   a n d   c o m p l e x   e p i d e m i o l o g i c a l   c h a n g e s   i n   p a s t   d e c a d e s ,   c o m b i n i n g   i n c r e a s i n g   r a t e s   o f   n o n - c o m m u n i c a b l e   d i s e a s e s   a n d   i n j u r i e s ,   a n d   k e e p i n g   u n c o n t r o l l e d   m a n y   e x i s t i n g   e n d e m i c   a n d   e m e r g i n g   d i s e a s e s .   O v e r a l l ,   e p i d e m i o l o g i c a l   p u b l i c a t i o n s   p e r   y e a r   i n c r e a s e d   f r o m   1 6 0   a r t i c l e s   b e t w e e n   1 9 6 1   a n d   1 9 7 0   t o   2 4 9 2   b e t w e e n   2 0 0 1   a n d   2 0 1 0 .   T h e   i n c r e a s e   i n   p a p e r s   p e r   m i l l i o n   i n h a b i t a n t s   i n   t h e   p a s t   t h r e e   d e c a d e s   v a r i e d   f r o m   5 7 %   i n   P a n a m a   t o   1 3 3 9 %   i n   P a r a g u a y .   U n i v e r s i t i e s   a r e   t h e   m a i n   e p i d e m i o l o g i c a l   t r a i n i n g   p r o v i d e r s .   T h e r e   a r e   a t   l e a s t   3 4   u n i v e r s i t i e s   a n d   o t h e r   i n s t i t u t i o n s   i n   t h e   r e g i o n   t h a t   o f f e r   p o s t g r a d u a t e   p r o g r a m m e s   a t   t h e   m a s t e r ' s   a n d   d o c t o r a l   l e v e l s   i n   e p i d e m i o l o g y   o r   p u b l i c   h e a l t h .   M o s t   L A C   c o u n t r i e s   r e l y   l a r g e l y   o n   e x t e r n a l   f u n d i n g   a n d   d o n o r s   t o   i n i t i a t e   a n d   s u s t a i n   l o n g - t e r m   r e s e a r c h   e f f o r t s .   D e s p i t e   t h e   l i m i t e d   r e s o u r c e s ,   t h e   c r i t i c a l   m a s s   o f   L A C   r e s e a r c h e r s   h a s   p r o d u c e d   s i g n i f i c a n t   s c i e n t i f i c   c o n t r i b u t i o n s .   F u t u r e   n e e d s   T h e   h e a l t h   r e s e a r c h   p a n o r a m a   o f   t h e   r e g i o n   s h o w s   e n o r m o u s   r e g i o n a l   d i s c r e p a n c i e s ,   b u t   g r e a t   p r o s p e c t s .   I m p r o v i n g   r e s e a r c h   a n d   h u m a n   r e s o u r c e s   c a p a c i t y   i n   t h e   r e g i o n   w i l l   r e q u i r e   e s t a b l i s h i n g   r e s e a r c h   p a r t n e r s h i p s   w i t h i n   a n d   o u t s i d e   t h e   r e g i o n ,   b e t w e e n   r i c h   a n d   p o o r   c o u n t r i e s ,   p r o m o t i n g   c o l l a b o r a t i o n s   b e t w e e n   L A C   r e s e a r c h   i n s t i t u t i o n s   a n d   u n i v e r s i t i e s   t o   b o o s t   p o s t g r a d u a t e   p r o g r a m m e s   a n d   a l i g n i n g   r e s e a r c h   i n v e s t m e n t s   a n d   o u t p u t s   w i t h   t h e   c u r r e n t   b u r d e n   o f   d i s e a s e . 	 [ B a r r e t o ,   S a n d h i   M . ]   U n i v   F e d   M i n a s   G e r a i s ,   F a c   M e d ,   B R - 3 0 1 9 0 1 0 0   B e l o   H o r i z o n t e ,   M G ,   B r a z i l ;   [ M i r a n d a ,   J a i m e   J . ]   U n i v   P e r u a n a   C a y e t a n o   H e r e d i a ,   C t r   E x c e l l e n c e   C h r o n   D i s ,   C R O N I C A S ,   L i m a ,   P e r u ;   [ M i r a n d a ,   J a i m e   J . ]   U n i v   P e r u a n a   C a y e t a n o   H e r e d i a ,   S c h   M e d ,   D e p t   M e d ,   L i m a ,   P e r u ;   [ F i g u e r o a ,   J .   P e t e r ]   U n i v   W   I n d i e s ,   K i n g s t o n   7 ,   J a m a i c a ;   [ S c h m i d t ,   M a r i a   I n e s ]   U n i v   F e d   R i o   G r a n d e   d o   S u l ,   F a c   M e d ,   B R - 9 0 0 4 6 9 0 0   P o r t o   A l e g r e ,   R S ,   B r a z i l ;   [ P a b l o   K u r i - M o r a l e s ,   P . ]   U n i v   N a c l   A u t o n o m a   M e x i c o ,   F a c   M e d ,   M e x i c o   C i t y   0 4 5 1 0 ,   D F ,   M e x i c o 	 B a r r e t o ,   S M   ( r e p r i n t   a u t h o r ) ,   U n i v   F e d   M i n a s   G e r a i s ,   F a c   M e d ,   A v   A l f r e d o   B a l e n a   1 9 0 , S l   8 1 4 ,   B R - 3 0 1 9 0 1 0 0   B e l o   H o r i z o n t e ,   M G ,   B r a z i l . 	 s b a r r e t o @ m e d i c i n a . u f m g . b r 	 B a r r e t o ,   S a n d h i   M a r i a / A - 5 1 4 0 - 2 0 1 2 ;   I a t s ,   I n c t / K - 2 3 0 0 - 2 0 1 3 ;   	 B a r r e t o ,   S a n d h i   M a r i a / 0 0 0 0 - 0 0 0 3 - 4 3 9 2 - 5 4 2 8 ;   B a r r e t o ,   S a n d h i   / 0 0 0 0 - 0 0 0 1 - 7 3 8 3 - 7 8 1 1 	 N a t i o n a l   C o u n c i l   f o r   S c i e n t i f i c   a n d   T e c h n o l o g i c a l   D e v e l o p m e n t   ( C N P q ) ,   B r a z i l   [ 0 0 9 8 / 9 5 ] ;   N a t i o n a l   H e a r t ,   L u n g   a n d   B l o o d   I n s t i t u t e ,   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   D e p a r t m e n t   o f   H e a l t h   a n d   H u m a n   S e r v i c e s   [ H H S N 2 6 8 2 0 0 9 0 0 0 3 3 C ] 	 S . M . B .   r e c e i v e s   a   r e s e a r c h   g r a n t   f r o m   N a t i o n a l   C o u n c i l   f o r   S c i e n t i f i c   a n d   T e c h n o l o g i c a l   D e v e l o p m e n t   ( C N P q ) ,   B r a z i l   ( p r o c e s s   n o .   0 0 9 8 / 9 5 ) ;   J . J . M .   i s   a f f i l i a t e d   w i t h   C R O N I C A S   C e n t e r   o f   E x c e l l e n c e   i n   C h r o n i c   D i s e a s e s   a t   U P C H   w h i c h   i s   f u n d e d   b y   t h e   N a t i o n a l   H e a r t ,   L u n g   a n d   B l o o d   I n s t i t u t e ,   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   D e p a r t m e n t   o f   H e a l t h   a n d   H u m a n   S e r v i c e s ,   u n d e r   c o n t r a c t   N o .   H H S N 2 6 8 2 0 0 9 0 0 0 3 3 C . 	 A l   S n i h   S ,   2 0 1 0 ,   A M   J   E P I D E M I O L ,   V 1 7 1 ,   P 1 2 8 2 ,   D O I   1 0 . 1 0 9 3 / a j e / k w q 0 8 7 ;   A l g e r   J ,   2 0 0 9 ,   R E V   P A N A M   S A L U D   P U B L ,   V 2 6 ,   P 4 4 7 ;   A l k i r e   S a b i n a ,   M U L T I D I M E N S I O N A L   P O V ;   A l m e i d a   C e l i a ,   2 0 0 2 ,   C a d   S a u d e   P u b l i c a ,   V 1 8 ,   P 9 0 5 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 2 - 3 1 1 X 2 0 0 2 0 0 0 4 0 0 0 0 2 ;   A n d e r s o n   G F ,   2 0 0 9 ,   N O N C O M M U N I C A B L E   C H R O ;   A u l t   S K ,   2 0 0 7 ,   M E M   I   O S W A L D O   C R U Z ,   V 1 0 2 ,   P 9 9 ,   D O I   1 0 . 1 5 9 0 / S 0 0 7 4 - 0 2 7 6 2 0 0 7 0 0 5 0 0 0 0 9 4 ;   A z e v e d o   V ,   2 0 0 9 ,   S O C I A L   M O B I L I T Y   L A T I ;   B a u t i s t a   L E ,   2 0 0 9 ,   O B E S   R E V ,   V 1 0 ,   P 3 6 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 7 8 9 X . 2 0 0 9 . 0 0 5 9 1 . x ;   B e c e r r a   F ,   2 0 1 0 ,   L A N C E T ,   V 3 7 5 ,   P 1 2 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 1 0 ) 6 0 0 4 5 - 1 ;   B e l i z a n   J M ,   2 0 0 7 ,   L A N C E T ,   V 3 7 0 ,   P 1 5 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 7 ) 6 1 6 7 3 - 0 ;   B h a l l a   K ,   2 0 1 0 ,   B   W O R L D   H E A L T H   O R G A N ,   V 8 8 ,   P 8 3 1 ,   D O I   1 0 . 2 4 7 1 / B L T . 0 9 . 0 6 8 8 0 9 ;   B i g g s   B ,   2 0 1 0 ,   S O C   S C I   M E D ,   V 7 1 ,   P 2 6 6 ,   D O I   1 0 . 1 0 1 6 / j . s o c s c i m e d . 2 0 1 0 . 0 4 . 0 0 2 ;   B r e i l h   J ,   2 0 0 8 ,   I N T   J   E P I D E M I O L ,   V 3 7 ,   P 7 4 5 ,   D O I   1 0 . 1 0 9 3 / i j e / d y n 1 3 5 ;   B r i c e n o - L e o n   R ,   2 0 0 8 ,   I N T   J   E P I D E M I O L ,   V 3 7 ,   P 7 5 1 ,   D O I   1 0 . 1 0 9 3 / i j e / d y n 1 5 3 ;   B r i c e n o - L e o n   R o b e r t o ,   2 0 0 2 ,   C U R R   S O C I O L ,   V 5 0 ,   P 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 1 3 9 2 1 0 2 0 5 0 0 0 1 0 0 3 ;   C a s a s   J A ,   2 0 0 1 ,   E Q U I T Y   H L T H   V I E W S   P A ,   P 2 2 ;   C h i c a   C ,   2 0 1 0 ,   I N T   M I C R O B I O L ,   V 1 3 ,   P 1 5 9 ,   D O I   1 0 . 2 4 3 6 / 2 0 . 1 5 0 1 . 0 1 . 1 2 1 ;   D e   M a i o   F G ,   2 0 1 1 ,   G L O B A L I Z A T I O N   H E A L T H ,   V 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 4 - 8 6 0 3 - 7 - 3 6 ;   D u j a r d i n   J C ,   2 0 1 0 ,   P L O S   N E G L E C T   T R O P   D ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p n t d . 0 0 0 0 7 8 0 ;   F a l a g a s   M E ,   2 0 0 6 ,   C A N   M E D   A S S O C   J ,   V 1 7 5 ,   P 1 3 8 9 ,   D O I   1 0 . 1 5 0 3 / c m a j . 0 6 0 3 6 1 ;   F i l o z o f   C ,   2 0 0 1 ,   O b e s   R e v ,   V 2 ,   P 9 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 6 7 - 7 8 9 x . 2 0 0 1 . 0 0 0 2 9 . x ;   F i r s t   L a t i n   A m e r i c a n   C o n f e r e n c e   o n   R e s e a r c h   a n d   I n n o v a t i o n   f o r   H e a l t h ,   2 0 0 8 ,   1   L A T   A M   C   R E S   I N N   H ,   P 1 5 ;   F o g a r t y   I n t e r n a t i o n a l   C e n t e r   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   W   H E M   R E G   I N F   G R A N T S ;   F r a n c i s c o   H F ,   2 0 0 4 ,   I N E Q U A L I T Y   L A T I N   A M ;   F r a s e r   B ,   2 0 0 5 ,   L A N C E T ,   V 3 6 6 ,   P 7 0 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 7 1 5 8 - 9 ;   F r a s e r   B ,   2 0 1 1 ,   L A N C E T ,   V 3 7 7 ,   P 5 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 1 1 ) 6 0 1 8 5 - 2 ;   F r e n k   J ,   2 0 0 6 ,   L A N C E T ,   V 3 6 8 ,   P 9 5 4 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 6 ) 6 9 3 7 6 - 8 ;   G u p t a   B .   M . ,   2 0 0 7 ,   D E S I D O C   B u l l e t i n   o f   I n f o r m a t i o n   T e c h n o l o g y ,   V 2 7 ;   H o t e z   P J ,   2 0 0 8 ,   P L O S   N E G L E C T   T R O P   D ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p n t d . 0 0 0 0 3 0 0 ;   L e s c a n o   A G ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 8 ,   P 5 7 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 4 6 8 3 7 ;   L o p e z   A D ,   2 0 0 6 ,   L A N C E T ,   V 3 6 7 ,   P 1 7 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 6 ) 6 8 7 7 0 - 9 ;   M c C a r t h y   M ,   2 0 0 4 ,   L A N C E T ,   V 3 6 3 ,   P 4 5 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 4 ) 1 5 5 2 5 - 6 ;   M i t r a   A K ,   2 0 1 0 ,   I N T   J   E N V   R E S   P U B   H E ,   V 7 ,   P 2 2 3 8 ,   D O I   1 0 . 3 3 9 0 / i j e r p h 7 0 5 2 2 3 8 ;   M o l o n e y   A n a s t a s i a ,   2 0 0 9 ,   L a n c e t ,   V 3 7 4 ,   P 1 0 5 3 ;   M o n t e n e g r o   R A ,   2 0 0 6 ,   L A N C E T ,   V 3 6 7 ,   P 1 8 5 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 6 ) 6 8 8 0 8 - 9 ;   M o r e n o - B r i d   J C ,   2 0 0 8 ,   0 7 0 8 1   D A V   R O C K   C T R   L ;   M u r r a y   C . J . L . ,   1 9 9 6 ,   G L O B A L   B U R D E N   D I S   C O ,   P 1 0 2 2 ;   N a b e l   E G ,   2 0 0 9 ,   L A N C E T ,   V 3 7 3 ,   P 2 0 0 4 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 9 ) 6 1 0 7 4 - 6 ;   N a t i o n a l   H e a r t   L u n g   a n d   B l o o d   I n s t i t u t e   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   U N   H L T H   N H L B I   C O L L   C ;   P a n   A m e r i c a n   H e a l t h   O r g a n i z a t i o n   ( P A H O ) ,   2 0 0 6 ,   H L T H   S I T   A M   B A S   I N D ;   P A H O ,   1 9 9 7 ,   R E V   P A N A M   S A L U D   P U B L ,   V 2 ,   P 3 5 7 ;   P a n   A m e r i c a n   H e a l t h   O r g a n i z a t i o n   ( P A H O ) ,   B A S   U N   D A T   M I L L   D E V ;   [ A n o n y m o u s ] ,   S I T   A N   R E G   E C   S O C   T R ;   P a n g   T ,   2 0 0 3 ,   B   W O R L D   H E A L T H   O R G A N ,   V 8 1 ,   P 8 1 5 ;   P e r e l   P . ,   2 0 0 6 ,   P L O S   M E D ,   V 3 ,   P 3 4 4 ;   P e r e l   P ,   2 0 0 6 ,   P L O S   O N E ,   V 3 ,   p e 1 6 9 6 ;   P e r r y   G E ,   2 0 0 6 ,   P O V E R T Y   R E D U C T I O N   A N D   G R O W T H :   V I R T U O U S   A N D   V I C I O U S   C I R C L E S ,   P 1 ,   D O I   1 0 . 1 5 9 6 / 9 7 8 - 0 - 8 2 1 3 - 6 5 1 1 - 3 ;   P r a m p a r o   P ,   2 0 0 6 ,   P R E V   C O N T R O L ,   V 6 ,   P 1 4 9 ;   P r o g r a m a   d e   l a s   N a c i o n e s   U n i d a s   p a r a   e l   D e s a r r o l l o ,   2 0 1 0 ,   R E G   H U M   D E V   R E P   L A T ,   P 2 0 8 ;   Q u i s t b e r g   D   A l e x ,   2 0 1 0 ,   R e v   P e r u   M e d   E x p   S a l u d   P u b l i c a ,   V 2 7 ,   P 2 4 8 ,   D O I   1 0 . 1 5 9 0 / s 1 7 2 6 - 4 6 3 4 2 0 1 0 0 0 0 2 0 0 0 1 4 ;   R a z z o u k   D ,   2 0 0 8 ,   A C T A   P S Y C H I A T   S C A N D ,   V 1 1 8 ,   P 4 9 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 4 4 7 . 2 0 0 8 . 0 1 2 4 2 . x ;   R o d r i g u e z   T ,   2 0 0 6 ,   H E A R T ,   V 9 2 ,   P 4 5 3 ,   D O I   1 0 . 1 1 3 6 / h r t . 2 0 0 4 . 0 5 9 2 9 5 ;   S a e n z   T W ,   2 0 1 0 ,   M E D I C C   R E V ,   V 1 2 ,   P 3 2 ;   S c h m i d t   M I ,   2 0 1 1 ,   L A N C E T ,   V 3 7 7 ,   P 1 9 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 1 1 ) 6 0 1 3 5 - 9 ;   S o c i a l   P a n o r a m a   o f   L a t i n   A m e r i c a ,   2 0 1 0 ,   E C L A C   A N N   R E V ;   T a j e r   D ,   2 0 0 3 ,   A M   J   P U B L I C   H E A L T H ,   V 9 3 ,   P 2 0 2 3 ,   D O I   1 0 . 2 1 0 5 / A J P H . 9 3 . 1 2 . 2 0 2 3 ;   T a p i a - C o n y e r   R ,   2 0 0 9 ,   J   C L I N   V I R O L ,   V 4 6 ,   p S 3 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 6 - 6 5 3 2 ( 0 9 ) 7 0 2 8 6 - 0 ;   T r a i c o f f   D A ,   2 0 0 8 ,   P U B L I C   H E A L T H   R E P ,   V 1 2 3 ,   P 2 8 ;   T u g w e l l   P ,   2 0 0 6 ,   B M C   P U B L I C   H E A L T H ,   V 6 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 5 8 - 6 - 1 5 1 ;   U a u y   R . ,   2 0 0 1 ,   J o u r n a l   o f   N u t r i t i o n ,   V 1 3 1 ,   P 8 9 3 ;   B a r c e n a   A ,   2 0 1 0 ,   M I L L   D E V   G O A L S   L A T   A ,   P 4 1 7 ;   U N D P ,   2 0 1 0 ,   H U M   D E V   R E P ;   U N D P ,   C A R   D E V   R E P ,   V I ;   V i c t o r a   C G ,   2 0 0 8 ,   I N T   J   E P I D E M I O L ,   V 3 7 ,   P 6 9 2 ,   D O I   1 0 . 1 0 9 3 / i j e / d y n 1 4 0 ;   V i c t o r a   C G ,   2 0 1 1 ,   L A N C E T ,   V 3 7 7 ,   P 2 0 4 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 1 1 ) 6 0 0 5 5 - X ;   V i c t o r a   C G ,   2 0 0 5 ,   R E V   P A N A M   S A L U D   P U B L ,   V 1 8 ,   P 1 9 7 ,   D O I   1 0 . 1 5 9 0 / S 1 0 2 0 - 4 9 8 9 2 0 0 5 0 0 0 8 0 0 0 0 7 ;   W a i t z k i n   H ,   2 0 0 1 ,   L A N C E T ,   V 3 5 8 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 1 ) 0 5 4 8 8 - 5 ;   W a i t z k i n   H ,   2 0 0 8 ,   I N T   J   E P I D E M I O L ,   V 3 7 ,   P 7 2 4 ,   D O I   1 0 . 1 0 9 3 / i j e / d y n 1 4 8 ;   W e l l c o m e   T r u s ,   L A T   A M   C A R ;   W h i t l o c k   G ,   2 0 0 9 ,   L A N C E T ,   V 3 7 3 ,   P 1 0 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 9 ) 6 0 3 1 8 - 4 ;   W o r l d   H e a l t h   O r g a n i z a t i o n ,   2 0 0 9 ,   G L O B   S T A T   R E P   R O A D   S ;   W o r l d   H e a l t h   O r g a n i z a t i o n ,   2 0 0 8 ,   G L O B   B U R D   D I S   2 0 0 4   U ;   [ A n o n y m o u s ] ,   2 0 1 0 ,   P O P U L A T I O N   B ,   V 6 5 	 7 3 	 5 6 	 6 4 	 0 	 1 3 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 0 3 0 0 - 5 7 7 1 	 1 4 6 4 - 3 6 8 5 	 	 I N T   J   E P I D E M I O L 	 I n t .   J .   E p i d e m i o l . 	 A P R 	 2 0 1 2 	 4 1 	 2 	 	 	 	 	 5 5 7 	 5 7 1 	 	 1 0 . 1 0 9 3 / i j e / d y s 0 1 7 	 	 1 5 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 9 2 1 T J 	 W O S : 0 0 0 3 0 2 5 0 0 2 0 0 0 3 4 	 2 2 4 0 7 8 6 0 	 
 
 J 	 P a g e l ,   P S ;   H u d e t z ,   J A 	 	 	 	 P a g e l ,   P .   S . ;   H u d e t z ,   J .   A . 	 	 	 A n   a n a l y s i s   o f   s c h o l a r l y   p r o d u c t i v i t y   i n   U n i t e d   S t a t e s   a c a d e m i c   a n a e s t h e s i o l o g i s t s   b y   c i t a t i o n   b i b l i o m e t r i c s 	 A N A E S T H E S I A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 H - I N D E X ;   P H Y S I C I A N   S C I E N T I S T S ;   K I N G D O M ;   I M P A C T ;   R A D I O L O G Y ;   J O U R N A L S ;   T I M E 	 T h e   h - i n d e x   i s   u s e d   t o   e v a l u a t e   s c h o l a r l y   p r o d u c t i v i t y   i n   a c a d e m i c   m e d i c i n e ,   b u t   h a s   n o t   b e e n   e x t e n s i v e l y   u s e d   i n   a n a e s t h e s i a .   W e   a n a l y s e d   t h e   p u b l i c a t i o n s ,   c i t a t i o n s ,   c i t a t i o n s   p e r   p u b l i c a t i o n   a n d   h - i n d e x   f r o m   1 9 9 6   t o   d a t e   u s i n g   t h e   S c o p u s   ( R )   d a t a b a s e   f o r   1 6 3 0   ( 1 1 2 0   m e n ,   5 1 0   w o m e n )   f o r   f a c u l t y   m e m b e r s   f r o m   2 4   r a n d o m l y   s e l e c t e d   U S   a c a d e m i c   a n a e s t h e s i o l o g y   d e p a r t m e n t s   T h e   m e d i a n   ( i n t e r q u a r t i l e   r a n g e   [ r a n g e ] )   h - i n d e x   o f   U S   a c a d e m i c   a n a e s t h e s i o l o g i s t s   w a s   1   [ 0 - 5   ( 0 - 4 4 ) ]   w i t h   3   [ 0 - 1 8   ( 0 - 3 9 8 ) ]   t o t a l   p u b l i c a t i o n s ,   2 4   [ 0 - 1 8 7   ( 0 - 8 5 1 5 ) ]   t o t a l   c i t a t i o n s ,   a n d   5   [ 0 - 1 4   ( 0 - 2 5 2 ) ]   c i t a t i o n s   p e r   p u b l i c a t i o n .   F a c u l t y   m e m b e r s   i n   d e p a r t m e n t s   w i t h   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   f u n d i n g   w e r e   m o r e   p r o d u c t i v e   t h a n   c o l l e a g u e s   i n   d e p a r t m e n t s   w i t h   l i t t l e   o r   n o   g o v e r n m e n t   f u n d i n g .   T h e   h - i n d e x   i n c r e a s e d   s i g n i f i c a n t l y   b e t w e e n   s u c c e s s i v e   a c a d e m i c   r a n k s   c o n c o m i t a n t   w i t h   i n c r e a s e s   i n   t h e   n u m b e r   o f   p u b l i c a t i o n s   a n d   t o t a l   c i t a t i o n s .   M e n   h a d   h i g h e r   m e d i a n   h - i n d e x   t h a n   w o m e n   c o n c o m i t a n t   w i t h   m o r e   p u b l i c a t i o n s   a n d   c i t a t i o n s ,   b u t   t h e   n u m b e r   o f   c i t a t i o n s   p e r   p u b l i c a t i o n   w a s   s i m i l a r   b e t w e e n   g r o u p s .   O u r   r e s u l t s   s u g g e s t   t h a t   h - i n d e x   i s   a   r e a s o n a b l e   i n d i c a t o r   o f   s c h o l a r l y   p r o d u c t i v i t y   i n   a n a e s t h e s i a .   T h e   r e s u l t s   m a y   h e l p   c o m p a r i s o n s   o f   a c a d e m i c   p r o d u c t i v i t y   a c r o s s   c o u n t r i e s   a n d   m a y   b e   u s e d   t o   a s s e s s   w h e t h e r   n e w   i n i t i a t i v e s   d e s i g n e d   t o   r e v e r s e   r e c e n t   d e c l i n e s   i n   a c a d e m i c   a n a e s t h e t i c   a r e   w o r k i n g . 	 [ P a g e l ,   P .   S . ;   H u d e t z ,   J .   A . ]   A n e s t h e s i a   S e r v ,   M i l w a u k e e ,   W I   5 3 2 3 4   U S A 	 P a g e l ,   P S   ( r e p r i n t   a u t h o r ) ,   A n e s t h e s i a   S e r v ,   M i l w a u k e e ,   W I   5 3 2 3 4   U S A . 	 p s p a g e l @ m c w . e d u 	 	 	 	 	 B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B o u l d   M D ,   2 0 1 1 ,   B R I T   J   A N A E S T H ,   V 1 0 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 9 3 / b j a / a e q 4 0 3 ;   C a s t i l l o   M ,   2 0 1 0 ,   A M   J   N E U R O R A D I O L ,   V 3 1 ,   P 7 8 3 ,   D O I   1 0 . 3 1 7 4 / a j n r . A 1 8 8 8 ;   D o d s o n   M V ,   2 0 0 9 ,   B I O C H E M   B I O P H   R E S   C O ,   V 3 8 7 ,   P 6 2 5 ,   D O I   1 0 . 1 0 1 6 / j . b b r c . 2 0 0 9 . 0 7 . 0 9 1 ;   F e n e c k   R O ,   2 0 0 8 ,   A N A E S T H E S I A ,   V 6 3 ,   P 2 7 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 0 8 . 0 5 4 7 5 . x ;   F u l l e r   C l i f t o n   D ,   2 0 0 9 ,   J   A m   C o l l   R a d i o l ,   V 6 ,   P 1 1 2 ,   D O I   1 0 . 1 0 1 6 / j . j a c r . 2 0 0 8 . 0 7 . 0 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J e a n g   K T ,   2 0 0 7 ,   R E T R O V I R O L O G Y ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 4 6 9 0 - 4 - 4 2 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K e l l y   C D ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 c ;   K n i g h t   P R ,   2 0 0 6 ,   A N E S T H E S I O L O G Y ,   V 1 0 4 ,   P 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 2 0 0 6 0 1 0 0 0 - 0 0 0 0 2 ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M u l l i n s   M E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 5 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 5 . 0 0 5 ;   O ' L e a r y   J D ,   2 0 1 0 ,   C A N   J   A N A E S T H ,   V 5 7 ,   P 5 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 2 6 3 0 - 0 1 0 - 9 2 9 2 - 6 ;   P a g e l   P S ,   2 0 1 1 ,   B R I T   J   A N A E S T H ,   V 1 0 7 ,   P 3 5 7 ,   D O I   1 0 . 1 0 9 3 / b j a / a e r 1 9 1 ;   P a g e l   P S ,   2 0 1 1 ,   J   C A R D I O T H O R   V A S C   A N ,   V 2 5 ,   P 7 6 1 ,   D O I   1 0 . 1 0 5 3 / j . j v c a . 2 0 1 1 . 0 3 . 0 0 3 ;   P a n d i t   J J ,   2 0 0 8 ,   A N A E S T H E S I A ,   V 6 3 ,   P 2 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 0 8 . 0 5 4 7 3 . x ;   P a n d i t   J J ,   2 0 0 7 ,   A N A E S T H E S I A ,   V 6 2 ,   P 7 4 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 0 7 . 0 5 1 5 3 . x ;   P a n d i t   J J ,   2 0 0 6 ,   A N E S T H E S I O L O G Y ,   V 1 0 5 ,   P 6 2 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 2 0 0 6 0 9 0 0 0 - 0 0 0 3 2 ;   P a n d i t   J J ,   2 0 1 0 ,   C U R R   O P I N   A N E S T H E S I O ,   V 2 3 ,   P 1 5 9 ,   D O I   1 0 . 1 0 9 7 / A C O . 0 b 0 1 3 e 3 2 8 3 3 5 d b 7 4 ;   P a n d i t   J J ,   2 0 0 6 ,   B R I T   J   A N A E S T H ,   V 9 6 ,   P 4 1 1 ,   D O I   1 0 . 1 0 9 3 / b j a / a e l 0 3 1 ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   S c h w i n n   D A ,   2 0 0 6 ,   A N E S T H E S I O L O G Y ,   V 1 0 4 ,   P 1 7 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 2 0 0 6 0 1 0 0 0 - 0 0 0 2 3 ;   S p e a r m a n   C M ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 9 2 9 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ;   S y p s a   V ,   2 0 0 9 ,   B M C   M E D   R E S   M E T H O D O L ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 9 - 3 3 ;   T h o m p s o n   D F ,   2 0 0 9 ,   A M   J   P H A R M   E D U C ,   V 7 3 ;   v a n   H a s e l e n   R ,   2 0 0 7 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 7 . 1 0 . 0 0 4 	 2 8 	 5 6 	 5 6 	 4 	 2 6 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 0 0 0 3 - 2 4 0 9 	 	 	 A N A E S T H E S I A 	 A n a e s t h e s i a 	 O C T 	 2 0 1 1 	 6 6 	 1 0 	 	 	 	 	 8 7 3 	 8 7 8 	 	 1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 1 1 . 0 6 8 6 0 . x 	 	 6 	 A n e s t h e s i o l o g y 	 A n e s t h e s i o l o g y 	 8 2 0 I P 	 W O S : 0 0 0 2 9 4 8 9 9 3 0 0 0 0 5 	 2 1 8 6 4 2 9 9 	 
 
 J 	 E s t a b r o o k s ,   C A ;   W i n t h e r ,   C ;   D e r k s e n ,   L 	 	 	 	 E s t a b r o o k s ,   C A ;   W i n t h e r ,   C ;   D e r k s e n ,   L 	 	 	 A   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   r e s e a r c h   u t i l i z a t i o n   l i t e r a t u r e   i n   n u r s i n g 	 N U R S I N G   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   n u r s i n g   r e s e a r c h ;   r e s e a r c h   u t i l i z a t i o n 	 C O M M U N I C A T I O N ;   C O L L A B O R A T I O N ;   K N O W L E D G E ;   M O D E L ;   C A R E 	 B a c k g r o u n d :   R e s e a r c h   u t i l i z a t i o n   i s   t h e   u s e   o f   r e s e a r c h   t o   g u i d e   c l i n i c a l   p r a c t i c e .   H o w e v e r ,   l i t t l e   i s   k n o w n   a b o u t   t h e   c h a r a c t e r i s t i c s   o f   t h e   r e s e a r c h   u t i l i z a t i o n   l i t e r a t u r e   i n   n u r s i n g ,   i n c l u d i n g   t h e   d e v e l o p m e n t   a n d   o r g a n i z a t i o n   o f   t h i s   f i e l d   o f   s t u d y .   T h i s   a r t i c l e   a d d r e s s e s   t h e   k n o w l e d g e   g a p   i n   t h i s   f i e l d   o f   s t u d y   b y   b i b l i o m e t r i c a l l y   a n a l y z i n g   t h e   r e s e a r c h   u t i l i z a t i o n   l i t e r a t u r e   i n   n u r s i n g .   O b j e c t i v e :   T o   m a p   r e s e a r c h   u t i l i z a t i o n   a s   a   f i e l d   o f   s t u d y   i n   n u r s i n g   u s i n g   b i b l i o m e t r i c   m e t h o d s ,   a n d   t o   i d e n t i f y   t h e   s t r u c t u r e   o f   t h i s   s c i e n t i f i c   c o m m u n i t y ,   i n c l u d i n g   t h e   c u r r e n t   n e t w o r k   o f   r e s e a r c h e r s .   M e t h o d :   A   s e a r c h   o f   e l e c t r o n i c   a n d   h a r d   c o p y   d a t a b a s e s   r e s u l t e d   i n   b i b l i o g r a p h i c   d a t a   f o r   6 3 0   a r t i c l e s   o n   r e s e a r c h   u t i l i z a t i o n   i n   n u r s i n g   p u b l i s h e d   b e t w e e n   1 9 7 2   a n d   2 0 0 1 .   B i b l i o m e t r i c   t e c h n i q u e s   u s e d   i n c l u d e d   a   s t a t i s t i c a l   a n a l y s i s   o f   p u b l i c a t i o n   c o u n t s ,   c o - w o r d   a n a l y s i s ,   a n d   c o - c i t a t i o n   a n a l y s i s .   R e s u l t s :   T h e   a n a l y s e s   s h o w e d   a   t r e n d   o f   i n c r e a s e d   p r o d u c t i v i t y   s i n c e   t h e   e a r l y   1 9 9 0 s .   M o s t   p u b l i c a t i o n s   w e r e   a u t h o r e d   b y   a   s i n g l e   a u t h o r ,   w i t h   n o   t e n d e n c y   t o w a r d   i n c r e a s e d   c o l l a b o r a t i o n   o v e r   t i m e .   M o s t   r e f e r e n c e s   c i t e d   i n   t h e   a r t i c l e s   w e r e   n u r s i n g   r e f e r e n c e s ,   i n d i c a t i n g   t h a t   t h e r e   i s   v e r y   l i t t l e   f l o w   i n t o   n u r s i n g   f r o m   o t h e r   f i e l d s .   O n l y   4 %   o f   t h e   r e f e r e n c e s   c i t e d   w e r e   a c t u a l   r e s e a r c h   a r t i c l e s   a b o u t   r e s e a r c h   u t i l i z a t i o n ,   c o n s i s t e n t   w i t h   a p p l i e d   f i e l d s   i n   w h i c h   c l i n i c i a n s   m o s t   c o m m o n l y   c i t e   o t h e r   c l i n i c i a n s .   T h e   6 3 0   a r t i c l e s   w e r e   p u b l i s h e d   i n   a   t o t a l   o f   1 9 4   d i f f e r e n t   j o u r n a l s ,   w i t h   t h e   J o u r n a l   o f   A d v a n c e d   N u r s i n g   i d e n t i f i e d   a s   a   k e y   j o u r n a l   i n   t h e   f i e l d .   C o n c l u s i o n s :   A c c o r d i n g   t o   t h e   a n a l y s i s ,   t r e m e n d o u s   g r o w t h   h a s   o c c u r r e d   i n   t h e   f i e l d   o f   r e s e a r c h   u t i l i z a t i o n .   H o w e v e r ,   t h e   l i m i t e d   a m o u n t   o f   c o l l a b o r a t i v e   r e s e a r c h   a n d   t h e   r e p e a t e d   c i t a t i o n   o f   a   f e w   r e f e r e n c e s   i n d i c a t e   t h a t   t h e   f i e l d   i s   u n d e r d e v e l o p e d .   T h e   r e s e a r c h   u t i l i z a t i o n   f i e l d   w o u l d   b e n e f i t   f r o m   m o r e   s u b s t a n t i v e   c o n c e p t u a l   a n d   e m p i r i c a l   w o r k ,   a n d   m o r e   c o l l a b o r a t i o n   a m o n g   e m e r g i n g   s c h o l a r s . 	 U n i v   A l b e r t a ,   F a c   N u r s i n g ,   E d m o n t o n ,   A B   T 6 G   2 G 3 ,   C a n a d a ;   U n i v   A l b e r t a ,   K n o w l e d g e   U t i l i z a t   S t u d i e s   P r o g r a m ,   E d m o n t o n ,   A B   T 6 G   2 M 7 ,   C a n a d a ;   U n i v   A l b e r t a ,   C t r   K n o w l e d g e   T r a n s f e r ,   E d m o n t o n ,   A B   T 6 G   2 M 7 ,   C a n a d a ;   M a l a s p i n a   U n i v   C o l l ,   D e p t   S o c i o l ,   N a n a i m o ,   B C ,   C a n a d a 	 E s t a b r o o k s ,   C A   ( r e p r i n t   a u t h o r ) ,   U n i v   A l b e r t a ,   F a c   N u r s i n g ,   3 r d   F l o o r   C l i n   S c i   B l d g ,   E d m o n t o n ,   A B   T 6 G   2 G 3 ,   C a n a d a . 	 c a r o l e . e s t a b r o o k s @ u a l b e r t a . c a 	 	 	 	 	 B a r n a r d   K .   E . ,   1 9 7 8 ,   N U R S I N G   C H I L D   A S S E S S ;   B e a l   G . M . ,   1 9 8 6 ,   K N O W L E D G E   G E N E R A T I O N ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   C o l l i n s   H M ,   1 9 8 5 ,   C H A N G I N G   O R D E R   R E P L I ;   D E V A R A J A N   G ,   1 9 9 7 ,   B I B L I O M E T R I C   S T U D I E S ;   D u f a u l t   M ,   1 9 9 5 ,   J   N u r s   S t a f f   D e v ,   V 1 1 ,   P 1 3 9 ;   E s t a b r o o k s   C   A ,   1 9 9 8 ,   C a n   J   N u r s   R e s ,   V 3 0 ,   P 1 5 ;   E s t a b r o o k s   C   A ,   1 9 9 9 ,   C a n   J   N u r s   R e s ,   V 3 1 ,   P 5 3 ;   E s t a b r o o k s   C A ,   1 9 9 9 ,   R E S   N U R S   H E A L T H ,   V 2 2 ,   P 2 0 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 8 - 2 4 0 X ( 1 9 9 9 0 6 ) 2 2 : 3 < 2 0 3 : : A I D - N U R 3 > 3 . 0 . C O ; 2 - 9 ;   E S T A B R O O K S   C A ,   2 0 0 4 ,   M U L T I D I S C I P L I N A R Y   P E ;   G a r f i e l d   E . ,   1 9 9 8 ,   M A P P I N G   W O R L D   S C I ;   G a u t h i e r   E . ,   1 9 9 8 ,   B I B L I O M E T R I C   A N A L   S C ;   G e i s l e r   E . ,   2 0 0 0 ,   M E T R I C S   S C I   T E C H N O L O ;   G l a s e r   E   M ,   1 9 6 6 ,   R e h a b i l   R e c ,   V 7 ,   P 6 ;   G o o d e   C ,   1 9 9 2 ,   J   N U R S I N G   C A R E   Q U A   S ,   P 2 7 ;   G o o d e   C J ,   1 9 9 9 ,   J   N U R S   A D M I N ,   V 2 9 ,   P 1 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 5 1 1 0 - 1 9 9 9 0 6 0 0 0 - 0 0 0 0 5 ;   G r a n t   J ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 1 1 0 7 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 4 2 . 1 1 0 7 ;   G U Y A T T   G ,   1 9 9 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 8 ,   P 2 4 2 0 ;   H o r s l e y   J   A ,   1 9 7 8 ,   J   N u r s   A d m ,   V 8 ,   P 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 5 1 1 0 - 1 9 7 8 0 7 0 0 0 - 0 0 0 0 1 ;   H o r s l e y   J .   A . ,   1 9 8 3 ,   U S I N G   R E S   I M P R O V E   N U ;   H u l m e   E .   W . ,   1 9 2 3 ,   S T A T   B I B L I O G R A P H Y   R E ;   K i n g   D ,   1 9 8 1 ,   N u r s   O u t l o o k ,   V 2 9 ,   P 1 6 4 ;   K i t s o n   A ,   1 9 9 8 ,   Q U A L   H E A L T H   C A R E ,   V 7 ,   P 1 4 9 ;   K r u e g e r   J . ,   1 9 7 8 ,   N U R S I N G   R E S   D E V   C O L L ;   K r u e g e r   J   C ,   1 9 7 7 ,   C o m m u n   N u r s   R e s ,   V 9 ,   P 3 8 1 ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   L i n d e m a n   C   A ,   1 9 7 7 ,   N u r s   O u t l o o k ,   V 2 5 ,   P 4 5 0 ;   L o g a n   J ,   1 9 9 8 ,   S C I   C O M M U N ,   V 2 0 ,   P 2 2 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 9 8 0 2 0 0 0 2 0 0 4 ;   L o o m i s   M   E ,   1 9 8 5 ,   I m a g e   J   N u r s   S c h ,   V 1 7 ,   P 3 5 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M e l i n   G ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 4 3 : : A I D - A S I 6 > 3 . 3 . C O ; 2 - I ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M e r t o n   R K ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ,   p v i i ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   O ' N e i l l   A L ,   2 0 0 0 ,   N U R S   R E S ,   V 4 9 ,   P 2 2 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 0 0 7 0 0 0 - 0 0 0 0 6 ;   O k u b o   Y . ,   1 9 9 7 ,   B I B L I O M E T R I C   I N D I C A T ;   P A I S L E Y   W ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 7 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 1 0 ;   P a r d o   C ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 5 ,   P 9 3 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 9 3 1 . x ;   P I E R C E   S J ,   1 9 8 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 9 ,   P 1 4 3 ;   P o t t e r   W . G . ,   1 9 8 8 ,   J   A C A D   L I B R ,   V 1 4 ,   p 2 3 8 a ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R o g e r s   E . M . ,   1 9 9 5 ,   D I F F U S I O N   I N N O V A T I O N ;   R o s s w u r m   M   A ,   1 9 9 9 ,   I m a g e   J   N u r s   S c h ,   V 3 1 ,   P 3 1 7 ;   S h o r e   H   L ,   1 9 7 2 ,   C a n   N u r s e ,   V 6 8 ,   P 3 6 ;   S T E T L E R   C B ,   1 9 9 4 ,   N U R S   O U T L O O K ,   V 4 2 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 9 - 6 5 5 4 ( 9 4 ) 9 0 0 6 7 - 1 ;   T I T L E R   M G ,   1 9 9 4 ,   N U R S   R E S ,   V 4 3 ,   P 3 0 7 ;   T r a y n o r   M ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 4 ,   P 2 1 2 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 7 . x ;   T r a y n o r   M . ,   2 0 0 0 ,   H E A L T H ,   V 4 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 1 3 6 3 4 5 9 3 0 0 0 0 4 0 0 2 0 2 	 5 1 	 5 6 	 5 7 	 2 	 3 0 	 L I P P I N C O T T   W I L L I A M S   &   W I L K I N S 	 P H I L A D E L P H I A 	 5 3 0   W A L N U T   S T ,   P H I L A D E L P H I A ,   P A   1 9 1 0 6 - 3 6 2 1   U S A 	 0 0 2 9 - 6 5 6 2 	 	 	 N U R S   R E S 	 N u r s .   R e s . 	 S E P - O C T 	 2 0 0 4 	 5 3 	 5 	 	 	 	 	 2 9 3 	 3 0 3 	 	 1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 4 0 9 0 0 0 - 0 0 0 0 3 	 	 1 1 	 N u r s i n g 	 N u r s i n g 	 8 5 8 H T 	 W O S : 0 0 0 2 2 4 1 8 3 6 0 0 0 0 2 	 1 5 3 8 5 8 6 5 	 
 
 J 	 T h e l w a l l ,   M ;   T a n g ,   R ;   P r i c e ,   L 	 	 	 	 T h e l w a l l ,   M ;   T a n g ,   R ;   P r i c e ,   L 	 	 	 L i n g u i s t i c   p a t t e r n s   o f   a c a d e m i c   W e b   u s e   i n   W e s t e r n   E u r o p e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 B I B L I O M E T R I C S ;   W E B O M E T R I C S ;   I N F O R M A T I O N 	 A   s u r v e y   o f   l i n g u i s t i c   d i m e n s i o n s   o f   W e b   s i t e   h o s t i n g   a n d   i n t e r l i n k i n g   o f   t h e   u n i v e r s i t i e s   o f   s i x t e e n   E u r o p e a n   c o u n t r i e s   i s   d e s c r i b e d .   T h e   r e s u l t s   s h o w   t h a t   E n g l i s h   i s   t h e   d o m i n a n t   l a n g u a g e   b o t h   f o r   l i n k i n g   p a g e s   a n d   f o r   a l l   p a g e s .   I n   a   t y p i c a l   c o u n t r y   a p p r o x i m a t e l y   h a l f   t h e   p a g e s   w e r e   i n   E n g l i s h   a n d   h a l f   i n   o n e   o r   m o r e   n a t i o n a l   l a n g u a g e s .   N o r m a l i s e d   i n t e r l i n k i n g   p a t t e r n s   s h o w e d   t h r e e   t r e n d s :   1 )   i n t e r n a t i o n a l   i n t e r l i n k i n g   t h r o u g h o u t   E u r o p e   i n   E n g l i s h ,   a n d   a d d i t i o n a l l y   i n   S w e d i s h   i n   S c a n d i n a v i a ;   2 )   l i n k i n g   b e t w e e n   c o u n t r i e s   s h a r i n g   a   c o m m o n   l a n g u a g e ,   a n d   3 )   c o u n t r i e s   e x t e n s i v e l y   h o s t i n g   i n t e r n a t i o n a l   l i n k s   i n   t h e i r   o w n   m a j o r   l a n g u a g e s .   T h i s   p r o v i d e s   e v i d e n c e   f o r   t h e   m u l t i l i n g u a l   c h a r a c t e r   o f   a c a d e m i c   u s e   o f   t h e   W e b   i n   W e s t e r n   E u r o p e ,   a t   l e a s t   o u t s i d e   t h e   U K   a n d   E i r e .   E v i d e n c e   w a s   f o u n d   t h a t   G r e e c e   w a s   s i g n i f i c a n t l y   l i n g u i s t i c a l l y   i s o l a t e d   f r o m   t h e   r e s t   o f   t h e   E U   b u t   t h a t   o u t s i d e r s   N o r w a y   a n d   S w i t z e r l a n d   w e r e   n o t . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 4   4 S T ,   W   M i d l a n d s ,   E n g l a n d ;   S U N Y   A l b a n y ,   S c h   I n f o r m a t   S c i   &   P o l i c y ,   A l b a n y ,   N Y   1 2 2 2 2   U S A 	 T h e l w a l l ,   M   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 4   4 S T ,   W   M i d l a n d s ,   E n g l a n d . 	 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B a r - I l a n   J . ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 / 3 ,   P 1 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   * C O R D I S ,   2 0 0 2 ,   M I N   G U I D   5   F R A M   P R O G ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r y s t a l   D . ,   1 9 9 7 ,   E N G L I S H   G L O B A L   L A N G U ;   C R Y S T A L   D ,   2 0 0 1 ,   L A N G A U G E   I N T E R N E T ;   D a v e n p o r t   E ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 5 1 7 ;   * E S P R I T ,   2 0 0 2 ,   N O N   E U   P A R T   E S P R I T ;   * E U R O P A ,   2 0 0 1 ,   E U R   C O M M   R E S   5   F R A M ;   * E U R O P A ,   2 0 0 2 ,   M E M B   S T A T   E U R   U N ;   * E U R O P A ,   2 0 0 2 ,   6   F R A M   P R O G R   2 0 0 2   2 0 ;   F l o w e r d e w   J . ,   2 0 0 1 ,   R E S   P E R S P E C T I V E S   E N G ;   G a r f i e l d   E . ,   1 9 6 7 ,   C U R R E N T   C O N T E N T   1 2 2 6 ,   P 1 9 ;   G A R R I D O   M ,   2 0 0 2 ,   C Y B E R A C T I V I S M   C R I T I C ;   H o f f m a n n   C . ,   2 0 0 0 ,   E N G L I S H   E U R O P E   A C Q U I ,   P 1 ;   J e n k i n s   J ,   2 0 0 2 ,   A P P L   L I N G U I S T ,   V 2 3 ,   P 8 3 ,   D O I   1 0 . 1 0 9 3 / a p p l i n / 2 3 . 1 . 8 3 ;   J i m e n e z - C o n t r e r a s   E ,   2 0 0 2 ,   N A T U R E ,   V 4 1 7 ,   P 8 9 8 ,   D O I   1 0 . 1 0 3 8 / 4 1 7 8 9 8 b ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   L a w r e n c e   S ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 3 8 / 2 1 9 8 7 ;   M o e d   H F ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 1 2 8 1 0 6 0 2 ;   P a r k   H W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 5 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 2 ;   P E N N Y C O O K   A ,   1 9 9 6 ,   C U L T U R A L   P O L I T I C S   E N ;   P o l a n c o   X . ,   2 0 0 1 ,   C L U S T E R I N G   M A P P I N G   W ;   R a s h   F ,   2 0 0 2 ,   J   M U L T I L I N G   M U L T I C U L ,   V 2 3 ,   P 1 1 2 ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S c h u r r   J ,   2 0 0 1 ,   I E E E   T   I N S T R U M   M E A S ,   V 5 0 ,   P 2 1 4 ,   D O I   1 0 . 1 1 0 9 / 1 9 . 9 1 8 1 0 5 ;   S k u t n a b - K a n g a s   T . ,   2 0 0 0 ,   L I N G U I S T I C   G E N O C I D E ;   S m i t h   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 0 4 1 5 8 2 2 ;   S V A V A R S S O N   M ,   2 0 0 2 ,   I N D E X   M A G N U S   M H O N A R C ;   T h e l w a l l   M ,   2 0 0 2 ,   I N T E R N E T   R E S ,   V 1 2 ,   P 1 2 4 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 2 1 0 4 2 2 5 0 3 ;   T h e l w a l l   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 6 0 2 1 0 8 0 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 5 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 9 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 1 4 2 3 3 8 3 3 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T h e l w a l l   M . ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 3 5 ;   T H E L W A L L   M ,   2 0 0 2 ,   D I S C I P L I N A R Y   L I N G U I S ;   T H E L W A L L   M ,   2 0 0 1 ,   C Y B E R M E T R I C S ,   V 5 ;   T r e f f e r s - D a l l e r   J . ,   2 0 0 2 ,   J   M U L T I L I N G   M U L T I C U L ,   V 2 3 ,   P 5 0 ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   V A U G H A N   L ,   2 0 0 3 ,   I N   P R E S S   J   A M   S O C   I N ;   V A U G H A N   L ,   2 0 0 2 ,   I N   P R E S S   A S L I B   P ;   W i l k i n s o n   D . ,   2 0 0 3 ,   J   I N F O R M A T I O N   S C I ,   V 2 9 ,   P 5 9 ;   W i l l e m y n s   R o l a n d ,   2 0 0 2 ,   J   M U L T I L I N G   M U L T I C U L ,   V 2 3 ,   P 3 6 ;   * W O R L D A T L A S   C O M ,   2 0 0 2 ,   W O R L D   A T L   S W I T Z   E U R ;   Z i t t   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 6 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 3 2 3 1 9 7 9 9 	 4 8 	 5 6 	 5 7 	 2 	 2 1 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 3 	 5 6 	 3 	 	 	 	 	 4 1 7 	 4 3 2 	 	 1 0 . 1 0 2 3 / A : 1 0 2 2 3 8 7 1 0 5 9 0 4 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 4 6 A P 	 W O S : 0 0 0 1 8 1 0 1 2 9 0 0 0 1 0 	 	 
 
 J 	 M e l a ,   G S ;   C i m m i n o ,   M A ;   U g o l i n i ,   D 	 	 	 	 M e l a ,   G S ;   C i m m i n o ,   M A ;   U g o l i n i ,   D 	 	 	 I m p a c t   a s s e s s m e n t   o f   o n c o l o g y   r e s e a r c h   i n   t h e   E u r o p e a n   U n i o n 	 E U R O P E A N   J O U R N A L   O F   C A N C E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n e o p l a s m s ;   b i b l i o m e t r i c s ;   E u r o p e 	 C I T A T I O N   A N A L Y S I S ;   S C I E N T I F I C   P U B L I C A T I O N S ;   B I B L I O M E T R I C   A N A L Y S I S ;   S C I E N C E ;   P E R I O D 	 I n   t h i s   s t u d y   t h e   d i s t r i b u t i o n   o f   p a p e r s   p u b l i s h e d   b y   a u t h o r s   f r o m   t h e   E u r o p e a n   U n i o n   ( E U )   i n   o n c o l o g i c a l   j o u r n a l s   w a s   a n a l y s e d ,   a s   w a s   t h e   i m p a c t   o f   o n c o l o g i c a l   r e s e a r c h   i n   t h e   E U   c o m p a r e d   w i t h   t h a t   p r o d u c e d   i n   o t h e r   c o u n t r i e s .   P a p e r s   p u b l i s h e d   d u r i n g   1 9 9 5   i n   t h e   o n c o l o g i c a l   j o u r n a l s   l i s t e d   b y   I S I   ( I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ,   P h i l a d e l p h i a ,   U . S . A . )   w e r e   d o w n l o a d e d .   T h e   p a r a m e t e r s   o f   i m p a c t   f a c t o r   ( I F ) ,   s o u r c e   c o u n t r y   p o p u l a t i o n   a n d   g r o s s   d o m e s t i c   p r o d u c t   ( G D P )   w e r e   c o n s i d e r e d .   A n   a n a l y s i s   o f   t h e   k e y   w o r d s ,   b o t h   t h o s e   r e p o r t e d   b y   t h e   a u t h o r s   a n d   t h o s e   a t t r i b u t e d   b y   I S I ,   w a s   c a r r i e d   o u t   u s i n g   a   s p e c i a l   p u r p o s e   p r o g r a m .   3 6 . 5 %   o f   p a p e r s   p u b l i s h e d   i n   o n c o l o g i c a l   j o u r n a l s   c o m e   f r o m   t h e   E U   ( t h e   U . K . ,   I t a l y ,   G e r m a n y   a n d   F r a n c e   r a n k i n g   a t   t h e   t o p )   a n d   4 0 . 7 %   f r o m   t h e   U . S . A .   T h e   m e a n   I F   w a s   2 . 4   f o r   E U   p a p e r s ,   3 . 3   f o r   t h e   U S   a n d   2 . 4   f o r   o t h e r   c o u n t r i e s .   O u r   d a t a   c o n f i r m   t h a t   s m a l l e r   c o u n t r i e s   p e r f o r m e d   b e t t e r   t h a n   l a r g e r   o n e s .   T h e   k e y   w o r d s   a n a l y s i s   s h o w s   t h a t   t h e   l e a d i n g   f i e l d s   o f   r e s e a r c h   w e r e   b r e a s t   c a n c e r   f o r   d i s e a s e s ,   c i s p l a t i n   f o r   d r u g s   a n d   p 5 3   f o r   e x p e r i m e n t a l   s t u d i e s .   A   s t a n d a r d i s a t i o n   o f   k e y   w o r d s   o n   b e h a l f   o f   j o u r n a l   e d i t o r s   i s   p r o p o s e d . ,   ( C )   1 9 9 9   E l s e v i e r   S c i e n c e   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   G e n o a ,   D i p a r t i m e n t o   O n c o l   C l i n   &   S p e r i m e n t a l e ,   C t r   D o c u m e n t a z ,   I - 1 6 1 3 2   G e n o a ,   I t a l y ;   U n i v   G e n o a ,   D i p a r t i m e n t o   M e d   I n t e r n a   &   S p e c i a l i t a   M e d ,   G e n o a ,   I t a l y 	 U g o l i n i ,   D   ( r e p r i n t   a u t h o r ) ,   U n i v   G e n o a ,   D i p a r t i m e n t o   O n c o l   C l i n   &   S p e r i m e n t a l e ,   C t r   D o c u m e n t a z ,   L a r g o   R   B e n z i   1 0 ,   I - 1 6 1 3 2   G e n o a ,   I t a l y . 	 	 M e l a ,   G i u s e p p e / F - 6 0 7 2 - 2 0 1 0 	 	 	 	 A d a m s   J ,   1 9 9 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 3 ,   P 1 2 6 6 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 3 . 2 3 . 1 2 6 6 4 ;   A N D E R S O N   A ,   1 9 9 2 ,   S C I E N C E ,   V 2 5 6 ,   P 4 7 2 ;   B E N Z E R   A ,   1 9 9 3 ,   L A N C E T ,   V 3 4 1 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 3 ) 9 0 1 1 6 - X ;   D A V I S   R A ,   1 9 9 0 ,   N E U R O S U R G E R Y ,   V 2 6 ,   P 3 4 5 ;   E L D O R   J ,   1 9 9 3 ,   L A N C E T ,   V 3 4 1 ,   P 6 3 4 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 3 ) 9 0 3 9 6 - X ;   E l l   C ,   1 9 9 7 ,   Z   G A S T R O E N T E R O L ,   V 3 5 ,   P 2 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   H a n s e n   H B ,   1 9 9 6 ,   C L I N   P H Y S I O L ,   V 1 6 ,   P 5 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 0 9 7 X . 1 9 9 6 . t b 0 1 0 1 6 . x ;   H A U S E N   A ,   1 9 9 3 ,   L A N C E T ,   V 3 4 1 ,   P 6 3 4 ;   * I   S C I   I N F ,   1 9 9 6 ,   9 6   S C I   S C I   C I T   I N D   1 ;   K l a i c   Z B ,   1 9 9 7 ,   C O L L E G I U M   A N T R O P O L ,   V 2 1 ,   P 3 0 1 ;   L U U K K O N E N   T ,   1 9 9 0 ,   A N N   M E D ,   V 2 2 ,   P 1 4 5 ,   D O I   1 0 . 3 1 0 9 / 0 7 8 5 3 8 9 9 0 0 9 1 4 7 2 5 9 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M e l a   G S ,   1 9 9 8 ,   A N N   R H E U M   D I S ,   V 5 7 ,   P 6 4 3 ,   D O I   1 0 . 1 1 3 6 / a r d . 5 7 . 1 1 . 6 4 3 ;   P a r k i n   D . M . ,   1 9 9 7 ,   I A R C   S C I   P U B L I C A T I O N ,   V V I I ;   P A R O D I   S ,   1 9 9 3 ,   T U M O R I ,   V 7 9 ,   P 9 ;   R E E D   K L ,   1 9 9 5 ,   B   M E D   L I B R   A S S O C ,   V 8 3 ,   P 5 0 3 ;   S c h e n a   F P ,   1 9 9 6 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 1 ,   P 2 3 5 9 ;   S c h o o n b a e r t   D ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 7 3 9 ;   S T A A B   M A ,   1 9 9 3 ,   L A N C E T ,   V 3 4 1 ,   P 6 3 4 	 2 0 	 5 6 	 5 7 	 0 	 6 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 9 5 9 - 8 0 4 9 	 	 	 E U R   J   C A N C E R 	 E u r .   J .   C a n c e r 	 A U G 	 1 9 9 9 	 3 5 	 8 	 	 	 	 	 1 1 8 2 	 1 1 8 6 	 	 1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 9 9 ) 0 0 1 0 7 - 0 	 	 5 	 O n c o l o g y 	 O n c o l o g y 	 2 2 8 U F 	 W O S : 0 0 0 0 8 2 1 5 3 5 0 0 0 1 5 	 1 0 6 1 5 2 2 7 	 
 
 J 	 L i ,   J F ;   W a n g ,   M H ;   H o ,   Y S 	 	 	 	 L i ,   J i n f e n g ;   W a n g ,   M i n g - H u a n g ;   H o ,   Y u h - S h a n 	 	 	 T r e n d s   i n   r e s e a r c h   o n   g l o b a l   c l i m a t e   c h a n g e :   A   S c i e n c e   C i t a t i o n   I n d e x   E x p a n d e d - b a s e d   a n a l y s i s 	 G L O B A L   A N D   P L A N E T A R Y   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 w o r d   c l u s t e r   a n a l y s i s ;   b i b l i o m e t r i c s ;   c l i m a t e   c h a n g e ;   r e s e a r c h   t r e n d ;   m o d e l 	 S P A C E - T I M E   C L I M A T E ;   S E A - L E V E L   R I S E ;   B I B L I O M E T R I C   A N A L Y S I S ;   I C E - C O R E ;   P R E C I P I T A T I O N ;   T E M P E R A T U R E ;   A D A P T A T I O N ;   R E S P O N S E S ;   S Y S T E M ;   M O D E L 	 T h i s   s t u d y   w a s   c o n c e i v e d   t o   e v a l u a t e   t h e   g l o b a l   s c i e n t i f i c   o u t p u t   o f   c l i m a t e   c h a n g e   r e s e a r c h   o v e r   t h e   p a s t   1 8   y e a r s   a n d   t o   a s s e s s   t h e   c h a r a c t e r i s t i c s   o f   t h e   r e s e a r c h   p a t t e r n s ,   t e n d e n c i e s ,   a n d   m e t h o d s   i n   t h e   p a p e r s .   D a t a   w e r e   b a s e d   o n   t h e   o n l i n e   v e r s i o n   o f   S c i e n c e   C i t a t i o n   I n d e x   E x p a n d e d   f r o m   1 9 9 2   t o   2 0 0 9 .   A r t i c l e s   r e f e r r i n g   t o   c l i m a t e   c h a n g e   w e r e   a s s e s s e d   b y   d i s t r i b u t i o n   o f   s o u r c e   c o u n t r i e s ,   s o u r c e   i n s t i t u t e s ,   p a p e r   t i t l e s ,   a u t h o r   k e y w o r d s ,   K e y W o r d s   P l u s ,   a b s t r a c t s ,   a n d   t h e   m o s t   c i t e d   a r t i c l e s   i n   t h e s e   y e a r s .   B y   s y n t h e t i c   a n a l y s i s   o f   t h e   f o u r   k i n d s   o f   k e y w o r d s ,   i t   w a s   c o n c l u d e d   t h a t   t h e   i t e m s   " t e m p e r a t u r e " ,   " e n v i r o n m e n t " ,   " p r e c i p i t a t i o n " ,   " g r e e n h o u s e   g a s " ,   " r i s k " ,   a n d   " b i o d i v e r s i t y "   w i l l   b e   t h e   f o c i   o f   c l i m a t e   c h a n g e   r e s e a r c h   i n   t h e   2 1 s t   c e n t u r y ,   w h i l e   " m o d e l " ,   " m o n i t o r i n g " ,   a n d   " r e m o t e   s e n s i n g "   w i l l   c o n t i n u e   t o   b e   t h e   l e a d i n g   r e s e a r c h   m e t h o d s .   A   n o v e l   m e t h o d ,   " p h y l o g e o g r a p h y " ,   m a y   h a v e   a   s t r o n g   a p p l i c a t i o n   p o t e n t i a l   i n   t h e   n e a r   f u t u r e .   ( C )   2 0 1 1   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ H o ,   Y u h - S h a n ]   A s i a   U n i v ,   T r e n d   R e s   C t r ,   T a i c h u n g   4 1 3 5 4 ,   T a i w a n ;   [ L i ,   J i n f e n g ;   W a n g ,   M i n g - H u a n g ]   P e k i n g   U n i v ,   D e p t   E n v i r o n m   S c i ,   C o l l   E n v i r o n m   S c i   &   E n g n ,   B e i j i n g   1 0 0 8 7 1 ,   P e o p l e s   R   C h i n a ;   [ H o ,   Y u h - S h a n ]   M i n i s t   E d u c ,   K e y   L a b   W a t e r   &   S e d i m e n t   S c i ,   B e i j i n g   1 0 0 8 7 1 ,   P e o p l e s   R   C h i n a 	 H o ,   Y S   ( r e p r i n t   a u t h o r ) ,   A s i a   U n i v ,   T r e n d   R e s   C t r ,   T a i c h u n g   4 1 3 5 4 ,   T a i w a n . 	 y s h o @ a s i a . e d u . t w 	 L i ,   J i n f e n g / D - 3 2 2 5 - 2 0 1 1 ;   W a n g ,   M i n g - H u a n g / F - 5 4 4 5 - 2 0 1 2 ;   H o ,   Y u h - S h a n / C - 8 6 2 4 - 2 0 0 9 	 L i ,   J i n f e n g / 0 0 0 0 - 0 0 0 2 - 6 6 2 4 - 0 3 2 8 ;   	 	 	 A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A u g u s t i n   L ,   2 0 0 4 ,   N A T U R E ,   V 4 2 9 ,   P 6 2 3 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 2 5 9 9 ;   A V I S E   J C ,   1 9 8 7 ,   A N N U   R E V   E C O L   S Y S T ,   V 1 8 ,   P 4 8 9 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . e c o l s y s . 1 8 . 1 . 4 8 9 ;   B a r o n   J ,   2 0 0 6 ,   C L I M A T I C   C H A N G E ,   V 7 7 ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 8 4 - 0 0 6 - 9 0 4 9 - y ;   B i e r m a n n   F ,   2 0 0 7 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 7 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 6 . 1 1 . 0 1 0 ;   B o h r i n g e r   C ,   2 0 0 3 ,   O X F O R D   R E V   E C O N   P O L ,   V 1 9 ,   P 4 5 1 ,   D O I   1 0 . 1 0 9 3 / o x r e p / 1 9 . 3 . 4 5 1 ;   B R A U N   T ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 2 ;   B r i o n e s   M J I ,   1 9 9 7 ,   A P P L   S O I L   E C O L ,   V 6 ,   P 1 1 7 ;   B r o h a n   P ,   2 0 0 6 ,   J   G E O P H Y S   R E S - A T M O S ,   V 1 1 1 ,   D O I   1 0 . 1 0 2 9 / 2 0 0 5 J D 0 0 6 5 4 8 ;   C h a l l i n o r   A J ,   2 0 0 7 ,   A G R   E C O S Y S T   E N V I R O N ,   V 1 1 9 ,   P 1 9 0 ,   D O I   1 0 . 1 0 1 6 / j . a g e e . 2 0 0 6 . 0 7 . 0 0 9 ;   C h i u   W T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 1 5 2 3 - 1 ;   C h r i s t y   J R ,   2 0 0 7 ,   J   G E O P H Y S   R E S - A T M O S ,   V 1 1 2 ,   D O I   1 0 . 1 0 2 9 / 2 0 0 5 J D 0 0 6 8 8 1 ;   C h u a n g   K Y ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 0 1 ,   D O I   [ 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 1 - 0 ,   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 3 - 0 ] ;   C l a r k e   G ,   2 0 0 5 ,   A Q U A T   S C I ,   V 6 7 ,   P 2 2 4 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 2 7 - 0 0 4 - 0 7 4 5 - 2 ;   C o l l i n s   W D ,   2 0 0 6 ,   J   C L I M A T E ,   V 1 9 ,   P 2 1 2 2 ,   D O I   1 0 . 1 1 7 5 / J C L I 3 7 6 1 . 1 ;   C O L M A N   A M ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 2 ,   P 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 8 8 ;   C o s t e l l o   A ,   2 0 0 9 ,   L A N C E T ,   V 3 7 3 ,   P 1 6 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 9 ) 6 0 9 3 5 - 1 ;   C o x   P M ,   2 0 0 0 ,   N A T U R E ,   V 4 0 8 ,   P 1 8 4 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 4 1 5 3 9 ;   C r o w l e y   T J ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 9 ,   P 2 7 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 9 . 5 4 7 7 . 2 7 0 ;   C r u t z e n   P J ,   2 0 0 6 ,   C L I M A T I C   C H A N G E ,   V 7 7 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 8 4 - 0 0 6 - 9 1 0 1 - y ;   D A N S G A A R D   W ,   1 9 9 3 ,   N A T U R E ,   V 3 6 4 ,   P 2 1 8 ,   D O I   1 0 . 1 0 3 8 / 3 6 4 2 1 8 a 0 ;   D A N S G A A R D   W ,   1 9 6 4 ,   T E L L U S ,   V 1 6 ,   P 4 3 6 ;   D e s s a i   S ,   2 0 0 7 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 7 ,   P 5 9 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 6 . 1 1 . 0 0 5 ;   F a r g i o n e   J ,   2 0 0 8 ,   S C I E N C E ,   V 3 1 9 ,   P 1 2 3 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 2 7 4 7 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R   C O N T E N T S ,   V 3 2 ,   P 5 ;   H a n s e n   J . ,   2 0 0 8 ,   O p e n   A t m o s p h e r e   S c i e n c e   J o u r n a l ,   V 2 ,   P 2 1 7 ,   D O I   1 0 . 2 1 7 4 / 1 8 7 4 2 8 2 3 0 0 8 0 2 0 1 0 2 1 7 ;   H a r t e   J . ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 6 9 9 5 ;   H e i m a n n   M ,   2 0 0 5 ,   N A T U R E ,   V 4 3 7 ,   P 3 3 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 7 3 3 1 a ;   H e p b u r n   C ,   2 0 0 7 ,   A N N U   R E V   E N V   R E S O U R ,   V 3 2 ,   P 3 7 5 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . e n e r g y . 3 2 . 0 5 3 0 0 6 . 1 4 1 2 0 3 ;   H o   Y S ,   2 0 0 8 ,   I N T   J   E N V I R O N   P O L L U T ,   V 3 4 ,   P 1 ,   D O I   1 0 . 1 5 0 4 / I J E P . 2 0 0 8 . 0 2 0 7 7 8 ;   H O E G H G U L D B E R G ,   1 9 9 9 ,   M A R   F R E S H W A T E R   R E S ,   V 5 0 ,   P 8 3 9 ;   v a n   d e r   L i n d e n   P .   J . ,   2 0 0 1 ,   C L I M A T E   C H A N G E   2 0 0 1 ;   H U L M E   M ,   1 9 9 2 ,   C L I M   D Y N A M ,   V 7 ,   P 5 7 ;   H u l m e   M ,   2 0 0 8 ,   G E O G R   J ,   V 1 7 4 ,   P 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 4 9 5 9 . 2 0 0 8 . 0 0 2 6 6 . x ;   J a c o b   D J ,   2 0 0 9 ,   A T M O S   E N V I R O N ,   V 4 3 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / j . a t m o s e n v . 2 0 0 8 . 0 9 . 0 5 1 ;   J o h n s e n   S J ,   2 0 0 1 ,   J   Q U A T E R N A R Y   S C I ,   V 1 6 ,   P 2 9 9 ,   D O I   1 0 . 1 0 0 2 / j q s . 6 2 2 ;   J o n e s   P D ,   1 9 9 9 ,   R E V   G E O P H Y S ,   V 3 7 ,   P 1 7 3 ,   D O I   1 0 . 1 0 2 9 / 1 9 9 9 R G 9 0 0 0 0 2 ;   J o u z e l   J ,   1 9 9 7 ,   J   G E O P H Y S   R E S - O C E A N S ,   V 1 0 2 ,   P 2 6 4 7 1 ,   D O I   1 0 . 1 0 2 9 / 9 7 J C 0 1 2 8 3 ;   K a l n a y   E ,   1 9 9 6 ,   B   A M   M E T E O R O L   S O C ,   V 7 7 ,   P 4 3 7 ,   D O I   1 0 . 1 1 7 5 / 1 5 2 0 - 0 4 7 7 ( 1 9 9 6 ) 0 7 7 < 0 4 3 7 : T N Y R P > 2 . 0 . C O ; 2 ;   K e l l y   M ,   1 9 9 7 ,   N A T U R E ,   V 3 8 8 ,   P 8 3 6 ,   D O I   1 0 . 1 0 3 8 / 4 2 1 5 6 ;   L a n g d o n   P G ,   2 0 0 4 ,   J   P A L E O L I M N O L ,   V 3 2 ,   P 1 9 7 ,   D O I   1 0 . 1 0 2 3 / B : J O P L . 0 0 0 0 0 2 9 4 3 3 . 8 5 7 6 4 . a 5 ;   L e v i t u s   S ,   2 0 0 1 ,   S C I E N C E ,   V 2 9 2 ,   P 2 6 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 5 8 1 5 4 ;   L i   J F ,   2 0 0 9 ,   C R O A T   C H E M   A C T A ,   V 8 2 ,   P 6 9 5 ;   L i   L L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 9 3 9 - 5 ;   L i   Z ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 9 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 3 8 - 1 ;   L i u   S C ,   2 0 0 9 ,   G E O P H Y S   R E S   L E T T ,   V 3 6 ,   D O I   1 0 . 1 0 2 9 / 2 0 0 9 G L 0 4 0 2 1 8 ;   L o b e l l   D B ,   2 0 0 8 ,   S C I E N C E ,   V 3 1 9 ,   P 6 0 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 2 3 3 9 ;   L o c k y e r   W J S ,   1 9 1 0 ,   N A T U R E ,   V 8 4 ,   P 1 7 8 ,   D O I   1 0 . 1 0 3 8 / 0 8 4 1 7 8 a 0 ;   L o e h l e   C ,   1 9 9 6 ,   E C O L   M O D E L ,   V 9 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 8 0 0 ( 9 6 ) 8 3 7 0 9 - 4 ;   M a l a r v i z h i   R . ,   2 0 1 0 ,   W o r l d   A p p l i e d   S c i e n c e s   J o u r n a l ,   V 8 ,   P 9 3 0 ;   M a n n   M E ,   1 9 9 9 ,   G E O P H Y S   R E S   L E T T ,   V 2 6 ,   P 7 5 9 ,   D O I   1 0 . 1 0 2 9 / 1 9 9 9 G L 9 0 0 0 7 0 ;   M a o   N ,   2 0 1 0 ,   H U M   E C O L   R I S K   A S S E S S ,   V 1 6 ,   P 8 0 1 ,   D O I   1 0 . 1 0 8 0 / 1 0 8 0 7 0 3 9 . 2 0 1 0 . 5 0 1 2 4 8 ;   M a r r i n e r   N ,   2 0 1 0 ,   G L O B A L   P L A N E T   C H A N G E ,   V 7 4 ,   P 4 3 ,   D O I   1 0 . 1 0 1 6 / j . g l o p l a c h a . 2 0 1 0 . 0 7 . 0 0 5 ;   M o r t o n   O ,   2 0 0 7 ,   N A T U R E ,   V 4 4 7 ,   P 1 3 2 ,   D O I   1 0 . 1 0 3 8 / 4 4 7 1 3 2 a ;   N e w   M ,   1 9 9 9 ,   J   C L I M A T E ,   V 1 2 ,   P 8 2 9 ,   D O I   1 0 . 1 1 7 5 / 1 5 2 0 - 0 4 4 2 ( 1 9 9 9 ) 0 1 2 < 0 8 2 9 : R T C S T C > 2 . 0 . C O ; 2 ;   N e w   M ,   2 0 0 0 ,   J   C L I M A T E ,   V 1 3 ,   P 2 2 1 7 ,   D O I   1 0 . 1 1 7 5 / 1 5 2 0 - 0 4 4 2 ( 2 0 0 0 ) 0 1 3 < 2 2 1 7 : R T C S T C > 2 . 0 . C O ; 2 ;   N o l t e   C G ,   2 0 0 8 ,   J   G E O P H Y S   R E S - A T M O S ,   V 1 1 3 ,   D O I   1 0 . 1 0 2 9 / 2 0 0 7 J D 0 0 8 4 9 7 ;   P a c h a u r i   R K ,   2 0 0 7 ,   C L I M A T E   C H A N G E   2 0 0 7 ;   P a r m e s a n   C ,   2 0 0 3 ,   N A T U R E ,   V 4 2 1 ,   P 3 7 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 1 2 8 6 ;   P l a t n i c k   S ,   2 0 0 3 ,   I E E E   T   G E O S C I   R E M O T E ,   V 4 1 ,   P 4 5 9 ,   D O I   1 0 . 1 1 0 9 / T G R S . 2 0 0 2 . 8 0 8 3 0 1 ;   Q i n   J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 6 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 6 6 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - Z ;   Q u i n c e y   D J ,   2 0 0 9 ,   P R O G   P H Y S   G E O G ,   V 3 3 ,   P 5 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 9 1 3 3 3 0 9 3 4 6 8 8 3 ;   S c h n e i d e r   C J ,   1 9 9 8 ,   M O L   E C O L ,   V 7 ,   P 4 8 7 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 9 4 x . 1 9 9 8 . 0 0 3 3 4 . x ;   S c h w a r t z   F W ,   2 0 0 5 ,   H Y D R O G E O L   J ,   V 1 3 ,   P 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 4 0 - 0 0 4 - 0 4 2 3 - 4 ;   S h i u   C J ,   2 0 0 9 ,   J   C L I M A T E ,   V 2 2 ,   P 5 6 3 5 ,   D O I   1 0 . 1 1 7 5 / 2 0 0 9 J C L I 2 5 1 4 . 1 ;   S o n n e t t   J ,   2 0 1 0 ,   P U B L I C   U N D E R S T   S C I ,   V 1 9 ,   P 6 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 3 6 6 2 5 0 9 3 4 6 3 6 8 ;   S t a n h i l l   G ,   2 0 0 1 ,   C L I M A T I C   C H A N G E ,   V 4 8 ,   P 5 1 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 7 2 1 6 0 0 8 9 6 ;   T h o m a s   C D ,   2 0 0 4 ,   N A T U R E ,   V 4 2 7 ,   P 1 4 5 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 2 1 2 1 ;   U g o l i n i   D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 4 6 9 2 7 7 2 1 ;   U g o l i n i   D ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 3 ;   W a l t h e r   G R ,   2 0 0 2 ,   N A T U R E ,   V 4 1 6 ,   P 3 8 9 ,   D O I   1 0 . 1 0 3 8 / 4 1 6 3 8 9 a ;   W a s s m a n n   R ,   2 0 0 4 ,   C L I M A T I C   C H A N G E ,   V 6 6 ,   P 8 9 ,   D O I   1 0 . 1 0 2 3 / B : C L I M . 0 0 0 0 0 4 3 1 4 4 . 6 9 7 3 6 . b 7 ;   W a t s o n   R T ,   2 0 0 3 ,   S C I E N C E ,   V 3 0 2 ,   P 1 9 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 9 3 1 6 0 ;   W e b s t e r   P J ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 9 ,   P 1 8 4 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 1 6 4 4 8 ;   X i e   S D ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 2 8 - 0 ;   Z h a n g   G F ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 4 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 6 5 - 3 ;   Z w a l l y   H J ,   2 0 0 5 ,   J   G L A C I O L ,   V 5 1 ,   P 5 0 9 ,   D O I   1 0 . 3 1 8 9 / 1 7 2 7 5 6 5 0 5 7 8 1 8 2 9 0 0 7 ;   [ A n o n y m o u s ] ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 1 0 1 	 7 9 	 5 5 	 6 6 	 6 	 7 6 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 9 2 1 - 8 1 8 1 	 	 	 G L O B A L   P L A N E T   C H A N G E 	 G l o b .   P l a n e t .   C h a n g e 	 M A Y 	 2 0 1 1 	 7 7 	 1 - 2 	 	 	 	 	 1 3 	 2 0 	 	 1 0 . 1 0 1 6 / j . g l o p l a c h a . 2 0 1 1 . 0 2 . 0 0 5 	 	 8 	 G e o g r a p h y ,   P h y s i c a l ;   G e o s c i e n c e s ,   M u l t i d i s c i p l i n a r y 	 P h y s i c a l   G e o g r a p h y ;   G e o l o g y 	 7 8 7 E T 	 W O S : 0 0 0 2 9 2 3 6 0 1 0 0 0 0 2 	 	 
 
 J 	 W a l l a c e ,   M L ;   L a r i v i e r e ,   V ;   G i n g r a s ,   Y 	 	 	 	 W a l l a c e ,   M a t t h e w   L . ;   L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s 	 	 	 M o d e l i n g   a   c e n t u r y   o f   c i t a t i o n   d i s t r i b u t i o n s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C i t a t i o n s ;   B i b l i o m e t r i c s ;   C i t a t i o n   d i s t r i b u t i o n s ;   U n c i t e d n e s s ;   H i s t o r y   o f   s c i e n c e 	 S C I E N T I F I C   P A P E R S ;   P O W E R   L A W S ;   U N C I T E D N E S S ;   R E L A X A T I O N ;   S T A T I S T I C S ;   I N D I C A T O R S ;   J O U R N A L S ;   S C I E N C E ;   G R O W T H ;   T A I L S 	 T h e   p r e v a l e n c e   o f   u n c i t e d   p a p e r s   o r   o f   h i g h l y   c i t e d   p a p e r s ,   w i t h   r e s p e c t   t o   t h e   b u l k   o f   p u b l i c a t i o n s ,   p r o v i d e s   i m p o r t a n t   c l u e s   a s   t o   t h e   d y n a m i c s   o f   s c i e n t i f i c   r e s e a r c h .   U s i n g   2 5   m i l l i o n   p a p e r s   a n d   6 0 0   m i l l i o n   r e f e r e n c e s   f r o m   t h e   W e b   o f   S c i e n c e   o v e r   t h e   1 9 0 0 - 2 0 0 6   p e r i o d ,   t h i s   p a p e r   p r o p o s e s   a   s i m p l e   m o d e l   b a s e d   o n   a   r a n d o m   s e l e c t i o n   p r o c e s s   t o   e x p l a i n   t h e   " u n c i t e d n e s s "   p h e n o m e n o n   a n d   i t s   d e c l i n e   o v e r   t h e   y e a r s .   W e   s h o w   t h a t   t h e   p r o p o r t i o n   o f   c i t e d   p a p e r s   i s   a   f u n c t i o n   o f   ( 1 )   t h e   n u m b e r   o f   a r t i c l e s   a v a i l a b l e   ( t h e   c o m p e t i n g   p a p e r s ) ,   ( 2 )   t h e   n u m b e r   o f   c i t i n g   p a p e r s   a n d   ( 3 )   t h e   n u m b e r   o f   r e f e r e n c e s   t h e y   c o n t a i n .   U s i n g   u n c i t e d n e s s   a s   a   d e p a r t u r e   p o i n t ,   w e   d e m o n s t r a t e   t h e   u t i l i t y   o f   t h e   s t r e t c h e d - e x p o n e n t i a l   f u n c t i o n   a n d   a   f o r m   o f   t h e   T s a l l i s   q - e x p o n e n t i a l   f u n c t i o n   t o   f i t   c o m p l e t e   c i t a t i o n   d i s t r i b u t i o n s   o v e r   t h e   2 0 t h   c e n t u r y .   A s   o p p o s e d   t o   s i m p l e   p o w e r - l a w   f i t s ,   f o r   i n s t a n c e ,   b o t h   t h e s e   a p p r o a c h e s   a r e   s h o w n   t o   b e   e m p i r i c a l l y   w e l l - g r o u n d e d   a n d   r o b u s t   e n o u g h   t o   b e t t e r   u n d e r s t a n d   c i t a t i o n   d y n a m i c s   a t   t h e   a g g r e g a t e   l e v e l .   O n   t h e   b a s i s   o f   t h e s e   m o d e l s ,   w e   p r o v i d e   q u a n t i t a t i v e   e v i d e n c e   a n d   p r o v i s i o n a l   e x p l a n a t i o n s   f o r   a n   i m p o r t a n t   s h i f t   i n   c i t a t i o n   p r a c t i c e s   a r o u n d   1 9 6 0 .   W e   a l s o   p r o p o s e   a   r e v i s i o n   o f   t h e   " c i t a t i o n   c l a s s i c "   c a t e g o r y   a s   a   s e t   o f   a r t i c l e s   w h i c h   i s   c l e a r l y   d i s t i n g u i s h a b l e   f r o m   t h e   r e s t   o f   t h e   f i e l d .   ( C )   2 0 0 9   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ W a l l a c e ,   M a t t h e w   L . ;   L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s ]   U n i v   Q u e b e c ,   O S T ,   C I R S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a 	 W a l l a c e ,   M L   ( r e p r i n t   a u t h o r ) ,   U n i v   Q u e b e c ,   O S T ,   C I R S T ,   C a s e   P o s t a l e   8 8 8 8 , S u c c   C t r   V i l l e ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a . 	 m a t t y l i a m @ g m a i l . c o m ;   l a r i v i e r e . v i n c e n t @ u q a m . c a ;   g i n g r a s . y v e s @ u q a m . c a 	 	 W a l l a c e ,   M a t t h e w / 0 0 0 0 - 0 0 0 1 - 5 4 0 7 - 8 6 5 3 	 	 	 A b e   S ,   2 0 0 2 ,   P H Y S   R E V   E ,   V 6 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 6 . 0 4 6 1 3 4 ;   A B T   H A ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 1 4 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 5 1 . 5 0 0 0 . 1 4 0 8 - a ;   B A R N E T T   G A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 1 0 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 4 0 0 3 ;   B u r r e l l   Q L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 0 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 1 6 9 1 1 5 1 1 ;   B u r r e l l   Q L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 5 1 5 0 9 9 7 5 ;   E g g h e   L ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 3 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 8 4 0 4 7 7 8 ;   E g g h e   L ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   S E R ,   P 1 ;   G A R F I E L D   E ,   1 9 8 9 ,   C U R R   C O N T E N T S ,   V 1 2 ,   P 3 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 0 ;   G A R F I E L D   E ,   1 9 8 4 ,   C U R R   C O N T E N T S ,   P 3 ;   G L A N Z E L   W ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 9 2 - E ;   G u p t a   H M ,   2 0 0 8 ,   P H Y S I C A   A ,   V 3 8 7 ,   P 6 7 4 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 8 . 0 9 . 0 0 9 ;   G u p t a   H M ,   2 0 0 5 ,   B R A Z   J   P H Y S ,   V 3 5 ,   P 9 8 1 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 3 - 9 7 3 3 2 0 0 5 0 0 0 6 0 0 0 1 2 ;   H A M I L T O N   D P ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 9 8 6 4 0 9 ;   H A M I L T O N   D P ,   1 9 9 0 ,   S C I E N C E ,   V 2 5 0 ,   P 1 3 3 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 2 5 5 9 0 2 ;   L a h e r r e r e   J ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 2 ,   P 5 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 2 7 6 ;   L a r i v i e r e   V ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 4 ;   L a r i v i e r e   V ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 4 9 ;   L e h m a n n   S ,   2 0 0 3 ,   P H Y S   R E V   E ,   V 6 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 8 . 0 2 6 1 1 3 ;   M a c d o n a l d   S ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 7 0 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 7 7 4 1 9 ;   M e h o   L I ,   2 0 0 7 ,   P H Y S   W O R L D ,   V 2 0 ,   P 3 2 ;   N a d a r a j a h   S ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 1 7 - 9 ;   N a u m i s   G G ,   2 0 0 7 ,   N E W   J   P H Y S ,   V 9 ,   D O I   1 0 . 1 0 8 8 / 1 3 6 7 - 2 6 3 0 / 9 / 8 / 2 8 6 ;   N e w m a n   M E J ,   2 0 0 5 ,   C O N T E M P   P H Y S ,   V 4 6 ,   P 3 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 1 0 7 5 1 0 5 0 0 0 5 2 4 4 4 ;   P E N D L E B U R Y   D A ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 1 4 1 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 5 1 . 5 0 0 0 . 1 4 1 0 - b ;   P h i l l i p s   J C ,   1 9 9 6 ,   R E P   P R O G   P H Y S ,   V 5 9 ,   P 1 1 3 3 ,   D O I   1 0 . 1 0 8 8 / 0 0 3 4 - 4 8 8 5 / 5 9 / 9 / 0 0 3 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R e d n e r   S ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 3 5 9 ;   R e d n e r   S ,   2 0 0 4 ,   A R X I V P H Y S I C S 0 4 0 7 1 3 7 ;   R O U S S E A U   R ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 2 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 2 4 ;   S c h w a r t z   C A ,   1 9 9 7 ,   C O L L   R E S   L I B R ,   V 5 8 ,   P 1 9 ;   S i m k i n   M V ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 6 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 5 3 ;   S T E R N   R E ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 4 ) 4 1 : 3 < 1 9 3 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - B ;   T a k a y a s u   H ,   1 9 9 7 ,   P H Y S   R E V   L E T T ,   V 7 9 ,   P 9 6 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 7 9 . 9 6 6 ;   T h u r n e r   S ,   2 0 0 7 ,   P H Y S   R E V   E ,   V 7 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 6 . 0 3 6 1 1 1 ;   T s a l l i s   C ,   2 0 0 0 ,   E U R   P H Y S   J   B ,   V 1 3 ,   P 7 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 0 9 7 ;   T S A L L I S   C ,   1 9 8 8 ,   J   S T A T   P H Y S ,   V 5 2 ,   P 4 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 0 1 6 4 2 9 ;   V a n   D a l e n   H P ,   2 0 0 4 ,   P O P U L   D E V   R E V ,   V 3 0 ,   P 4 8 9 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 7 3 2 8 4 6 0 ;   v a n   R a a n   A F J ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 4 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 8 4 ;   V i n k l e r   P ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 8 6 5 0 0 8 0 1 ;   W I L L I A M S   G ,   1 9 7 0 ,   T   F A R A D A Y   S O C ,   V 6 6 ,   P 8 0 ,   D O I   1 0 . 1 0 3 9 / t f 9 7 0 6 6 0 0 0 8 0 	 4 4 	 5 5 	 5 7 	 6 	 4 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 0 9 	 3 	 4 	 	 	 	 	 2 9 6 	 3 0 3 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 1 0 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 8 4 V B 	 W O S : 0 0 0 2 6 9 0 7 5 1 0 0 0 0 3 	 	 
 
 J 	 T r o c h i m ,   W M ;   M a r c u s ,   S E ;   M a s s e ,   L C ;   M o s e r ,   R P ;   W e l d ,   P C 	 	 	 	 T r o c h i m ,   W i l l i a m   M . ;   M a r c u s ,   S t e p h e n   E . ;   M a s s e ,   L o u i s e   C . ;   M o s e r ,   R i c h a r d   P . ;   W e l d ,   P a t r i c k   C . 	 	 	 T h e   e v a l u a t i o n   o f   l a r g e   r e s e a r c h   i n i t i a t i v e s   -   A   p a r t i c i p a t o r y   i n t e g r a t i v e   m i x e d - m e t h o d s   a p p r o a c h 	 A M E R I C A N   J O U R N A L   O F   E V A L U A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c e n t e r   g r a n t s ;   c o n c e p t   m a p p i n g ;   e v a l u a t i n g   r e s e a r c h ;   f e d e r a l   e v a l u a t i o n ;   l o g i c   m o d e l s 	 C I T A T I O N   A N A L Y S I S ;   R E S E A R C H   I M P A C T ;   C O C I T A T I O N   A N A L Y S I S ;   B I B L I O M E T R I C S ;   S C I E N C E ;   C O N C E P T U A L I Z A T I O N ;   S C I E N T O M E T R I C S ;   J O U R N A L S 	 O v e r   t h e   p a s t   f e w   d e c a d e s   t h e r e   h a s   b e e n   a   r i s e   i n   t h e   n u m b e r   o f   f e d e r a l l y   f u n d e d   l a r g e   s c i e n t i f i c   r e s e a r c h   i n i t i a t i v e s ,   w i t h   i n c r e a s e d   c a l l s   t o   e v a l u a t e   t h e i r   p r o c e s s e s   a n d   o u t c o m e s .   T h i s   a r t i c l e   d e s c r i b e s   e f f o r t s   t o   e v a l u a t e   s u c h   i n i t i a t i v e s   i n   o n e   a g e n c y   w i t h i n   t h e   U . S .   f e d e r a l   g o v e r n m e n t .   T h e   a u t h o r s   i n t r o d u c e   t h e   E v a l u a t i o n   o f   L a r g e   I n i t i a t i v e s   ( E L I )   p r o j e c t ,   a   p r e l i m i n a r y   e f f o r t   t o   e x p l o r e   h o w   t o   a c c o m p l i s h   s u c h   e v a l u a t i o n .   T h e y   d e s c r i b e   a   p i l o t   e f f o r t   o f   t h i s   p r o j e c t   t o   e v a l u a t e   t h e   T r a n s d i s c i p l i n a r y   T o b a c c o   U s e   R e s e a r c h   C e n t e r   ( T T U R C )   i n i t i a t i v e   o f   t h e   N a t i o n a l   C a n c e r   I n s t i t u t e .   T h e y   p r e s e n t   a   s u m m a r y   o f   t h i s   p i l o t   e v a l u a t i o n   i n c l u d i n g   t h e   m e t h o d s   u s e d   ( c o n c e p t   m a p p i n g ,   l o g i c   m o d e l i n g ,   a   d e t a i l e d   r e s e a r c h e r   s u r v e y ,   c o n t e n t .   a n a l y s i s   a n d   s y s t e m a t i c   p e e r - e v a l u a t i o n   o f   p r o g r e s s   r e p o r t s ,   b i b l i o m e t r i c   a n a l y s i s   a n d   p e e r   e v a l u a t i o n   o f   p u b l i c a t i o n s   a n d   c i t a t i o n s ,   a n d   f i n a n c i a l   e x p e n d i t u r e s   a n a l y s i s )   a n d   a   b r i e f   o v e r v i e w   o f   r e s u l t s .   F i n a l l y ,   t h e y   d i s c u s s   s e v e r a l   i m p o r t a n t   l e s s o n s   a n d   r e c o m m e n d a t i o n s   t h a t   e m e r g e d   f r o m   t h i s   w o r k . 	 [ T r o c h i m ,   W i l l i a m   M . ]   C o r n e l l   U n i v ,   I t h a c a ,   N Y   1 4 8 5 3   U S A ;   [ M a r c u s ,   S t e p h e n   E . ;   W e l d ,   P a t r i c k   C . ]   N a t l   C a n c   I n s t ,   B e t h e s d a ,   M D   U S A ;   [ M a s s e ,   L o u i s e   C . ]   U n i v   B r i t i s h   C o l u m b i a ,   V a n c o u v e r ,   B C   V 5 Z   1 M 9 ,   C a n a d a 	 T r o c h i m ,   W M   ( r e p r i n t   a u t h o r ) ,   C o r n e l l   U n i v ,   2 4 9   M V R   H a l l ,   I t h a c a ,   N Y   1 4 8 5 3   U S A . 	 w m t 1 @ c o r n e l l . e d u 	 	 	 	 	 A n d e r b e r g   M .   R . ,   1 9 7 3 ,   C L U S T E R   A N A L   A P P L ;   B R A I N A R D   J ,   2 0 0 2 ,   C H R O N I C L E   H I G H E R   E D ,   V 4 8 ;   B R A I N A R D   J ,   2 0 0 2 ,   C H R O N I C L E   H I G H E   0 3 2 9 ,   V 4 8 ,   p A 2 5 ;   C O M P T O N   D W ,   2 0 0 2 ,   A R T   C R A F T   S C I   E V A L U A ,   V 9 3 ;   C a m p b e l l   D .   T . ,   1 9 7 9 ,   Q U A S I   E X P T   D E S I G N ;   C o x o n   A P ,   1 9 9 9 ,   S O R T I N G   D A T A   C O L L E C T ;   D a v i s o n   M .   L . ,   1 9 8 3 ,   M U L T I D I M E N S I O N A L   S C A ;   E v e r i t t   B .   S . ,   1 9 8 0 ,   C L U S T E R   A N A L ;   F u n k h o u s e r   E T ,   1 9 9 6 ,   H U M   C O M M U N   R E S ,   V 2 2 ,   P 5 6 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E . ,   1 9 9 4 ,   C U R R   C O N T E N T S ,   V 2 5 ,   P 3 ;   G A R F I E L D   E ,   1 9 9 4 ,   C U R R   C O N T E N T S ,   V 2 9 ,   P 3 ;   G o d l e e   F ,   1 9 9 9 ,   P E E R   R E V   H L T H   S C I ;   G O D L E E   F ,   1 9 9 7 ,   A D V   M I X E D   M E T H O D   E V A ,   V 7 4 ;   C a r a c e l l i   V .   J . ,   1 9 8 9 ,   E D U C   E V A L   P O L I C Y   A N ,   V 1 1 ,   P 2 5 5 ,   D O I   D O I   1 0 . 3 1 0 2 / 0 1 6 2 3 7 3 7 0 1 1 0 0 3 2 5 5 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   I n s t i t u t e   o f   M e d i c i n e ,   2 0 0 4 ,   N I H   E X T R   C T R   P R O G R ;   K a n e   M . ,   2 0 0 6 ,   C O N C E P T   M A P P I N G   P L A N ;   K O S T O F F   R N ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 4 ;   K o s t o f f   R N ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 8 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 0 0 7 9 8 - 5 ;   K O S T O F F   R N ,   1 9 9 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 4 ) 9 0 0 9 3 - 0 ;   K r i p p e n d o r f   K . ,   2 0 0 4 ,   C O N T E N T   A N A L   I N T R O   I ;   K R U S T A L   J B ,   1 9 7 8 ,   M U L T I D I M E N S I O N A L   S C A ;   L A N E   N F ,   1 9 9 5 ,   I N T E R D I S C I P L   S C I   R E V ,   V 2 0 ,   P 9 8 ;   M C C U L L O U G H   J ,   1 9 9 2 ,   D R A F T   R E P O R T   N S F   P R O ;   M o l a s - G a l l a r t   J ,   2 0 0 6 ,   A M   J   E V A L ,   V 2 7 ,   P 6 4 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 5 2 8 1 7 0 1 ;   N a s s   S .   J . ,   2 0 0 3 ,   L A R G E   S C A L E   B I O M E D I C ;   * N A T L   A C   S C I   N A T L ,   1 9 9 6 ,   A S S   N A T L   S C I   F D N   S C I ;   * N A T L   C A N C   I ,   2 0 0 7 ,   G R E A T   S U M   S Y S T   T H I N K ;   * N I H ,   1 9 9 9 ,   E V   R E D   R E S   P R O G R   R E S ;   * N I H ,   2 0 0 6 ,   F Y   2 0 0 7   P R E S   B U D G   R E ;   J o   N y e   M . ,   1 9 9 6 ,   B I G   S C I   P U R S U I T   M O D E ;   * O F F   M A N   B U D G ,   2 0 0 7 ,   P R O G R   A S S   R A T   T O O L   P ;   * O F F   M A N   B U D G ,   1 9 9 3 ,   G O V T   P E R F   R E S   A C T   1 9 ;   * O F F   M A N   B U D G ,   2 0 0 7 ,   P R O G R   A S S   N S F S   F E D   F ;   * O F F   M A N   B U D G ,   2 0 0 7 ,   E X P   G O V ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 2 1 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 4 . 2 1 7 ;   R a s m u s s e n   N ,   2 0 0 2 ,   M I N E R V A ,   V 4 0 ,   P 1 1 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 7 6 0 9 2 0 4 2 8 ;   R O S E N B E R G   S ,   1 9 7 5 ,   M U L T I V A R   B E H A V   R E S ,   V 1 0 ,   P 4 8 9 ,   D O I   1 0 . 1 2 0 7 / s 1 5 3 2 7 9 0 6 m b r 1 0 0 4 _ 7 ;   R O S E N F I E L D   P L ,   1 9 9 2 ,   S O C   S C I   M E D ,   V 3 5 ,   P 1 3 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 7 - 9 5 3 6 ( 9 2 ) 9 0 0 3 8 - R ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S k o i e   H ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 6 0 3 ;   S m i t h   R ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 5 2 8 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 1 2 . 5 2 8 ;   S t o k o l s   D a n i e l ,   2 0 0 3 ,   N i c o t i n e   T o b   R e s ,   V 5   S u p p l   1 ,   p S 2 1 ;   T R O C H I M   W M K ,   1 9 8 6 ,   E V A L   P R O G R A M   P L A N N ,   V 9 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 9 - 7 1 8 9 ( 8 6 ) 9 0 0 4 4 - 3 ;   T R O C H I M   W M K ,   1 9 8 5 ,   E V A L U A T I O N   R E V ,   V 9 ,   P 5 7 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 8 5 0 0 9 0 0 5 0 3 ;   * U S   D E P   H H S ,   2 0 0 7 ,   I   C L I N   T R A N S L   S C I   A W ;   * U S   G E N   A C C   O F F ,   2 0 0 0 ,   N I H   R E S   I M P R   N E E D   M O ;   * U S   G E N   A C C   O F F ,   2 0 0 5 ,   O M B   P A R T   R E V   I N C R   A G ;   K e l l o g g   F o u n d a t i o n   W . K . ,   2 0 0 1 ,   L O G   M O D   D E V   G U I D   U S ;   W E B E R   R P ,   1 9 9 0 ,   B A S I C   C N T E N T   A N A L ,   V 4 9 ;   W E L L E R   S C ,   1 9 8 8 ,   S Y T E M A T I C   D A T A   C O L L E ;   W H I T M O R E   E ,   1 9 9 8 ,   U N D E R S T A N D I N G   P R A C T I ,   V 8 0 ;   W I L L I A M S   B ,   2 0 0 6 ,   S Y T E M S   C O N C E P T S   E V A L 	 5 6 	 5 5 	 5 5 	 3 	 3 3 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0   U S A 	 1 0 9 8 - 2 1 4 0 	 	 	 A M   J   E V A L 	 A m .   J .   E v a l . 	 M A R 	 2 0 0 8 	 2 9 	 1 	 	 	 	 	 8 	 2 8 	 	 1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 7 3 0 9 2 8 0 	 	 2 1 	 S o c i a l   S c i e n c e s ,   I n t e r d i s c i p l i n a r y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 2 6 3 F O 	 W O S : 0 0 0 2 5 3 2 0 3 2 0 0 0 0 1 	 	 
 
 J 	 C l a r k e ,   A ;   G a t i n e a u ,   M ;   G r i m a u d ,   O ;   R o y e r - D e v a u x ,   S ;   W y n - R o b e r t s ,   N ;   L e   B i s ,   I ;   L e w i s o n ,   G 	 	 	 	 C l a r k e ,   A i l e e n ;   G a t i n e a u ,   M a r y ;   G r i m a u d ,   O l i v i e r ;   R o y e r - D e v a u x ,   S a n d r i n e ;   W y n - R o b e r t s ,   N i a ;   L e   B i s ,   I s a b e l l e ;   L e w i s o n ,   G r a n t 	 	 	 A   b i b l i o m e t r i c   o v e r v i e w   o f   p u b l i c   h e a l t h   r e s e a r c h   i n   E u r o p e 	 E U R O P E A N   J O U R N A L   O F   P U B L I C   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 4 t h   E u r o p e a n   P u b l i c   H e a l t h   R e s e a r c h   C o n f e r e n c e 	 N O V ,   2 0 0 6 	 M o n t r e u x ,   S W I T Z E R L A N D 	 	 	 b i b l i o m e t r i c s ;   p u b l i c   h e a l t h   r e s e a r c h ;   l i t e r a t u r e   r e v i e w ;   E u r o p e 	 C I T A T I O N 	 B a c k g r o u n d :   O u r   a i m ,   w i t h i n   t h e   c o l l a b o r a t i v e   s t u d y   S P H E R E   ( S t r e n g t h e n i n g   P u b l i c   H e a l t h   R e s e a r c h   i n   E u r o p e ) ,   w a s   t o   p r o d u c e   a   b i b l i o m e t r i c   o v e r v i e w   o f   p u b l i c   h e a l t h   r e s e a r c h   l i t e r a t u r e   f o r   E u r o p e .   M e t h o d s :   A   s e a r c h   s t r a t e g y   ( ' f i l t e r ' )   w a s   d e s i g n e d   t o   i n t e r r o g a t e   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   a n d   t h e   S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S S C I )   d a t a b a s e s   f o r   r e s e a r c h   a r t i c l e s   p u b l i s h e d   b e t w e e n   0 1 / 0 1 / 1 9 9 5   a n d   3 1 / 1 2 / 2 0 0 4   i n   a n y   l a n g u a g e .   W e   a n a l y s e d   o u t p u t   f o r   c o u n t r y   b y   p o p u l a t i o n ,   G r o s s   D o m e s t i c   P r o d u c t   ( G D P ) ,   b u r d e n   o f   d i s e a s e   u s i n g   D A L Y s ,   a n d   l a n g u a g e .   R e s u l t s :   O v e r l a p   b e t w e e n   t h e   t w o   d a t a b a s e s   S C I   a n d   S S C I   w a s   3 5 % .   2 1 0 4 3 3   p u b l i c a t i o n s   w e r e   i d e n t i f i e d   a f t e r   d u p l i c a t e s   w e r e   r e m o v e d ,   a   w o r l d   t o t a l   o f   a b o u t   2 0   0 0 0   p e r   y e a r .   A p p r o x i m a t e l y   7 0 0 0   p a p e r s   p e r   y e a r   w e r e   p r o d u c e d   i n   E u r o p e   a n d   9 4 0 0   b y   t h e   U S A .   T h i r t e e n   o f   2 8   i n d i v i d u a l   E u r o p e a n   c o u n t r i e s   p r o d u c e d   m o r e   t h a n   1 0 0   p u b l i c   h e a l t h   p a p e r s   p e r   y e a r .   P u b l i c a t i o n s   p e r   c a p i t a   w e r e   h i g h e s t   i n   n o r t h e r n   E u r o p e a n   c o u n t r i e s .   I n   m u l t i p l e   r e g r e s s i o n   a n a l y s e s ,   G D P   w a s   a   m o d e s t   p r e d i c t o r   ( r ( 2 ) = 0 . 5 3 ,   P < 0 . 0 2 )   o f   p u b l i c a t i o n s   f o r   E u r o p e a n   c o u n t r i e s ,   w h i l e   p o p u l a t i o n   s i z e   a n d   d i s a b i l i t y   a d j u s t e d   l i f e   y e a r s   w e r e   n o t   s i g n i f i c a n t l y   r e l a t e d .   S m a l l e r   c o u n t r i e s   a n d   l o w e r   p r o d u c e r s   o f   p u b l i c   h e a l t h   r e s e a r c h   w e r e   m o r e   l i k e l y   t o   c o l l a b o r a t e   w i t h   o t h e r   c o u n t r i e s .   O f   t h e   p u b l i c a t i o n s ,   3 . 5 %   w e r e   p u b l i s h e d   i n   a   n o n - E n g l i s h   l a n g u a g e ,   w i t h   G e r m a n   t h e   m o s t   c o m m o n .   C o n c l u s i o n :   T h e r e   i s   m a r k e d   v a r i a t i o n   i n   p u b l i c   h e a l t h   p u b l i c a t i o n   b y   c o u n t r y   i n   E u r o p e .   E a s t e r n , a n d   s o u t h e r n   E u r o p e a n   c o u n t r i e s   a p p e a r   t o   u n d e r - i n v e s t   i n   p u b l i c   h e a l t h   r e s e a r c h   c o m p a r e d   w i t h   n o r t h e r n   E u r o p e a n   c o u n t r i e s   a n d   c o m p a r e d   t o   r e l a t i v e   h e a l t h   n e e d . 	 U n i v   W a r w i c k ,   W a r w i c k   M e d   S c h ,   H l t h   S c i   R e s   I n s t ,   C o v e n t r y   C V 4   7 A L ,   W   M i d l a n d s ,   E n g l a n d ;   P u b l   H l t h   R e s o u r c e   U n i t ,   O x f o r d ,   E n g l a n d ;   E c o l e   N a t l   S a n t e   P u b l ,   R e n n e s ,   F r a n c e ;   U n i v   O x f o r d ,   O x f o r d ,   E n g l a n d ;   U C L ,   L o n d o n ,   E n g l a n d 	 C l a r k e ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   W a r w i c k ,   W a r w i c k   M e d   S c h ,   H l t h   S c i   R e s   I n s t ,   C o v e n t r y   C V 4   7 A L ,   W   M i d l a n d s ,   E n g l a n d . 	 a i l e e n . c l a r k e @ w a r w i c k . a c . u k 	 C l a r k e ,   A i l e e n / I - 5 6 7 9 - 2 0 1 2 ;   R o b e r t s ,   N i a   W y n / F - 9 8 4 2 - 2 0 1 0 ;   	 R o b e r t s ,   N i a   W y n / 0 0 0 0 - 0 0 0 2 - 1 1 4 2 - 6 4 4 0 ;   C l a r k e ,   A i l e e n / 0 0 0 0 - 0 0 0 1 - 8 2 9 9 - 3 1 4 6 	 	 	 A c h e s o n   D . ,   1 9 9 9 ,   I N D E P E N D E N T   I N Q U I R Y ;   B L O C H   D A ,   1 9 8 9 ,   B I O M E T R I C S ,   V 4 5 ,   P 2 6 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 3 2 0 5 2 ;   G A R F I E L D   E ,   1 9 9 7 ,   C O N C E P T   C I T A T I O N   I N D ;   G a u f f r i a u   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 3 9 - 6 ;   L a s t   J o h n   M . ,   2 0 0 0 ,   D I C T   E P I D E M I O L O G Y ;   L e w i s o n   G ,   1 9 9 9 ,   R H E U M A T O L O G Y ,   V 3 8 ,   P 1 3 ,   D O I   1 0 . 1 0 9 3 / r h e u m a t o l o g y / 3 8 . 1 . 1 3 ;   L e w i s o n   G ,   1 9 9 6 ,   R E S   E V A L U A T ,   V 6 ,   P 2 5 ;   M c C a r t h y   M . ,   D E F I N I T I O N   P U B L I C   H L ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   R a h m a n   M ,   2 0 0 3 ,   P U B L I C   H E A L T H ,   V 1 1 7 ,   P 2 7 4 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 3 - 3 5 0 6 ( 0 3 ) 0 0 0 6 8 - 4 ;   S i m i l o w s k i   T ,   1 9 9 7 ,   R E V   M A L   R E S P I R ,   V 1 4 ,   P 2 3 7 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S o t e r i a d e s   E S ,   2 0 0 6 ,   B M C   P U B L I C   H E A L T H ,   V 6 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 5 8 - 6 - 3 0 1 ;   S o t e r i a d e s   E S ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 1 ,   P 1 9 2 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 3 1 . 7 5 1 0 . 1 9 2 ;   W H O ,   G L O B   B U R D   D I S   P R O J ;   * W O R L D   D E V   I N D   D A T ,   W O R L D   B A N K   N A T L   A C C 	 1 6 	 5 5 	 5 6 	 3 	 1 9 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 1 1 0 1 - 1 2 6 2 	 	 	 E U R   J   P U B L I C   H E A L T H 	 E u r .   J .   P u b l i c   H e a l t h 	 	 2 0 0 7 	 1 7 	 	 	 1 	 	 	 4 3 	 4 9 	 	 1 0 . 1 0 9 3 / e u r p u b / c k m 0 6 3 	 	 7 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 2 1 1 K F 	 W O S : 0 0 0 2 4 9 5 2 2 0 0 0 0 1 2 	 1 7 6 6 6 4 2 2 	 
 
 J 	 T h e l w a l l ,   M 	 	 	 	 T h e l w a l l ,   M 	 	 	 I n t e r p r e t i n g   s o c i a l   s c i e n c e   l i n k   a n a l y s i s   r e s e a r c h :   A   t h e o r e t i c a l   f r a m e w o r k 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W E B   I M P A C T   F A C T O R S ;   W O R L D - W I D E - W E B ;   C I T A T I O N   A N A L Y S I S ;   S C H O L A R L Y   C O M M U N I C A T I O N ;   W E B O M E T R I C S ;   S I T E S ;   B I B L I O M E T R I C S ;   H Y P E R L I N K ;   N E T W O R K 	 L i n k   a n a l y s i s   i n   v a r i o u s   f o r m s   i s   n o w   a n   e s t a b l i s h e d   t e c h n i q u e   i n   m a n y   d i f f e r e n t   s u b j e c t s ,   r e f l e c t i n g   t h e   p e r c e i v e d   i m p o r t a n c e   o f   l i n k s   a n d   o f   t h e   W e b .   A   c r i t i c a l   b u t   v e r y   d i f f i c u l t   i s s u e   i s   h o w   t o   i n t e r p r e t   t h e   r e s u l t s   o f   s o c i a l   s c i e n c e   l i n k   a n a l y s e s .   I t   i s   a r g u e d   t h a t   t h e   d y n a m i c   n a t u r e   o f   t h e   W e b ,   i t s   l a c k   o f   q u a l i t y   c o n t r o l ,   a n d   t h e   o n l i n e   p r o l i f e r a t i o n   o f   c o p y i n g   a n d   i m i t a t i o n   m e a n   t h a t   m e t h o d o l o g i e s   o p e r a t i n g   w i t h i n   a   h i g h l y   p o s i t i v i s t ,   q u a n t i t a t i v e   f r a m e w o r k   a r e   i n e f f e c t i v e .   C o n v e r s e l y ,   t h e   s h e e r   v a r i e t y   o f   t h e   W e b   m a k e s   a p p l i c a t i o n   o f   q u a l i t a t i v e   m e t h o d o l o g i e s   a n d   p u r e   r e a s o n   v e r y   p r o b l e m a t i c   t o   l a r g e - s c a l e   s t u d i e s .   M e t h o d o l o g y   t r i a n g u l a t i o n   i s   c o n s e q u e n t l y   a d v o c a t e d ,   i n   c o m b i n a t i o n   w i t h   a   w a r n i n g   t h a t   t h e   W e b   i s   i n c a p a b l e   o f   g i v i n g   d e f i n i t i v e   a n s w e r s   t o   l a r g e - s c a l e   l i n k   a n a l y s i s   r e s e a r c h   q u e s t i o n s   c o n c e r n i n g   s o c i a l   f a c t o r s   u n d e r l y i n g   l i n k   c r e a t i o n .   F i n a l l y ,   i t   i s   c l a i m e d   t h a t   a l t h o u g h   t h e o r e t i c a l   f r a m e w o r k s   a r e   a p p r o p r i a t e   f o r   g u i d i n g   r e s e a r c h ,   a   T h e o r y   o f   L i n k   A n a l y s i s   i s   n o t   p o s s i b l e . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 T h e l w a l l ,   M   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d . 	 m . t h e l w a l l @ w l v . a c . u k 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A B B O T T   C ,   2 0 0 1 ,   E D   C O M M U N I C A T I O N   I N F ,   V 1 ,   P 1 9 7 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   A r a s u   A . ,   2 0 0 1 ,   A C M   T   I N T E R N E T   T E C H N ,   V 1 ,   P 2 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 8 3 0 3 4 . 3 8 3 0 3 5 ;   B a r - I l a n   J ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 8 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 4 9 ;   B a r - I l a n   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 3 9 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 0 . 3 3 7 0 6 . c 1 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B a r a b a s i   A . L . ,   2 0 0 2 ,   L I N K E D   N E W   S C I   N E T W O ;   B a r - I l a n   J . ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 / 3 ,   P 1 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B J O R N E B O R N   L ,   2 0 0 1 ,   P   1 2   A C M   C   H Y P   H Y P   A ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B U R N E T T   R ,   2 0 0 2 ,   W E B   T H E O R Y   I N T R O ;   C h e n   C M ,   1 9 9 8 ,   I N T E R A C T   C O M P U T ,   V 1 0 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 3 - 5 4 3 8 ( 9 7 ) 0 0 0 3 4 - 9 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   D a v e n p o r t   E ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 5 1 7 ;   F E T T E R L Y   D e n n i s ,   2 0 0 3 ,   P   1 2   I N T   W O R L D   W I D   W ;   F o o t   K . ,   2 0 0 3 ,   J   C O M P U T E R   M E D I A T E D ,   V 8 ,   P 0 ;   F o u c a u l t   M . ,   1 9 6 9 ,   A R C H A E O L O G Y   K N O W L E D G ;   R o d r i g u e z   i   G a i r i n   J .   M . ,   1 9 9 7 ,   R E V   E S P   D O C   C I E N T ,   V 2 0 ,   P 1 7 5 ;   G a r r i d o   M a r i a ,   2 0 0 3 ,   C Y B E R A C T I V I S M   O N L I N E ,   P 1 6 5 ;   G R U H L   D ,   2 0 0 4 ,   W W W 2 0 0 4   N E W   Y O R K ;   H a r r i e s   G ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 4 3 6 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 6 7 3 6 ;   H e n z i g n e r   M R ,   2 0 0 1 ,   I E E E   I N T E R N E T   C O M P U T ,   V 5 ,   P 4 5 ,   D O I   1 0 . 1 1 0 9 / 4 2 3 6 . 8 9 5 1 4 1 ;   H e r n a n d e z - B o r g e s   A .   A . ,   1 9 9 9 ,   J   M E D   I N T E R N E T   R E S ,   V 1 ;   H i n e   C . ,   2 0 0 0 ,   V I R T U A L   E T H N O G R A P H Y ;   H y l a n d   K e n ,   2 0 0 0 ,   D I S C I P L I N A R Y   D I S C O U R ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K i m   Y .   R . ,   2 0 0 0 ,   J o u r n a l   o f   F o o d   S c i e n c e   a n d   N u t r i t i o n ,   V 5 ,   P 1 0 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K o e h l e r   W ,   2 0 0 4 ,   I N F O R M   R E S ,   V 9 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   K U M A R   R ,   2 0 0 3 ,   W W W 2 0 0 3   B U D   H U N G ;   K U M A R   R ,   1 9 9 9 ,   W W W 8   T O R ;   L A R K E Y   L S ,   2 0 0 0 ,   5   A C M   C   D I G   L I B   S A N ;   L A R S O N   R R ,   1 9 9 6 ,   A I S S   5 9   A N N   M   B A L T   M ;   L a w   J . ,   2 0 0 2 ,   A I R C R A F T   S T O R I E S   D E C ;   L E V E N E   M ,   2 0 0 4 ,   W E B   D Y N A M I C S ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   L e y d e s d o r f f   L . ,   2 0 0 0 ,   C Y B E R M E T R I C S ,   V 4 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M a c R o b e r t s   M .   H . ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   N e u e n d o r f   K . A . ,   2 0 0 2 ,   C O N T E N T   A N A L   G U I D E B O ;   O O P E N H E I M   C ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ,   P 4 0 5 ;   O P P E N H E I M   C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 4 ;   P A L M E R   J W ,   2 0 0 0 ,   J   C O M P U T E R   M E D I A T E D ,   V 5 ,   P 3 ;   P a r k   H W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 5 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 2 ;   P a r k   H .   W . ,   2 0 0 3 ,   J   C O M P U T E R   M E D I A T E D ,   V 8 ;   P a r k   H .   W . ,   2 0 0 3 ,   C O N N E C T I O N S ,   V 2 5 ,   P 4 9 ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S m i t h   A G ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 5 7 7 ;   T a s h a k k o r i   A . ,   1 9 9 8 ,   M I X E D   M E T H O D O L O G Y ;   T h e l w a l l   M ,   2 0 0 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 9 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 9 0 1 1 0 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 7 0 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 6 7 ;   T H E L W A L L   M ,   2 0 0 4 ,   L I N K   A N A L   I N F O R M A T I O ;   T H E L W A L L   M ,   2 0 0 3 ,   I N F O R M A T I O N   R E S ,   V 8 ;   T h e l w a l l   M . ,   2 0 0 2 ,   J   I N F   S C I ,   V 2 8 ,   P 4 8 5 ;   U B E R T I   E ,   2 0 0 4 ,   A S S   I N T   R E S   5   0   A O I R ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 2 9 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 3 0 1 ;   V A N A E L S T   P ,   2 0 0 2 ,   I N F O R M A T I O N   C O M M U N I C ,   V 5 4 ,   P 4 6 5 ;   V r e e l a n d   R C ,   2 0 0 0 ,   L A W   L I B R   J ,   V 9 2 ,   P 9 ;   W i l k i n s o n   D ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 	 6 8 	 5 5 	 5 6 	 1 	 2 4 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J A N   1 	 2 0 0 6 	 5 7 	 1 	 	 	 	 	 6 0 	 6 8 	 	 1 0 . 1 0 0 2 / a s i . 2 0 2 5 3 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 9 8 M Z 	 W O S : 0 0 0 2 3 4 3 2 4 3 0 0 0 0 7 	 	 
 
 J 	 D i n g ,   Y 	 	 	 	 D i n g ,   Y i n g 	 	 	 S c i e n t i f i c   c o l l a b o r a t i o n   a n d   e n d o r s e m e n t :   N e t w o r k   a n a l y s i s   o f   c o a u t h o r s h i p   a n d   c i t a t i o n   n e t w o r k s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S c i e n t i f i c   c o l l a b o r a t i o n ;   S c i e n t i f i c   e n d o r s e m e n t ;   T o p i c   m o d e l i n g ;   P a t h - f i n d i n g   a l g o r i t h m 	 C O - A U T H O R S H I P   N E T W O R K S ;   I N F O R M A T I O N - R E T R I E V A L ;   I N T E L L E C T U A L   S T R U C T U R E ;   C O C I T A T I O N   A N A L Y S I S ;   S O C I A L   N E T W O R K S ;   S C I E N C E ;   I M P A C T ;   C O M M U N I T I E S ;   S E A R C H 	 S c i e n t i f i c   c o l l a b o r a t i o n   a n d   e n d o r s e m e n t   a r e   w e l l - e s t a b l i s h e d   r e s e a r c h   t o p i c s   w h i c h   u t i l i z e   t h r e e   k i n d s   o f   m e t h o d s :   s u r v e y / q u e s t i o n n a i r e ,   b i b l i o m e t r i c s ,   a n d   c o m p l e x   n e t w o r k   a n a l y s i s .   T h i s   p a p e r   c o m b i n e s   t o p i c   m o d e l i n g   a n d   p a t h - f i n d i n g   a l g o r i t h m s   t o   d e t e r m i n e   w h e t h e r   p r o d u c t i v e   a u t h o r s   t e n d   t o   c o l l a b o r a t e   w i t h   o r   c i t e   r e s e a r c h e r s   w i t h   t h e   s a m e   o r   d i f f e r e n t   i n t e r e s t s ,   a n d   w h e t h e r   h i g h l y   c i t e d   a u t h o r s   t e n d   t o   c o l l a b o r a t e   w i t h   o r   c i t e   e a c h   o t h e r .   T a k i n g   i n f o r m a t i o n   r e t r i e v a l   a s   a   t e s t   f i e l d ,   t h e   r e s u l t s   s h o w   t h a t   p r o d u c t i v e   a u t h o r s   t e n d   t o   d i r e c t l y   c o a u t h o r   w i t h   a n d   c l o s e l y   c i t e   c o l l e a g u e s   s h a r i n g   t h e   s a m e   r e s e a r c h   i n t e r e s t s ;   t h e y   d o   n o t   g e n e r a l l y   c o l l a b o r a t e   d i r e c t l y   w i t h   c o l l e a g u e s   h a v i n g   d i f f e r e n t   r e s e a r c h   t o p i c s ,   b u t   i n s t e a d   d i r e c t l y   o r   i n d i r e c t l y   c i t e   t h e m ;   a n d   h i g h l y   c i t e d   a u t h o r s   d o   n o t   g e n e r a l l y   c o a u t h o r   w i t h   e a c h   o t h e r ,   b u t   c l o s e l y   c i t e   e a c h   o t h e r .   P u b l i s h e d   b y   E l s e v i e r   L t d . 	 I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 D i n g ,   Y   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 f i d o . d i n g @ g m a i l . c o m 	 	 	 N C R R   N I H   H H S   [ U 2 4   R R 0 2 9 8 2 2 ,   U 2 4   R R 0 2 9 8 2 2 - 0 1 ] 	 	 A h u j a   R a v i n d r a   K . ,   1 9 9 3 ,   N E T W O R K   F L O W S   T H E O R Y ;   A n   Y ,   2 0 0 4 ,   K N O W L   I N F   S Y S T ,   V 6 ,   P 6 6 4 ,   D O I   1 0 . 1 0 0 7 / s 1 0 1 1 5 - 0 0 3 - 0 1 2 8 - 3 ;   B a r a b a s i   A .   L . ,   2 0 0 2 ,   L I N K E D   E V E R Y T H I N G   I S ;   B e a v e r   D D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 3 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 5 4 2 1 4 3 3 7 ;   B l e i   D M ,   2 0 0 3 ,   J   M A C H   L E A R N   R E S ,   V 3 ,   P 9 9 3 ,   D O I   1 0 . 1 1 6 2 / j m l r . 2 0 0 3 . 3 . 4 - 5 . 9 9 3 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B r i n   S e r g e y ,   1 9 9 8 ,   P   7   I N T   W O R L D   W I D   W E ,   P 1 0 7 ;   B u n t i n e   W .   L . ,   1 9 9 4 ,   J   A R T I F I C I A L   I N T E L L I ,   V 2 ,   P 1 5 9 ;   C H R I S T A K I S   N A ,   2 0 0 9 ,   C O N N E C T E D   S U R P R I S I N G ,   P 1 3 5 ;   C r o n i n   B ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 7 8 ;   C r o n i n   B ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   D i n g   Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 5 7 0 9 1 0 9 ;   D i n g   Y ,   1 9 9 8 ,   I N T   I N F   L I B R   R E V ,   V 3 0 ,   P 3 6 7 ,   D O I   1 0 . 1 0 0 6 / i i l r . 1 9 9 9 . 0 1 0 3 ;   D i n g   Y ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 4 7 ;   E a s l e y   D a v i d ,   2 0 1 0 ,   N E T W O R K S   C R O W D S   M A R K ,   P 1 ;   F A L O U T S O S   C ,   2 0 0 4 ,   1 0   A C M   S I G K D D   C   S E A T ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G i l e s   C L ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 1 7 5 9 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 7 7 4 3 1 0 1 ;   G l a n z e l   W ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 2 5 7 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G o h   K I ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 1 2 5 8 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 2 0 2 3 0 1 2 9 9 ;   G o h   K I ,   2 0 0 3 ,   P H Y S   R E V   E ,   V 6 7 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 6 7 . 0 1 7 1 0 1 ,   1 0 . 1 1 0 3 / P h y s R e v . E . 6 7 . 0 1 7 1 0 1 ] ;   G r o s s m a n   J .   W . ,   2 0 0 2 ,   C   N U M E R A N T I U M ,   V 1 5 8 ,   P 2 0 2 ;   H a r a   N ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 9 1 ;   H E   B ,   2 0 1 0 ,   P L O S   C O M P U T A T I   U N P U B ;   J a f f e   A B ,   2 0 0 0 ,   A M   E C O N   R E V ,   V 9 0 ,   P 2 1 5 ,   D O I   1 0 . 1 2 5 7 / a e r . 9 0 . 2 . 2 1 5 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K l e i n b e r g   J o n ,   1 9 9 8 ,   P   A C M   S I A M   S   D I S C R   A ;   K n u t h   D . ,   1 9 9 7 ,   A R T   C O M P U T E R   P R O G R A M ;   K r e t s c h m e r   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 0 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 3 . 8 6 6 6 5 . 2 2 ;   K R E T S C H M E R   H ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 4 ;   L a u d e l   G ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 6 1 ;   L e y d e s d o r f f   L . ,   1 9 9 6 ,   S C I   P U B L   P O L I C Y ,   V 3 2 ,   P 2 7 9 ;   L i   X ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   7 T H   A C M / I E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P 4 1 9 ,   D O I   1 0 . 1 1 4 5 / 1 2 5 5 1 7 5 . 1 2 5 5 2 6 2 ;   L i u   X M ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 2 ;   M c C a l l u m   A ,   2 0 0 7 ,   J   A R T I F   I N T E L L   R E S ,   V 3 0 ,   P 2 4 9 ;   M c C l i n t o c k   M i c h a e l   D . ,   1 9 9 8 ,   O K L A   L   R E V ,   V 5 1 ,   P 6 5 9 ;   M c P h e r s o n   M ,   2 0 0 1 ,   A N N U   R E V   S O C I O L ,   V 2 7 ,   P 4 1 5 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . s o c . 2 7 . 1 . 4 1 5 ;   M i l o j e v i c   S ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 4 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 3 1 ;   M o o d y   J ,   2 0 0 4 ,   A M   S O C I O L   R E V ,   V 6 9 ,   P 2 1 3 ;   N e w m a n   M . ,   2 0 0 6 ,   S T R U C T U R E   D Y N A M I C S   N ;   N e w m a n   M . ,   2 0 1 0 ,   N E T W O R K S   I N T R O ,   P 6 3 ;   N e w m a n   M E J ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 0 0 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 4 5 1 0 0 ;   N e w m a n   M E J ,   2 0 0 4 ,   L E C T   N O T E S   P H Y S ,   V 6 5 0 ,   P 3 3 7 ;   D e   S o l l a   P r i c e   D e r e k   J . ,   1 9 6 6 ,   L I T T L E   S C I   B I G   S C I ;   R o d r i g u e z   M A ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 9 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 4 . 0 0 2 ;   R o s e n - Z v i   M . ,   2 0 0 4 ,   P   2 0   C   U N C   A R T   I N T ,   P 4 8 7 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   T a n g   J ,   2 0 0 8 ,   I E E E   D A T A   M I N I N G ,   P 1 0 5 5 ,   D O I   1 0 . 1 1 0 9 / I C D M . 2 0 0 8 . 7 1 ;   V i d g e n   R ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 6 1 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   Y a n   E J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 1 0 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 2 8 ;   Z h a i   C . ,   2 0 0 1 ,   P   2 4   A N N   I N T   A C M   S I G ,   P 3 3 4 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 8 3 9 5 2 . 3 8 4 0 1 9 ;   Z h a n g   P ,   2 0 0 7 ,   P   1 1   I N T   C   A R T   I N T   L ,   P 1 2 3 ,   D O I   1 0 . 1 1 4 5 / 1 2 7 6 3 1 8 . 1 2 7 6 3 4 2 	 5 6 	 5 4 	 5 6 	 6 	 9 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 1 	 5 	 1 	 	 	 	 	 1 8 7 	 2 0 3 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 8 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 9 8 W S 	 W O S : 0 0 0 2 8 5 6 2 6 0 0 0 0 1 5 	 2 1 3 4 4 0 5 7 	 
 
 J 	 S T I G L E R ,   S M 	 	 	 	 S T I G L E R ,   S M 	 	 	 C I T A T I O N   P A T T E R N S   I N   T H E   J O U R N A L S   O F   S T A T I S T I C S   A N D   P R O B A B I L I T Y 	 S T A T I S T I C A L   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C I T A T I O N S ;   B I B L I O M E T R I C S ;   G I N I   I N D E X ;   H E R F I N D A H L   I N D E X ;   S I M P S O N S   I N D E X ;   Q U A S I - S Y M M E T R Y ;   B R A D L E Y - T E R R Y   M O D E L ;   J O U R N A L S 	 M O D E L S ;   S C I E N C E 	 T h i s   i s   a   s t u d y   o f   t h e   u s e   o f   c i t a t i o n   d a t a   t o   i n v e s t i g a t e   t h e   r o l e   s t a t i s t i c s   j o u r n a l s   p l a y   i n   c o m m u n i c a t i o n   w i t h i n   t h a t   f i e l d   a n d   b e t w e e n   s t a t i s t i c s   a n d   o t h e r   f i e l d s .   T h e   s t u d y   l o o k s   a t   c i t a t i o n s   a s   i m p o r t - e x p o r t   s t a t i s t i c s   r e f l e c t i n g   i n t e l l e c t u a l   i n f l u e n c e .   T h e   p r i n c i p a l   f i n d i n g s   i n c l u d e :   t h e r e   i s   l i t t l e   v a r i a b i l i t y   i n   b o t h   t h e   n u m b e r   a n d   d i v e r s i t y   o f   i m p o r t s ,   b u t   g r e a t   v a r i a b i l i t y   i n   b o t h   t h e   n u m b e r   a n d   d i v e r s i t y   o f   e x p o r t s   a n d   h e n c e   i n   t h e   b a l a n c e   o f   t r a d e ;   t h e r e   i s   a   t e n d e n c y   f o r   i n f l u e n c e   t o   f l o w   f r o m   t h e o r y   t o   a p p l i c a t i o n s   t o   a   m u c h   g r e a t e r   e x t e n t   t h a n   i n   t h e   r e v e r s e   d i r e c t i o n ;   t h e r e   i s   l i t t l e   c o m m u n i c a t i o n   b e t w e e n   s t a t i s t i c s   a n d   p r o b a b i l i t y   j o u r n a l s .   T h e   e x p o r t   s c o r e s   m o d e l   i s   i n t r o d u c e d   a n d   e m p l o y e d   t o   m a p   a   s e t   o f   j o u r n a l s '   b i l a t e r a l   i n t e l l e c t u a l   i n f l u e n c e s   o n t o   a   o n e - d i m e n s i o n a l   s c a l e ,   a n d   t h e   C o x   e f f e c t   i s   i d e n t i f i e d   a s   a   p h e n o m e n o n   t h a t   c a n   o c c u r   w h e n   a   d i s c i p l i n a r y   p a p e r   a t t r a c t s   a   l a r g e   d e g r e e   o f   a t t e n t i o n   f r o m   o u t s i d e   i t s   d i s c i p l i n e . 	 	 S T I G L E R ,   S M   ( r e p r i n t   a u t h o r ) ,   U N I V   C H I C A G O , D E P T   S T A T , 5 7 3 4   U N I V   A V E , C H I C A G O , I L   6 0 6 3 7 ,   U S A . 	 	 	 	 	 	 A g r e s t i   A . ,   1 9 9 0 ,   C A T E G O R I C A L   D A T A   A N A ;   B i s h o p   Y M M ,   1 9 7 5 ,   D I S C R E T E   M U L T I V A R I A T ;   B O X   G E P ,   1 9 6 4 ,   J   R O Y   S T A T   S O C   B ,   V 2 6 ,   P 2 1 1 ;   C A U S S I N U S   H ,   1 9 6 6 ,   C R   A C A D   S C I   A   M A T H ,   V 2 6 3 ,   P 7 9 5 ;   C O X   D R ,   1 9 7 2 ,   J   R   S T A T   S O C   B ,   V 3 4 ,   P 1 8 7 ;   D a v i d   H .   A . ,   1 9 8 8 ,   M E T H O D   P A I R E D   C O M P ;   D E M P S T E R   A P ,   1 9 7 7 ,   J   R O Y   S T A T   S O C   B   M E T ,   V 3 9 ,   P 1 ;   D U N C A N   D B ,   1 9 5 5 ,   B I O M E T R I C S ,   V 1 1 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 1 4 7 8 ;   E F R O N   B ,   1 9 7 9 ,   A N N   S T A T ,   V 7 ,   P 1 ,   D O I   1 0 . 1 2 1 4 / a o s / 1 1 7 6 3 4 4 5 5 2 ;   E l k a n a   Y . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   F I E N B E R G   S E ,   1 9 7 6 ,   B I O M E T R I K A ,   V 6 3 ,   P 2 4 5 ,   D O I   1 0 . 1 0 9 3 / b i o m e t / 6 3 . 2 . 2 4 5 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 8 7 ,   S C I   J   C I T A T I O N   R E P O R ;   G O O D M A N   L A ,   1 9 6 5 ,   A M   J   S O C I O L ,   V 7 0 ,   P 5 6 4 ,   D O I   1 0 . 1 0 8 6 / 2 2 3 9 3 2 ;   G O O D M A N   L A ,   1 9 7 9 ,   J   A M   S T A T   A S S O C ,   V 7 4 ,   P 5 3 7 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 6 9 7 1 ;   K A P L A N   E L ,   1 9 5 8 ,   J   A M   S T A T   A S S O C ,   V 5 3 ,   P 4 5 7 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 1 8 6 8 ;   M A C R O B E R T S   M H ,   1 9 8 6 ,   S O C   S T U D   S C I ,   V 1 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 6 0 1 6 0 0 1 0 0 8 ;   M c C u l l a g h   P ,   1 9 8 9 ,   G E N E R A L I Z E D   L I N E A R   M ;   M E R T O N   R O B E R T   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I ;   M e r t o n   R .   K . ,   1 9 6 8 ,   S O C I A L   T H E O R Y   S O C I A L ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   S t i g l e r   G . ,   1 9 6 8 ,   O R G   I N D ;   S T I G L E R   G J ,   1 9 9 2 ,   I N   P R E S S   J   E C ;   S T I G L E R   S M ,   1 9 7 8 ,   I S I S ,   V 6 9 ,   P 2 3 4 ,   D O I   1 0 . 1 0 8 6 / 3 5 2 0 0 6 ;   S T I G L E R   S M ,   1 9 8 7 ,   S O C   S T U D   S C I ,   V 1 7 ,   P 3 3 2 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 7 0 1 7 0 0 2 0 0 7 ;   Z U C K E R M A N   H ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 7 5 	 2 7 	 5 4 	 5 4 	 0 	 3 	 I N S T   M A T H E M A T I C A L   S T A T I S T I C S 	 H A Y W A R D 	 I M S   B U S I N E S S   O F F I C E - S U I T E   6   3 4 0 1   I N V E S T M E N T   B L V D ,   H A Y W A R D ,   C A   9 4 5 4 5 	 0 8 8 3 - 4 2 3 7 	 	 	 S T A T   S C I 	 S t a t .   S c i . 	 F E B 	 1 9 9 4 	 9 	 1 	 	 	 	 	 9 4 	 1 0 8 	 	 1 0 . 1 2 1 4 / s s / 1 1 7 7 0 1 0 6 5 5 	 	 1 5 	 S t a t i s t i c s   &   P r o b a b i l i t y 	 M a t h e m a t i c s 	 N G 2 8 5 	 W O S : A 1 9 9 4 N G 2 8 5 0 0 0 0 5 	 	 
 
 J 	 N A R I N ,   F ;   M O L L ,   J K 	 	 	 	 N A R I N ,   F ;   M O L L ,   J K 	 	 	 B I B L I O M E T R I C S 	 A N N U A L   R E V I E W   O F   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 	 	 C O M P   H O R I Z O N S   I N C ,   C H E R R Y   H I L L ,   N J   0 8 0 3 4   U S A 	 	 	 	 	 	 	 A L L I S O N   P D ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 2 6 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 2 0 5 ;   B A K E R   D B ,   1 9 7 1 ,   C H E M   E N G   N E W S ,   V 4 9 ,   P 3 7 ,   D O I   1 0 . 1 0 2 1 / c e n - v 0 4 9 n 0 2 8 . p 0 3 7 ;   B A K E R   D B ,   1 9 6 6 ,   C H E M   E N G   N E W S       0 6 0 6 ,   V 4 4 ,   P 8 4 ;   B A K E R   D B ,   1 9 7 6 ,   C H E M   E N G   N E W S ,   V 5 4 ,   P 2 3 ,   D O I   1 0 . 1 0 2 1 / c e n - v 0 5 4 n 0 2 0 . p 0 2 3 ;   B A R R   K P ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 1 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 2 4 ;   B A Y E R   A E ,   1 9 6 6 ,   S O C I O L   E D U C ,   V 3 9 ,   P 3 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 1 9 2 0 ;   B E R T R A M   S J K ,   1 9 7 0 ,   T H E S I S   U   I L L I N O I S ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B O U R N E   C P ,   1 9 6 2 ,   A M   D O C ,   V 1 3 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 3 0 2 0 2 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a d f o r d   S C ,   1 9 4 8 ,   D O C U M E N T A T I O N ;   B R I T T A I N   J M ,   1 9 7 2 ,   5   B A T H   U   L I B R   W O R K   P ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 7 1 ,   N A T U R E ,   V 2 3 2 ,   P 4 5 8 ,   D O I   1 0 . 1 0 3 8 / 2 3 2 4 5 8 a 0 ;   B R O O K E S   B C ,   1 9 6 9 ,   N A T U R E ,   V 2 2 4 ,   P 9 5 3 ,   D O I   1 0 . 1 0 3 8 / 2 2 4 9 5 3 a 0 ;   B R O O K E S   B C ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 1 8 ;   B R O W N   C H ,   1 9 5 6 ,   A C R L 1 6   A M   L I B R   A S S   M ;   B U C K L A N D   M K ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 2 4 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 4 2 ;   B U S H   W C ,   1 9 7 4 ,   R E V   E C O N   S T A T ,   V 5 6 ,   P 1 2 3 ,   D O I   1 0 . 2 3 0 7 / 1 9 2 7 5 4 1 ;   C A R P E N T E R   M P ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 4 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 6 0 4 ;   C a s o n   H ,   1 9 3 6 ,   P S Y C H O L   B U L L ,   V 3 3 ,   P 9 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 8 6 3 5 ;   C L A R K   C V ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 3 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 4 ;   C L A R K   K E ,   1 9 5 7 ,   A M E R I C A S   P S Y C H O L O G I S ;   C L A R K E   B L ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 3 ,   P 8 2 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 3 . 3 6 0 8 . 8 2 2 ;   C O H E N S H A N I N   N ,   1 9 7 5 ,   I N N O V A T I O N   C I T A T I O N ;   C O I L E   R C ,   1 9 7 5 ,   J   D O C ,   V 3 1 ,   P 2 9 8 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C O L E   J R ,   1 9 7 4 ,   S C I E N C E ,   V 1 8 3 ,   P 3 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 3 . 4 1 2 0 . 3 2 ;   C O L E   J R ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 3 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 5 9 . 3 6 8 ;   C O L E   S ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 5 ;   C O X   E P ,   1 9 7 6 ,   J   B U S ,   V 4 9 ,   P 2 5 2 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S   D ;   C r a n e   E .   J . ,   1 9 4 4 ,   C H E M I C A L   E N G I N E E R I N G ,   V 2 2 ,   P 1 4 9 6 ;   C r a n e   E .   J . ,   1 9 4 4 ,   C H E M   E N G   N E W S ,   V 2 2 ,   P 1 4 7 8 ;   D I E K S   D ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 2 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 2 0 4 ;   D O B R O V   G M ,   1 9 6 8 ,   N A T U R E ,   V 2 1 9 ,   P 6 6 2 ,   D O I   1 0 . 1 0 3 8 / 2 1 9 6 6 2 a 0 ;   D O B R O V   G M ,   1 9 6 8 ,   D E C I S I O N   M A K I N G   N A T I ;   D O N O H U E   J C ,   1 9 7 3 ,   U N D E R S T A N D I N G   S C I E N T ;   F A I R T H O R N E   R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 5 2 1 ;   F R A M E   J D ,   1 9 7 6 ,   F E D   P R O C ,   V 3 5 ,   P 2 5 2 9 ;   F u s s l e r   H H ,   1 9 4 9 ,   L I B R   Q U A R T ,   V 1 9 ,   P 1 9 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G E L L E R   N L ,   1 9 7 5 ,   1 9 7 5   B E L M   C   U S   C I T   D ;   G I L C H R I S . A ,   1 9 6 6 ,   A S L I B   P R O C ,   V 1 8 ,   P 6 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 0 0 5 1 ;   G O F F M A N   W ,   1 9 7 0 ,   N A T U R E ,   V 2 2 6 ,   P 9 2 2 ,   D O I   1 0 . 1 0 3 8 / 2 2 6 9 2 2 a 0 ;   G O F F M A N   W ,   1 9 7 1 ,   J   A C M ,   V 1 8 ,   P 1 7 3 ,   D O I   1 0 . 1 1 4 5 / 3 2 1 6 3 7 . 3 2 1 6 4 0 ;   G O T T S C H A L K   C M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 3 ;   G O U D S M I T   S A ,   1 9 7 4 ,   S C I E N C E ,   V 1 8 3 ,   P 2 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 3 . 4 1 2 0 . 2 8 - a ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   G R O O S   O V ,   1 9 6 7 ,   A M   D O C ,   V 1 8 ,   P 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 8 0 1 0 8 ;   G R O S S   P L K ,   1 9 2 7 ,   S C I E N C E ,   V 6 6 ,   P 1 2 2 9 ;   H A G S T R O M   W O ,   1 9 7 1 ,   S O C I O L   E D U C ,   V 4 4 ,   P 3 7 5 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 0 2 9 ;   H A R T S O U G H   R ,   1 9 7 0 ,   J   G E N   P S Y C H O L ,   V 8 3 ,   P 1 9 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 2 1 3 0 9 . 1 9 7 0 . 9 7 1 0 8 0 2 ;   H e r d a n   G u s t a v ,   1 9 6 6 ,   A D V   T H E O R Y   L A N G U A G E ;   H U L M E   E W ,   1 9 2 3 ,   S T A T I S T I C A L   B I B L I O G R ;   * I   S C I E N T   I N F ,   1 9 6 1 ,   S C I   C I T   I N D ;   * I   S C I E N T   I N F ,   1 9 6 9 ,   S O C   S C I   C I T   I N D ;   I N H A B E R   H ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 1 0 2 ;   K E N D A L L   M G ,   1 9 6 0 ,   O P E R   R E S   Q U A R T ,   V 1 1 ,   P 3 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 7 1 7 7 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K I N G   D W ,   1 9 7 6 ,   S T A T I S T I C A L   I N D I C A T O ,   V 1 ;   K O C H E N   M ,   1 9 7 4 ,   I N F O R M   S T O R A G E   R E T ,   V 1 0 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 4 ) 9 0 0 5 9 - X ;   L A N C A S T E R   F W ,   1 9 7 4 ,   N E W S L E T T E R   L I B R A R Y   R ,   V 1 1 ,   P 7 ;   L e h m a n   H C ,   1 9 5 4 ,   S C I   M O N ,   V 7 8 ,   P 3 2 1 ;   L e h n u s   D o n a l d   J . ,   1 9 7 4 ,   M I L E S T O N E S   C A T A L O G I N ;   L E I M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 3 0 ;   L I N E   M ,   1 9 7 6 ,   I N T   S O C   S C I   J ,   V 2 8 ,   P 1 2 2 ;   L I N E   M B ,   1 9 7 4 ,   J   D O C ,   V 3 0 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 8 3 ;   L I P E T Z   B A ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 2 0 7 ;   L I P E T Z   B A ,   1 9 6 5 ,   M E A S U R E M E N T   E F F I C I E N ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   L u b r a n o   L i n d a ,   1 9 7 6 ,   S O V I E T   S O C I O L O G Y   S C I ;   M A N D E L B R O T   B . ,   1 9 5 5 ,   I N F O R M A T I O N   T H E O R Y ,   P 1 3 5 ;   M A R G O L I S   J ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 5 ,   P 1 2 1 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 5 . 3 7 6 7 . 1 2 1 3 ;   M A R T I N O   J P ,   1 9 7 1 ,   I E E E   T   E N G   M A N A G E ,   V E M 1 8 ,   P 1 4 6 ;   M A R T Y N   J ,   1 9 6 8 ,   1   A S L   O C C   P A P ;   M C C A U L E Y   J E ,   1 9 6 3 ,   S C I E N C E ,   V 1 4 1 ,   P 5 7 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 1 . 3 5 8 0 . 5 7 9 ;   M C G E R V E Y   J D ,   1 9 7 4 ,   S C I E N C E ,   V 1 8 3 ,   P 2 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 3 . 4 1 2 0 . 2 8 - b ;   M C G E R V E Y   J D ,   1 9 7 4 ,   S C I E N C E   N Y ,   V 1 8 3 ,   P 3 0 ;   M e a d o w s   A .   J . ,   1 9 7 4 ,   C O M M U N I C A T I O N   S C I ;   M e n a r d   H .   W . ,   1 9 7 1 ,   S C I   G R O W T H   C H A N G E ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M I R S K Y   E M ,   1 9 7 2 ,   S C I   S T U D ,   V 2 ,   P 2 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 2 0 0 2 0 0 3 0 4 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   M U L L I N S   N C ,   1 9 7 3 ,   T H E O R I E S   T H E O R Y   G R O U ;   N A L I M O V   V V ,   1 9 6 9 ,   N A U K O M E T R I I A   I Z U C H E N ;   N A R A N A N   S ,   1 9 7 1 ,   J   D O C ,   V 2 7 ,   P 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 1 0 ;   N A R I N   F ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 3 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 5 0 8 ;   N A R I N   F ,   1 9 7 6 ,   P B 2 5 2 3 3 9   N T I S   R E P ;   N E L S O N   C E ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I E N T ;   O N E I L L   E T ,   1 9 7 3 ,   3 6 T H   P   A N N   M   A M   S O C ,   P 1 7 7 ;   O R R   R H ,   1 9 6 4 ,   F E D   P R O C ,   V 2 3 ,   P 1 3 1 0 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P R I C E   D ,   1 9 7 6 ,   I N T   F O R U M   I N F O R M   D O C ,   V 1 ,   P 1 7 ;   P R I C E   D J ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I E N T ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 6 7 ,   S C I   T E C H N O L ,   V 7 0 ,   P 8 4 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P R I T C H A R D   A ,   1 9 7 2 ,   C O M P U T E R   L I T E R A T U R E ;   R A I S I G   L M ,   1 9 6 0 ,   S C I E N C E ,   V 1 3 1 ,   P 1 4 1 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 1 . 3 4 1 1 . 1 4 1 7 ;   S A L T O N   G ,   1 9 7 1 ,   J   D O C ,   V 2 7 ,   P 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 1 1 ;   S A R A C E V I C   T ,   1 9 7 1 ,   I N F O R M   S T O R A G E   R E T ,   V 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 1 ) 9 0 0 3 5 - 0 ;   S A R A C E V I C   T ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 1 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 2 0 7 ;   S H O C K L E Y   W ,   1 9 5 7 ,   P   I R E ,   V 4 5 ,   P 2 7 9 ,   D O I   1 0 . 1 1 0 9 / J R P R O C . 1 9 5 7 . 2 7 8 3 6 4 ;   S I M O N   H A ,   1 9 5 5 ,   B I O M E T R I K A ,   V 4 2 ,   P 4 2 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S O L O M O N   W E ,   1 9 7 2 ,   A M   S O C I O L ,   V 7 ,   P 1 3 ;   S T E V E N S   R E ,   1 9 5 3 ,   A C R L 6   M O N ,   P 1 0 ;   T A G L I A C O Z Z O   R ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 0 - 6 ;   * U S   N A T   S C I   F ,   1 9 7 3 ,   1 9 7 2   S C I   I N D ;   * U S   N A T   S C I   F ,   1 9 7 5 ,   1 9 7 4   S C I   I N D ;   V I C K E R Y   B C ,   1 9 4 8 ,   J   D O C ,   V 4 ,   P 1 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 1 3 3 ;   V I C K E R Y   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 1 9 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 4 ;   V I R G O   J ,   1 9 7 4 ,   T H E S I S   U   C H I C A G O ;   V L A C H Y   J ,   1 9 7 0 ,   C Z E C H   J   P H Y S ,   V 2 0 ,   P 1 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 6 9 5 9 8 6 ;   V L A C H Y   J ,   1 9 7 2 ,   T E O R I E   M E T O D A ,   V 6 ,   P 9 1 ;   V L A C H Y   J ,   1 9 7 0 ,   T E O R I E   M E T O D A ,   V 2 ,   P 1 2 1 ;   V o o s   H . ,   1 9 7 6 ,   J   A C A D   L I B R ,   V 1 ,   P 1 9 ;   W A D E   N ,   1 9 7 5 ,   S C I E N C E ,   V 1 8 8 ,   P 4 2 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 8 . 4 1 8 7 . 4 2 9 ;   W E I N B E R G   B H ,   1 9 7 4 ,   I N F O R M   S T O R A G E   R E T ,   V 1 0 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 4 ) 9 0 0 5 8 - 8 ;   W e i n s t o c k   M . ,   1 9 7 1 ,   E N C Y   L I B R A R Y   I N F O R M A ,   V 5 ,   P 1 6 ;   W E S T B R O O K   J H ,   1 9 6 0 ,   S C I E N C E ,   V 1 3 2 ,   P 1 2 2 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 2 . 3 4 3 5 . 1 2 2 9 ;   W I L K I N S O . E A ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 1 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 3 4 ;   X H I G N E S S E   L   V ,   1 9 6 7 ,   A m e r i c a n   P s y c h o l o g i s t ,   V 2 2 ,   P 7 7 8 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 4 9 6 1 ;   Y A E S   R J ,   1 9 7 4 ,   S C I E N C E ,   V 1 8 3 ,   P 3 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 3 . 4 1 2 0 . 3 1 ;   Z I P F   G K ,   1 9 7 2 ,   H U M A N   B E H A V I O R   P R I N C ;   Z U C K E R M A N   H ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 6 ;   Z U C K E R M A N   H A ,   1 9 6 8 ,   A M   J   S O C I O L ,   V 7 4 ,   P 2 7 6 ,   D O I   1 0 . 1 0 8 6 / 2 2 4 6 4 1 ;   1 9 6 8 ,   N A T U R E ,   V 2 1 7 ,   P 7 9 3 	 1 3 4 	 5 4 	 5 7 	 1 5 	 4 2 	 I N F O R M A T I O N   T O D A Y   I N C 	 M E D F O R D 	 1 4 3   O L D   M A R L T O N   P I K E ,   M E D F O R D ,   N J   0 8 0 5 5 - 8 7 5 0 	 0 0 6 6 - 4 2 0 0 	 	 	 A N N U   R E V   I N F O R M   S C I 	 A n n u .   R e v .   I n f o r m .   S c i .   T e c h n o l . 	 	 1 9 7 7 	 1 2 	 	 	 	 	 	 3 5 	 5 8 	 	 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 D V 7 8 8 	 W O S : A 1 9 7 7 D V 7 8 8 0 0 0 0 4 	 	 
 
 J 	 F a g e r b e r g ,   J ;   F o s a a s ,   M ;   S a p p r a s e r t ,   K 	 	 	 	 F a g e r b e r g ,   J a n ;   F o s a a s ,   M o r t e n ;   S a p p r a s e r t ,   K o s o n 	 	 	 I n n o v a t i o n :   E x p l o r i n g   t h e   k n o w l e d g e   b a s e 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I n n o v a t i o n   s t u d i e s ;   N e w   s c i e n t i f i c   f i e l d s ;   S p e c i a l i s m s ;   B i b l i o m e t r i c s ;   H a n d b o o k s 	 S O C I A L - S C I E N C E ;   E C O N O M I C S ;   F I E L D S 	 N e w   t y p e s   o f   k n o w l e d g e ,   a n d   n e w   w a y s   o f   o r g a n i s i n g   t h e   p r o d u c t i o n   o f   i t ,   m a y   e m e r g e   a s   k n o w l e d g e   p r o d u c e r s   r e s p o n d   t o   t h e   c h a l l e n g e s   p o s e d   b y   a   c h a n g i n g   s o c i e t y .   T h i s   p a p e r   f o c u s e s   o n   t h e   c o r e   k n o w l e d g e   o f   o n e   s u c h   e m e r g i n g   f i e l d ,   n a m e l y ,   i n n o v a t i o n   s t u d i e s .   T o   e x p l o r e   t h e   k n o w l e d g e   b a s e   o f   t h e   f i e l d ,   a   d a t a b a s e   o f   r e f e r e n c e s   i n   s c h o l a r l y   s u r v e y s   o f   v a r i o u s   a s p e c t s   o f   i n n o v a t i o n ,   p u b l i s h e d   i n   " h a n d b o o k s " ,   i s   a s s e m b l e d   a n d   a   n e w   m e t h o d o l o g y   f o r   a n a l y s i n g   t h e   k n o w l e d g e   b a s e   o f   a   f i e l d   w i t h   t h e   h e l p   o f   s u c h   d a t a   i s   d e v e l o p e d .   T h e   p a p e r   i d e n t i f i e s   t h e   c o r e   c o n t r i b u t i o n s   t o   t h e   l i t e r a t u r e   i n   t h i s   a r e a ,   t h e   m o s t   c e n t r a l   s c h o l a r s   a n d   i m p o r t a n t   r e s e a r c h   e n v i r o n m e n t s ,   a n d   a n a l y s e s   -   w i t h   t h e   h e l p   o f   c i t a t i o n s   i n   s c h o l a r l y   j o u r n a l s   -   h o w   t h e   c o r e   l i t e r a t u r e   i s   u s e d   b y   r e s e a r c h e r s   i n   d i f f e r e n t   s c i e n t i f i c   d i s c i p l i n e s   a n d   c r o s s - d i s c i p l i n a r y   f i e l d s .   B a s e d   o n   t h i s   i n f o r m a t i o n   a   c l u s t e r   a n a l y s i s   i s   u s e d   t o   d r a w   i n f e r e n c e s   a b o u t   t h e   s t r u c t u r e   o f   t h e   k n o w l e d g e   b a s e   o n   i n n o v a t i o n .   F i n a l l y ,   t h e   c h a n g i n g   c h a r a c t e r   o f   t h e   f i e l d   o v e r   t i m e   i s   a n a l y s e d ,   a n d   p o s s i b l e   c h a l l e n g e s   f o r   i t s   c o n t i n u i n g   d e v e l o p m e n t   a r e   d i s c u s s e d .   ( C )   2 0 1 2   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ F a g e r b e r g ,   J a n ]   U n i v   O s l o ,   C t r   T e c h n o l   I n n o v a t   &   C u l t u r e ,   T I K ,   N - 0 3 1 7   O s l o ,   N o r w a y ;   [ F a g e r b e r g ,   J a n ]   L u n d   U n i v ,   C I R C L E ,   S - 2 2 1 0 0   L u n d ,   S w e d e n ;   [ F a g e r b e r g ,   J a n ]   A a l b o r g   U n i v ,   I K E ,   A a l b o r g ,   D e n m a r k 	 F a g e r b e r g ,   J   ( r e p r i n t   a u t h o r ) ,   U n i v   O s l o ,   C t r   T e c h n o l   I n n o v a t   &   C u l t u r e ,   T I K ,   P o s t b o x   1 1 0 8 ,   N - 0 3 1 7   O s l o ,   N o r w a y . 	 j a n . f a g e r b e r g @ t i k . u i o . n o 	 	 	 	 	 A n d e r s e n   E S ,   2 0 0 9 ,   S C H U M P E T E R S   E V O L U T I O ;   A r r o w   K . ,   1 9 6 2 ,   R A T E   D I R E C T I O N   I N V E N ;   B e c h e r   T ,   2 0 0 1 ,   A C A D   T R I B E S   T E R R I T O R ;   B r a c z y k   H . J . ,   1 9 9 8 ,   R E G I O N A L   I N N O V A T I O N ;   B u r n s   T . ,   1 9 6 1 ,   M A N A G E M E N T   I N N O V A T I O ;   C h r i s t e n s e n   C .   M . ,   1 9 9 7 ,   I N N O V A T O R S   D I L E M M A   N ;   C l a u s e n   T ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 2 4 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 4 ;   C O H E N   W M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 1 2 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 5 3 ;   C o l e m a n   J .   S . ,   1 9 6 6 ,   M E D   I N N O V A T I O N ;   C o z i j n s e n   A n t o n ,   1 9 9 3 ,   H D B   I N N O V A T I O N   M A N A G ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C y e r t   R . M . ,   1 9 6 3 ,   B E H A V   T H E O R Y   F I R M ;   R o t h w e l l   R ,   1 9 9 4 ,   H D B   I N D   I N N O V A T I O N ;   D o s i   G . ,   1 9 8 8 ,   T E C H N I C A L   C H A N G E   E C ;   D o s i   G ,   2 0 0 6 ,   I N D   C O R P   C H A N G E ,   V 1 5 ,   P 8 9 1 ,   D O I   1 0 . 1 0 9 3 / i c c / d t l 0 2 8 ;   F a g e r b e r g   J ,   2 0 0 3 ,   J   E V O L   E C O N ,   V 1 3 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 9 1 - 0 0 3 - 0 1 4 4 - 1 ;   F a g e r b e r g   J ,   2 0 0 4 ,   O X F O R D   H D B   I N N O V A T I O ,   P 1 ;   F a g e r b e r g   J . ,   2 0 0 4 ,   O X F O R D   H D B   I N N O V A T I O ;   F a g e r b e r g   J ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 8 9 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 6 . 0 1 1 ;   F a g e r b e r g   J ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 1 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 2 . 0 0 6 ;   F r e e m a n   C . ,   1 9 8 7 ,   T E C H N O L O G Y   P O L I C Y   E C ;   F r e e m a n   C . ,   1 9 8 5 ,   S O C I A L   S C I   E N C Y ,   P 3 9 4 ;   F r e e m a n   C . ,   1 9 7 4 ,   E C   I N D   I N N O V A T I O N ;   G a l l o u j   F ,   2 0 1 0 ,   E L G A R   O R I G   R E F ,   P 1 ;   G o d i n   B . ,   2 0 0 6 ,   S C I   T E C H N O L ,   V 3 1 ,   P 6 3 1 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 0 6 2 9 1 8 6 5 ;   H a i r   J .   F . ,   2 0 1 0 ,   M U L T I V A R I A T E   D A T A   A N ;   H a l l   B .   H . ,   2 0 1 0 ,   H D B   E C   I N N O V A T I O N ,   V 1 ;   H a m b r i c k   D C ,   2 0 0 8 ,   A C A D   M A N A G E   R E V ,   V 3 3 ,   P 3 2 ;   H E N D E R S O N   R M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 4 9 ;   H i c k s   D ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 3 8 0 ;   H o u n s h e l l   D . ,   2 0 0 0 ,   S Y S T E M   E X P E R T S   C O M P U ;   K a r l s s o n   C . ,   2 0 0 8 ,   H D B   R E S   I N N O V A T I O N   C ;   K L I N E   S .   J . ,   1 9 8 6 ,   P O S I T I V E   S U M   S T R A T E G ,   P 2 7 5 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   L a n d s t r o m   H ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 5 4 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 0 9 ;   L u n d v a l l   B A ,   2 0 0 9 ,   H A N D B O O K   O F   I N N O V A T I O N   S Y S T E M S   A N D   D E V E L O P I N G   C O U N T R I E S :   B U I L D I N G   D O M E S T I C   C A P A B I L I T I E S   I N   A   G L O B A L   S E T T I N G ,   P 1 ;   L u n d v a l l   B . A . ,   1 9 9 2 ,   N A T L   S Y S T E M S   I N N O V A T ,   P 2 7 5 ;   M a r c h   J . G . ,   2 0 0 4 ,   M A N A G E M E N T   O R G   R E V ,   V 1 1 ,   P 5 ;   M a r t i n   B R ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 8 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 0 ;   M c C r a w   T .   K . ,   2 0 0 7 ,   P R O P H E T   I N N O V A T I O N   J ;   M e r t o n   M . ,   2 0 0 1 ,   D R U I D S   N E L S   W I N T   C   C ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   N E L S O N   R R ,   1 9 5 9 ,   J   P O L I T   E C O N ,   V 6 7 ,   P 2 9 7 ,   D O I   1 0 . 1 0 8 6 / 2 5 8 1 7 7 ;   N e l s o n   R .   R . ,   1 9 6 2 ,   R A T E   D I R E C T I O N   I N V E N ;   N e l s o n   R . R . ,   1 9 9 3 ,   N A T L   I N N O V A T I O N   S Y S T ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   P A V I T T   K ,   1 9 8 4 ,   R E S   P O L I C Y ,   V 1 3 ,   P 3 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 4 ) 9 0 0 1 8 - 0 ;   P o o l e   M .   S . ,   2 0 0 4 ,   H D B   O R G   C H A N G E   I N N O V ;   P o r t e r   M .   E . ,   1 9 9 0 ,   C O M P E T I T I V E   A D V A N T A G ;   R o g e r s   E . M ,   1 9 6 2 ,   D I F F U S I O N   I N N O V A T I O N ;   S a x e n i a n   A L ,   1 9 9 4 ,   R E G I O N A L   A D V A N T A G E   C ;   S c h m o o k l e r   J . ,   1 9 6 6 ,   I N V E N T I O N   E C   G R O W T H ;   S c h u m p e t e r   J A ,   2 0 0 3 ,   S O C I E T Y ,   V 4 0 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 2 1 1 5 - 0 0 3 - 1 0 3 9 - 3 ;   S c h u m p e t e r   J .   A . ,   1 9 1 2 ,   T H E O R Y   E C   D E V ;   S c h u m p e t e r   J . A . ,   1 9 4 2 ,   C A P I T A L I S M   S O C I A L I S M ;   S c h u m p e t e r   J ,   1 9 2 8 ,   E C O N   J ,   V 3 8 ,   P 3 6 1 ,   D O I   1 0 . 2 3 0 7 / 2 2 2 4 3 1 5 ;   S h a n e   S . ,   2 0 0 8 ,   H D B   T E C H N O L O G Y   I N N O V ;   S h a v i n i n a   L . V . ,   2 0 0 3 ,   I N T   H D B   I N N O V A T I O N ;   S I M O N   H A ,   1 9 5 9 ,   A M   E C O N   R E V ,   V 4 9 ,   P 2 5 3 ;   S i m o n   H A ,   1 9 6 5 ,   A D M   B E H A V ;   S t o n e m a n   P ,   1 9 9 5 ,   H D B   E C   I N N O V A T I O N   T E ;   T i d d   J . ,   1 9 9 7 ,   M A N A G I N G   I N N O V A T I O N ;   V o n   H i p p e l   E . ,   1 9 8 8 ,   S O U R C E S   I N N O V A T I O N ;   W h i t l e y   R .   D . ,   2 0 0 0 ,   I N T E L L E C T U A L   S O C I A L 	 6 5 	 5 3 	 5 5 	 6 	 9 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 S E P 	 2 0 1 2 	 4 1 	 7 	 	 	 S I 	 	 1 1 3 2 	 1 1 5 3 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 0 8 	 	 2 2 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 9 5 6 R B 	 W O S : 0 0 0 3 0 5 1 0 5 7 0 0 0 0 2 	 	 
 
 J 	 O s a r e h ,   F 	 	 	 	 O s a r e h ,   F 	 	 	 B i b l i o m e t r i c s ,   c i t a t i o n   a n a l y s i s   a n d   c o - c i t a t i o n   a n a l y s i s :   A   r e v i e w   o f   l i t e r a t u r e   . 1 . 	 L I B R I 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C H O L A R L Y   C O M M U N I C A T I O N ;   S C I E N C E ;   D O C U M E N T S ;   T O O L 	 A l t h o u g h   t h e   c o i n a g e   o f   t h e   t e r m   B i b l i o m e t r i c s   i s   f a i r l y   r e c e n t ,   i t s   u s a g e   a n d   p r a c t i c e   c a n   b e   t r a c e d   b a c k   t o   t h e   1 8 9 0 ' s .   B i b l i o m e t r i c s   h a s   b e e n   u s e d   v a s t l y   a s   a   q u a n t i t a t i v e   m e t h o d   f o r   e v a l u a t i n g   t h e   l i t e r a t u r e   i n   d i f f e r e n t   d i s c i p l i n e s ,   p a r t i c u l a r l y   i n   t h e   l a s t   t w o   d e c a d e s .   T h i s   a r t i c l e   i s   i n t e n d e d   t o   r e v i e w   b i b l i o m e t r i c s   a n d   o n e   o f   i t s   m a j o r   m e t h o d s   c i t a t i o n   a n a l y s i s   i n   t w o   d i f f e r e n t   p a r t s :   t h e   f i r s t   p a r t   o f   t h i s   a r t i c l e   a i m s   t o   p r e s e n t   a   b a c k g r o u n d   o f   t h e   b i b l i o m e t r i c s   a n d   c i t a t i o n   a n a l y s i s .   T h e   a p p l i c a t i o n s   o f   c i t a t i o n   a n a l y s i s   a r e   a l s o   s t u d i e d   i n   t h i s   p a r t   I n   t h e   s e c o n d   p a r t   o f   t h i s   a r t i c l e :   d o c u m e n t   a n d   a u t h o r   c o - c i t a t i o n   a n a l y s i s   a s   w e l l   a s   j o u r n a l - b y - j o u r n a l   a n d   c o u n t r y - b y - c o u n t r y   c i t a t i o n   a n a l y s i s   a r e   s t u d i e d .   M a p p i n g   s c i e n c e   a s   a n   a p p l i c a t i o n   o f   c o - c i t a t i o n   a n a l y s i s   i s   a l s o   s t u d i e d .   f i n a l l y   t h e   L i m i t a t i o n s ,   p r o b l e m s   a n d   r e l i a b i l i t y   a n d   v a l i d i t y   o f   c i t a t i o n   a n a l y s i s   a s   a   r e s e a r c h   m e t h o d   w i l l   b e   c o n s i d e r e d . 	 	 O s a r e h ,   F   ( r e p r i n t   a u t h o r ) ,   S H A H I D   C H A M R A N   U N I V ,   S C H   E D U C   &   P S Y C H O L ,   D E P T   L I B   S C I ,   A H W A Z ,   I R A N . 	 	 	 	 	 	 B E L K I N   N J ,   1 9 8 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 2 ,   P 1 0 9 ;   B e l l a r d o   T . ,   1 9 8 0 ,   L I B R   R E S ,   V 2 ,   P 2 3 1 ;   B O O K S T E I N   A ,   1 9 9 5 ,   5   I N T   C   I N T   S O C   S C I ,   P 7 3 ;   B O R G M A N   C L ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 2 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   * B R I T   S T A N D   I ,   1 9 7 6 ,   G L O S   D O C   T E R M ;   B R O A D U S   R N ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 3 ) 3 8 : 2 < 1 2 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   B R O O K E S   B C ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ;   C A M P B E L L   F ,   1 8 9 6 ,   T H E O R Y   N A T L   I N T   B I B L ;   C A W K E L L   A E ,   1 9 7 6 ,   I N F O R M   S C I E N T I S T ,   V 1 0 ,   P 3 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   D i o d a t o   V .   P ,   1 9 9 4 ,   D I C T   B I B L I O M E T R I C S ;   E d g e   D ,   1 9 7 9 ,   H i s t   S c i ,   V 1 7 ,   P 1 0 2 ;   E G G H E   I ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F O N E S C A   E N D ,   1 9 7 3 ,   B I B L I O G R A F I A   E S T A T I S ,   V 2 ,   P 5 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 8 8 ,   C U R R   C O N T E N T S ,   P 3 ;   G A R F I E L D   E ,   1 9 7 4 ,   E S S A Y S   I N F O R M   S C I ,   V 2 ,   P 1 3 6 ;   G A R F I E L D   E ,   1 9 8 0 ,   E S S A Y S   I N F O R M A T I O N   S ,   P 6 3 4 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G a r f i e l d   E . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 7 9 ;   G A R F I E L D   E ,   1 9 8 3 ,   E S S A Y S   I N F O R M A T I O N   S ,   P 1 3 1 ;   G A R F I E L D   E ,   1 9 7 9 ,   C U R R   C O N T E N T S ,   P 2 4 9 ;   G A R F I O E L D   E ,   1 9 9 1 ,   S C I   C I T A T I O N   I N D E X   J ;   H a i q i   Z h a n g ,   1 9 9 4 ,   S c i e n t o m e t r i c s ,   V 3 1 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 7 4 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H e r t z e l   D .   H ,   1 9 8 7 ,   E N C Y   L I B R A R Y   I N F O   S 7 ,   P 1 4 4 ;   H u l m e   E .   W . ,   1 9 2 3 ,   S T A T   B I B L I O G R A P H Y   R E ;   K A P L A N   N ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 5 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K O C H E   M ,   1 9 7 4 ,   P R I N C I P L E S   I N F O R M A T I ;   L a n c a s t e r   F .   W . ,   1 9 7 7 ,   M E A S U R E M E N T   E V A L U A T I ;   L a n c a s t e r   F . W ,   1 9 9 1 ,   B I B L I O M E T R I C   M E T H O D S ;   L A N G A N A T H A N   S R ,   1 9 4 8 ,   P   A S L   A N N   C   L E A M   S P A ;   L A W A N I   S M ,   1 9 8 1 ,   L I B R I ,   V 3 1 ,   P 2 9 4 ;   L a w a n i   S .   M . ,   1 9 8 0 ,   T H E S I S   F L O R I D A   S T A T E ;   L E P A I R   C ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   L O R D   S ,   1 9 8 4 ,   A R G U S ,   V 1 3 ,   P 5 9 ;   M A R S H A K O V A   I V ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 8 6 1 ;   N A L I M O V   V V ,   1 9 6 9 ,   N A U K O M E T R I Y A ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N i c h o l a s   D . ,   1 9 7 8 ,   L I T   B I B L I O M E T R I C S ;   O T L E T   P . ,   1 9 8 9 ,   T R A I T E   D O C U M E N T A T I O N ;   P E R I T Z   B C ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 4 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 4 4 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   P O T T E R   W G ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 5 ;   P O T T E R   W G ,   1 9 8 8 ,   J   A C A D   L I B ,   V 1 4 ;   P R I C E   D J D ,   1 9 6 9 ,   P   I S R A E L   A C A D   S C I   H U ,   V 6 ,   P 9 8 ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R A I S I G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 5 0 ;   R A N G A N A T H A N   S R ,   1 9 6 9 ,   A N N   S E M   D O C   R E S   T R A I ,   P 2 8 5 ;   R A O   I K R ,   1 9 9 3 ,   L I B   S C I ,   V 3 0 ,   p R 1 ;   S A N D I S O N   A ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 5 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 3 9 ;   S C H A W   W M ,   1 9 7 9 ,   I N F O R M A T I O N   C H O I C E S ,   V 1 6 ,   P 1 4 ;   S C H R A D E R   A M ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 1 5 1 ;   S E N G U P T A   I N ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S N Y D E R   H ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 7 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 2 0 2 ;   S O P E R   M E ,   1 9 9 0 ,   L I B   T H E S A U R I S   A S S I S T ;   S T E V E N S   R E ,   1 9 5 3 ,   A M   C O L L   R E S   L I B   M O N O ;   T O M A J K O   K G ,   1 9 8 5 ,   S E R I A L S   L I B R ,   V 1 0 ,   P 2 8 9 ,   D O I   1 0 . 1 3 0 0 / J 1 2 3 v 1 0 n 0 1 _ 3 0 ;   V A N R A A N   A F J ,   1 9 9 0 ,   N A T U R E ,   V 3 4 7 ,   P 6 2 6 ,   D O I   1 0 . 1 0 3 8 / 3 4 7 6 2 6 a 0 ;   W e b b   E u g e n e   J . ,   1 9 6 6 ,   U N O B T R U S I V E   M E A S U R E S ;   W E I N S T O C K   M ,   1 9 7 1 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 5 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   Z i m a n   J . ,   1 9 6 8 ,   P U B L I C   K N O W L E D G E   S O C 	 7 0 	 5 3 	 5 3 	 1 1 	 5 6 	 W A L T E R   D E   G R U Y T E R   G M B H 	 B E R L I N 	 G E N T H I N E R   S T R A S S E   1 3 ,   D - 1 0 7 8 5   B E R L I N ,   G E R M A N Y 	 0 0 2 4 - 2 6 6 7 	 1 8 6 5 - 8 4 2 3 	 	 L I B R I 	 L i b r i 	 S E P 	 1 9 9 6 	 4 6 	 3 	 	 	 	 	 1 4 9 	 1 5 8 	 	 1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 	 	 1 0 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 W F 3 1 3 	 W O S : A 1 9 9 6 W F 3 1 3 0 0 0 0 3 	 	 
 
 J 	 L i u ,   X J ;   Z h a n g ,   L A ;   H o n g ,   S 	 	 	 	 L i u ,   X i n g j i a n ;   Z h a n g ,   L i a n g ;   H o n g ,   S o n g 	 	 	 G l o b a l   b i o d i v e r s i t y   r e s e a r c h   d u r i n g   1 9 0 0 - 2 0 0 9 :   a   b i b l i o m e t r i c   a n a l y s i s 	 B I O D I V E R S I T Y   A N D   C O N S E R V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   B i o d i v e r s i t y ;   C o n s e r v a t i o n ;   R e s e a r c h   t r e n d s ;   S c i e n t i f i c   o u t p u t s 	 S P E C I E S - D I V E R S I T Y ;   G E N E T I C   D I V E R S I T Y ;   T R O P I C A L   F O R E S T ;   R E S E A R C H   T R E N D S ;   C O N S E R V A T I O N ;   P A T T E R N S ;   C O N S E Q U E N C E S ;   E C O L O G Y ;   B I O L O G Y ;   T H R E A T S 	 W e   p e r f o r m e d   a   b i b l i o m e t r i c   a n a l y s i s   o f   p u b l i s h e d   b i o d i v e r s i t y   r e s e a r c h   f o r   t h e   p e r i o d   o f   1 9 0 0 - 2 0 0 9 ,   b a s e d   o n   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   d a t a b a s e .   O u r   a n a l y s i s   r e v e a l s   t h e   a u t h o r i a l ,   i n s t i t u t i o n a l ,   s p a t i o t e m p o r a l ,   a n d   c a t e g o r i c a l   p a t t e r n s   i n   b i o d i v e r s i t y   r e s e a r c h   a n d   p r o v i d e s   a n   a l t e r n a t i v e   d e m o n s t r a t i o n   o f   r e s e a r c h   a d v a n c e m e n t s ,   w h i c h   m a y   s e r v e   a s   a   p o t e n t i a l   g u i d e   f o r   f u t u r e   r e s e a r c h .   T h e   g r o w t h   o f   a r t i c l e   o u t p u t s   h a s   e x p l o d e d   s i n c e   t h e   1 9 9 0 s ,   a l o n g   w i t h   a n   i n c r e a s i n g   c o l l a b o r a t i o n   i n d e x ,   r e f e r e n c e s ,   a n d   c i t a t i o n s .   E c o l o g y ,   e n v i r o n m e n t a l   s c i e n c e s ,   b i o d i v e r s i t y   c o n s e r v a t i o n s ,   a n d   p l a n t   s c i e n c e   w e r e   m o s t   f r e q u e n t l y   u s e d   s u b j e c t   c a t e g o r i e s   i n   b i o d i v e r s i t y   s t u d i e s ,   a n d   B i o l o g i c a l   C o n s e r v a t i o n ,   J o u r n a l   o f   S o i l   a n d   W a t e r   C o n s e r v a t i o n ,   C o n s e r v a t i o n   B i o l o g y   a n d   B i o d i v e r s i t y   a n d   C o n s e r v a t i o n   w e r e   m o s t   a c t i v e   j o u r n a l s   i n   t h i s   f i e l d .   T h e   U n i t e d   S t a t e s   w a s   t h e   l a r g e s t   c o n t r i b u t o r   i n   g l o b a l   b i o d i v e r s i t y   r e s e a r c h ,   a s   t h e   U . S .   p r o d u c e d   t h e   m o s t   s i n g l e - c o u n t r y   a n d   c o l l a b o r a t i v e   a r t i c l e s ,   h a d   t h e   g r e a t e s t   n u m b e r   o f   t o p   r e s e a r c h   i n s t i t u t i o n s ,   a n d   h a d   a   c e n t r a l   p o s i t i o n   i n   c o l l a b o r a t i o n   n e t w o r k s .   W e   p e r c e i v e d   a n   i n c r e a s i n g   n u m b e r   o f   b o t h   i n t e r n a t i o n a l l y   c o l l a b o r a t i v e   a n d   i n t e r - i n s t i t u t i o n a l l y   c o l l a b o r a t i v e   a r t i c l e s ,   w i t h   t h e   l a t t e r   f o r m   o f   c o l l a b o r a t i o n   b e i n g   m o r e   p r e v a l e n t   t h a n   t h e   f o r m e r .   A   k e y w o r d   a n a l y s i s   f o u n d   s e v e r a l   i n t e r e s t i n g   t e r m i n o l o g y   p r e f e r e n c e s ,   c o n f i r m e d   c o n s e r v a t i o n ' s   c e n t r a l   p o s i t i o n   a s   a   t o p i c   i n   b i o d i v e r s i t y   r e s e a r c h ,   r e v e a l e d   t h e   a d o p t i o n   o f   a d v a n c e d   t e c h n o l o g i e s ,   a n d   d e m o n s t r a t e d   k e e n   i n t e r e s t   i n   b o t h   t h e   p a t t e r n s   a n d   u n d e r l y i n g   p r o c e s s e s   o f   e c o s y s t e m s .   O u r   s t u d y   r e v e a l s   p a t t e r n s   i n   s c i e n t i f i c   o u t p u t s   a n d   a c a d e m i c   c o l l a b o r a t i o n s   a n d   s e r v e s   a s   a n   a l t e r n a t i v e   a n d   i n n o v a t i v e   w a y   o f   r e v e a l i n g   g l o b a l   r e s e a r c h   t r e n d s   i n   b i o d i v e r s i t y . 	 [ H o n g ,   S o n g ]   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a ;   [ Z h a n g ,   L i a n g ]   C h i n e s e   A c a d   S c i ,   I n s t   G e o d e s y   &   G e o p h y s ,   W u h a n ,   P e o p l e s   R   C h i n a ;   [ L i u ,   X i n g j i a n ]   T e x a s   S t a t e   U n i v   S a n   M a r c o s ,   J a m e s   &   M a r i l y n   L o v e l l   C t r   E n v i r o n m   G e o g   &   H a z a r d ,   S a n   M a r c o s ,   T X   U S A ;   [ L i u ,   X i n g j i a n ]   U n i v   C a m b r i d g e ,   D e p t   G e o g ,   C a m b r i d g e   C B 2   3 E N ,   E n g l a n d 	 H o n g ,   S   ( r e p r i n t   a u t h o r ) ,   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a . 	 e n v i r o n m e n t a l a n a l y t i c s @ g m a i l . c o m 	 	 	 	 	 B o r g a t t i   S .   P . ,   2 0 0 2 ,   N E T D R A W   N E T W O R K   V I S U ;   B u r n s   C E ,   2 0 0 9 ,   B I O D I V E R S   C O N S E R V ,   V 1 8 ,   P 2 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 0 9 - 9 5 9 0 - x ;   C a m e r o n   E Z ,   2 0 0 8 ,   C O N S E R V   B I O L ,   V 2 2 ,   P 2 3 2 ,   D O I   [ 1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 3 9 . 2 0 0 8 . 0 0 8 9 2 . x ,   1 0 . 1 1 1 1 / i . 1 5 2 3 - 1 / 3 9 . 2 0 0 8 . 0 0 8 9 2 . x ] ;   C a o   M ,   1 9 9 7 ,   B I O D I V E R S   C O N S E R V ,   V 6 ,   P 9 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 8 3 6 7 6 3 0 9 2 3 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h e n   J i n g ,   2 0 0 9 ,   B i o d i v e r s i t y   S c i e n c e ,   V 1 7 ,   P 4 2 3 ;   C h i u   W T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 1 5 2 3 - 1 ;   C o s t e l l o   M J ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 2 1 1 0 ;   G l o w k a   L . ,   1 9 9 4 ,   G U I D E   C O N V E N T I O N   B I O ;   G o l d y n   H ,   2 0 1 0 ,   B I O D I V E R S   C O N S E R V ,   V 1 9 ,   P 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 0 9 - 9 7 0 2 - 7 ;   G o n z a l e z - A l c a i d e   G ,   2 0 0 8 ,   F E R T I L   S T E R I L ,   V 9 0 ,   P 9 4 1 ,   D O I   1 0 . 1 0 1 6 / j . f e r t n s t e r t . 2 0 0 7 . 0 7 . 1 3 7 8 ;   G r a y   J S ,   1 9 9 7 ,   B I O D I V E R S   C O N S E R V ,   V 6 ,   P 1 5 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 8 3 3 5 9 0 1 8 4 7 ;   G u d e   P H ,   2 0 0 7 ,   E C O L   A P P L ,   V 1 7 ,   P 1 0 0 4 ,   D O I   1 0 . 1 8 9 0 / 0 5 - 1 1 0 8 ;   H a d r y s   H ,   1 9 9 2 ,   M O L   E C O L ,   V 1 ,   P 5 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 9 4 X . 1 9 9 2 . t b 0 0 1 5 5 . x ;   H e   T W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 2 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 1 8 - 4 ;   H e i n o   J ,   2 0 0 5 ,   B I O D I V E R S   C O N S E R V ,   V 1 4 ,   P 4 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 0 4 - 5 0 6 4 - z ;   H e r n a n d e z - S t e f a n o n i   J L ,   2 0 0 6 ,   B I O D I V E R S   C O N S E R V ,   V 1 5 ,   P 1 4 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 0 5 - 0 5 9 8 - 6 ;   H o   Y S ,   2 0 0 7 ,   J   E N V   P R O T E C T I O N   S C I ,   V 1 ,   P 1 ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   L i   J F ,   2 0 0 9 ,   C R O A T   C H E M   A C T A ,   V 8 2 ,   P 6 9 5 ;   L i   T ,   2 0 0 8 ,   N E U R O S C I   L E T T ,   V 4 4 1 ,   P 2 4 8 ,   D O I   1 0 . 1 0 1 6 / j . n e u l e t . 2 0 0 8 . 0 6 . 0 4 4 ;   M a l a r v i z h i   R . ,   2 0 1 0 ,   W o r l d   A p p l i e d   S c i e n c e s   J o u r n a l ,   V 8 ,   P 9 3 0 ;   M a n z e l l i   M ,   2 0 0 7 ,   B I O D I V E R S   C O N S E R V ,   V 1 6 ,   P 1 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 0 6 - 9 0 4 8 - 3 ;   M a r g u l e s   C R ,   2 0 0 0 ,   N A T U R E ,   V 4 0 5 ,   P 2 4 3 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 1 2 2 5 1 ;   M u e l l e r   U G ,   1 9 9 9 ,   T R E N D S   E C O L   E V O L ,   V 1 4 ,   P 3 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 5 3 4 7 ( 9 9 ) 0 1 6 5 9 - 6 ;   M U Y Z E R   G ,   1 9 9 3 ,   A P P L   E N V I R O N   M I C R O B ,   V 5 9 ,   P 6 9 5 ;   M y e r s   N ,   2 0 0 0 ,   N A T U R E ,   V 4 0 3 ,   P 8 5 3 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 0 2 5 0 1 ;   P a r k e r   S S ,   2 0 1 0 ,   B I O D I V E R S   C O N S E R V ,   V 1 9 ,   P 3 7 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 1 0 - 9 9 2 4 - 8 ;   P i e l k e   R A ,   2 0 0 2 ,   P H I L O S   T   R O Y   S O C   A ,   V 3 6 0 ,   P 1 7 0 5 ,   D O I   1 0 . 1 0 9 8 / r s t a . 2 0 0 2 . 1 0 2 7 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   T a r k o w s k i   S M ,   2 0 0 7 ,   E U R   J   P U B L I C   H E A L T H ,   V 1 7 ,   P 1 4 ,   D O I   1 0 . 1 0 9 3 / e u r p u b / c k m 0 6 5 ;   T h u i l l e r   W ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 8 2 4 5 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 9 9 0 2 1 0 2 ;   T i a n   Y G ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 0 . 0 0 1 ;   T i s d e l l   C ,   2 0 0 3 ,   E C O L   E C O N ,   V 4 5 ,   P 3 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 1 - 8 0 0 9 ( 0 3 ) 0 0 0 9 1 - 0 ;   V I T O U S E K   P M ,   1 9 9 4 ,   E C O L O G Y ,   V 7 5 ,   P 1 8 6 1 ,   D O I   1 0 . 2 3 0 7 / 1 9 4 1 5 9 1 ;   X i e   S D ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 2 8 - 0 ;   Z h a n g   L ,   2 0 1 0 ,   E C O L   E N G ,   V 3 6 ,   P 9 7 3 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e n g . 2 0 1 0 . 0 4 . 0 2 9 ;   Z h a n g   W W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 6 3 - 0 	 3 8 	 5 2 	 6 0 	 1 2 	 1 3 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 9 6 0 - 3 1 1 5 	 	 	 B I O D I V E R S   C O N S E R V 	 B i o d i v e r s .   C o n s e r v . 	 A P R 	 2 0 1 1 	 2 0 	 4 	 	 	 	 	 8 0 7 	 8 2 6 	 	 1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 1 0 - 9 9 8 1 - z 	 	 2 0 	 B i o d i v e r s i t y   C o n s e r v a t i o n ;   E c o l o g y ;   E n v i r o n m e n t a l   S c i e n c e s 	 B i o d i v e r s i t y   &   C o n s e r v a t i o n ;   E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y 	 7 3 7 G B 	 W O S : 0 0 0 2 8 8 5 5 6 0 0 0 0 0 8 	 	 
 
 J 	 C a m i ,   J ;   S u n e n - P i n o l ,   E ;   M e n d e z - V a z q u e z ,   R 	 	 	 	 C a m i ,   J ;   S u n e n - P i n o l ,   E ;   M e n d e z - V a z q u e z ,   R 	 	 	 B i b l i o m e t r i c   m a p   o f   S p a i n   1 9 9 4 - 2 0 0 2 :   b i o m e d i c i n e   a n d   h e a l t h   s c i e n c e s 	 M E D I C I N A   C L I N I C A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b i o m e d i c a l   a n d   h e a l t h   s c i e n c e s   r e s e a r c h ;   r e s e a r c h   e v a l u a t i o n ;   S p a i n 	 S P A N I S H   S C I E N T I F I C   P R O D U C T I O N ;   C I T A T I O N - I N D E X ;   C O O P E R A T I O N ;   C O U N T R I E S 	 B A C K G R O U N D   A N D   O B J E C T I V E :   T h e   p r e s e n t   s t u d y   i s   a   1 9 9 4 - 2 0 0 2   u p d a t e   o f   t h e   S p a n i s h   b i o m e d i c a l   b i b l i o m e t r i c   m a p   t h a t   f o l l o w s   o t h e r   r e p o r t s   a l r e a d y   p u b l i s h e d   i n   M E D I C I N A   C U N I C A   c o n c e r n i n g   t h e   p r e v i o u s   p e r i o d s   1 9 8 6 - 1 9 8 9   a n d   1 9 9 0 - 1 9 9 3 .   M A T E R I A L   A N D   M E T H O D :   T h e   r e s u l t s   a r e   r e s t r i c t e d   t o   c i t a b l e   d o c u m e n t s ,   i t e m s   t h a t   w e r e   c l a s s i f i e d   i n   7 0   c a t e g o r i e s   a c c o r d i n g   t o   1 9 9 6   J C R .   B i b l i o m e t r i c   a n a l y s i s   w a s   b a s e d   o n   s i m p l e   ( n u m b e r   o f   d o c u m e n t s   a n d   n u m b e r   o f   r e c e i v e d   c i t a t i o n s )   a n d   c o m p o s i t e   i n d i c a t o r s   ( i n t e r n a t i o n a l   c o l l a b o r a t i o n ,   o r   p e r c e n t   o f   n o n   c i t e d   d o c u m e n t s ) .   R E S U L T S :   S p a i n   o c c u p i e s   t h e   e l e v e n t h   p l a c e   i n   t h e   w o r l d ,   a n d   t h e   s e v e n t h   p l a c e   a m o n g   t h e   E u r o p e a n   c o u n t r i e s .   D e s p i t e   S p a n i s h   c o n t r i b u t i o n   t o   t h e   w o r l d   b i o m e d i c a l   p r o d u c t i o n   i s   2 . 4   %   i t   a c c o u n t s   f o r   o n l y   1 . 8   %   o f   t h e   w h o l e   c i t a t i o n s .   S p a n i s h   h e a l t h   s e c t o r   i s   r e s p o n s i b l e   f o r   n e a r l y   t h e   h a l f   o f   t h e   t o t a l   b i o m e d i c a l   o u t p u t .   T h e   2 4 . 8   %   o f   d o c u m e n t s   a r e   p u b l i s h e d   i n   i n t e r n a t i o n a l   c o l l a b o r a t i o n ,   a   p r o p o r t i o n   t h a t   a c c u m u l a t e s   t h e   4 5 . 5   %   o f   b i o m e d i c a l   c i t a t i o n s   r e c e i v e d .   C a t a l o n i a   s t a n d s   o u t   f o r   i t s   c l i n i c a l   r e s e a r c h   p r o f i l e ,   M a d r i d   f o r   i t s   C S I C   h i g h   d e n s i t y   c e n t r e s   w h i l e   A n d a l u s i a   a n d   V a l e n c i a   f o r   t h e i r   a c t i v i t y   f r o m   u n i v e r s i t y   s e c t o r .   C O N C L U S I O N S :   A l t h o u g h   t h e   s u s t a i n e d   g r o w t h   i n   t h e   n u m b e r   o f   d o c u m e n t s ,   t h e   r a t i o   o f   c i t a t i o n s   p e r   d o c u m e n t   r e m a i n s   b e l o w   t h e   i n t e r n a t i o n a l   a v e r a g e .   D e s p i t e   o f   t h e   i n t e r n a t i o n a l   p u b l i c a t i o n   i s   g r e a t e r   t h a n   t h e   w o r l d   a v e r a g e ,   i t   r e m a i n s   u n d e r   t h e   E u r o p e a n   c o u n t r i e s   a v e r a g e .   T h e   a n a l y s i s   o f   t h e   g e o g r a p h i c a l   a n d   c e n t r e   d o c u m e n t s   d i s t r i b u t i o n   s h o w s   a   s i m i l a r   s t r u c t u r e   o f   b i o m e d i c a l   s c i e n t i f i c   s y s t e m   w h e n   c o m p a r e d   t o   p r e c e d i n g   a n a l y s e s ,   n e v e r t h e l e s s   w i t h   b e t t e r   r e s u l t s . 	 I M I M ,   B a r c e l o n a ,   S p a i n ;   U n i v   P o m p e u   F a b r a ,   B a r c e l o n a ,   S p a i n 	 C a m i ,   J   ( r e p r i n t   a u t h o r ) ,   D r   A i g u a d e r   8 0 ,   B a r c e l o n a   0 8 0 0 3 ,   S p a i n . 	 j c a m i @ i m i m . e s 	 S u n e n   P i n y o l ,   E d u a r d / E - 8 6 4 4 - 2 0 1 5 	 	 	 	 A d a m s   J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 6 ,   P 6 1 5 ,   D O I   1 0 . 1 0 3 8 / 2 5 2 1 9 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 5 1 5 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 4 8 1 ;   C A M I   J ,   1 9 9 3 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 1 ,   P 7 2 1 ;   C A M I   J ,   2 0 0 3 ,   C A R A C T E R I Z A C I O N   B I B L ;   C A M I   J ,   1 9 9 4 ,   P R O D U C I O N   C I E N T I F I C A ;   D E M O Y A A N E G O N   F ,   2 0 0 4 ,   I N D I C A D O R E S   C I E N T I F I ;   G l a n z e l   W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 3 2 ;   G o m e z   I ,   2 0 0 4 ,   R E V   C L I N   E S P ,   V 2 0 4 ,   P 7 5 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 5 8 8 0 1 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   * O E C D   S C I ,   2 0 0 3 ,   T E C H N   I N D   S C O R   2 0 0 3 ;   P E S T A N A   A ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 7 5 ;   R a h m a n   M ,   2 0 0 3 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 9 ,   P 2 4 9 ;   R a h m a n   M ,   2 0 0 3 ,   P U B L I C   H E A L T H ,   V 1 1 7 ,   P 2 7 4 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 3 - 3 5 0 6 ( 0 3 ) 0 0 0 6 8 - 4 ;   * S C I   E N G   I N D ,   2 0 0 4 ,   N A T   S C I   F D N 	 1 6 	 5 2 	 6 4 	 1 	 1 7 	 E D I C I O N E S   D O Y M A   S / L 	 B A R C E L O N A 	 T R A V   D E   G R A C I A   1 7 - 2 1 ,   0 8 0 2 1   B A R C E L O N A ,   S P A I N 	 0 0 2 5 - 7 7 5 3 	 	 	 M E D   C L I N - B A R C E L O N A 	 M e d .   C l i n . 	 J A N   2 	 2 0 0 5 	 1 2 4 	 3 	 	 	 	 	 9 3 	 1 0 1 	 	 1 0 . 1 1 5 7 / 1 3 0 7 0 8 6 8 	 	 9 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 9 0 0 U O 	 W O S : 0 0 0 2 2 7 2 4 0 0 0 0 0 0 3 	 1 5 7 1 0 0 9 4 	 
 
 J 	 M i l o j e v i c ,   S ;   S u g i m o t o ,   C R ;   Y a n ,   E J ;   D i n g ,   Y 	 	 	 	 M i l o j e v i c ,   S t a s a ;   S u g i m o t o ,   C a s s i d y   R . ;   Y a n ,   E r j i a ;   D i n g ,   Y i n g 	 	 	 T h e   C o g n i t i v e   S t r u c t u r e   o f   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e :   A n a l y s i s   o f   A r t i c l e   T i t l e   W o r d s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 N E U R A L - N E T W O R K   R E S E A R C H ;   N O R T H - A M E R I C A N   L I B R A R Y ;   C O M B I N E D   C O C I T A T I O N ;   J O U R N A L   A R T I C L E S ;   C O - W O R D S ;   L I S ;   S C I E N T O M E T R I C S ;   J A S I S ;   T I M E ;   D I S C I P L I N E 	 T h i s   s t u d y   c o m p r i s e s   a   s u i t e   o f   a n a l y s e s   o f   w o r d s   i n   a r t i c l e   t i t l e s   i n   o r d e r   t o   r e v e a l   t h e   c o g n i t i v e   s t r u c t u r e   o f   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e   ( L I S ) .   T h e   u s e   o f   t i t l e   w o r d s   t o   e l u c i d a t e   t h e   c o g n i t i v e   s t r u c t u r e   o f   L I S   h a s   b e e n   r e l a t i v e l y   n e g l e c t e d .   T h e   p r e s e n t   s t u d y   a d d r e s s e s   t h i s   g a p   b y   p e r f o r m i n g   ( a )   c o - w o r d   a n a l y s i s   a n d   h i e r a r c h i c a l   c l u s t e r i n g ,   ( b )   m u l t i d i m e n s i o n a l   s c a l i n g ,   a n d   ( c )   d e t e r m i n a t i o n   o f   t r e n d s   i n   u s a g e   o f   t e r m s .   T h e   s t u d y   i s   b a s e d   o n   1 0 , 3 4 4   a r t i c l e s   p u b l i s h e d   b e t w e e n   1 9 8 8   a n d   2 0 0 7   i n   1 6   L I S   j o u r n a l s .   M e t h o d o l o g i c a l l y ,   n o v e l   a s p e c t s   o f   t h i s   s t u d y   a r e :   ( a )   i t s   l a r g e   s c a l e ,   ( b )   r e m o v a l   o f   n o n - s p e c i f i c   t i t l e   w o r d s   b a s e d   o n   t h e   " w o r d   c o n c e n t r a t i o n "   m e a s u r e   ( c )   i d e n t i f i c a t i o n   o f   t h e   m o s t   f r e q u e n t   t e r m s   t h a t   i n c l u d e   b o t h   s i n g l e   w o r d s   a n d   p h r a s e s ,   a n d   ( d )   p r e s e n t a t i o n   o f   t h e   r e l a t i v e   f r e q u e n c i e s   o f   t e r m s   u s i n g   " h e a t m a p s " .   C o n c e p t u a l l y ,   o u r   a n a l y s i s   r e v e a l s   t h a t   L I S   c o n s i s t s   o f   t h r e e   m a i n   b r a n c h e s :   t h e   t r a d i t i o n a l l y   r e c o g n i z e d   l i b r a r y - r e l a t e d   a n d   i n f o r m a t i o n - r e l a t e d   b r a n c h e s ,   p l u s   a n   e q u a l l y   d i s t i n c t   b i b l i o m e t r i c s / s c i e n t o m e t r i c s   b r a n c h .   T h e   t h r e e   b r a n c h e s   f o c u s   o n :   l i b r a r i e s ,   i n f o r m a t i o n ,   a n d   s c i e n c e ,   r e s p e c t i v e l y .   I n   a d d i t i o n ,   o u r   s t u d y   i d e n t i f i e s   s u b s t r u c t u r e s   w i t h i n   e a c h   b r a n c h .   W e   a l s o   t e n t a t i v e l y   i d e n t i f y   " i n f o r m a t i o n   s e e k i n g   b e h a v i o r "   a s   a   b r a n c h   t h a t   i s   e s t a b l i s h i n g   i t s e l f   s e p a r a t e   f r o m   t h e   t h r e e   m a i n   b r a n c h e s .   F u r t h e r m o r e ,   w e   f i n d   t h a t   c o g n i t i v e   c o n c e p t s   i n   L I S   e v o l v e   c o n t i n u o u s l y ,   w i t h   n o   s t a s i s   s i n c e   1 9 9 2 .   T h e   m o s t   r a p i d   d e v e l o p m e n t   o c c u r r e d   b e t w e e n   1 9 9 8   a n d   2 0 0 1 ,   i n f l u e n c e d   b y   t h e   i n c r e a s e d   f o c u s   o n   t h e   I n t e r n e t .   T h e   c h a n g e   i n   t h e   c o g n i t i v e   l a n d s c a p e   i s   f o u n d   t o   b e   d r i v e n   b y   t h e   e m e r g e n c e   o f   n e w   i n f o r m a t i o n   t e c h n o l o g i e s ,   a n d   t h e   r e t i r e m e n t   o f   o l d   o n e s . 	 [ M i l o j e v i c ,   S t a s a ;   S u g i m o t o ,   C a s s i d y   R . ;   Y a n ,   E r j i a ;   D i n g ,   Y i n g ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 M i l o j e v i c ,   S   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 s m i l o j e v @ i n d i a n a . e d u ;   s u g i m o t o @ i n d i a n a . e d u ;   e y a n @ i n d i a n a . e d u ;   d i n g y i n g @ i n d i a n a . e d u 	 Y a n ,   E r j i a / E - 7 8 8 7 - 2 0 1 1 	 Y a n ,   E r j i a / 0 0 0 0 - 0 0 0 2 - 0 3 6 5 - 9 3 4 0 	 	 	 A s t r o m   F ,   2 0 0 2 ,   E M E R G I N G   F R A M E W O R K S ,   P 1 8 5 ;   A s t r o m   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 9 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 6 7 ;   A s t r o m   F ,   2 0 1 0 ,   L I B R   Q U A R T ,   V 8 0 ,   P 1 4 3 ;   B a t e s   M J ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 0 4 3 : : A I D - A S I 1 > 3 . 3 . C O ; 2 - O ;   B a t e s   M .   J . ,   2 0 0 7 ,   I N F O R M   R E S ,   V 1 2 ;   B a t e s   M . J . ,   2 0 1 0 ,   E N C Y   L I B   I N F O R M   S C I ,   p x i ;   B A Z E R M A N   C ,   1 9 8 5 ,   W R I T   C O M M U N ,   V 2 ,   P 3 ,   D O I   1 0 . 1 1 7 7 / 0 7 4 1 0 8 8 3 8 5 0 0 2 0 0 1 0 0 1 ;   B a z e r m a n   C h a r l e s ,   1 9 8 8 ,   S H A P I N G   W R I T T E N   K N O W ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B U X T O N   A B ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 4 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 3 3 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C A L L O N   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 8 0 ;   C a l l o n   M . ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ;   C A M B R O S I O   A ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 7 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 5 4 6 ;   C h e n   C . ,   2 0 0 3 ,   M A P P I N G   S C I   F R O N T I E R ;   C o l e   S t e p h e n ,   1 9 7 8 ,   M E T R I C   S C I ,   P 2 0 9 ;   C O U R T I A L   J P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 7 5 ;   C R O N I N   B ,   1 9 9 5 ,   L I B R I ,   V 4 5 ,   P 4 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 5 . 4 5 . 1 . 4 5 ;   C r o n i n   B ,   2 0 0 8 ,   J   I N F   S C I ,   V 3 4 ,   P 4 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 8 0 8 8 9 4 4 ;   D i n g   Y ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 5 1 - 0 ;   E v a n s   J A ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 1 ,   P 3 9 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 0 4 7 3 ;   F o u c a u l t   M i c h e l ,   1 9 6 6 ,   O R D E R   T H I N G S   A R C H A E O ;   G i e r e   R o n ,   1 9 8 8 ,   E X P L A I N I N G   S C I   C O G N I ;   G r e f e n s t e t t e   G . ,   1 9 9 4 ,   P   E U R A L E X   9 4 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 5 8 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - O ;   I N G W E R S E N   P ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 9 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 9 9 ;   J A C O B   E K ,   1 9 9 4 ,   A D V   K N O W   O R ,   V 4 ,   P 1 0 1 ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   J A R V E L I N   K ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 3 9 5 ;   J A R V E L I N   K ,   1 9 9 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 9 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 3 ) 9 0 0 2 8 - C ;   K r i p p e n d o r f f   K . ,   2 0 0 4 ,   C O N T E N T   A N A L   I N T R O   I ;   L a r i v i e r e   V ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 8 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 1 1 ;   L a t o u r   B . ,   1 9 8 6 ,   L A B   L I F E   C O N S T R U C T I O ;   L E Y D E S D O R F F   L ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 2 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 9 ) 9 0 0 1 6 - 4 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   L e y d e s d o r f f   L . ,   1 9 8 8 ,   I N F O R M E T R I C S ,   V 8 7 ,   P 1 0 5 ;   L i p e t z   B A ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 9 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 9 9 4 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - U ;   L i u   J ,   2 0 0 3 ,   M I S S I S S I P P I   L I B ,   V 6 7 ,   P 1 1 0 ;   M e a d o w s   A .   J . ,   1 9 9 8 ,   C O M M U N I C A T I N G   R E S ;   M I K S A   F L ,   1 9 9 2 ,   C O N C E P T I O N S   O F   L I B R A R Y   A N D   I N F O R M A T I O N   S C I E N C E ,   P 2 2 9 ;   M I K S A   F L ,   1 9 8 5 ,   J   L I B R   H I S T   P H I L O S ,   V 2 0 ,   P 1 5 7 ;   M o y a - A n e g o n   F ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 5 9 2 2 6 ;   N i s o n g e r   T E ,   2 0 0 5 ,   C O L L   R E S   L I B R ,   V 6 6 ,   P 3 4 1 ;   N o l i n   J ,   2 0 1 0 ,   J   D O C ,   V 6 6 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 1 0 1 1 0 1 6 3 4 4 ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   P a r k   T . K . ,   2 0 1 0 ,   D   L I B   M A G A Z I N E ,   V 1 6 ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   P r o v a l i s   R e s e a r c h ,   2 0 0 5 ,   W O R D S T A T   C O N T   A N   M O D ;   R I P   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 5 8 2 7 ;   S a l t o n   G . ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M ;   S a r a c e v i c   T ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 0 5 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - Z ;   S m e a t o n   A .   F . ,   2 0 0 3 ,   A C M   S I G I R   F O R U M ,   V 3 7 ,   P 4 9 ,   D O I   1 0 . 1 1 4 5 / 9 4 5 5 4 6 . 9 4 5 5 5 0 ;   S u g i m o t o   C R ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 4 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 7 5 - 8 ;   S u g i m o t o   C R ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 3 5 ;   S u g i m o t o   C R ,   2 0 1 0 ,   J   I N F   S C I ,   V 3 6 ,   P 4 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 0 3 6 9 9 9 2 ;   T i t s c h e r   S t e f a n ,   2 0 0 0 ,   M E T H O D S   T E X T   D I S C O U R ;   V a k k a r i   P . ,   1 9 9 4 ,   A D V   L I B R A R I A N S H I P ,   V 1 8 ,   P 1 ,   D O I   1 0 . 1 1 0 8 / S 0 0 6 5 - 2 8 3 0 ( 1 9 9 4 ) 0 0 0 0 0 1 8 0 0 3 ;   V a n   D e n   B e s s e l a a r   P ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 8 - 9 ;   V A N R A A N   A F J ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 6 9 ;   W a r n e r   J ,   2 0 0 1 ,   L I B R   Q U A R T ,   V 7 1 ,   P 2 4 3 ;   W e b b e r   S ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 3 1 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 3 0 2 9 4 0 0 7 ;   W e b e r   R .   P . ,   1 9 9 0 ,   B A S I C   C O N T E N T   A N A L ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T T A K E R   J ,   1 9 8 9 ,   S O C   S T U D   S C I ,   V 1 9 ,   P 4 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 9 0 1 9 0 0 3 0 0 4 ;   Y a n g   S L ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 7 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 4 5 - 1 	 6 8 	 5 0 	 5 0 	 1 0 	 1 1 3 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 O C T 	 2 0 1 1 	 6 2 	 1 0 	 	 	 	 	 1 9 3 3 	 1 9 5 3 	 	 1 0 . 1 0 0 2 / a s i . 2 1 6 0 2 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 2 7 V Z 	 W O S : 0 0 0 2 9 5 4 5 8 7 0 0 0 0 7 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   D i   C o s t a ,   F ;   S o l a z z i ,   M 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ;   S o l a z z i ,   M a r c o 	 	 	 U n i v e r s i t y - i n d u s t r y   c o l l a b o r a t i o n   i n   I t a l y :   A   b i b l i o m e t r i c   e x a m i n a t i o n 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 U n i v e r s i t y - i n d u s t r y   c o l l a b o r a t i o n ;   R & D   c o o p e r a t i o n ;   B i b l i o m e t r i c s ;   M u l t i d i s c i p l i n a r i t y ;   I t a l y 	 B A Y H - D O L E   A C T ;   C O - A U T H O R S H I P S ;   K N O W L E D G E ;   U S 	 T h i s   w o r k   i n v e s t i g a t e s   p u b l i c - p r i v a t e   r e s e a r c h   c o l l a b o r a t i o n   b e t w e e n   I t a l i a n   u n i v e r s i t i e s   a n d   d o m e s t i c   i n d u s t r y ,   a p p l y i n g   a   b i b l i o m e t r i c   t y p e   o f   a p p r o a c h .   T h e   s t u d y   i s   b a s e d   o n   a n   e x h a u s t i v e   l i s t i n g   o f   a l l   c o - a u t h o r e d   p u b l i c a t i o n s   i n   i n t e r n a t i o n a l   j o u r n a l s   t h a t   a r e   j o i n t l y   r e a l i z e d   b y   I t a l i a n   u n i v e r s i t y   s c i e n t i s t s   a n d   r e s e a r c h e r s   i n   t h e   p r i v a t e   s e c t o r ;   t h i s   l i s t i n g   p e r m i t s   t h e   d e v e l o p m e n t   o f   a   n a t i o n a l   m a p p i n g   s y s t e m   f o r   p u b l i c - p r i v a t e   c o l l a b o r a t i o n   t h a t   i s   u n i q u e   f o r   i t s   e x t e n s i v e   a n d   r e p r e s e n t a t i v e   c h a r a c t e r .   I t   i s   s h o w n   t h a t ,   i n   a b s o l u t e   t e r m s ,   m o s t   c o l l a b o r a t i o n s   o c c u r   i n   m e d i c i n e   a n d   c h e m i s t r y ,   w h i l e   i t   i s   i n d u s t r i a l   a n d   i n f o r m a t i o n   e n g i n e e r i n g   t h a t   s h o w s   t h e   h i g h e s t   p e r c e n t a g e   o f   c o - a u t h o r e d   a r t i c l e s   O u t   o f   a l l   a r t i c l e s   i n   t h e   f i e l d .   I n   a d d i t i o n ,   t h e   i n v e s t i g a t i o n   e m p i r i c a l l y   e x a m i n e s   a n d   t e s t s   s e v e r a l   h y p o t h e s e s   c o n c e r n i n g   t h e   q u a l i t a t i v e - q u a n t i t a t i v e   i m p a c t   o f   c o l l a b o r a t i o n   o n   t h e   s c i e n t i f i c   p r o d u c t i o n   o f   i n d i v i d u a l   u n i v e r s i t y   r e s e a r c h e r s .   T h e   a n a l y s e s   d e m o n s t r a t e   t h a t   u n i v e r s i t y   r e s e a r c h e r s   w h o   c o l l a b o r a t e   w i t h   t h o s e   i n   t h e   p r i v a t e   s e c t o r   s h o w   r e s e a r c h   p e r f o r m a n c e   t h a t   i s   s u p e r i o r   t o   t h a t   o f   c o l l e a g u e s   w h o   a r e   n o t   i n v o l v e d   i n   s u c h   c o l l a b o r a t i o n .   B u t   t h e   i m p a c t   f a c t o r   o f   j o u r n a l s   p u b l i s h i n g   a c a d e m i c   a r t i c l e s   c o - a u t h o r e d   b y   i n d u s t r y   i s   g e n e r a l l y   l o w e r   t h a n   t h a t   c o n c e r n i n g   c o - a u t h o r s h i p s   w i t h   o t h e r   e n t i t i e s .   F i n a l l y ,   a   f u r t h e r   s p e c i f i c   e l a b o r a t i o n   a l s o   r e v e a l s   t h a t   p u b l i c a t i o n s   w i t h   p u b l i c - p r i v a t e   c o - a u t h o r s h i p   d o   n o t   s h o w   a   l e v e l   o f   m u l t i d i s c i p l i n a r i t y   t h a t   i s   s i g n i f i c a n t l y   d i f f e r e n t   f r o m   t h a t   o f   o t h e r   p u b l i c a t i o n s .   ( C )   2 0 0 8   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ;   S o l a z z i ,   M a r c o ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 7 3   R o m e ,   I t a l y 	 D ' A n g e l o ,   C A   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 d a n g e l o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A B R A M O   G ,   2 0 0 7 ,   R I V   P O L I T I C A   E C ,   P 4 5 ;   A B R A M O   G ,   2 0 0 9 ,   S C I   P U B L I C   I N   P R E S S ;   A b r a m o   G . ,   2 0 0 5 ,   E C   P O L I T I C A   I N D ,   V 3 ,   P 4 3 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   B a l c o n i   M ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 1 8 ;   B a r n e s   T . ,   2 0 0 2 ,   E U R O P E A N   M A N A G E M E N T ,   V 2 0 ,   P 2 7 2 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 2 3 7 3 ( 0 2 ) 0 0 0 4 4 - 0 ;   B E L K H O D J A   O ,   2 0 0 5 ,   P   5   T R I P L   H E L   C   T U R ;   B O A R D M A N   C P ,   2 0 0 8 ,   T E C H N O V A T I O N ;   D ' E s t e   P ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 1 2 9 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 5 . 0 0 2 ;   D r e j e r   I ,   2 0 0 5 ,   T E C H N O V A T I O N ,   V 2 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 3 ) 0 0 0 7 5 - 0 ;   * E C   C O M M   E U R   C O M M ,   1 9 9 5 ,   6 8 8   C O M   E C   C O M M   E U R ;   G R A N D I   A ,   2 0 0 5 ,   I N N O V A Z I O N E   T E C N O L O G ;   I S T A T ,   2 0 0 3 ,   R I C E R C A   S V I L U P P O   I T A ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   L a u d e l   G ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 6 1 ;   L e e   Y .   S . ,   2 0 0 0 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 5 ,   P 1 1 1 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 8 9 5 3 2 2 0 4 2 ;   L u n d b e r g   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 0 - 5 ;   M a n s f i e l d   E ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 0 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 8 9 3 - 1 ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M e y e r - K r a h m e r   F ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 4 - 8 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M o w e r y   D C ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 1 0 0 - 6 ;   * N A T   S C I   F D N ,   2 0 0 3 ,   0 3 3 1 6   N S F ;   O w e n - S m i t h   J ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 2 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 2 4 . 1 4 2 7 5 ;   S h a n e   S ,   2 0 0 4 ,   J   B U S   V E N T U R I N G ,   V 1 9 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 2 ) 0 0 1 1 4 - 3 ;   T h u r s b y   J G ,   2 0 0 3 ,   S C I E N C E ,   V 3 0 1 ,   P 1 0 5 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 8 7 4 7 3 ;   T i j s s e n   R J W ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 3 . 1 1 . 0 0 2 ;   V a n   L o o y   B ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 4 2 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 3 . 0 9 . 0 0 4 ;   V e u g e l e r s   R ,   2 0 0 5 ,   I N T   J   I N D   O R G A N ,   V 2 3 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / j . i j i n d o r g . 2 0 0 5 . 0 1 . 0 0 8 ;   W e i n g a r t   P . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   Z u c k e r m a n   S o l l y ,   1 9 7 1 ,   I V O R Y   T O W E R   F R O N T I E R 	 3 2 	 5 0 	 5 2 	 7 	 9 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 6 - 4 9 7 2 	 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 J U N - J U L 	 2 0 0 9 	 2 9 	 6 - 7 	 	 	 	 	 4 9 8 	 5 0 7 	 	 1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 1 1 . 0 0 3 	 	 1 0 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 4 5 5 L I 	 W O S : 0 0 0 2 6 6 7 6 0 9 0 0 0 0 8 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   C a p r a s e c c a ,   A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   C a p r a s e c c a ,   A l e s s a n d r o 	 	 	 A l l o c a t i v e   e f f i c i e n c y   i n   p u b l i c   r e s e a r c h   f u n d i n g :   C a n   b i b l i o m e t r i c s   h e l p ? 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   a s s e s s m e n t ;   U n i v e r s i t i e s ;   P e e r   r e v i e w ;   B i b l i o m e t r i c s 	 I M P A C T - F A C T O R S ;   I N D I C A T O R S ;   U N I V E R S I T I E S ;   P E R F O R M A N C E ;   C I T A T I O N 	 T h e   u s e   o f   o u t c o m e   c o n t r o l   m o d e s   o f   r e s e a r c h   e v a l u a t i o n   e x e r c i s e s   i s   e v e r   m o r e   f r e q u e n t .   T h e y   a r e   c o n c e i v e d   a s   t o o l s   t o   s t i m u l a t e   i n c r e a s e d   l e v e l s   o f   r e s e a r c h   p r o d u c t i v i t y ,   a n d   t o   g u i d e   c h o i c e s   i n   a l l o c a t i n g   c o m p o n e n t s   o f   g o v e r n m e n t   r e s e a r c h   b u d g e t s   f o r   p u b l i c l y   f u n d e d   i n s t i t u t i o n s .   T h e r e   a r e   s e v e r a l   c o n t r i b u t i o n s   i n   t h e   l i t e r a t u r e   t h a t   c o m p a r e   t h e   d i f f e r e n t   m e t h o d o l o g i c a l   a p p r o a c h e s   t h a t   p o l i c y   m a k e r s   c o u l d   a d o p t   f o r   t h e s e   e x e r c i s e s ,   h o w e v e r   t h e   c o m p a r i s o n s   a r e   l i m i t e d   t o   o n l y   a   f e w   d i s c i p l i n e s .   T h i s   w o r k ,   e x a m i n i n g   t h e   c a s e   o f   t h e   w h o l e   o f   t h e   " h a r d   s c i e n c e s "   o f   t h e   I t a l i a n   a c a d e m i c   s y s t e m ,   m a k e s   a   c o m p a r i s o n   b e t w e e n   r e s u l t s   o b t a i n e d   f r o m   p e e r   r e v i e w   t y p e   o f   e v a l u a t i o n s   ( a s   a d o p t e d   b y   t h e   M i n i s t r y   o f   U n i v e r s i t i e s   a n d   R e s e a r c h )   a n d   t h o s e   p o s s i b l e   f r o m   a   b i b l i o m e t r i c   a p p r o a c h   ( a s   d e v e l o p e d   b y   t h e   a u t h o r s ) .   T h e   a i m   i s   t o   u n d e r s t a n d   t o   w h a t   e x t e n t   b i b l i o m e t r i c   m e t h o d o l o g y ,   w h i c h   i s   n o t e d   a s   r e l a t i v e l y   i n e x p e n s i v e ,   t i m e - s a v i n g   a n d   e x h a u s t i v e ,   c a n   c o m p l e m e n t   a n d   i n t e g r a t e   p e e r   r e v i e w   m e t h o d o l o g y   i n   r e s e a r c h   e v a l u a t i o n .   ( C )   2 0 0 8   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   C a p r a s e c c a ,   A l e s s a n d r o ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A B R A M O   G ,   2 0 0 6 ,   N O N   T U T T O   Q U E L L O   L U C ;   A b r a m o   G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 2 - 2 ;   A b r a m o   G ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 3 ,   P 7 6 2 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   C o m i t a t o   d i   I n d i r i z z o   p e r   l a   V a l u t a z i o n e   d e l l a   R i c e r c a - C I V R   R o m e   I t a l y ,   2 0 0 6 ,   V T R   2 0 0 1   2 0 0 3   R I S   V A ;   G E O R G H I O U   L ,   2 0 0 5 ,   B E R L   I N T   W O R K S H   E V   P ;   H O R R O B I N   D F ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 4 3 8 ;   K o r e v a a r   J C ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 8 ;   M a r t i n   B R ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 9 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M O X A M   H ,   1 9 9 2 ,   S C I   T E C H N O L O G Y   P O L I C ,   P 7 ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C . ,   2 0 0 3 ,   J   D O C ,   V 5 6 ,   P 7 0 9 ;   R E A L E   E ,   2 0 0 6 ,   P   P L A T F   F T E V A L   I N T   C ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   * S C I   P U B L   P O L ,   2 0 0 7 ,   F U T   P A T H W   R E S   A S S   M E ,   V 3 4 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   v a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   1   I N T   C   W O R L D   C L A S S ;   V I A L E   R ,   2 0 0 3 ,   V A L U T A R E   S C I ,   P 2 1 ;   W a r n e r   J ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 5 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 5 6 ;   W e i n g a r t   P . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   W E I N G A R T   P ,   2 0 0 3 ,   2   C   F O R S C H   J U L   G M B H 	 2 5 	 5 0 	 5 0 	 9 	 6 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 F E B 	 2 0 0 9 	 3 8 	 1 	 	 	 	 	 2 0 6 	 2 1 5 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 	 	 1 0 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 4 0 0 V I 	 W O S : 0 0 0 2 6 2 8 9 7 1 0 0 0 1 8 	 	 
 
 J 	 H o o d ,   W W ;   W i l s o n ,   C S 	 	 	 	 H o o d ,   W W ;   W i l s o n ,   C S 	 	 	 I n f o r m e t r i c   s t u d i e s   u s i n g   d a t a b a s e s :   O p p o r t u n i t i e s   a n d   c h a l l e n g e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   O N L I N E   D A T A B A S E S ;   D A T A - B A S E S ;   S C I E N C E ;   B I B L I O M E T R I C S ;   S E L E C T I O N ;   R E T R I E V A L ;   Q U A L I T Y ;   I S S U E S ;   S T A N D A R D I Z A T I O N 	 S i n c e   t h e i r   a r r i v a l   i n   t h e   1 9 6 0 s ,   e l e c t r o n i c   d a t a b a s e s   h a v e   b e e n   a n   i n v a l u a b l e   t o o l   f o r   i n f o r m e t r i c i a n s .   D a t a b a s e s   a n d   t h e i r   d e l i v e r y   m e c h a n i s m   h a v e   p r o v i d e d   b o t h   t h e   s o u r c e   o f   r a w   d a t a ,   a s   w e l l   a s   t h e   a n a l y t i c a l   t o o l s   f o r   m a n y   i n f o r m e t r i c   s t u d i e s .   I n   p a r t i c u l a r ,   t h e   c i t a t i o n   d a t a b a s e s   p r o d u c e d   b y   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   h a v e   b e e n   t h e   k e y   s o u r c e   o f   d a t a   f o r   a   w h o l e   r a n g e   o f   c i t a t i o n - b a s e d   r e s e a r c h .   H o w e v e r ,   t h e r e   a r e   a l s o   m a n y   p r o b l e m s   a n d   c h a l l e n g e s   a s s o c i a t e d   w i t h   t h e   u s e   o f   o n l i n e   d a t a b a s e s .   M o s t   o f   t h e   p r o b l e m s   a r i s e   b e c a u s e   d a t a b a s e s   a r e   d e s i g n e d   p r i m a r i l y   f o r   i n f o r m a t i o n   r e t r i e v a l   p u r p o s e s ,   a n d   i n f o r m e t r i c   s t u d i e s   r e p r e s e n t   o n l y   a   s e c o n d a r y   u s e   o f   t h e   s y s t e m s .   T h e   s o r t s   o f   p r o b l e m s   e n c o u n t e r e d   b y   i n f o r m e t r i c i a n s   i n c l u d e :   e r r o r s   o r   i n c o n s i s t e n c y   i n   t h e   d a t a   i t s e l f ,   p r o b l e m s   w i t h   t h e   c o v e r a g e ,   o v e r l a p   a n d   c h a n g e a b i l i t y   o f   t h e   d a t a b a s e s ;   a s   w e l l   a s   p r o b l e m s   a n d   l i m i t a t i o n s   i n   t h e   t o o l s   p r o v i d e d   b y   t h e   d a t a b a s e   h o s t s   s u c h   a s   D I A L O G .   F o r   s o m e   i n f o r m e t r i c   s t u d i e s ,   t h e   o n l y   v i a b l e   s o l u t i o n   t o   t h e s e   p r o b l e m s   i s   t o   d o w n l o a d   t h e   d a t a   a n d   p e r f o r m   o f f l i n e   c o r r e c t i o n   a n d   d a t a   a n a l y s i s . 	 U n i v   N e w   S   W a l e s ,   S c h   I n f o r m a t   S y s t   T e c h n o l   &   M a n a g e m e n t ,   S y d n e y ,   N S W   2 0 5 2 ,   A u s t r a l i a 	 U n i v   N e w   S   W a l e s ,   S c h   I n f o r m a t   S y s t   T e c h n o l   &   M a n a g e m e n t ,   S y d n e y ,   N S W   2 0 5 2 ,   A u s t r a l i a . 	 W . H o o d @ u n s w . e d u . a u 	 W i l s o n ,   C o n c e p c i o n / M - 8 7 8 4 - 2 0 1 4 	 	 	 	 B o u r k e   P ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 1 9 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 7 8 ;   B o u r k e   P ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 5 9 ;   B O U R N E   C P ,   1 9 7 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 7 ) 9 0 0 2 6 - 7 ;   B R A U N   T ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 5 6 5 ;   B r a u n   T . ,   1 9 8 7 ,   L I T   A N A L   C H E M   S C I E N T ;   B R O O K S   T A ,   1 9 9 8 ,   B I B L I O M E T R I C S   T O O L B O ;   B U R T O N   H D ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 7 6 - 3 ;   B Y L E R   A M ,   1 9 8 8 ,   O N L I N E   R E V ,   V 1 2 ,   P 1 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 2 7 2 ;   C A R P E N T E R   M P ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 4 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 6 0 6 ;   C h r i s t e n s e n   F H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 4 ;   C O I L E   R C ,   1 9 7 7 ,   E R R O R   D E T E C T I O N   C O M P ;   C r o n i n   B l a i s e ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ;   D E O G A N   M S ,   1 9 8 7 ,   L U C K N O W   L I B ,   V 1 9 ,   P 4 3 ;   d e S t r i c k e r   U ,   1 9 9 7 ,   D A T A B A S E ,   V 2 0 ,   P 1 8 ;   D h y a n i   D ,   2 0 0 2 ,   A C M   C O M P U T   S U R V ,   V 3 4 ,   P 4 6 9 ,   D O I   1 0 . 1 1 4 5 / 5 9 2 6 4 2 . 5 9 2 6 4 5 ;   E G G H E   L ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 1 0 3 - 3 ;   E P S T E I N   B A ,   1 9 8 0 ,   D A T A B A S E ,   V 3 ,   P 9 ;   E R N E S T   D J ,   1 9 8 8 ,   R Q ,   V 2 8 ,   P 1 8 5 ;   E V A N S   J E ,   1 9 8 0 ,   O N L I N E ,   V 4 ,   P 3 5 ;   F E D O R O W I C Z   J ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 2 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 9 0 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 1 3 ,   P 2 0 2 ;   H a a s   S t e p h a n i e ,   1 9 9 2 ,   S c i e n c e   a n d   T e c h n o l o g y   L i b r a r i e s ,   V 1 3 ,   P 5 7 ;   H A W K I N S   D T ,   1 9 7 8 ,   O N L I N E ,   V 2 ,   P 9 ;   H A W K I N S   D T ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 4 0 4 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H I B B S   J E ,   1 9 8 4 ,   O N L I N E ,   V 8 ,   P 5 9 ;   H O O D   W ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 3 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 4 8 - 5 ;   H O O D   W ,   1 9 9 2 ,   A N A L   I N D E X I N G   U S E D   L ;   H o o d   W W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 1 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 6 8 8 6 0 5 9 4 3 ;   H o o d   W W ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 2 4 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 9 1 ;   H o o d   W W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 0 5 ;   H O O D   W W ,   1 9 9 8 ,   T H E S I S   U   N E W   S   W A L E S ;   H O O D   W W ,   2 0 0 3 ,   I N   P R E S S   J   A M   S O C   I N ;   H U D N U T   S K ,   1 9 9 3 ,   P   1 4   N A T   O N L   M   N E W   Y ,   P 2 0 9 ;   I n g w e r s e n   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 ;   I N G W E R S E N   P ,   1 9 9 8 ,   C O M M U N I C A T I O N ;   * I S I ,   2 0 0 2 ,   W E B   S C I                   0 8 2 8 ;   J a c s o   P ,   1 9 9 9 ,   O N L I N E   C D R O M   R E V ,   V 2 3 ,   P 2 2 7 ;   J a c s o   P ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 2 3 1 ;   L A N C A S T E R   F W ,   1 9 8 4 ,   I N T   F O R U M   I N F O R M   D O C ,   V 9 ,   P 1 1 ;   L A N C A S T E R   F W ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 6 0 8 ;   L a n c a s t e r   F . W ,   1 9 9 1 ,   B I B L I O M E T R I C   M E T H O D S ;   L U U K K O N E N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 9 ;   M a r x   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 9 8 9 1 1 7 9 2 ;   M c G r a t h   W E ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 8 3 ;   M I D O R I K A W A   N ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 7 3 ;   M I L L E R   C ,   1 9 9 0 ,   O N L I N E ,   V 1 4 ,   P 2 7 ;   M I Y A M O T O   S ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 5 ;   M o e d   H .   F . ,   1 9 8 8 ,   I n f o r m e t r i c s   8 7 / 8 8 .   S e l e c t   P r o c e e d i n g s   o f   t h e   F i r s t   I n t e r n a t i o n a l   C o n f e r e n c e   o n   B i b l i o m e t r i c s   a n d   T h e o r e t i c a l   A s p e c t s   o f   I n f o r m a t i o n   R e t r i e v a l ,   P 1 3 3 ;   M O E D   H F ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 6 ;   N O R T O N   N P ,   1 9 8 1 ,   O N L I N E ,   V 5 ,   P 4 0 ;   O J A L A   M ,   1 9 9 2 ,   O N L I N E ,   V 1 6 ,   P 7 3 ;   O s a r e h   F ,   2 0 0 2 ,   L I B R I ,   V 5 2 ,   P 8 8 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 2 . 8 8 ;   P A O   M L ,   1 9 8 9 ,   N A T   O N L   M   P   M E D F   N J ,   P 3 2 1 ;   P E R S S O N   O ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 1 ;   P E R S S O N   O ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   P I T E R N I C K   A B ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 3 0 2 1 0 ;   P R O V O S T   F ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 5 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 5 5 ;   R E I D   E O F ,   1 9 9 2 ,   1 3 T H   N A T I O N A L   O N L I N E   M E E T I N G   :   P R O C E E D I N G S   -   1 9 9 2 ,   P 2 7 9 ;   R o y   D ,   2 0 0 2 ,   J   L A R Y N G O L   O T O L ,   V 1 1 6 ,   P 3 6 3 ;   S A A R T I   J ,   2 0 0 1 ,   J   D O C ,   V 5 8 ,   P 4 9 ;   S A N D I S O N   A ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 5 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 3 9 ;   S e g l e n   P   O ,   1 9 8 9 ,   N o r d   M e d ,   V 1 0 4 ,   P 3 3 1 ;   S E G L E N   P O ,   1 9 8 9 ,   N O R D   M E D ,   V 1 0 4 ,   P 3 4 1 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S N O W   B ,   1 9 9 3 ,   D A T A B A S E ,   V 1 6 ,   P 1 1 1 ;   S T E F A N I A K   B ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 9 ;   S T E R N   B T ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 ;   T E N O P I R   C ,   1 9 8 2 ,   O N L I N E   R E V ,   V 6 ,   P 3 9 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 1 0 9 ;   T H O R N E   F C ,   1 9 7 7 ,   J   C L I N   P S Y C H O L ,   V 3 3 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 6 7 9 ( 1 9 7 7 1 0 ) 3 3 : 4 < 1 1 5 7 : : A I D - J C L P 2 2 7 0 3 3 0 4 5 3 > 3 . 0 . C O ; 2 - B ;   T o r r i c e l l a - M o r a l e s   R G ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 4 1 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 5 5 5 3 0 2 7 7 ;   V A N C A M P   A J ,   1 9 9 1 ,   D A T A B A S E ,   V 1 4 ,   P 9 9 ;   W A L K E R   G ,   1 9 9 0 ,   D A T A B A S E ,   V 1 3 ,   P 3 7 ;   W A N G E R   J ,   1 9 7 7 ,   O N L I N E ,   V 1 ,   P 3 5 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W h i t e   H D ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 1 3 - 3 ;   W h i t e   H D ,   1 9 9 6 ,   L I B R   T R E N D S ,   V 4 5 ,   P 2 3 9 ;   W H I T E   H D ,   1 9 8 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 3 ,   P 2 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 7 ) 9 0 0 0 5 - 7 ;   W I L L I A M S   M E ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 1 0 ;   W I L L I A M S   M E ,   2 0 0 2 ,   G A L E   D I R E C T O R Y   D A T A B ,   p R 1 7 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   W i l s o n   C S ,   2 0 0 3 ,   I N T E R D I S C I P L   S C I   R E V ,   V 2 8 ,   P 2 6 ,   D O I   1 0 . 1 1 7 9 / 0 3 0 8 0 1 8 0 3 2 2 5 0 1 0 3 2 2 ;   W I L S O N   C S ,   U N P U B   S C I   C I T A T I O N   I ;   W O L F R A M   D ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 3 5 5 ;   2 0 0 2 ,   G A L E   D I R E C T O R Y   O N L I N 	 8 6 	 5 0 	 5 1 	 2 	 1 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 3 	 5 8 	 3 	 	 	 	 	 5 8 7 	 6 0 8 	 	 1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 2 . 4 7 1 1 5 . c 6 	 	 2 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 0 M D 	 W O S : 0 0 0 1 8 6 9 9 9 6 0 0 0 0 8 	 	 
 
 J 	 W a r n e r ,   J 	 	 	 	 W a r n e r ,   J 	 	 	 A   c r i t i c a l   r e v i e w   o f   t h e   a p p l i c a t i o n   o f   c i t a t i o n   s t u d i e s   t o   t h e   R e s e a r c h   A s s e s s m e n t   E x e r c i s e s 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 L I B R A R Y ;   R A T I N G S ;   C O U N T S 	 T h e   R e s e a r c h   A s s e s s m e n t   E x e r c i s e s   ( R A E )   c o n d u c t e d   i n   t h e   U K   h a v e   a t t r a c t e d   v a r i o u s   t y p e s   o f   p u b l i s h e d   r e s p o n s e .   T h e s e   i n c l u d e   c i t a t i o n   a n a l y s e s   a n d   a   r e v i e w   o f   t h e   p u b l i c   r e c e p t i o n   o f   t h e   R A E   1 9 9 6 ,   w h i c h   i n c l u d e d   a   b r i e f   c r i t i q u e   o f   t h e   c i t a t i o n   s t u d i e s .   T h i s   p a p e r   d e v e l o p s   t h e   c r i t i q u e .   L a r g e l y   u n e x p l o r e d   i s s u e s   i n   t h e   t h e o r y   o r   a s s u m p t i o n s   o f   b i b l i o m e t r i c s ,   e . g .   t h e   l e v e l   o f   c i t a t i o n   w h i c h   c o r r e s p o n d s   t o   a   q u a n t u m   o f   r e s e a r c h   q u a l i t y ,   a r e   f o u n d   t o   e m e r g e   i n   t h e   s t u d i e s .   A   w e a k ,   a n d   u n s a t i s f a c t o r i l y   t r e a t e d ,   c o r r e l a t i o n   b e t w e e n   c i t a t i o n   a g g r e g a t e s   a n d   r e s e a r c h   q u a l i t y   f o r   i n d i v i d u a l   e n t i t i e s   i s   r e v e a l e d .   T h e   p r o p o s a l   t o   r e p l a c e   i n f o r m e d   p e e r   r e v i e w   b y   c i t a t i o n   a n a l y s i s   i s   r e g a r d e d   a s   h i g h l y   u n r e a l i s t i c .   P r o d u c t i v e   u s e s   f o r   c i t a t i o n   a n a l y s i s   i n   r e s e a r c h   e v a l u a t i o n   a r e   s u g g e s t e d .   A   h i s t o r i c a l l y   r a r e   i n s t a n c e   o f   c o r r e l a t i o n   b e t w e e n   r a n k i n g s   d e r i v e d   f r o m   c i t a t i o n   a g g r e g a t e s   a n d   f i   o m   r e a l   w o r l d   p e e r   r e v i e w   h a s   b e e n   r e v e a l e d   b y   t h e   s t u d i e s .   T h e   f u t u r e   v a l u e   o f   c i t a t i o n   a n a l y s i s   c o u l d   b e   t o   i n f o r m ,   b u t   n o t   t o   d e t e r m i n e ,   j u d g e m e n t s   o f   r e s e a r c h   q u a l i t y .   A   c o m b i n a t i o n   o f   m e t h o d s   i s   a d v o c a t e d   f o r   f u t u r e   s t u d i e s   o f   t h e   R A E s .   I n f o r m a t i o n   s c i e n c e   m u s t   a t t e n d   t o   c o n s i d e r a t i o n s   o f   v a l u e ,   a s   w e l l   a s   u s i n g   e s t a b l i s h e d   t e c h n i q u e s ,   i f   i t   i s   t o   a v o i d   m a r g i n a l i s a t i o n . 	 Q u e e n s   U n i v   B e l f a s t ,   S c h   M a n a g e m e n t   &   E c o n ,   B e l f a s t   B T Y   1 N N ,   A n t r i m ,   N o r t h   I r e l a n d 	 W a r n e r ,   J   ( r e p r i n t   a u t h o r ) ,   Q u e e n s   U n i v   B e l f a s t ,   S c h   M a n a g e m e n t   &   E c o n ,   B e l f a s t   B T Y   1 N N ,   A n t r i m ,   N o r t h   I r e l a n d . 	 	 	 	 	 	 B r a d f o r d   S C ,   1 9 4 8 ,   D O C U M E N T A T I O N ;   * D E P   E D   N O   I R   H I G H ,   E D   F U N D   C O U N C   W A L   S C ;   E l k i n   J ,   1 9 9 7 ,   J   L I B R   I N F   S C I ,   V 2 9 ,   P 1 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 9 7 0 2 9 0 0 3 0 3 ;   F l e c k   L u d w i g ,   1 9 7 9 ,   G E N E S I S   D E V   S C I   F A C T ;   F o u c a u l t   M . ,   1 9 8 4 ,   F O U C A U L T   R E A D E R ;   G a r f i e l d   E ,   1 9 9 8 ,   L I B R I ,   V 4 8 ,   P 6 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 8 . 4 8 . 2 . 6 7 ;   * H I G H   E D   F U N D   C O U N ,   1 9 9 7 ,   I M P   1 9 9 2   R E S   A S S   E X ;   H o d g e s   S ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 2 2 9 ;   K o s t o f f   R . N . ,   1 9 9 7 ,   H D B   R E S   I M P A C T   A S S E S ;   L a t o u r   B r u n o ,   1 9 9 3 ,   W E   H A V E   N E V E R   B E E N   M ;   L i n d h o l m R o m a n t s c h u k   Y ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 3 8 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 7 2 ;   M C N A Y   I ,   1 9 9 7 ,   I M P A C T   1 9 9 2   R A E   I   I N ;   O P P E N H E I M   C ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 0 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   R O B E R T S   N ,   1 9 8 2 ,   S O C   S C I   I N F O R M   S T U D ,   V 2 ,   P 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 3 - 6 2 3 6 ( 8 2 ) 9 0 0 0 3 - 5 ;   R O S E N B E R G   V ,   1 9 7 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 5 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 5 0 4 0 9 ;   S E N G   L B ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 6 8 ;   W a r n e r   J ,   1 9 9 7 ,   A S L I B   P R O C ,   V 4 9 ,   P 2 6 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 1 4 7 5 ;   W A R N E R   J ,   1 9 9 2 ,   A S I S   9 2   C E L E B R A T I N G ;   W A R N E R   J ,   1 9 9 4 ,   W R I T I N G   C O M P U T E R S ;   W e a v e r   W . ,   1 9 6 4 ,   A L I C E   M A N Y   T O N G U E S   T ;   W E A V E R   W . ,   1 9 4 9 ,   M A T H   T H E O R Y   C O M M U N I C ;   W h i t e   M ,   1 9 9 7 ,   J   A M   C O L L   C A R D I O L ,   V 2 9 ,   P 1 8 1 	 2 3 	 5 0 	 5 1 	 1 	 2 5 	 B O W K E R - S A U R 	 E   G R I N S T E A D 	 W I N D S O R   C O U R T ,   E A S T   G R I N S T E A D   H O U S E ,   E   G R I N S T E A D   R H 1 9   1 X A ,   W   S U S S E X ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F O R M   S C I 	 J .   I n f .   S c i . 	 	 2 0 0 0 	 2 6 	 6 	 	 	 	 	 4 5 3 	 4 5 9 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 5 6 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 9 3 K X 	 W O S : 0 0 0 1 6 6 4 6 8 7 0 0 0 0 6 	 	 
 
 J 	 Y o o n ,   J ;   K i m ,   K 	 	 	 	 Y o o n ,   J a n g h y e o k ;   K i m ,   K w a n g s o o 	 	 	 I d e n t i f y i n g   r a p i d l y   e v o l v i n g   t e c h n o l o g i c a l   t r e n d s   f o r   R & D   p l a n n i n g   u s i n g   S A O - b a s e d   s e m a n t i c   p a t e n t   n e t w o r k s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P a t e n t   m i n i n g ;   S e m a n t i c   p a t e n t   s i m i l a r i t y ;   S u b j e c t - a c t i o n - o b j e c t   ( S A O )   s t r u c t u r e s ;   P a t e n t   n e t w o r k ;   R e s e a r c h   a n d   d e v e l o p m e n t   ( R & D )   t r e n d ;   N a t u r a l   l a n g u a g e   p r o c e s s i n g   ( N L P ) 	 C I T A T I O N   N E T W O R K ;   N A T U R A L - L A N G U A G E ;   S M A L L   W O R L D ;   B I B L I O M E T R I C S ;   O P P O R T U N I T I E S ;   I N D I C A T O R S ;   S I M I L A R I T Y ;   D I F F U S I O N 	 P a t e n t s   c o n s t i t u t e   a n   u p - t o - d a t e   s o u r c e   o f   c o m p e t i t i v e   i n t e l l i g e n c e   i n   t e c h n o l o g i c a l   d e v e l o p m e n t ;   t h u s ,   p a t e n t   a n a l y s i s   h a s   b e e n   a   v i t a l   t o o l   f o r   i d e n t i f y i n g   t e c h n o l o g i c a l   t r e n d s .   P a t e n t   c i t a t i o n   a n a l y s i s   i s   e a s y   t o   u s e ,   b u t   f u n d a m e n t a l l y   h a s   t w o   m a i n   l i m i t a t i o n s :   ( 1 )   n e w   p a t e n t s   t e n d   t o   b e   l e s s   c i t e d   t h a n   o l d   o n e s   a n d   m a y   m i s s   c i t a t i o n s   t o   c o n t e m p o r a r y   p a t e n t s ;   ( 2 )   c i t a t i o n - b a s e d   a n a l y s i s   c a n n o t   b e   u s e d   f o r   p a t e n t s   i n   d a t a b a s e s   w h i c h   d o   n o t   r e q u i r e   c i t a t i o n s .   N a t u r a l l y ,   c i t a t i o n - b a s e d   a n a l y s i s   t e n d s   t o   u n d e r e s t i m a t e   t h e   i m p o r t a n c e   o f   n e w   p a t e n t s   a n d   m a y   n o t   w o r k   i n   r a p i d l y - e v o l v i n g   i n d u s t r i e s   i n   w h i c h   t e c h n o l o g y   l i f e - c y c l e s   a r e   s h o r t e n i n g   a n d   n e w   i n v e n t i o n s   a r e   i n c r e a s i n g l y   p a t e n t e d   w o r l d w i d e .   A s   a   r e m e d y ,   t h i s   p a p e r   p r o p o s e s   a   p a t e n t   n e t w o r k   b a s e d   o n   s e m a n t i c   p a t e n t   a n a l y s i s   u s i n g   s u b j e c t - a c t i o n - o b j e c t   ( S A O )   s t r u c t u r e s .   S A O   s t r u c t u r e s   r e p r e s e n t   t h e   e x p l i c i t   r e l a t i o n s h i p s   a m o n g   c o m p o n e n t s   u s e d   i n   a   p a t e n t ,   a n d   a r e   c o n s i d e r e d   t o   r e p r e s e n t   k e y   c o n c e p t s   o f   t h e   p a t e n t   o r   t h e   e x p e r t i s e   o f   t h e   i n v e n t o r .   B a s e d   o n   t h e   i n t e r n a l   s i m i l a r i t i e s   b e t w e e n   p a t e n t s ,   t h e   p a t e n t   n e t w o r k   p r o v i d e s   t h e   u p - t o - d a t e   s t a t u s   o f   a   g i v e n   t e c h n o l o g y .   F u r t h e r m o r e ,   t h i s   p a p e r   s u g g e s t s   n e w   i n d i c e s   t o   i d e n t i f y   t h e   t e c h n o l o g i c a l   i m p o r t a n c e   o f   p a t e n t s ,   t h e   c h a r a c t e r i s t i c s   o f   p a t e n t   c l u s t e r s ,   a n d   t h e   t e c h n o l o g i c a l   c a p a b i l i t i e s   o f   c o m p e t i t o r s .   T h e   p r o p o s e d   m e t h o d   i s   i l l u s t r a t e d   u s i n g   p a t e n t s   r e l a t e d   t o   s y n t h e s i s   o f   c a r b o n   n a n o t u b e s .   W e   e x p e c t   t h a t   t h e   p r o p o s e d   p r o c e d u r e   a n d   a n a l y s i s   w i l l   b e   i n c o r p o r a t e d   i n t o   t e c h n o l o g y   p l a n n i n g   p r o c e s s e s   t o   a s s i s t   e x p e r t s   s u c h   a s   r e s e a r c h e r s   a n d   R & D   p o l i c y   m a k e r s   i n   r a p i d l y - e v o l v i n g   i n d u s t r i e s . 	 [ Y o o n ,   J a n g h y e o k ;   K i m ,   K w a n g s o o ]   P o h a n g   U n i v   S c i   &   T e c h n o l ,   D e p t   I n d   &   M a n a g e m e n t   E n g n ,   P o h a n g   7 9 0 7 8 4 ,   K y u n g b u k ,   S o u t h   K o r e a 	 K i m ,   K   ( r e p r i n t   a u t h o r ) ,   P o h a n g   U n i v   S c i   &   T e c h n o l ,   D e p t   I n d   &   M a n a g e m e n t   E n g n ,   S a n   3 1 ,   P o h a n g   7 9 0 7 8 4 ,   K y u n g b u k ,   S o u t h   K o r e a . 	 j a n g h y o o n @ p o s t e c h . a c . k r ;   k s k i m @ p o s t e c h . a c . k r 	 K i m ,   K w a n g s o o / F - 6 9 6 7 - 2 0 1 3 ;   m i n ,   g u o / F - 3 8 1 3 - 2 0 1 4 	 	 K o r e a   g o v e r n m e n t   ( M E S T )   [ 2 0 0 9 - 0 0 8 8 3 7 9 ] 	 T h i s   w o r k   w a s   s u p p o r t e d   b y   t h e   N a t i o n a l   R e s e a r c h   F o u n d a t i o n   o f   K o r e a   ( N R F )   g r a n t   f u n d e d   b y   t h e   K o r e a   g o v e r n m e n t   ( M E S T )   ( N o .   2 0 0 9 - 0 0 8 8 3 7 9 ) . 	 A b r a h a m   B P ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 0 ) 0 0 0 4 0 - 7 ;   A L B E R T   M B ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 5 5 - U ;   B e r g m a n n   I ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 5 5 0 ;   B o l l o b a s   B ,   1 9 8 3 ,   E V O L U T I O N   S P A R S E   G R A ;   B r e i t z m a n   A ,   2 0 0 2 ,   R E S   T E C H N O L   M A N A G E ,   V 4 5 ,   P 2 8 ;   C a s c i n i   G ,   2 0 0 4 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 1 6 3 ,   P 5 0 8 ;   C a s c i n i   G ,   2 0 0 8 ,   I N T   F E D   I N F O   P R O C ,   V 2 7 7 ,   P 3 1 ;   C h a n g   S B ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 3 . 0 1 4 ;   C H O I   S ,   2 0 1 0 ,   P A T E N T   F U N C T I O N   N E T W ;   D a i m   T U ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 4 . 0 0 4 ;   D e w u l f   S . ,   2 0 0 6 ,   D I R E C T E D   V A R I A T I O N   V ;   D i e s t e l   R e i n h a r d ,   2 0 0 5 ,   G R A P H   T H E O R Y   G R A D U A T ;   E r n s t   H ,   1 9 9 7 ,   S M A L L   B U S   E C O N ,   V 9 ,   P 3 6 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 9 2 1 8 0 8 1 3 8 ;   F o n t a n a   R . ,   2 0 0 9 ,   E C   I N N O V A T I O N   N E W   T E ,   V 1 8 ,   P 3 1 1 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 3 8 5 9 0 8 0 1 9 6 9 0 7 3 ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   F u j i i   A ,   2 0 0 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 3 ,   P 1 1 4 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 1 1 . 0 0 4 ;   G e r k e n   J . ,   2 0 1 0 ,   R   D   M A N   C   2 0 1 0   M A N C H ;   H O P C R O F T   J ,   1 9 7 3 ,   C O M M U N   A C M ,   V 1 6 ,   P 3 7 2 ,   D O I   1 0 . 1 1 4 5 / 3 6 2 2 4 8 . 3 6 2 2 7 2 ;   H u a n g   M H ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 8 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 6 . 2 9 0 5 2 . b f ;   H u a n g   Z ,   2 0 0 3 ,   J   N A N O P A R T   R E S ,   V 5 ,   P 3 3 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 5 5 6 8 0 0 9 9 4 ;   H U N G   S ,   2 0 1 0 ,   I N T   C   M E C H   E L   E N G   I C ,   P 2 3 ;   H u n g   S W ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 2 - z ;   H u n g   S W ,   2 0 0 8 ,   I N   C   I N D   E N G   E N G   M A N ,   P 1 ,   D O I   1 0 . 1 1 0 9 / I E E M . 2 0 0 8 . 4 7 3 7 8 2 1 ;   K a r k i   M . ,   1 9 9 7 ,   W O R L D   P A T E N T   I N F O R M A ,   V 1 9 ,   P 2 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 9 7 ) 0 0 0 3 3 - 1 ;   K a y a l   A A ,   1 9 9 9 ,   I E E E   T   E N G   M A N A G E ,   V 4 6 ,   P 1 2 7 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 7 5 9 1 3 8 ;   * K I P O ,   2 0 1 0 ,   K 2 W   A U T   T R A N S L ;   L e e   S ,   2 0 0 9 ,   T E C H N O V A T I O N ,   V 2 9 ,   P 4 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 1 0 . 0 0 6 ;   L i   X ,   2 0 0 7 ,   J   N A N O P A R T   R E S ,   V 9 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 6 - 9 1 9 4 - 2 ;   L i u   S J ,   1 9 9 7 ,   I N T   J   T E C H N O L   M A N A G E ,   V 1 3 ,   P 6 6 1 ,   D O I   1 0 . 1 5 0 4 / I J T M . 1 9 9 7 . 0 0 1 6 8 9 ;   M a n n   D ,   2 0 0 2 ,   H A N D S   O N   S Y S T E M A T I C ;   M i l l e r   G e o r g e   A ,   1 9 9 5 ,   C O M M U N   A C M ,   V 3 8 ,   P 3 ;   M o e h r l e   M .   G . ,   2 0 0 4 ,   P   1 3   I N T   C   M A N   T E C H N ,   P 1 ;   M o e h r l e   M G ,   2 0 0 5 ,   R & D   M A N A G E ,   V 3 5 ,   P 5 1 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 5 . 0 0 4 0 8 . x ;   N A R I N   F ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 9 ;   N a r i n   F . ,   1 9 9 3 ,   R E V   B U S I N E S S ,   V 1 4 ,   P 1 9 ;   P O R T E R   A L ,   1 9 9 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 9 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 5 ) 0 0 0 2 2 - 3 ;   R e i t z i g   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 9 3 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 2 . 0 0 4 ;   R e s n i k   P ,   1 9 9 9 ,   J   A R T I F   I N T E L L   R E S ,   V 1 1 ,   P 9 5 ;   * R P C C T ,   2 0 1 0 ,   C A R B   N A N   C N T   R E C   T R E ;   S a v r a n s k y   S .   D . ,   2 0 0 0 ,   E N G   C R E A T I V I T Y   I N T R O ;   S h i b a t a   N ,   2 0 0 8 ,   T E C H N O V A T I O N ,   V 2 8 ,   P 7 5 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 0 3 . 0 0 9 ;   S i m p s o n   T . ,   2 0 0 5 ,   W O R D N E T   B A S E D   S E M A N T ;   T r a p p e y   C V ,   2 0 1 1 ,   A D V   E N G   I N F O R M ,   V 2 5 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / j . a e i . 2 0 1 0 . 0 5 . 0 0 7 ;   Y o o n   B ,   2 0 0 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 2 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 4 . 0 8 . 0 1 1 ;   Y o o n   J ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 6 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 0 3 - 8 	 4 5 	 4 9 	 5 0 	 9 	 1 0 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 2 0 1 1 	 8 8 	 1 	 	 	 	 	 2 1 3 	 2 2 8 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 8 3 - 0 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 5 E M 	 W O S : 0 0 0 2 9 2 2 1 0 2 0 0 0 1 4 	 	 
 
 J 	 K o s t o f f ,   R N ;   K o y t c h e f f ,   R G ;   L a u ,   C G Y 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   K o y t c h e f f ,   R a y m o n d   G . ;   L a u ,   C l i f f o r d   G .   Y . 	 	 	 G l o b a l   n a n o t e c h n o l o g y   r e s e a r c h   l i t e r a t u r e   o v e r v i e w 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n a n o p a r t i c l e ;   n a n o t u b e ;   n a n o t e c h n o l o g y ;   t e x t   m i n i n g ;   b i b l i o m e t r i c s ;   d o c u m e n t   c l u s t e r i n g 	 D I S R U P T I V E   T E C H N O L O G Y ;   R O A D M A P S 	 T e x t   m i n i n g   w a s   u s e d   t o   e x t r a c t   t e c h n i c a l   i n t e l l i g e n c e   f r o m   t h e   o p e n   s o u r c e   g l o b a l   n a n o t e c h n o l o g y   a n d   n a n o s c i e n c e   r e s e a r c h   l i t e r a t u r e   ( S C I / S S C I   d a t a b a s e s ) .   I d e n t i f i e d   w e r e :   ( 1 )   t h e   n a n o t e c h n o l o g y / n a n o s c i e n c e   r e s e a r c h   l i t e r a t u r e   i n f r a s t r u c t u r e   ( p r o l i f i c   a u t h o r s ,   k e y   j o u r n a l s / i n s t i t u t i o n s / c o u n t r i e s ,   m o s t   c i t e d   a u t h o r s / j o u r n a l s / d o c u m e n t s ) ;   ( 2 )   t h e   t e c h n i c a l   s t r u c t u r e   ( p e r v a s i v e   t e c h n i c a l   t h r u s t s   a n d   t h e i r   i n t e r - r e l a t i o n s h i p s ) ;   ( 3 )   n a n o t e c h n o l o g y   i n s t r u m e n t s   a n d   t h e i r   r e l a t i o n s h i p s ;   ( 4 )   p o t e n t i a l   n a n o t e c h n o l o g y   a p p l i c a t i o n s ,   ( 5 )   p o t e n t i a l   h e a l t h   i m p a c t s   a n d   a p p l i c a t i o n s ;   a n d   ( 6 )   s e m i n a l   n a n o t e c h n o l o g y   l i t e r a t u r e .   O u r   r e s u l t s   a r e   s u m m a r i z e d   i n   t h i s   p a p e r .   P u b l i s h e d   b y   E l s e v i e r   I n c . 	 [ K o s t o f f ,   R o n a l d   N . ;   K o y t c h e f f ,   R a y m o n d   G . ]   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   [ L a u ,   C l i f f o r d   G .   Y . ]   I n s t   C h e m   A n a l y s e s ,   A l e x a n d r i a ,   V A   2 2 3 1 1   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 A L M A N S A   A ,   2 0 0 6 ,   I P M M A N   R O A D M A P   M I C R ;   E I J K E L   K ,   2 0 0 6 ,   J   M I C R O L I T H O G R   M I C R O ,   V 5 ;   F E Y N M A N   R ,   1 9 6 0 ,   E N G   S C I                     F E B ;   K o s t o f f   R N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 1 4 - 8 ;   K o s t o f f   R N ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 4 8 - 9 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K O S T O F F   R N ,   2 0 0 6 ,   A N A L   S T R A T E G   M A N A G ,   V 1 8 ,   P 1 8 7 ;   K O S T O F F   R N ,   2 0 0 7 ,   I N   P R E S S   T E C H N O L   F O R ;   K o s t o f f   R . N . ,   2 0 0 7 ,   A D A 4 6 1 9 3 0   D T I C ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 4 - 9 ;   L i n t o n   J D ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 6 5 - 9 ;   * M I C R   N A N   C O M M   E D ,   2 0 0 4 ,   I N T   M I C R   N A N   R O A D M ;   * N A T   S C I   T E C H N   C O U ,   2 0 0 4 ,   N A T   N A N   I N   S T R A T   P L A ;   P h a a l   R ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 7 2 - 6 ;   * T H O M S   S C I   I N C ,   2 0 0 6 ,   C E R T   D A T   I N C L   H E R   D E ;   W a l s h   S T ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 3 . 1 0 . 0 0 3 	 1 7 	 4 9 	 5 0 	 1 	 2 9 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 7 	 7 4 	 9 	 	 	 	 	 1 7 3 3 	 1 7 4 7 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 4 . 0 0 4 	 	 1 5 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 4 7 K Q 	 W O S : 0 0 0 2 5 2 0 7 8 2 0 0 0 1 2 	 	 
 
 J 	 G l e n i s s o n ,   P ;   G l a n z e l ,   W ;   J a n s s e n s ,   F ;   D e   M o o r ,   B 	 	 	 	 G l e n i s s o n ,   P ;   G l a n z e l ,   W ;   J a n s s e n s ,   F ;   D e   M o o r ,   B 	 	 	 C o m b i n i n g   f u l l   t e x t   a n d   b i b l i o m e t r i c   i n f o r m a t i o n   i n   m a p p i n g   s c i e n t i f i c   d i s c i p l i n e s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a u t o m a t i c   i n d e x i n g ;   f u l l   t e x t   a n a l y s i s ;   t e x t - b a s e d   c l u s t e r i n g ;   m a p p i n g   o f   s c i e n c e ;   b i b l i o m e t r i c s 	 S C I E N C E   I N D I C A T O R S ;   W O R D   A N A L Y S I S ;   C O C I T A T I O N ;   A L G O R I T H M ;   C H E M I S T R Y ;   F I E L D 	 I n   t h e   p r e s e n t   s t u d y   r e s u l t s   o f   a n   e a r l i e r   p i l o t   s t u d y   b y   G l e n i s s o n ,   G l a n z e l   a n d   P e r s s o n   a r e   e x t e n d e d   o n   t h e   b a s i s   o f   l a r g e r   s e t s   o f   p a p e r s .   F u l l   t e x t   a n a l y s i s   a n d   t r a d i t i o n a l   b i b l i o m e t r i c   m e t h o d s   a r e   s e r i a l l y   c o m b i n e d   t o   i m p r o v e   t h e   e f f i c i e n c y   o f   t h e   t w o   i n d i v i d u a l   m e t h o d s .   T h e   t e x t   m i n i n g   m e t h o d o l o g y   a l r e a d y   i n t r o d u c e d   i n   t h e   p i l o t   s t u d y   i s   a p p l i e d   t o   t h e   c o m p l e t e   p u b l i c a t i o n   y e a r   2 0 0 3   o f   t h e   j o u r n a l   S c i e n t o m e t r i c s .   A l t o g e t h e r   8 5   d o c u m e n t s   t h a t   c a n   b e   c o n s i d e r e d   r e s e a r c h   a r t i c l e s   o r   n o t e s   h a v e   b e e n   s e l e c t e d   f o r   t h i s   e x e r c i s e .   T h e   o u t c o m e s   c o n f i r m   t h e   m a i n   r e s u l t s   o f   t h e   p i l o t   s t u d y ,   n a m e l y ,   t h a t   s u c h   h y b r i d   m e t h o d o l o g y   c a n   b e   a p p l i e d   t o   b o t h   r e s e a r c h   e v a l u a t i o n   a n d   i n f o r m a t i o n   r e t r i e v a l .   N e v e r t h e l e s s ,   S c i e n t o m e t r i c s   d o c u m e n t s   p u b l i s h e d   i n   2 0 0 3   c o v e r   a   m u c h   b r o a d e r   a n d   m o r e   h e t e r o g e n e o u s   s p e c t r u m   o f   b i b l i o m e t r i c s   a n d   r e l a t e d   r e s e a r c h   t h a n   t h o s e   a n a l y s e d   i n   t h e   p i l o t   s t u d y .   A   m o d i f i e d   s u b j e c t   c l a s s i f i c a t i o n   b a s e d   o n   t h e   s c h e m e   u s e d   i n   a n   e a r l i e r   s t u d y   b y   S c h o e p f l i n   a n d   G l a n z e l   h a s   b e e n   a p p l i e d   f o r   v a l i d a t i o n   p u r p o s e s .   ( c )   2 0 0 5   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 C a t h o l i c   U n i v   L o u v a i n ,   S t e u n p u n t   O & O   S t a t i s t i e k e n ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m ;   H u n g a r i a n   A c a d   S c i ,   I n s t   R e s   O r g ,   H - 1 0 5 1   B u d a p e s t ,   H u n g a r y ;   K a t h o l i e k e   U n i v   L e u v e n ,   E S A T ,   S C D ,   B - 3 0 0 1   H e v e r l e e ,   B e l g i u m 	 G l e n i s s o n ,   P   ( r e p r i n t   a u t h o r ) ,   C a t h o l i c   U n i v   L o u v a i n ,   S t e u n p u n t   O & O   S t a t i s t i e k e n ,   D e k e n s s t r   2 ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m . 	 p a t r i c k . g l e n i s s o n @ e c o n . k u l e u v e n . b e ;   w o l f g a n g . g l a n z e l @ e c o n . k u l e u v e n . a c . b e ;   f r i z o . j a n s s e n s @ e s a t . k u l e u v e n n . a c . b e 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 B a e z a - Y a t e s   R ,   1 9 9 9 ,   M O D E R N   I N F O R M A T I O N   R ;   B e n - H u r   A . ,   2 0 0 2 ,   P A C   S   B I O C ,   V 7 ,   P 6 ,   D O I   D O I   1 0 . 1 0 1 6 / J . E N V H A Z . 2 0 0 7 . 0 4 . 0 0 2 ;   B e r r y   M W ,   1 9 9 5 ,   S I A M   R E V ,   V 3 7 ,   P 5 7 3 ,   D O I   1 0 . 1 1 3 7 / 1 0 3 7 1 2 7 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B r a u n   T ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 9 8 0 0 6 0 7 8 ;   C A L L O N   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 8 0 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D u n n i n g   T . ,   1 9 9 3 ,   C o m p u t a t i o n a l   L i n g u i s t i c s ,   V 1 9 ,   P 6 1 ;   E n r i g h t   A J ,   2 0 0 1 ,   B I O I N F O R M A T I C S ,   V 1 7 ,   P 8 5 3 ,   D O I   1 0 . 1 0 9 3 / b i o i n f o r m a t i c s / 1 7 . 9 . 8 5 3 ;   G L E N I S S O N   P ,   2 0 0 5 ,   I N   P R E S S   S C I E N T O M E T R ;   G l e n i s s o n   P . ,   2 0 0 3 ,   S I G K D D   E X P L O R A T I O N S ,   V 5 ,   P 1 0 1 ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   L a m i r e l   J C ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 4 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 6 . 0 5 2 7 8 . e 8 ;   M a n n i n g   C .   D . ,   2 0 0 0 ,   F D N   S T A T   N A T U R A L   L A N ;   M u l l i n s   N . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 8 1 ;   N O Y O N S   E C M ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 2 0 ;   P O R T E R   M F ,   1 9 8 0 ,   P R O G R A M - A U T O M   L I B R ,   V 1 4 ,   P 1 3 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 4 6 8 1 4 ;   S a l t o n   G . ,   1 9 8 6 ,   I N T R O   M O D E R N   I N F O R M A ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S N I Z E K   W E ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 4 1 ;   Z I T T   M ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 2 	 2 1 	 4 9 	 5 3 	 4 	 5 0 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 D E C 	 2 0 0 5 	 4 1 	 6 	 	 	 	 	 1 5 4 8 	 1 5 7 2 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 1 	 	 2 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 5 6 X E 	 W O S : 0 0 0 2 3 1 3 3 2 6 0 0 0 1 7 	 	 
 
 J 	 K o s t o f f ,   R N ;   d e l   R i o ,   J A ;   H u m e n i k ,   J A ;   G a r c i a ,   E O ;   R a m i r e z ,   A M 	 	 	 	 K o s t o f f ,   R N ;   d e l   R i o ,   J A ;   H u m e n i k ,   J A ;   G a r c i a ,   E O ;   R a m i r e z ,   A M 	 	 	 C i t a t i o n   m i n i n g :   I n t e g r a t i n g   t e x t   m i n i n g   a n d   b i b l i o m e t r i c s   f o r   r e s e a r c h   u s e r   p r o f i l i n g 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 D A T A B A S E   T O M O G R A P H Y ;   I M P A C T ;   P H Y S I C S 	 I d e n t i f y i n g   t h e   u s e r s   a n d   i m p a c t   o f   r e s e a r c h   i s   i m p o r t a n t   f o r   r e s e a r c h   p e r f o r m e r s ,   m a n a g e r s ,   e v a l u a t o r s ,   a n d   s p o n s o r s .   I t   i s   i m p o r t a n t   t o   k n o w   w h e t h e r   t h e   a u d i e n c e   r e a c h e d   i s   t h e   a u d i e n c e   d e s i r e d .   I t   i s   u s e f u l   t o   u n d e r s t a n d   t h e   t e c h n i c a l   c h a r a c t e r i s t i c s   o f   t h e   o t h e r   r e s e a r c h / d e v e l o p m e n t / a p p l i c a t i o n s   i m p a c t e d   b y   t h e   o r i g i n a t i n g   r e s e a r c h ,   a n d   t o   u n d e r s t a n d   o t h e r   c h a r a c t e r i s t i c s   ( n a m e s ,   o r g a n i z a t i o n s ,   c o u n t r i e s )   o f   t h e   u s e r s   i m p a c t e d   b y   t h e   r e s e a r c h .   B e c a u s e   o f   t h e   m a n y   i n d i r e c t   p a t h w a y s   t h r o u g h   w h i c h   f u n d a m e n t a l   r e s e a r c h   c a n   i m p a c t   a p p l i c a t i o n s ,   i d e n t i f y i n g   t h e   u s e r   a u d i e n c e   a n d   t h e   r e s e a r c h   i m p a c t s   c a n   b e   v e r y   c o m p l e x   a n d   t i m e   c o n s u m i n g .   T h e   p u r p o s e   o f   t h i s   a r t i c l e   i s   t o   d e s c r i b e   a   n o v e l   a p p r o a c h   f o r   i d e n t i f y i n g   t h e   p a t h w a y s   t h r o u g h   w h i c h   r e s e a r c h   c a n   i m p a c t   o t h e r   r e s e a r c h ,   t e c h n o l o g y   d e v e l o p m e n t ,   a n d   a p p l i c a t i o n s ,   a n d   t o   i d e n t i f y   t h e   t e c h n i c a l   a n d   i n f r a s t r u c t u r e   c h a r a c t e r i s t i c s   o f   t h e   u s e r   p o p u l a t i o n .   A   n o v e l   l i t e r a t u r e - b a s e d   a p p r o a c h   w a s   d e v e l o p e d   t o   i d e n t i f y   t h e   u s e r   c o m m u n i t y   a n d   i t s   c h a r a c t e r i s t i c s .   T h e   r e s e a r c h   p e r f o r m e d   i s   c h a r a c t e r i z e d   b y   o n e   o r   m o r e   a r t i c l e s   a c c e s s e d   b y   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   d a t a b a s e ,   b e c c a u s e   t h e   S C I ' s   c i t a t i o n - b a s e d   s t r u c t u r e   e n a b l e s   t h e   c a p a b i l i t y   t o   p e r f o r m   c i t a t i o n   s t u d i e s   e a s i l y . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   U n i v   N a c l   A u t o n o m a   M e x i c o ,   C t r   I n v e s t   E n e r g i a ,   T e m i x c o ,   M o r e l o s ,   M e x i c o ;   N O E S I S   I n c ,   M a n a s s a s ,   V A   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 	 d e l   R i o   P o r t i l l a ,   J e s u s   A n t o n i o / C - 2 1 2 5 - 2 0 0 9 	 d e l   R i o   P o r t i l l a ,   J e s u s   A n t o n i o / 0 0 0 0 - 0 0 0 1 - 6 1 8 0 - 0 6 0 8 	 	 	 A V E R C H   H A ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 8 ;   B r a u n   T . ,   1 9 8 7 ,   L I T   A N A L   C H E M   S C I E N T ;   D a v i d s e   R J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 3 6 ;   D E L R I O   J A ,   2 0 0 0 ,   C I T A T I O N   M I N I N G   C I T I ;   * D O D ,   1 9 6 9 ,   A D 4 9 5 9 0 5   D T I C   D O D ;   * D O E ,   1 9 8 3 ,   D O E E R 0 1 9 4 ;   * D O E ,   1 9 8 6 ,   D O E E R 0 2 7 5   D O E ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S ;   H E R R I N G   S D ,   1 9 9 9 ,   J A S I S ,   V 1 ,   P 3 5 8 ;   * I D A ,   1 9 9 1 ,   P 2 1 9 2   I D A ,   V 1 ;   * I I T R I ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ;   J A E G E R   H M ,   1 9 9 2 ,   S C I E N C E ,   V 2 5 5 ,   P 1 5 2 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 5 5 . 5 0 5 1 . 1 5 2 3 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K O S T O F F   R N ,   1 9 9 4 ,   S C I   P U B L I C   P O L I C Y ,   V 2 ;   K O S T O F F   R N ,   1 9 9 7 ,   A D A 2 9 6 0 2 1   D T I C ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N A R I N   F ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ,   P 1 2 0 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   S t e e l e   T W ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 4 7 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 5 < 4 7 6 : : A I D - A S I 8 > 3 . 3 . C O ; 2 - 7 ;   T a s s e y   G ,   1 9 9 9 ,   E V A L   P R O G R A M   P L A N N ,   V 2 2 ,   P 1 1 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 7 1 8 9 ( 9 8 ) 0 0 0 4 7 - 0 	 2 2 	 4 9 	 5 1 	 1 	 2 8 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 N O V 	 2 0 0 1 	 5 2 	 1 3 	 	 	 	 	 1 1 4 8 	 1 1 5 6 	 	 1 0 . 1 0 0 2 / a s i . 1 1 8 1 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 8 5 K G 	 W O S : 0 0 0 1 7 1 7 5 3 1 0 0 0 0 6 	 	 
 
 J 	 G a r f i e l d ,   E 	 	 	 	 G a r f i e l d ,   E 	 	 	 R a n d o m   t h o u g h t s   o n   c i t a t i o n o l o g y .   I t s   t h e o r y   a n d   p r a c t i c e   -   C o m m e n t s   o n   t h e o r i e s   o f   c i t a t i o n ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 T h e o r i e s   o f   c i t a t i o n   a r e   a s   e l u s i v e   a s   t h e o r i e s   o f   i n f o r m a t i o n   s c i e n c e ,   w h i c h   h a v e   b e e n   d e b a t e d   f o r   d e c a d e s .   B u t   a s   a   b a s i s   f o r   d i s c u s s i o n   I   o f f e r   t h e   t e r m   c i t a t i o n o l o g y   a s   t h e   t h e o r y   a n d   p r a c t i c e   o f   c i t a t i o n ,   i n c l u d i n g   i t s   d e r i v a t i v e   d i s c i p l i n e s   c i t a t i o n   a n a l y s i s   a n d   b i b l i o m e t r i c s .   S e v e r a l   m a x i m s ,   c o m m a n d m e n t s   i f   y o u   w i l l ,   h a v e   b e e n   e n u n c i a t e d .   R e f e r e n c e s   a r e   t h e   r e s u l t   o f   a   s p e c i a l i z e d   s y m b o l i c   l a n g u a g e   w i t h   a   c i t a t i o n   s y n t a x   a n d   g r a m m a r .   R e f e r e n c e s ,   l i k e   w o r d s ,   h a v e   m u l t i p l e   m e a n i n g s   w h i c h   a r e   r e l a t e d   t o   t h e   a p o s t e r i o r i   q u a l i t y   o f   c i t a t i o n   i n d e x e s .   T h e r e f o r e ,   c i t a t i o n   r e l e v a n c e   c a n n o t   b e   p r e d i c t e d .   M a t h e m a t i c a l   m i c r o t h e o r i e s   i n   b i b l i o m e t r i c s   a b o u n d ,   i n c l u d i n g   t h e   a p p o s i t e   l a w s   o f   s c a t t e r i n g   a n d   c o n c e n t r a t i o n .   C i t a t i o n   b e h a v i o r   i s   a   v a s t   s u b - s e t   o f   c i t a t i o n   t h e o r y ,   w h i c h   l i k e   c i t a t i o n   t y p o l o g y ,   c a n   n e v e r   b e   c o m p l e t e .   D e v i a n t   c i t a t i o n   b e h a v i o r   p r e o c c u p i e s   c e r t a i n   a u t h o r s   b u t   i t   i s   r a r e l y   s i g n i f i c a n t   i n   w e l l - d e s i g n e d   c i t a t i o n   a n a l y s e s ,   w h e r e   p r o p e r   c o h o r t s   a r e   d e f i n e d .   M y t h s   a b o u t   u n c i t e d n e s s   a n d   t h e   d e t e r m i n a n t s   o f   i m p a c t   a r e   d i s c u s s e d ,   a s   w e l l   a s   j o u r n a l   i m p a c t   f a c t o r s   a s   s u r r o g a t e s   a n d   o b s e r v a t i o n ' s   o n   s c i e n t i s t s   o f   N o b e l   C l a s s .   A f t e r   t w o   y e a r s   a t   J o h n s   H o p k i n s   i n v e s t i g a t i n g   " m a c h i n e   d o c u m e n t a t i o n , "   a n d   a n o t h e r   y e a r   a s   a   s t u d e n t   o f   l i b r a r y   s c i e n c e ,   I   b e c a m e ,   f o r t u i t o u s l y ,   a   d o c u m e n t a t i o n   c o n s u l t a n t .   B y   1 9 5 4 ,   I   c a l l e d   m y s e l f   a n   i n f o r m a t i o n   e n g i n e e r ,   w h i c h   w a s   a n   a p t   d e s c r i p t i o n   o f   m y   p r o f e s s i o n a l   c o n s u l t i n g   a c t i v i t i e s .   H o w e v e r ,   P e n n s y l v a n i a   l i c e n s i n g   l a w   r e q u i r e s   t h a t   e n g i n e e r s   b e   g r a d u a t e s   o f   e n g i n e e r i n g   s c h o o l s .   S o   I   b e c a m e   a n   i n f o r m a t i o n   s c i e n t i s t !   I ' v e   n e v e r   t h o u g h t   o f   m y s e l f   a s   a n   i n f o r m a t i o n   t h e o r e t i c i a n   a n d   h a v e   b e e n   s k e p t i c a l   a b o u t   a   n e e d   f o r   a   t h e o r y   o f   i n f o r m a t i o n   s c i e n c e .   I ' v e   p r a c t i c e d   i n f o r m a t i o n   s c i e n c e   a n d   e n g i n e e r i n g   w i t h o u t   e x p l i c i t   t h e o r e t i c a l   s u p p o r t .   B u t   u n d o u b t e d l y   t h e r e   a r e   u n d e r l y i n g   p r i n c i p l e s   w h i c h   c a n   g u i d e   i n f o r m a t i o n   s c i e n t i s t s   w h o ,   l i k e   m y s e l f ,   c o u l d   b e   c a l l e d   " c i t a t i o n i s t s "   o r   " c i t a t i o n o l o g i s t s . ' '   I f   t h e r e   i s   a   t h e o r y   a n d   p r a c t i c e   o f   c i t a t i o n ,   i t   s h o u l d   p r o b a b l y   b e   c a l l e d   c i t a t i o n o l o g y . 	 I n s t   S c i   I n f o r m a t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A ;   T h e   S c i e n t i s t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 G a r f i e l d ,   E   ( r e p r i n t   a u t h o r ) ,   I n s t   S c i   I n f o r m a t ,   3 5 0 1   M a r k e t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 g a r f i e l d @ a u r o r a . c i s . u p e n n . e d u 	 G a r f i e l d ,   E u g e n e / A - 1 0 0 9 - 2 0 0 8 	 	 	 	 B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a d f o r d   S C ,   1 9 5 0 ,   D O C U M E N T A T I O N ;   C a w k e l l   A .   E . ,   1 9 8 0 ,   E I N S T E I N   1 S T   H U N D R E D ,   P 3 1 ;   C L E V E R D O N   C ,   1 9 6 7 ,   A S L I B   P R O C ,   V 1 9 ,   P 1 7 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 0 0 9 7 ;   G A R F I E L D   E ,   1 9 7 6 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 8 5 ,   C U R R   C O N T E N T S ,   V 4 3 ,   P 3 ;   G A R F I E L D   E ,   1 9 7 7 ,   C U R R   C O N T E N T S ,   P 5 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 1 ;   G a r f i e l d   E ,   1 9 9 7 ,   C E L L   D E A T H   D I F F E R ,   V 4 ,   P 3 5 2 ,   D O I   1 0 . 1 0 3 8 / s j . c d d . 4 4 0 0 2 6 1 ;   G A R F I E L D   E ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 4 ;   G a r f i e l d   E ,   1 9 9 8 ,   C E L L   D E A T H   D I F F E R ,   V 5 ,   P 1 2 7 ;   G A R F I E L D   E ,   1 9 6 2 ,   U N P U B   P R O G R   R E P O R T   C ;   G A R F I E L D   E ,   1 9 9 6 ,   L I B   Q ,   V 6 6 ,   P 4 9 9 ;   G a r f i e l d   E . ,   1 9 8 1 ,   C U R R   C O N T E N T S ,   V 2 2 ,   P 5 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 7 1 ,   C U R R   C O N T E N T S ,   P 5 ;   G a r f i e l d   E . ,   1 9 9 8 ,   1 5 0   A N N   M   A A A S   P H I L ;   H A M I L T O N   D P ,   1 9 9 0 ,   S C I E N C E ,   V 2 5 0 ,   P 1 3 3 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 2 5 5 9 0 2 ;   K E L L Y   K ,   1 9 9 5 ,   S O C I A L   S Y S T E M S   E C   W O ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   L O W R Y   O H ,   1 9 5 1 ,   J   B I O L   C H E M ,   V 1 9 3 ,   P 2 6 5 ;   P E N D L E B U R Y   D A ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 1 4 1 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 5 1 . 5 0 0 0 . 1 4 1 0 - b ;   P E R T   C ,   1 9 9 7 ,   M O L   E M O T I O N   W H Y   F E E L ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S E G L E N   P O ,   1 9 9 0 ,   P   I N T   C   S C I   T E C H N   I N ;   S H E R   I H ,   1 9 6 6 ,   R E S   P R O G R A M   E F F E C T I V ,   P 1 3 5 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   W A D E   N ,   1 9 9 7 ,   N Y   T I M E S                 1 0 0 7 ,   p F 4 ;   W o u t e r s   P ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 8 0 ;   Z u c k e r m a n   H . ,   1 9 9 6 ,   S C I   E L I T E   N O B E L   L A U R 	 3 0 	 4 9 	 5 2 	 7 	 3 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 1 9 9 8 	 4 3 	 1 	 	 	 	 	 6 9 	 7 6 	 	 1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 6 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 1 9 C L 	 W O S : 0 0 0 0 7 5 8 7 7 7 0 0 0 0 7 	 	 
 
 J 	 F r a n c e s c h e t ,   M ;   C o s t a n t i n i ,   A 	 	 	 	 F r a n c e s c h e t ,   M a s s i m o ;   C o s t a n t i n i ,   A n t o n i o 	 	 	 T h e   e f f e c t   o f   s c h o l a r   c o l l a b o r a t i o n   o n   i m p a c t   a n d   q u a l i t y   o f   a c a d e m i c   p a p e r s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S c h o l a r   c o l l a b o r a t i o n ;   B i b l i o m e t r i c s ;   P e e r   r e v i e w 	 S C I E N T I F I C   C O L L A B O R A T I O N ;   S C I E N C E ;   C O A U T H O R S H I P ;   P A T T E R N S 	 W e   s t u d y   h o w   s c h o l a r   c o l l a b o r a t i o n   v a r i e s   a c r o s s   d i s c i p l i n e s   i n   s c i e n c e ,   s o c i a l   s c i e n c e ,   a r t s   a n d   h u m a n i t i e s   a n d   t h e   e f f e c t s   o f   a u t h o r   c o l l a b o r a t i o n   o n   i m p a c t   a n d   q u a l i t y   o f   c o a u t h o r e d   p a p e r s .   I m p a c t   i s   m e a s u r e d   w i t h   t h e   a i d   o f   c i t a t i o n s   c o l l e c t e d   b y   p a p e r s ,   w h i l e   q u a l i t y   i s   d e t e r m i n e d   b y   t h e   j u d g e m e n t s   e x p r e s s e d   b y   p e e r   r e v i e w e r s .   T o   t h i s   e n d ,   w e   t a k e   a d v a n t a g e   o f   t h e   d a t a s e t   p r o v i d e d   b y   t h e   f i r s t - e v e r   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e   o f   I t a l i a n   u n i v e r s i t i e s ,   w h i c h   i n v o l v e d   2 0   d i s c i p l i n a r y   a r e a s ,   1 0 2   r e s e a r c h   s t r u c t u r e s ,   1 8 , 5 0 0   r e s e a r c h   p r o d u c t s ,   a n d   6 6 6 1   p e e r   r e v i e w e r s .   C o l l a b o r a t i o n   i n t e n s i t y   n e a t l y   v a r i e s   a c r o s s   d i s c i p l i n e s :   i t   i s   i n e s c a p a b l e   i s   m o s t   s c i e n c e s   a n d   n e g l i g i b l e   i n   m o s t   h u m a n i t i e s .   W e   m e a s u r e d   a   g e n e r a l   p o s i t i v e   a s s o c i a t i o n   b e t w e e n   c a r d i n a l i t y   o f   t h e   a u t h o r   s e t   o f   a   p a p e r   a n d   c i t a t i o n   c o u n t   a s   w e l l   a s   p e e r   q u a l i t y   o f   t h e   c o n t r i b u t i o n .   T h e   c o r r e l a t i o n   i s   s t r o n g e r   w h e n   t h e   a f f i l i a t i o n s   o f   a u t h o r s   a r e   h e t e r o g e n e o u s .   T h e r e   e x i s t ,   h o w e v e r ,   n o t a b l e   a n d   i n t e r e s t i n g   c o u n t e r - e x a m p l e s .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ F r a n c e s c h e t ,   M a s s i m o ]   U n i v   U d i n e ,   D e p t   M a t h   &   C o m p   S c i ,   I - 3 3 1 0 0   U d i n e ,   I t a l y ;   [ C o s t a n t i n i ,   A n t o n i o ]   U n i v   U d i n e ,   D e p t   A g r   &   E n v i r o n m   S c i ,   I - 3 3 1 0 0   U d i n e ,   I t a l y 	 F r a n c e s c h e t ,   M   ( r e p r i n t   a u t h o r ) ,   U n i v   U d i n e ,   D e p t   M a t h   &   C o m p   S c i ,   V i a   S c i e n z e   2 0 6 ,   I - 3 3 1 0 0   U d i n e ,   I t a l y . 	 m a s s i m o . f r a n c e s c h e t @ u n i u d . i t 	 	 	 	 	 A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A k s n e s   D .   W . ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 5 9 ;   B O R D O N S   M ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 1 9 7 ;   C r o n i n   B ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 7 8 ;   C r o n i n   B ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s ;   F R A N C E S C H E T   M ,   2 0 1 0 ,   F I R S T   I T A L I A N   R E S   A S ;   G l a n z e l   W ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 6 1 ;   G l a n z e l   W ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 2 5 7 ;   G O L D F I N C H   S ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 3 2 1 ,   P 1 9 9 5 ;   G R A N O V E T T E R   M S ,   1 9 7 3 ,   A M   J   S O C I O L ,   V 7 8 ,   P 1 3 6 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 5 4 6 9 ;   H a r t   R L ,   2 0 0 7 ,   J   A C A D   L I B R ,   V 3 3 ,   P 1 9 0 ,   D O I   1 0 . 1 0 1 6 / j . a c a l i b . 2 0 0 6 . 1 2 . 0 0 2 ;   H E R B E R T Z   H ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 7 7 7 ;   I r i b a r r e n - M a e s t r o   I ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 1 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 1 2 - 4 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K a t z   J S ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 5 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 9 ;   L a r i v i e r e   V ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 7 - 8 ;   L A W A N I   S M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 4 ;   L E I M U   R ,   2 0 0 5 ,   B I O S C I E N C E ,   V 5 5 ,   P 4 3 6 ;   L e v i t t   J M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 3 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 0 0 ;   L U U K K O N E N   T ,   1 9 9 2 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 7 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 2 0 1 7 0 0 1 0 6 ;   M e d o f f   M H ,   2 0 0 3 ,   L A B O U R   E C O N ,   V 1 0 ,   P 5 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 7 - 5 3 7 1 ( 0 3 ) 0 0 0 7 2 - 1 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M o o d y   J ,   2 0 0 4 ,   A M   S O C I O L   R E V ,   V 6 9 ,   P 2 1 3 ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   P R E S S E R   S ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 1 0 5 ;   R e a l e   E ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 2 1 6 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 2 7 5 0 1 ;   S o n n e n w a l d   D H ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 6 4 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 2 1 ;   S U B R A M A N Y A M   K ,   1 9 8 3 ,   J   I N F O R M   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 3 0 0 6 0 0 1 0 5 	 2 8 	 4 8 	 4 8 	 3 	 4 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 0 	 4 	 4 	 	 	 	 	 5 4 0 	 5 5 3 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 3 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 4 7 K A 	 W O S : 0 0 0 2 8 1 6 1 6 2 0 0 0 0 9 	 	 
 
 J 	 T h e l w a l l ,   M ;   H a r r i e s ,   G 	 	 	 	 T h e l w a l l ,   M ;   H a r r i e s ,   G 	 	 	 T h e   c o n n e c t i o n   b e t w e e n   t h e   r e s e a r c h   o f   a   u n i v e r s i t y   a n d   c o u n t s   o f   l i n k s   t o   i t s   w e b   p a g e s :   A n   i n v e s t i g a t i o n   b a s e d   u p o n   a   c l a s s i f i c a t i o n   o f   t h e   r e l a t i o n s h i p s   o f   p a g e s   t o   t h e   r e s e a r c h   o f   t h e   h o s t   u n i v e r s i t y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W O R L D - W I D E - W E B ;   I M P A C T   F A C T O R S ;   C I T A T I O N   A N A L Y S I S ;   S E A R C H   E N G I N E ;   I N T E R N E T ;   C O M M U N I C A T I O N ;   S I T E ;   B I B L I O M E T R I C S ;   W E B O M E T R I C S ;   I N F O R M A T I O N 	 R e s u l t s   f r o m   r e c e n t   a d v a n c e s   i n   l i n k   m e t r i c s   h a v e   d e m o n s t r a t e d   t h a t   t h e   h y p e r l i n k   s t r u c t u r e   o f   n a t i o n a l   u n i v e r s i t y   s y s t e m s   c a n   b e   s t r o n g l y   r e l a t e d   t o   t h e   r e s e a r c h   p r o d u c t i v i t y   o f   t h e   i n d i v i d u a l   i n s t i t u t i o n s .   T h i s   p a p e r   u s e s   a   p a g e   c a t e g o r i z a t i o n   t o   s h o w   t h a t   r e s t r i c t i n g   t h e   m e t r i c s   t o   s u b s e t s   m o r e   c l o s e l y   r e l a t e d   t o   t h e   r e s e a r c h   o f   t h e   h o s t   u n i v e r s i t y   c a n   p r o d u c e   e v e n   s t r o n g e r   a s s o c i a t i o n s .   A   p a r t i a l   o v e r l a p   w a s   a l s o   f o u n d   b e t w e e n   t h e   e f f e c t s   o f   a p p l y i n g   a d v a n c e d   d o c u m e n t   m o d e l s   a n d   s e p a r a t i n g   p a g e   t y p e s ,   b u t   t h e   b e s t   r e s u l t s   w e r e   a c h i e v e d   t h r o u g h   a   c o m b i n a t i o n   o f   t h e   t w o . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 T h e l w a l l ,   M   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d . 	 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B J O R N E B O R N   L ,   2 0 0 1 ,   S H A R E D   O U T L I N K S   W E B O ;   B J O R N E B O R N   L ,   2 0 0 1 ,   N E C E S S A R Y   D A T A   F I L T E ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   C a l v e r t   P J ,   2 0 0 1 ,   E L E C T R O N   L I B R ,   V 1 9 ,   P 2 3 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 5 7 4 7 ;   C O O P E R   W S ,   1 9 6 9 ,   A M   D O C ,   V 2 0 ,   P 2 6 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 0 0 3 1 4 ;   C r e s s e r   F ,   2 0 0 1 ,   M E D I A   C U L T   S O C ,   V 2 3 ,   P 4 5 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 3 4 4 3 0 1 0 2 3 0 0 4 0 0 3 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r o w s t o n   K ,   2 0 0 0 ,   I N F O R M   S O C ,   V 1 6 ,   P 2 0 1 ;   D a v e n p o r t   E ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 5 1 7 ;   D O U Y E R E   M ,   2 0 0 2 ,   9   J O U R N   F R A N C   I N F   M E ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   F l a k e   G . W . ,   2 0 0 2 ,   I E E E   C O M P U T ,   V 3 5 ,   P 6 6 ;   G A R F I E L D   E ,   1 9 9 4 ,   C U R R E N T   C O N T E N T   0 6 2 0 ;   G o o d r u m   A A ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 6 6 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 4 7 - 9 ;   H a a s   S W ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 8 1 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - # ;   H a r t e r   S P ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 1 5 9 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 2 9 > 3 . 0 . C O ; 2 - P ;   H e t i n g   C h u ,   2 0 0 2 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 4 3 ,   P 1 1 0 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 9 7 2 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   J A C K S O N   M S ,   1 9 9 9 ,   I E E E   I N F O R M A T I C S   N O V ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   K o e h l e r   W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 6 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 1 8 ;   L A R S O N   R R ,   1 9 9 6 ,   A S I S   9 6 ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L a w r e n c e   S ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 3 8 / 2 1 9 8 7 ;   M E T T R O P   W ,   2 0 0 1 ,   J   D O C ,   P 6 2 3 ;   M i d d l e t o n   I ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 2 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 3 0 6 ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S a p i e n z a   F A ,   1 9 9 9 ,   J A V N O S T - P U B L I C ,   V 6 ,   P 3 9 ;   S M I T H   A ,   2 0 0 2 ,   I N   P R E S S   S C I E N T O M E T R ,   V 5 4 ;   S m i t h   A G ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 5 7 7 ;   S t a f f o r d   T .   F . ,   2 0 0 1 ,   I n f o r m a t i o n   R e s o u r c e s   M a n a g e m e n t   J o u r n a l ,   V 1 4 ,   P 2 2 ,   D O I   1 0 . 4 0 1 8 / i r m j . 2 0 0 1 0 1 0 1 0 3 ;   T A N G   R ,   2 0 0 2 ,   I N   P R E S S   P   A S I S T   A N N ,   V 3 9 ;   T e o   T S H ,   2 0 0 1 ,   I N T E R N E T   R E S ,   V 1 1 ,   P 1 2 5 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 1 1 0 6 9 5 0 8 9 ;   T h e l w a l l   M ,   2 0 0 0 ,   I N T E R N E T   R E S ,   V 1 0 ,   P 1 5 0 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 0 1 0 3 2 2 9 3 9 ;   T h e l w a l l   M ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 1 8 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 0 1 0 8 0 3 8 0 1 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 6 8 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 4 8 2 1 9 ;   T h e l w a l l   M ,   2 0 0 2 ,   I N T E R N E T   R E S ,   V 1 2 ,   P 1 2 4 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 2 1 0 4 2 2 5 0 3 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 5 6 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 4 1 5 8 6 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 1 9 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 6 0 ;   T H E L W A L L   M ,   2 0 0 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 3 ,   P 5 6 3 ;   T h e l w a l l   M . ,   2 0 0 2 ,   J   I N F   S C I ,   V 2 8 ,   P 4 8 5 ;   T h e l w a l l   M . ,   2 0 0 1 ,   P U B L I C L Y   A C C E S S I B L E ;   T H E L W A L L   M ,   2 0 0 2 ,   J   A M   S O C   I N F O R M A T I O N ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   V a u g h a n   L ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 3 5 6 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 5 2 5 5 5 ;   W i k g r e n   M ,   2 0 0 1 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 0 1 ) 0 0 0 9 1 - 3 ;   2 0 0 1 ,   E D   G U A R D I A N 	 5 6 	 4 8 	 5 0 	 4 	 1 9 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A Y 	 2 0 0 3 	 5 4 	 7 	 	 	 	 	 5 9 4 	 6 0 2 	 	 1 0 . 1 0 0 2 / a s i . 1 0 1 6 1 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 7 0 T N 	 W O S : 0 0 0 1 8 2 4 2 5 3 0 0 0 0 1 	 	 
 
 J 	 B R O A D U S ,   R N 	 	 	 	 B R O A D U S ,   R N 	 	 	 T O W A R D   A   D E F I N I T I O N   O F   B I B L I O M E T R I C S 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 U N I V   N   C A R O L I N A ,   S C H   L I B   S C I ,   M A N N I N G   H A L L   0 2 6 A ,   C H A P E L   H I L L ,   N C   2 7 5 1 4   U S A . 	 	 	 	 	 	 B L A C K   J W ,   1 9 8 5 ,   U S E   W O R D S   C O N T E X T   V O ;   * B O L T   B E R   N E W M   I N C ,   1 9 6 4 ,   L I B R   2 1 S T   C E N T ,   P 6 ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B O O K S T E I N   A ,   1 9 7 9 ,   C O L L E C T I O N   M A N A G E M E N ,   V 3 ,   P 1 5 1 ;   B o y c e   B .   R . ,   1 9 8 5 ,   A N N   R E V   I N F O R M A T I O N ,   V 2 0 ,   P 1 6 3 ;   B R O W N   A F ,   1 9 6 3 ,   N O R M A L   R E V E R S E   E N G L I ,   V 1 ,   p R 5 ;   B U R C H F I E L D   R B ,   1 9 7 2 ,   S U P P L E M E N T   O X F O R D   E N ,   V 1 ;   D E G L A S   F ,   1 9 8 6 ,   L I B R I ,   V 3 6 ,   P 4 0 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 8 6 . 3 6 . 1 . 4 0 ;   D O N O H U E   J C ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 5 0 6 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F E R R A N T E   B K ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ,   P 1 9 9 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 0 2 n 0 3 _ 0 2 ;   G A R F I E L D   E ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 8 0 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H U L M E   E W ,   1 9 2 3 ,   S T A T I S T I C A L   B I B L I O   R ;   M A C H L U P   F ,   1 9 8 3 ,   S T U D Y   I N F O R M A T I O N   I N ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N I C H O L A S   D ,   1 9 7 8 ,   L I T   B I B L I O M E T R I C S ,   P 9 ;   P E R I T Z   B C ,   1 9 8 4 ,   L I B R I ,   V 3 4 ,   P 2 3 3 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 8 4 . 3 4 . 1 . 2 3 3 ;   P O T T E R   W G ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 5 ;   P R I C E   D D ,   1 9 8 2 ,   S C I   C O N T E X T   R E A D I N G S ,   P 1 6 7 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P r i t c h a r d   A . ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 9 ;   P R I T C H A R D   A ,   1 9 8 1 ,   B I B L I O M E T R I C S   B I B L I O ,   V 1 ,   P 3 ;   P R Y T H E R C H   R ,   1 9 8 4 ,   H A R R O D S   L I B R A R I A N S   G ,   P 7 4 ;   R A J A N   T N ,   1 9 8 5 ,   N E W S L E T T E R   I N T   F E D E R ,   P 1 ;   R A O   I K R ,   1 9 8 5 ,   N E W S L E T T E R   I N T   F E D E R ,   P 4 ;   S C H R A D E R   A M ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 1 5 1 ;   S H E R A   J H ,   1 9 8 3 ,   S T U D Y   I N F O R M A T I O N   I N ,   P 3 8 1 ;   T H A C K R A Y   A ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 1 ;   * U S   L I B   C ,   1 9 8 0 ,   L I B   C   S U B J   H E A D ,   V 1 ,   P 2 3 8 ;   V L A C H Y   J ,   1 9 8 6 ,   C Z E C H   J   P H Y S ,   V 3 6 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 5 9 9 7 1 6 ;   V L A C H Y   J ,   1 9 8 5 ,   C Z E C H O S L O V A K   J   P H Y   B ,   V 3 5 ,   P 2 ;   W I L S O N   P ,   1 9 8 3 ,   S T U D Y   I N F O R M A T I O N   I N ,   P 3 9 2 ;   W I T T I G   G R ,   1 9 7 8 ,   J   D O C ,   V 3 4 ,   P 2 4 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 6 2 ;   Y O U N G   H ,   1 9 8 3 ,   A L A   G L O S S A R Y   L I B   I N F ,   P 2 2 	 3 5 	 4 8 	 4 9 	 3 	 1 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 N O V 	 1 9 8 7 	 1 2 	 5 - 6 	 	 	 	 	 3 7 3 	 3 7 9 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 L 0 2 0 0 	 W O S : A 1 9 8 7 L 0 2 0 0 0 0 0 1 7 	 	 
 
 J 	 P i w o w a r ,   H A ;   V i s i o n ,   T J 	 	 	 	 P i w o w a r ,   H e a t h e r   A . ;   V i s i o n ,   T o d d   J . 	 	 	 D a t a   r e u s e   a n d   t h e   o p e n   d a t a   c i t a t i o n   a d v a n t a g e 	 P E E R J 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 D a t a   r e u s e ;   D a t a   r e p o s i t o r i e s ;   G e n e   e x p r e s s i o n   m i c r o a r r a y ;   I n c e n t i v e s ;   D a t a   a r c h i v i n g ;   O p e n   d a t a ;   B i b l i o m e t r i c s ;   I n f o r m a t i o n   s c i e n c e 	 	 B a c k g r o u n d .   A t t r i b u t i o n   t o   t h e   o r i g i n a l   c o n t r i b u t o r   u p o n   r e u s e   o f   p u b l i s h e d   d a t a   i s   i m p o r t a n t   b o t h   a s   a   r e w a r d   f o r   d a t a   c r e a t o r s   a n d   t o   d o c u m e n t   t h e   p r o v e n a n c e   o f   r e s e a r c h   f i n d i n g s .   P r e v i o u s   s t u d i e s   h a v e   f o u n d   t h a t   p a p e r s   w i t h   p u b l i c l y   a v a i l a b l e   d a t a s e t s   r e c e i v e   a   h i g h e r   n u m b e r   o f   c i t a t i o n s   t h a n   s i m i l a r   s t u d i e s   w i t h o u t   a v a i l a b l e   d a t a .   H o w e v e r ,   f e w   p r e v i o u s   a n a l y s e s   h a v e   h a d   t h e   s t a t i s t i c a l   p o w e r   t o   c o n t r o l   f o r   t h e   m a n y   v a r i a b l e s   k n o w n   t o   p r e d i c t   c i t a t i o n   r a t e ,   w h i c h   h a s   l e d   t o   u n c e r t a i n   e s t i m a t e s   o f   t h e   " c i t a t i o n   b e n e f i t " .   F u r t h e r m o r e ,   l i t t l e   i s   k n o w n   a b o u t   p a t t e r n s   i n   d a t a   r e u s e   o v e r   t i m e   a n d   a c r o s s   d a t a s e t s .   M e t h o d   a n d   R e s u l t s .   H e r e ,   w e   l o o k   a t   c i t a t i o n   r a t e s   w h i l e   c o n t r o l l i n g   f o r   m a n y   k n o w n   c i t a t i o n   p r e d i c t o r s   a n d   i n v e s t i g a t e   t h e   v a r i a b i l i t y   o f   d a t a   r e u s e .   I n   a   m u l t i v a r i a t e   r e g r e s s i o n   o n   1 0 , 5 5 5   s t u d i e s   t h a t   c r e a t e d   g e n e   e x p r e s s i o n   m i c r o a r r a y   d a t a ,   w e   f o u n d   t h a t   s t u d i e s   t h a t   m a d e   d a t a   a v a i l a b l e   i n   a   p u b l i c   r e p o s i t o r y   r e c e i v e d   9 %   ( 9 5 %   c o n f i d e n c e   i n t e r v a l :   5 %   t o   1 3 % )   m o r e   c i t a t i o n s   t h a n   s i m i l a r   s t u d i e s   f o r   w h i c h   t h e   d a t a   w a s   n o t   m a d e   a v a i l a b l e .   D a t e   o f   p u b l i c a t i o n ,   j o u r n a l   i m p a c t   f a c t o r ,   o p e n   a c c e s s   s t a t u s ,   n u m b e r   o f   a u t h o r s ,   f i r s t   a n d   l a s t   a u t h o r   p u b l i c a t i o n   h i s t o r y ,   c o r r e s p o n d i n g   a u t h o r   c o u n t r y ,   i n s t i t u t i o n   c i t a t i o n   h i s t o r y ,   a n d   s t u d y   t o p i c   w e r e   i n c l u d e d   a s   c o v a r i a t e s .   T h e   c i t a t i o n   b e n e f i t   v a r i e d   w i t h   d a t e   o f   d a t a s e t   d e p o s i t i o n :   a   c i t a t i o n   b e n e f i t   w a s   m o s t   c l e a r   f o r   p a p e r s   p u b l i s h e d   i n   2 0 0 4   a n d   2 0 0 5 ,   a t   a b o u t   3 0 % .   A u t h o r s   p u b l i s h e d   m o s t   p a p e r s   u s i n g   t h e i r   o w n   d a t a s e t s   w i t h i n   t w o   y e a r s   o f   t h e i r   f i r s t   p u b l i c a t i o n   o n   t h e   d a t a s e t ,   w h e r e a s   d a t a   r e u s e   p a p e r s   p u b l i s h e d   b y   t h i r d - p a r t y   i n v e s t i g a t o r s   c o n t i n u e d   t o   a c c u m u l a t e   f o r   a t   l e a s t   s i x   y e a r s .   T o   s t u d y   p a t t e r n s   o f   d a t a   r e u s e   d i r e c t l y ,   w e   c o m p i l e d   9 , 7 2 4   i n s t a n c e s   o f   t h i r d   p a r t y   d a t a   r e u s e   v i a   m e n t i o n   o f   G E O   o r   A r r a y E x p r e s s   a c c e s s i o n   n u m b e r s   i n   t h e   f u l l   t e x t   o f   p a p e r s .   T h e   l e v e l   o f   t h i r d - p a r t y   d a t a   u s e   w a s   h i g h :   f o r   1 0 0   d a t a s e t s   d e p o s i t e d   i n   y e a r   0 ,   w e   e s t i m a t e d   t h a t   4 0   p a p e r s   i n   P u b M e d   r e u s e d   a   d a t a s e t   b y   y e a r   2 ,   1 0 0   b y   y e a r   4 ,   a n d   m o r e   t h a n   1 5 0   d a t a   r e u s e   p a p e r s   h a d   b e e n   p u b l i s h e d   b y   y e a r   5 .   D a t a   r e u s e   w a s   d i s t r i b u t e d   a c r o s s   a   b r o a d   b a s e   o f   d a t a s e t s :   a   v e r y   c o n s e r v a t i v e   e s t i m a t e   f o u n d   t h a t   2 0 %   o f   t h e   d a t a s e t s   d e p o s i t e d   b e t w e e n   2 0 0 3   a n d   2 0 0 7   h a d   b e e n   r e u s e d   a t   l e a s t   o n c e   b y   t h i r d   p a r t i e s .   C o n c l u s i o n .   A f t e r   a c c o u n t i n g   f o r   o t h e r   f a c t o r s   a f f e c t i n g   c i t a t i o n   r a t e ,   w e   f i n d   a   r o b u s t   c i t a t i o n   b e n e f i t   f r o m   o p e n   d a t a ,   a l t h o u g h   a   s m a l l e r   o n e   t h a n   p r e v i o u s l y   r e p o r t e d .   W e   c o n c l u d e   t h e r e   i s   a   d i r e c t   e f f e c t   o f   t h i r d - p a r t y   d a t a   r e u s e   t h a t   p e r s i s t s   f o r   y e a r s   b e y o n d   t h e   t i m e   w h e n   r e s e a r c h e r s   h a v e   p u b l i s h e d   m o s t   o f   t h e   p a p e r s   r e u s i n g   t h e i r   o w n   d a t a .   O t h e r   f a c t o r s   t h a t   m a y   a l s o   c o n t r i b u t e   t o   t h e   c i t a t i o n   b e n e f i t   a r e   c o n s i d e r e d .   W e   f u r t h e r   c o n c l u d e   t h a t ,   a t   l e a s t   f o r   g e n e   e x p r e s s i o n   m i c r o a r r a y   d a t a ,   a   s u b s t a n t i a l   f r a c t i o n   o f   a r c h i v e d   d a t a s e t s   a r e   r e u s e d ,   a n d   t h a t   t h e   i n t e n s i t y   o f   d a t a s e t   r e u s e   h a s   b e e n   s t e a d i l y   i n c r e a s i n g   s i n c e   2 0 0 3 . 	 [ P i w o w a r ,   H e a t h e r   A . ;   V i s i o n ,   T o d d   J . ]   N a t l   E v o l u t i o n a r y   S y n t h   C t r ,   D u r h a m ,   N C   2 7 7 0 5   U S A ;   [ P i w o w a r ,   H e a t h e r   A . ;   V i s i o n ,   T o d d   J . ]   D u k e   U n i v ,   D e p t   B i o l ,   D u r h a m ,   N C   U S A ;   [ V i s i o n ,   T o d d   J . ]   U n i v   N   C a r o l i n a ,   D e p t   B i o l ,   C h a p e l   H i l l ,   N C   U S A 	 P i w o w a r ,   H A   ( r e p r i n t   a u t h o r ) ,   N a t l   E v o l u t i o n a r y   S y n t h   C t r ,   D u r h a m ,   N C   2 7 7 0 5   U S A . 	 h p i w o w a r @ g m a i l . c o m 	 T r i v e d i ,   K r u t i / E - 7 5 5 8 - 2 0 1 5 ;   	 P i w o w a r ,   H e a t h e r / 0 0 0 0 - 0 0 0 3 - 1 6 1 3 - 5 9 8 1 ;   V i s i o n ,   T o d d / 0 0 0 0 - 0 0 0 2 - 6 1 3 3 - 2 5 8 1 	 D a t a O N E   [ O C I - 0 8 3 0 9 4 4 ] ;   D r y a d   [ D B I - 0 7 4 3 7 2 0 ] ;   D i s c o v e r y   g r a n t   f r o m   t h e   N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   R e s e a r c h   C o u n c i l   o f   C a n a d a 	 T h i s   s t u d y   w a s   f u n d e d   b y   D a t a O N E   ( O C I - 0 8 3 0 9 4 4 ) ,   D r y a d   ( D B I - 0 7 4 3 7 2 0 ) ,   a n d   a   D i s c o v e r y   g r a n t   t o   M i c h a e l   W h i t l o c k   f r o m   t h e   N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   R e s e a r c h   C o u n c i l   o f   C a n a d a .   T h e   f u n d e r s   h a d   n o   r o l e   i n   s t u d y   d e s i g n ,   d a t a   c o l l e c t i o n   a n d   a n a l y s i s ,   d e c i s i o n   t o   p u b l i s h ,   o r   p r e p a r a t i o n   o f   t h e   m a n u s c r i p t . 	 B o e t t i g e r   C ,   2 0 1 3 ,   K N I T C I T A T I O N S   C I T A T I ;   C r a i g   I D ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 4 . 0 0 1 ;   D o r c h   B ,   2 0 1 2 ,   H P R I N T S ;   F o x   J ,   2 0 1 0 ,   P O L Y C O R   P O L Y C H O R I C   P ;   F u   L a w r e n c e   D ,   2 0 0 8 ,   A M I A   A n n u   S y m p   P r o c ,   P 2 2 2 ;   G l e d i t s c h   N .   P . ,   2 0 0 3 ,   I N T   S T U D I E S   P E R S P E C T ,   V 4 ,   P 8 9 ,   D O I   D O I   1 0 . 1 1 1 1 / 1 5 2 8 - 3 5 7 7 . 0 4 1 0 5 ;   H a j a g e   D ,   2 0 1 1 ,   A S C I I   E X P O R T   R   O B J E C ;   I o a n n i d i s   J P A ,   2 0 0 9 ,   N A T   G E N E T ,   V 4 1 ,   P 1 4 9 ,   D O I   1 0 . 1 0 3 8 / n g . 2 9 5 ;   M o o n e y   H . ,   2 0 1 2 ,   J   L I B R A R I A N S H I P   S C H O ,   V 1 ,   P 1 ,   D O I   [ D O I   1 0 . 7 7 1 0 / 2 1 6 2 - 3 3 0 9 . 1 0 3 5 ,   1 0 . 7 7 1 0 / 2 1 6 2 - 3 3 0 9 . 1 0 3 5 ] ;   P i e n t a   A M ,   2 0 1 0 ,   O R G   E C   P O L I C Y   S C I   R E ;   P i w o w a r   H A ,   2 0 1 1 ,   D R Y A D   D I G I T A L   R E P O S I ,   D O I   [ 1 0 . 5 0 6 1 / d r y a d . m f 1 s d ,   D O I   1 0 . 5 0 6 1 / D R Y A D . M F 1 S D ] ;   P i w o w a r   H A ,   2 0 1 1 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / M E E T . 2 0 1 1 . 1 4 5 0 4 8 0 1 3 3 7 ;   P i w o w a r   H ,   2 0 1 3 ,   N A T U R E ,   V 4 9 3 ,   P 1 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 9 3 1 5 9 a ;   P i w o w a r   H e a t h e r ,   2 0 1 0 ,   J   B i o m e d   D i s c o v   C o l l a b ,   V 5 ,   P 7 ;   P i w o w a r   H A ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 3 0 8 ;   P i w o w a r   H A ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 8 6 5 7 ;   P i w o w a r   H A ,   2 0 1 1 ,   N A T U R E ,   V 4 7 3 ,   P 2 8 5 ,   D O I   1 0 . 1 0 3 8 / 4 7 3 2 8 5 a ;   R a u s h e r   M D ,   2 0 1 0 ,   E V O L U T I O N ,   V 6 4 ,   P 6 0 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 5 8 - 5 6 4 6 . 2 0 0 9 . 0 0 9 4 0 . x ;   R o l l a n d   B . ,   2 0 1 3 ,   C S C W   1 3   P   2 0 1 3   C   C O M ,   P 4 3 5 ,   D O I   [ D O I   1 0 . 1 1 4 5 / 2 4 4 1 7 7 6 . 2 4 4 1 8 2 6 ,   1 0 . 1 1 4 5 / 2 4 4 1 7 7 6 . 2 4 4 1 8 2 6 ] ;   R u n g   J ,   2 0 1 3 ,   N A T   R E V   G E N E T ,   V 1 4 ,   P 8 9 ,   D O I   1 0 . 1 0 3 8 / n r g 3 3 9 4 ;   S e a r s   J ,   2 0 1 1 ,   D A T A   S H A R I N G   E F F E C T ;   S m i t h   R ,   2 0 0 6 ,   I N T   J   E P I D E M I O L ,   V 3 5 ,   P 1 1 2 9 ,   D O I   1 0 . 1 0 9 3 / i j e / d y l 1 9 1 ;   T e n o p i r   C ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 2 1 1 0 1 ;   W a n   X ,   2 0 0 7 ,   N E U R O I N F O R M A T I C S ,   V 5 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 2 1 - 0 0 7 - 0 0 1 2 - 5 ;   W a r e   M . ,   2 0 0 8 ,   4   P R C ;   W a r n e s   G .   R . ,   2 0 1 2 ,   G P L O T S   V A R I O U S   R   P R O ;   W i c h e r t s   J M ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 2 6 8 2 8 ;   W I C K H A M   H ,   2 0 1 1 ,   J   S T A T   S O F T W ,   V 4 0 ,   P 1 ;   W i c k h a m   H ,   2 0 0 9 ,   U S E   R ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 0 - 3 8 7 - 9 8 1 4 1 - 3 _ 1 ;   W i c k h a m   H ,   2 0 0 7 ,   J   S T A T   S O F T W ,   V 2 1 ,   P 1 ;   W y n h o l d s   L A ,   2 0 1 2 ,   J C D L   1 2   P   1 2   A C M   I E E ,   P 1 9 ,   D O I   [ 1 0 . 1 1 4 5 / 2 2 3 2 8 1 7 . 2 2 3 2 8 2 2 ,   D O I   1 0 . 1 1 4 5 / 2 2 3 2 8 1 7 . 2 2 3 2 8 2 2 ] ;   X i e   Y ,   2 0 1 2 ,   K N I T R   G E N   P U R P O S E   P A ;   Z i m m e r m a n   A ,   2 0 0 3 ,   T H E S I S 	 3 3 	 4 6 	 4 7 	 1 3 	 7 5 	 P E E R J   I N C 	 L O N D O N 	 3 4 1 - 3 4 5   O L D   S T ,   T H I R D   F L R ,   L O N D O N ,   E C 1 V   9 L L ,   E N G L A N D 	 2 1 6 7 - 8 3 5 9 	 	 	 P E E R J 	 P e e r J 	 O C T   1 	 2 0 1 3 	 1 	 	 	 	 	 	 	 	 U N S P   e 1 7 5 	 1 0 . 7 7 1 7 / p e e r j . 1 7 5 	 	 2 5 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 V 3 6 C F 	 W O S : 0 0 0 2 0 9 1 9 0 3 0 0 0 0 3 	 2 4 1 0 9 5 5 9 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 E v a l u a t i n g   r e s e a r c h :   f r o m   i n f o r m e d   p e e r   r e v i e w   t o   b i b l i o m e t r i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 D e c i s i o n   s u p p o r t   s y s t e m s ;   R e s e a r c h   a s s e s s m e n t ;   P e e r   r e v i e w ;   B i b l i o m e t r i c s ;   R e s e a r c h   p r o d u c t i v i t y 	 I N D I C A T O R S 	 N a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s   a r e   b e c o m i n g   r e g u l a r   e v e n t s   i n   e v e r   m o r e   c o u n t r i e s .   T h e   p r e s e n t   w o r k   c o n t r a s t s   t h e   p e e r - r e v i e w   a n d   b i b l i o m e t r i c s   a p p r o a c h e s   i n   t h e   c o n d u c t   o f   t h e s e   e x e r c i s e s .   T h e   c o m p a r i s o n   i s   c o n d u c t e d   i n   t e r m s   o f   t h e   e s s e n t i a l   p a r a m e t e r s   o f   a n y   m e a s u r e m e n t   s y s t e m :   a c c u r a c y ,   r o b u s t n e s s ,   v a l i d i t y ,   f u n c t i o n a l i t y ,   t i m e   a n d   c o s t s .   E m p i r i c a l   e v i d e n c e   s h o w s   t h a t   f o r   t h e   n a t u r a l   a n d   f o r m a l   s c i e n c e s ,   t h e   b i b l i o m e t r i c   m e t h o d o l o g y   i s   b y   f a r   p r e f e r a b l e   t o   p e e r - r e v i e w .   S e t t i n g   u p   n a t i o n a l   d a t a b a s e s   o f   p u b l i c a t i o n s   b y   i n d i v i d u a l   a u t h o r s ,   d e r i v e d   f r o m   W e b   o f   S c i e n c e   o r   S c o p u s   d a t a b a s e s ,   w o u l d   a l l o w   m u c h   b e t t e r ,   c h e a p e r   a n d   m o r e   f r e q u e n t   n a t i o n a l   r e s e a r c h   a s s e s s m e n t s . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t ;   D a n g e l o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 2 - 2 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   A b r a m o   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 7 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 3 8 - 0 ;   A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A D A M S   J ,   1 9 9 8 ,   A N N   E C   S T A T ,   V 4 9 5 0 ,   P 1 2 7 ;   A k s n e s   D W ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 8 8 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   B U T L E R   L ,   2 0 0 7 ,   P O L I T I C A L   S T U D I E S   R E ,   V 7 ,   P 3 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   G A R F I E L D   E ,   1 9 8 0 ,   C U R R   C O N T E N T S ,   P 5 ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   H a r m a n   G . ,   2 0 0 0 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 2 2 ,   P 1 1 1 ,   D O I   1 0 . 1 0 8 0 / 1 4 6 3 6 7 7 0 3 0 7 1 3 2 ;   H O R R O B I N   D F ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 4 3 8 ;   L A C H   S ,   2 0 0 3 ,   9 7 2 7   N A T   B U R   E C   R E S ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o x h a m   H . ,   1 9 9 2 ,   S C I   T E C H N O L O G Y   P O L I C ,   P 7 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C . ,   2 0 0 3 ,   J   D O C ,   V 5 6 ,   P 7 0 9 ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 5 	 2 1 	 4 6 	 4 7 	 5 	 7 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 1 1 	 8 7 	 3 	 	 	 	 	 4 9 9 	 5 1 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 3 P S 	 W O S : 0 0 0 2 8 9 7 9 2 6 0 0 0 0 5 	 	 
 
 J 	 P o n o m a r i o v ,   B L ;   B o a r d m a n ,   P C 	 	 	 	 P o n o m a r i o v ,   B r a n c o   L . ;   B o a r d m a n ,   P .   C r a i g 	 	 	 I n f l u e n c i n g   s c i e n t i s t s '   c o l l a b o r a t i o n   a n d   p r o d u c t i v i t y   p a t t e r n s   t h r o u g h   n e w   i n s t i t u t i o n s :   U n i v e r s i t y   r e s e a r c h   c e n t e r s   a n d   s c i e n t i f i c   a n d   t e c h n i c a l   h u m a n   c a p i t a l 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 U n i v e r s i t y   r e s e a r c h   c e n t e r ;   R e s e a r c h   c o l l a b o r a t i o n ;   B i b l i o m e t r i c s ;   S c i e n c e   a n d   t e c h n o l o g y   p o l i c y 	 I N D U S T R Y ;   O R G A N I Z A T I O N S ;   T E C H N O L O G Y ;   M A N A G E M E N T ;   I N N O V A T I O N ;   C A R E E R S ;   I M P A C T ;   P O L I C Y ;   F L O W S ;   P E E R 	 T h i s   p a p e r   a n a l y z e s   t h e   e f f e c t   o f   u n i v e r s i t y   r e s e a r c h   c e n t e r s   o n   t h e   p r o d u c t i v i t y   a n d   c o l l a b o r a t i o n   p a t t e r n s   o f   u n i v e r s i t y   f a c u l t y .   U n i v e r s i t y   r e s e a r c h   c e n t e r s   a r e   a n   i m p o r t a n t   s u b j e c t   f o r   p o l i c y   a n a l y s i s   i n s o f a r   t h a t   t h e y   h a v e   b e c o m e   t h e   p r e d o m i n a n t   p o l i c y   r e s p o n s e   t o   s c i e n t i f i c   a n d   t e c h n i c a l   d e m a n d s   t h a t   h a v e   n o t   b e e n   m e t   b y   e x t a n t   i n s t i t u t i o n s ,   i n c l u d i n g   a c a d e m i c   d e p a r t m e n t s ,   p r i v a t e   f i r m s ,   a n d   g o v e r n m e n t   l a b o r a t o r i e s .   S p e c i f i c a l l y ,   t h e s e   c e n t e r s   a i m   t o   o r g a n i z e   r e s e a r c h e r s   f r o m   a c r o s s   t h e   d i s c i p l i n e s   a n d   s e c t o r s   w h i c h ,   c o l l e c t i v e l y   a s   a   r e s e a r c h   u n i t ,   p o s s e s s   t h e   s c i e n t i f i c   a n d   t e c h n i c a l   c a p a c i t y   r e l e v a n t   t o   s c i e n t i f i c   a n d   t e c h n i c a l   g o a l s   o f   t h e   s p o n s o r i n g   a g e n c i e s .   I n   t h i s   p a p e r ,   w e   m e a s u r e   t h e   p r o d u c t i v i t y   a n d   c o l l a b o r a t i o n   p a t t e r n s   o f   u n i v e r s i t y   r e s e a r c h e r s   a f f i l i a t e d   w i t h   a   r e l a t i v e l y   l a r g e - s c a l e   a n d   " m a t u r e "   u n i v e r s i t y   r e s e a r c h   c e n t e r   t o   d i s c e r n   t h e   e f f e c t s ,   i f   a n y ,   o f   t h e   c e n t e r   m e c h a n i s m   o n   i n d i v i d u a l   s c i e n t i s t s   a n d   e n g i n e e r s .   B a s e d   o n   a n   a n a l y s i s   o f   l o n g i t u d i n a l   b i b l i o m e t r i c   d a t a ,   t h e   r e s u l t s   f r o m   t h i s   c a s e   s t u d y   d e m o n s t r a t e   a f f i l i a t i o n   w i t h   t h e   c e n t e r   t o   b e   e f f e c t i v e   a t   e n h a n c i n g   o v e r a l l   p r o d u c t i v i t y   a s   w e l l   a s   a t   f a c i l i t a t i n g   c r o s s - d i s c i p l i n e ,   c r o s s - s e c t o r ,   a n d   i n t e r - i n s t i t u t i o n a l   p r o d u c t i v i t y   a n d   c o l l a b o r a t i o n s .   ( C )   2 0 1 0   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ P o n o m a r i o v ,   B r a n c o   L . ]   U n i v   T e x a s   S a n   A n t o n i o ,   D e p t   P u b l   A d m ,   S a n   A n t o n i o ,   T X   7 8 2 0 7   U S A ;   [ B o a r d m a n ,   P .   C r a i g ]   O h i o   S t a t e   U n i v ,   J o h n   G l e n n   S c h   P u b l   A f f a i r s ,   C o l u m b u s ,   O H   4 3 2 1 0   U S A 	 P o n o m a r i o v ,   B L   ( r e p r i n t   a u t h o r ) ,   U n i v   T e x a s   S a n   A n t o n i o ,   D e p t   P u b l   A d m ,   5 0 1 W   D u r a n g o   B l v d ,   S a n   A n t o n i o ,   T X   7 8 2 0 7   U S A . 	 b r a n c o . p o n o m a r i o v @ u t s a . e d u 	 B o a r d m a n ,   P a u l / H - 3 7 9 2 - 2 0 1 1 	 	 	 	 A g r a n o f f   R ,   2 0 0 1 ,   J   P U B L   A D M   R E S   T H E O R ,   V 1 1 ,   P 2 9 5 ;   A l d r i c h   H . ,   1 9 7 7 ,   A C A D   M A N A G E   R E V ,   V 2 ,   P 2 1 7 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 7 7 . 4 4 0 9 0 4 4 . ;   A r r e o l a   R a o u l A . ,   2 0 0 3 ,   A N N   M   A M   E D   R E S   A S S ;   B a l d i n i   N ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 2 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 6 5 - y ;   B a r l o w   D .   H . ,   1 9 8 4 ,   S I N G L E   C A S E   E X P T   D E S ;   B o a r d m a n   C .   P . ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 1 5 0 5 ;   B o a r d m a n   C ,   2 0 0 7 ,   J   H I G H   E D U C ,   V 7 8 ,   P 4 3 0 ,   D O I   1 0 . 1 3 5 3 / j h e . 2 0 0 7 . 0 0 2 0 ;   B o a r d m a n   P C ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 9 0 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 1 . 0 1 2 ;   B o z e m a n   B ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 5 9 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 0 8 ;   B o z e m a n   B . ,   2 0 0 3 ,   M A N A G I N G   N E W   M U L T I P U ;   B o z e m a n   B ,   2 0 0 4 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 9 ,   P 3 6 5 ,   D O I   1 0 . 1 0 2 3 / B : J O T T . 0 0 0 0 0 3 4 1 2 8 . 3 9 5 2 6 . 6 b ;   B O Z E M A N   B ,   2 0 0 1 ,   I N T   J   T E C H N O L   M A N A G E ,   V 2 2 ,   P 6 3 6 ;   C a m p b e l l   D . ,   1 9 6 3 ,   E X P T   Q U A S I E X P E R I M E N T ;   C a r n e g i e   F o u n d a t i o n ,   2 0 0 4 ,   C A R N   C L A S S   I   H I G H   E D ;   C o r l e y   E A ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 9 7 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 5 . 0 0 3 ;   D A I   Y ,   2 0 0 1 ,   J   P O L I C Y   A N A L   M A N A G ,   V 2 4 ,   P 5 7 9 ;   D i e t z   J S ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 3 4 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 2 . 0 1 . 0 0 8 ;   F e l l e r   I ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 4 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 1 9 - 6 ;   F e r r o n   J . ,   2 0 0 5 ,   E N C Y   S T A T   B E H A V   S C I ,   V 2 ,   P 9 4 1 ;   G a u g h a n   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 5 6 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 0 5 ;   G E I S L E R   E ,   1 9 9 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 7 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 4 ) 9 0 0 2 8 - 0 ;   G e o r g h i o u   L ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 6 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 9 4 - 3 ;   G r a y   C C ,   2 0 0 1 ,   J   P E D I A T R   P S Y C H O L ,   V 2 6 ,   P 2 4 7 ,   D O I   1 0 . 1 0 9 3 / j p e p s y / 2 6 . 4 . 2 4 7 ;   I k e n b e r r y   S t a n l e y ,   1 9 7 2 ,   A C A D   D E P ;   L a l   B . ,   2 0 0 7 ,   D E S I G N I N G   F U T U R E   G E N ;   L a n d r y   R ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 8 - 5 ;   L e e   S ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 6 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 5 0 5 2 3 5 9 ;   L i n   M - W ,   2 0 0 6 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 3 1 ,   P 2 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 5 - 6 1 1 1 - 2 ;   * M A E ,   2 0 0 5 ,   8   Y E A R   A N N   R E P   M A E ,   V 1 ;   M a r t o n e n   T ,   1 9 9 7 ,   A E R O S O L   S C I   T E C H ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 8 0 / 0 2 7 8 6 8 2 9 7 0 8 9 6 5 4 1 0 ;   M e l i n   G ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 1 - 1 ;   M E Y E R   J W ,   1 9 7 7 ,   A M   J   S O C I O L ,   V 8 3 ,   P 3 4 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 6 5 5 0 ;   [ A n o n y m o u s ] ,   2 0 0 7 ,   R I S   G A T H   S T O R M   E N   E M ;   P o n o m a r i o v   B ,   2 0 0 8 ,   J   T E C H N O L   T R A N S F E R ,   V 3 3 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 7 - 9 0 2 9 - z ;   P o r t e r   A . L . ,   2 0 0 5 ,   T E C H   M I N I N G   E X P L O I T I ;   P o r t e r   A L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 0 0 - 5 ;   S l a u g h t e r   S ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 3 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 3 0 3 ;   S t a k e   R . ,   1 9 9 5 ,   A R T   C A S E   S T U D Y   R E S ;   S t o k o l s   D . ,   2 0 0 8 ,   A M   J   P R E V   M E D ,   V 3 5 ,   P 7 7 ;   S U H   N P ,   1 9 8 6 ,   C O N C E P T   G O A L S   E N G   R E ,   P 3 7 ;   T o k e r   U ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 9 . 0 0 6 ;   v a n   R i j n s o e v e r   F J ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 1 2 5 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 4 . 0 2 0 ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   Y i n   R .   K . ,   2 0 0 3 ,   C A S E   S T U D Y   R E S   D E S I G ;   Z u c k e r   L G ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 8 5 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 2 . 0 0 7 	 4 5 	 4 5 	 4 5 	 5 	 7 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 J U N 	 2 0 1 0 	 3 9 	 5 	 	 	 	 	 6 1 3 	 6 2 4 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 2 . 0 1 3 	 	 1 2 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 6 0 2 Z M 	 W O S : 0 0 0 2 7 8 1 7 7 7 0 0 0 0 6 	 	 
 
 J 	 W h i t e ,   H D ;   B o e l l ,   S K ;   Y u ,   H ;   D a v i s ,   M ;   W i l s o n ,   C S ;   C o l e ,   F T H 	 	 	 	 W h i t e ,   H o w a r d   D . ;   B o e l l ,   S e b a s t i a n   K . ;   Y u ,   H a i r o n g ;   D a v i s ,   M a r i ;   W i l s o n ,   C o n c e p c i o n   S . ;   C o l e ,   F l e t c h e r   T .   H . 	 	 	 L i b c i t a t i o n s :   A   M e a s u r e   f o r   C o m p a r a t i v e   A s s e s s m e n t   o f   B o o k   P u b l i c a t i o n s   i n   t h e   H u m a n i t i e s   a n d   S o c i a l   S c i e n c e s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   C O U N T S ;   R E S E A R C H   P E R F O R M A N C E ;   P U B L I S H E R   Q U A L I T Y ;   P O L I T I C A L - S C I E N C E ;   U R Q U H A R T , D O N A L D , J . ;   L I B R A R I A N S H I P ;   I N T E G R A T I O N ;   A R C H A E O L O G Y ;   C O V E R A G E ;   R A N K I N G 	 B i b l i o m e t r i c   m e a s u r e s   f o r   e v a l u a t i n g   r e s e a r c h   u n i t s   i n   t h e   b o o k - o r i e n t e d   h u m a n i t i e s   a n d   s o c i a l   s c i e n c e s   a r e   u n d e r d e v e l o p e d   r e l a t i v e   t o   t h o s e   a v a i l a b l e   f o r   j o u r n a l - o r i e n t e d   s c i e n c e   a n d   t e c h n o l o g y .   W e   t h e r e f o r e   p r e s e n t   a   n e w   m e a s u r e   d e s i g n e d   f o r   b o o k - o r i e n t e d   f i e l d s :   t h e   " l i b c i t a t i o n   c o u n t . "   T h i s   i s   a   c o u n t   o f   t h e   l i b r a r i e s   h o l d i n g   a   g i v e n   b o o k ,   a s   r e p o r t e d   i n   a   n a t i o n a l   o r   i n t e r n a t i o n a l   u n i o n   c a t a l o g .   A s   l i b r a r i a n s   d e c i d e   w h a t   t o   a c q u i r e   f o r   t h e   a u d i e n c e s   t h e y   s e r v e ,   t h e y   j o i n t l y   c o n s t i t u t e   a n   i n s t r u m e n t   f o r   g a u g i n g   t h e   c u l t u r a l   i m p a c t   o f   b o o k s .   T h e i r   d e c i s i o n s   a r e   i n f o r m e d   b y   k n o w l e d g e   n o t   o n l y   o f   a u d i e n c e s   b u t   a l s o   o f   t h e   b o o k   w o r l d   ( e . g . ,   t h e   r e p u t a t i o n s   o f   a u t h o r s   a n d   t h e   p r e s t i g e   o f   p u b l i s h e r s ) .   F r o m   l i b c i t a t i o n   c o u n t s ,   m e a s u r e s   c a n   b e   d e r i v e d   f o r   c o m p a r i n g   r e s e a r c h   u n i t s .   H e r e ,   w e   i m a g i n e   a   m a t c h - u p   b e t w e e n   t h e   d e p a r t m e n t s   o f   h i s t o r y ,   p h i l o s o p h y ,   a n d   p o l i t i c a l   s c i e n c e   a t   t h e   U n i v e r s i t y   o f   N e w   S o u t h   W a l e s   a n d   t h e   U n i v e r s i t y   o f   S y d n e y   i n   A u s t r a l i a .   W e   c h o s e   t h e   1 2   b o o k s   f r o m   e a c h   d e p a r t m e n t   t h a t   h a d   t h e   h i g h e s t   l i b c i t a t i o n   c o u n t s   i n   t h e   L i b r a r i e s   A u s t r a l i a   u n i o n   c a t a l o g   d u r i n g   2 0 0 0   t o   2 0 0 6 .   W e   p r e s e n t   e a c h   b o o k ' s   r a w   l i b c i t a t i o n   c o u n t ,   i t s   r a n k   w i t h i n   i t s   L i b r a r y   o f   C o n g r e s s   ( L C )   c l a s s ,   a n d   i t s   L C - c l a s s   n o r m a l i z e d   l i b c i t a t i o n   s c o r e .   T h e   l a t t e r   i s   p a t t e r n e d   o n   t h e   i t e m - o r i e n t e d   f i e l d   n o r m a l i z e d   c i t a t i o n   s c o r e   u s e d   i n   e v a l u a t i v e   b i b l i o m e t r i c s .   S u m m a r y   s t a t i s t i c s   b a s e d   o n   t h e s e   m e a s u r e s   a l l o w   t h e   d e p a r t m e n t s   t o   b e   c o m p a r e d   f o r   c u l t u r a l   i m p a c t .   O u r   w o r k   h a s   i m p l i c a t i o n s   f o r   p r o g r a m s   s u c h   a s   E x c e l l e n c e   i n   R e s e a r c h   f o r   A u s t r a l i a   a n d   t h e   R e s e a r c h   A s s e s s m e n t   E x e r c i s e   i n   t h e   U n i t e d   K i n g d o m .   I t   a l s o   h a s   i m p l i c a t i o n s   f o r   d a t a   m i n i n g   i n   O C L C ' s   W o r l d C a t . 	 [ W h i t e ,   H o w a r d   D . ]   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 3 0 1   U S A ;   [ B o e l l ,   S e b a s t i a n   K . ;   Y u ,   H a i r o n g ;   D a v i s ,   M a r i ;   W i l s o n ,   C o n c e p c i o n   S . ;   C o l e ,   F l e t c h e r   T .   H . ]   U n i v   N e w   S   W a l e s ,   B i b l i o m e t r   &   I n f o r m e t r   R e s   G r p ,   S y d n e y ,   N S W ,   A u s t r a l i a 	 W h i t e ,   H D   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 3 0 1   U S A . 	 w h i t e h d @ d r e x e l . e d u ;   s . b o e l l @ g m a i l . c o m ;   h a i r o n g . y u @ u n s w . e d u . a u ;   M . D a v i s @ u n s w . e d u . a u ;   c . w i l s o n @ u n s w . e d u . a u ;   f c o l e @ u n s w . e d u . a u 	 B o e l l ,   S e b a s t i a n / F - 6 5 0 6 - 2 0 1 0 ;   W i l s o n ,   C o n c e p c i o n / M - 8 7 8 4 - 2 0 1 4 	 B o e l l ,   S e b a s t i a n / 0 0 0 0 - 0 0 0 2 - 4 0 1 3 - 7 0 6 6 ;   	 M e t c a l f e   M e m o r i a l   F u n d   a t   t h e   U n i v e r s i t y   o f   N e w   S o u t h   W a l e s 	 W e   g r a t e f u l l y   a c k n o w l e d g e   t h e   a s s i s t a n c e   o f   t h e   N a t i o n a l   L i b r a r y   o f   A u s t r a l i a   s t a f f   m e m b e r s ,   p a r t i c u l a r l y   R o b e r t   W a l l s   a n d   M e l a n i e   S e t r a p a ,   i n   c o n d u c t i n g   t h e   s e a r c h e s   i n   t h e   A N B D .   O u r   t h a n k s   g o   a s   w e l l   t o   t h e   J o h n   M e t c a l f e   M e m o r i a l   F u n d   a t   t h e   U n i v e r s i t y   o f   N e w   S o u t h   W a l e s   f o r   f u n d i n g   t h i s   p r o j e c t .   C l a i r e   D o n o v a n ,   L i n d a   B u t l e r ,   a n d   I a n   M c A l l i s t e r   o f   t h e   A u s t r a l i a n   N a t i o n a l   U n i v e r s i t y ,   M a r i l y n   L a k e   o f   L a   T r o b e   U n i v e r s i t y ,   a n d   S t e p h e n   J .   B e n s m a n   o f   L o u i s i a n a   S t a t e   U n i v e r s i t y   p r o v i d e d   v a l u a b l e   c o m m e n t s   o n   a   d r a f t . 	 A r c h a m b a u l t   E ,   2 0 0 4 ,   U S E   B I B L I O M E T R I C S   S O ;   A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   * A R T S   H U M   R E S   C O U N ,   2 0 0 6 ,   U S   R E S   M E T R   A R T S   H U M ;   * A U S T R   R E S   C O U N C ,   2 0 0 8 ,   E X C   R E S   A U S T R   E R A   I N ;   B e n s m a n   S J ,   2 0 0 7 ,   I N T E R L E N D   D O C   S U P P L Y ,   V 3 5 ,   P 1 2 4 ,   D O I   [ 1 0 . 1 1 0 8 / 0 2 6 4 1 6 1 0 7 1 0 7 8 0 7 8 2 ,   1 0 . 1 1 0 8 / 0 2 6 4 1 6 1 0 7 1 0 7 8 0 7 8 2 1 ] ;   B e n s m a n   S J ,   2 0 0 7 ,   I N T E R L E N D   D O C   S U P P L Y ,   V 3 5 ,   P 7 4 ,   D O I   [ 1 0 . 1 1 0 8 / 0 2 6 4 1 6 1 0 7 1 0 7 5 4 0 7 9 ,   1 0 . 1 1 0 8 / 0 2 6 4 1 6 1 0 7 1 0 7 5 4 0 7 9 1 ] ;   B O U R K E   P ,   1 9 9 6 ,   R E S   E V A L U A T I O N   P O L I C ,   V 3 ;   B u t l e r   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 4 - 1 ;   B U T L E R   L i n d a ,   2 0 0 7 ,   P   1 1   I N T   C   I N T   S O C   S ,   V 1 ,   P 1 7 0 ;   C A R R   L ,   2 0 0 6 ,   E X T E N D I N G   J   B A S E D   R E ;   * C H A S S ,   2 0 0 5 ,   2   C H A S S   A U S T R   N A T   U ;   C O R B Y N   Z ,   2 0 0 8 ,   T I M E S   H I G H E R   E D   0 8 2 8 ;   * D E P   E D   S C I   T R A I N ,   2 0 0 6 ,   R E S   Q U A L   F R A M   A S S   Q U ;   D o l a n   C ,   2 0 0 8 ,   F E A S I B I L I T Y   S T U D Y   E V ;   D O N O V A N   C ,   2 0 0 5 ,   2   C H A S S   A U S T R   N A T   U ;   D o n o v a n   C ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 2 3 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 5 7 0 3 0 ;   D o n o v a n   C ,   2 0 0 7 ,   A U S T   J   P O L I T   S C I ,   V 4 2 ,   P 6 6 5 ,   D O I   1 0 . 1 0 8 0 / 1 0 3 6 1 1 4 0 7 0 1 5 9 5 8 2 5 ;   D R U M M O N D   R ,   2 0 0 7 ,   U   N E W   S   W A L   L I B ;   E a s t h e r   R ,   2 0 0 6 ,   J   C O S M O L   A S T R O P A R T   P ,   D O I   1 0 . 1 0 8 8 / 1 4 7 5 - 7 5 1 6 / 2 0 0 6 / 0 3 / 0 1 6 ;   E v i d e n c e   L t d ,   2 0 0 7 ,   U S   B I B L   M E A S   R E S   Q U A ;   G o o d s o n   L P ,   1 9 9 9 ,   P S - P O L I T   S C I   P O L I T ,   V 3 2 ,   P 2 5 7 ,   D O I   1 0 . 2 3 0 7 / 4 2 0 5 6 1 ;   H a d d o w   G ,   2 0 0 8 ,   A U S T   A C A D   R E S   L I B R ,   V 3 9 ,   P 7 9 ;   H o l m e s   A . ,   2 0 0 1 ,   I N F O R M   R E S ,   V 6 ;   L e w i s   J S ,   2 0 0 0 ,   C O L L   R E S   L I B R ,   V 6 1 ,   P 3 1 3 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M e t z   P ,   1 9 9 6 ,   C O L L   R E S   L I B R ,   V 5 7 ,   P 2 3 4 ;   M i n g e r s   J ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 3 0 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 9 6 ;   M i s s i n g h a m   R o x a n n e ,   2 0 0 3 ,   A U S T R   L I B   J ,   V 5 2 ,   P 2 4 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 9 8 ;   N a j m a n   J M ,   2 0 0 3 ,   J   S O C I O L ,   V 3 9 ,   P 6 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 4 8 6 9 0 0 3 0 3 9 0 0 1 3 2 0 ;   * N A T   L I B   A U S T R ,   2 0 0 8 ,   A U S T R   N A T   B I B L   D A T ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   N E D E R H O F   A J ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 4 ) 4 3 : 3 < 2 4 9 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - I ;   N o r r i s   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 7 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 7 3 4 ;   N o r r i s   M ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 1 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C ,   2 0 0 8 ,   I N F O R M   R E S ,   V 1 3 ;   P h e l a n   T J ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 7 2 ;   R E H N   C ,   2 0 0 7 ,   A P P E N D I X   B I B L I O M E T R I ;   R e s e a r c h   E v a l u a t i o n   a n d   P o l i c y   P r o j e c t   ( R E P P ) ,   2 0 0 5 ,   0 5 1   R E P P   A U S T R   N A T   U ;   S a n d s t r o m   U . ,   2 0 0 7 ,   M E T R I C   A C A D   P E R F O R M A ;   S E N G   L B ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 6 8 ;   S m i t h   A . ,   2 0 0 2 ,   C O R R E L A T I O N   R A E   R A T I ;   T o r r e s - S a l i n a s   D . ,   2 0 0 8 ,   E X C E L L E N C E   E M E R G E N C E ,   P 2 4 6 ;   W h i t e   H o w a r d   D . ,   1 9 9 5 ,   B R I E F   T E S T S   C O L L E C T I ;   W h i t e   H D ,   2 0 0 8 ,   C O L L   R E S   L I B R ,   V 6 9 ,   P 1 5 5 ;   W i b e r l e y   S E ,   2 0 0 4 ,   C O L L   R E S   L I B R ,   V 6 5 ,   P 5 0 5 ;   W i b e r l e y   S E ,   2 0 0 2 ,   P O R T A L - L I B R   A C A D ,   V 2 ,   P 3 5 7 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 2 . 0 0 6 8 ;   W r i g h t   M ,   2 0 0 8 ,   I N T E R F A C E S ,   V 3 8 ,   P 1 2 5 ,   D O I   1 0 . 1 2 8 7 / i n t e . 1 0 7 0 . 0 3 1 7 	 5 0 	 4 5 	 4 6 	 6 	 4 0 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U N 	 2 0 0 9 	 6 0 	 6 	 	 	 	 	 1 0 8 3 	 1 0 9 6 	 	 1 0 . 1 0 0 2 / a s i . 2 1 0 4 5 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 4 9 A S 	 W O S : 0 0 0 2 6 6 3 0 3 8 0 0 0 0 1 	 	 
 
 J 	 L i ,   Z ;   H o ,   Y S 	 	 	 	 L i ,   Z h i ;   H o ,   Y u h - S h a n 	 	 	 U s e   o f   c i t a t i o n   p e r   p u b l i c a t i o n   a s   a n   i n d i c a t o r   t o   e v a l u a t e   c o n t i n g e n t   v a l u a t i o n   r e s e a r c h 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I M P A C T 	 T h i s   i s   t h e   f i r s t   a r t i c l e   u s i n g   b i b l i o m e t r i c s   t o   s t u d y   t h e   f i e l d   o f   c o n t i n g e n t   v a l u a t i o n   r e s e a r c h .   T h e   p u r p o s e   o f   t h i s   s t u d y   w a s   t o   e v a l u a t e   t h e   c o n t i n g e n t   v a l u a t i o n   r e s e a r c h   p e r f o r m a n c e   b a s e d   o n   a l l   t h e   r e l a t e d   a r t i c l e s   i n   S C I   a n d   S S C I   d a t a b a s e s   f r o m   1 9 9 1   t o   2 0 0 5 .   A n   i n d i c a t o r   n a m e d   c i t a t i o n   p e r   p u b l i c a t i o n   ( C P P )   w a s   p r e s e n t e d   i n   t h i s   s t u d y   t o   a s s e s s   t h e   i m p a c t   o f   a r t i c l e   o u t p u t   p e r   y e a r ,   d i f f e r e n t   c o u n t r i e s ,   i n s t i t u t e s ,   a n d   a u t h o r s   f r o m   t h e   w o r l d w i d e .   P u b l i c a t i o n   p e r   i n s t i t u t e   ( P P I )   i n   a   c o u n t r y   w a s   u s e d   t o   b e   a n   i n d i c a t o r   t o   c o m p a r e   i n s t i t u t e ' s   r e s e a r c h   p e r f o r m a n c e   b y   c o u n t r y .   C i t a t i o n   a n a l y s i s   w a s   m a d e   t o   s e l e c t   t h e   m o s t   f r e q u e n t l y   c i t e d   a r t i c l e s   s i n c e   p u b l i c a t i o n   t o   2 0 0 5   o f   e a c h   y e a r .   A   c i t a t i o n   m o d e l   w a s   a p p l i e d   t o   d e s c r i b e   t h e   r e l a t i o n s h i p   b e t w e e n   t h e   c u m u l a t i v e   n u m b e r   o f   c i t a t i o n s   a n d   a r t i c l e   l i f e .   T h e   r e s u l t s   i n d i c a t e   t h a t   w i t h   t h e   i n c r e a s e   a r t i c l e   o u t p u t   p e r   y e a r ,   t h e   C P P   d e c r e a s e d   s l i g h t l y   s i n c e   1 9 9 7 .   T h e   U S A   p r o d u c e d   5 5 %   o f   a l l   p e r t i n e n t   a r t i c l e s .   I n s t i t u t e s   f r o m   t h e   U K   h a d   a   h i g h e r   P P I .   T h e   m o s t   p r o l i f i c   i n s t i t u t e s   a n d   a u t h o r s ,   a n d   t h e   m o s t   f r e q u e n t l y   c i t e d   a r t i c l e s   p e r   y e a r   w e r e   a l l   l i s t e d .   I n   a d d i t i o n ,   a   c i t a t i o n   m o d e l   w a s   s u c c e s s f u l l y   a p p l i e d   t o   e v a l u a t e   p e r f o r m a n c e   o f   e a c h   y e a r ,   a n d   t h e   m o s t   f r e q u e n t l y   c i t e d   a r t i c l e s   o f   e a c h   y e a r   w e r e   a l s o   c o m p a r e d   b y   t h e   m o d e l . 	 [ H o ,   Y u h - S h a n ]   P e k i n g   U n i v ,   C o l l   E n v i r o n m   S c i   &   E n g n ,   D e p t   E n v i r o n m   S c i ,   B e i j i n g   1 0 0 8 7 1 ,   P e o p l e s   R   C h i n a ;   [ L i ,   Z h i ]   P e k i n g   U n i v ,   S h e n z h e n   G r a d   S c h ,   K e y   L a b   E n v i r o n m   &   U r b a n   S c i ,   S h e n z h e n ,   P e o p l e s   R   C h i n a 	 H o ,   Y S   ( r e p r i n t   a u t h o r ) ,   P e k i n g   U n i v ,   C o l l   E n v i r o n m   S c i   &   E n g n ,   D e p t   E n v i r o n m   S c i ,   B e i j i n g   1 0 0 8 7 1 ,   P e o p l e s   R   C h i n a . 	 d r _ y s h o @ h o t m a i l . c o m 	 H o ,   Y u h - S h a n / C - 8 6 2 4 - 2 0 0 9 	 	 	 	 A d a m s   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 5 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 8 - 9 ;   A r r o w   K . ,   1 9 9 3 ,   F E D   R E G I S T E R ,   V 5 8 ,   P 4 6 0 1 ;   A y r e s   I ,   2 0 0 0 ,   J   L E G A L   S T U D ,   V 2 9 ,   P 4 2 7 ,   D O I   1 0 . 1 0 8 6 / 4 6 8 0 8 1 ;   B j o r n s t a d   D .   J . ,   1 9 9 6 ,   C O N T I N G E N T   V A L U A T I O N ,   P 3 ;   B R A D F O R D   S C ,   1 9 5 3 ,   D O C U M E N T A T I O N ,   P 1 5 4 ;   C h i u   W T ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 0 1 - 7 ;   C H U A N G   K Y ,   I N   P R E S S   S C I E N T O M E T R ;   C i r i a c y - W a n t r u p   S V ,   1 9 4 7 ,   J   F A R M   E C O N ,   V 2 9 ,   P 1 1 8 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 3 2 7 4 7 ;   D a v i s   R o b e r t   K e n n e t h ,   1 9 6 3 ,   V A L U E   O U T D O O R   R E C R E A ;   D I A M O N D   P A ,   1 9 9 4 ,   J   E C O N   P E R S P E C T ,   V 8 ,   P 4 5 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   H a n s e n   H B ,   1 9 9 7 ,   C L I N   P H Y S I O L ,   V 1 7 ,   P 4 0 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 2 8 1 . 1 9 9 7 . 0 4 5 4 5 . x ;   H s i e h   W H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 0 5 ;   I n g w e r s e n   P ,   2 0 0 1 ,   C H I N E S E   S C I   B U L L ,   V 4 6 ,   P 5 2 4 ;   I N G W E R S E N   P ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 7 3 ;   M a   C B ,   2 0 0 6 ,   E C O L   E C O N ,   V 5 8 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 5 . 0 7 . 0 2 3 ;   M a r x   W ,   2 0 0 3 ,   S O L I D   S T A T E   C O M M U N ,   V 1 2 7 ,   P 3 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 8 - 1 0 9 8 ( 0 3 ) 0 0 4 4 2 - 3 ;   S m i t h   V K ,   2 0 0 0 ,   J   E N V I R O N   E C O N   M A N A G ,   V 3 9 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 6 / j e e m . 1 9 9 9 . 1 1 1 1 ;   S m i t h   V . K . ,   2 0 0 4 ,   I N T   Y B   E N V   R E S O U R C E ,   P 1 ;   V e n k a t a c h a l a m   L ,   2 0 0 4 ,   E N V I R O N   I M P A C T   A S S E S ,   V 2 4 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 5 - 9 2 5 5 ( 0 3 ) 0 0 1 3 8 - 0 ;   W A N G   H ,   1 9 9 7 ,   C O N T I N G E N T   V A L U A T I O N 	 2 1 	 4 5 	 4 6 	 1 	 2 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 0 8 	 7 5 	 1 	 	 	 	 	 9 7 	 1 1 0 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 3 8 - 1 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 8 7 T O 	 W O S : 0 0 0 2 5 4 9 3 9 6 0 0 0 0 7 	 	 
 
 J 	 G l a n z e l ,   W ;   D e b a c k e r e ,   K ;   T h i j s ,   B ;   S c h u b e r t ,   A 	 	 	 	 G l a n z e l ,   W ;   D e b a c k e r e ,   K ;   T h i j s ,   B ;   S c h u b e r t ,   A 	 	 	 A   c o n c i s e   r e v i e w   o n   t h e   r o l e   o f   a u t h o r   s e l f - c i t a t i o n s   i n   i n f o r m a t i o n   s c i e n c e ,   b i b l i o m e t r i c s   a n d   s c i e n c e   p o l i c y 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 3 3 r d   A n n u a l   C o n f e r e n c e   o f   t h e   C a n a d i a n - A s s o c i a t i o n - f o r - I n f o r m a t i o n - S c i e n c e 	 J U N   0 2 - 0 4 ,   2 0 0 5 	 U n i v   W e s t e r n   O n t a r i o ,   L o n d o n ,   C A N A D A 	 C a n a d i a n   A s s o c   I n f o r m a t   S c i 	 U n i v   W e s t e r n   O n t a r i o 	 	 S C I E N T I F I C   L I T E R A T U R E ;   I N D I C A T O R S ;   M A C R O 	 T h e   o b j e c t i v e   o f   t h e   p r e s e n t   s t u d y   i s   t w o f o l d :   ( I )   t o   s h o w   t h e   a i m s   a n d   m e a n s   o f   q u a n t i t a t i v e   i n t e r p r e t a t i o n   o f   b i b l i o g r a p h i c   f e a t u r e s   i n   b i b l i o m e t r i c s   a n d   t h e i r   r e - i n t e r p r e t a t i o n   i n   r e s e a r c h   p o l i c y ,   a n d   ( 2 )   t o   s u m m a r i s e   t h e   s t a t e - o f - a r t   i n   s e l f - c i t a t i o n   r e s e a r c h .   T h e   a u t h o r s   d e s c r i b e   t h r e e   a p p r o a c h e s   t o   t h e   r o l e   o f   a u t h o r   s e l f - c i t a t i o n s   a n d   p o s s i b l e   c o n f l i c t s   a r i s i n g   f r o m   t h e   d i f f e r e n t   p e r s p e c t i v e s .   F r o m   t h e   b i b l i o m e t r i c   v i e w p o i n t   w e   c a n   c o n c l u d e   t h a t   t h a t   t h e r e   i s   n o   r e a s o n   f o r   c o n d e m n i n g   s e l f - c i t a t i o n s   i n   g e n e r a l   o r   f o r   r e m o v i n g   t h e m   f r o m   m a c r o   o r   m e s o   s t a t i s t i c s ;   s u p p l e m e n t a r y   i n d i c a t o r s   b a s e d   o n   s e l f - c i t a t i o n s   a r e ,   n o n e t h e l e s s ,   u s e f u l   t o   u n d e r s t a n d   c o m m u n i c a t i o n   p a t t e r n s . 	 K a t h o l i e k e   U n i v   L e u v e n ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m ;   H u n g a r i a n   A c a d   S c i ,   I n s t   S c i   P o l i c y   R e s ,   B u d a p e s t ,   H u n g a r y 	 G l a n z e l ,   W   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   D e k e n s t r   2 ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m . 	 W o l f g a n g . G l a n z e l @ e c o n . k u l e u v e n . a c . b e 	 T h i j s ,   B a r t / C - 2 9 9 5 - 2 0 0 8 ;   G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 ;   S c h u b e r t ,   A n d r a s / H - 8 0 4 5 - 2 0 1 5 	 T h i j s ,   B a r t / 0 0 0 0 - 0 0 0 3 - 0 4 4 6 - 8 3 3 2 ;   G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 ;   S c h u b e r t ,   A n d r a s / 0 0 0 0 - 0 0 0 1 - 8 3 4 8 - 1 7 7 5 	 	 	 A k s n e s   D W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 1 9 2 2 8 3 6 8 ;   B e r g h m a n s   T ,   2 0 0 3 ,   A N N   O N C O L ,   V 1 4 ,   P 7 1 5 ,   D O I   1 0 . 1 0 9 3 / a n n o n c / m d g 2 0 3 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   B u t l e r   L ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 3 8 9 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   C R O N I N   B ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 3 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G L A N Z E L   W ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 1 0 4 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 3 9 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 1 7 . 1 3 3 4 8 . b 1 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 3 5 . 9 9 8 8 5 . e 9 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 6 3 ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   D e b a c k e r e   K . ,   2 0 0 3 ,   B I B L I O M E T R I C   A N A L   S C ,   P 2 2 5 ;   G L A N Z E L   W ,   2 0 0 5 ,   I N   P R E S S   V L A A M S   I N D I ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H o l m e s   A . ,   2 0 0 1 ,   I N F O R M   R E S ,   V 6 ;   L A W A N I   S M ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 8 1 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   N E D E R H O F   A J ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 7 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 5 4 8 ;   P i c h a p p a n   P ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 7 0 0 2 9 9 3 5 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R O U S S E A U   R ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 7 9 ;   S C H U B E R T   A ,   2 0 0 6 ,   I N   P R E S S   S C I E N T O M E T R ,   V 6 7 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   T h i j s   B ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 6 - 3 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 4 2 3 ;   W a r n e r   J ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 5 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 5 6 ;   W e i n s t o c k   M . ,   1 9 7 1 ,   E N C Y   L I B R A R Y   I N F O R M A ,   V 5 ,   P 1 6 ;   H a t t e n d o r f   W e s t n e y   L . C . ,   1 9 9 8 ,   J   A S S   H I S T   C O M P U T I N G ,   V 1 ;   W o u t e r s   P ,   1 9 9 9 ,   T H E S I S ;   2 0 0 3 ,   S C I E N C E ,   V 5 6 1 6 ,   P 4 7 ;   2 0 0 4 ,   K N A C K                       0 4 2 1 	 3 5 	 4 5 	 4 6 	 6 	 4 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A Y 	 2 0 0 6 	 6 7 	 2 	 	 	 	 	 2 6 3 	 2 7 7 	 	 1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 8 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 4 7 O L 	 W O S : 0 0 0 2 3 7 8 8 8 5 0 0 0 0 8 	 	 
 
 J 	 H e ,   Y L ;   H u i ,   S C 	 	 	 	 H e ,   Y L ;   H u i ,   S C 	 	 	 M i n i n g   a   W e b   C i t a t i o n   D a t a b a s e   f o r   a u t h o r   c o - c i t a t i o n   a n a l y s i s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a u t h o r   c o - c i t a t i o n   a n a l y s i s ;   d a t a   m i n i n g ;   W e b   C i t a t i o n   D a t a b a s e ;   i n t e l l i g e n t   i n f o r m a t i o n   r e t r i e v a l 	 I N T E L L E C T U A L   S T R U C T U R E ;   I N F O R M A T I O N - R E T R I E V A L ;   C O C I T A T I O N   A N A L Y S I S ;   D I G I T A L   L I B R A R I E S ;   N E T W O R K S 	 A u t h o r   c o - c i t a t i o n   a n a l y s i s   ( A C A )   h a s   b e e n   w i d e l y   u s e d   i n   b i b l i o m e t r i c s   a s   a n   a n a l y t i c a l   m e t h o d   i n   a n a l y z i n g   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   s c i e n c e   s t u d i e s .   I t   c a n   b e   u s e d   t o   i d e n t i f y   a u t h o r s   f r o m   t h e   s a m e   o r   s i m i l a r   r e s e a r c h   f i e l d s .   H o w e v e r ,   s u c h   a n a l y s i s   m e t h o d   r e l i e s   h e a v i l y   o n   s t a t i s t i c a l   t o o l s   t o   p e r f o r m   t h e   a n a l y s i s   a n d   r e q u i r e s   h u m a n   i n t e r p r e t a t i o n ,   W e b   C i t a t i o n   D a t a b a s e   i s   a   d a t a   w a r e h o u s e   u s e d   f o r   s t o r i n g   c i t a t i o n   i n d i c e s   o f   W e b   p u b l i c a t i o n s .   I n   t h i s   p a p e r .   w e   p r o p o s e   a   m i n i n g   p r o c e s s   t o   a u t o m a t e   t h e   A C A   b a s e d   o n   t h e   W e b   C i t a t i o n   D a t a b a s e .   T h e   m i n i n g   p r o c e s s   u s e s   a g g l o m e r a t i v e   h i e r a r c h i c a l   c l u s t e r i n g   ( A H C )   a s   t h e   m i n i n g   t e c h n i q u e   f o r   a u t h o r   c l u s t e r i n g   a n d   m u l t i d i m e n s i o n a l   s c a l i n g   ( M D S )   f o r   d i s p l a y i n g   a u t h o r   c l u s t e r   m a p s .   T h e   c l u s t e r i n g   r e s u l t s   a n d   a u t h o r   c l u s t e r   m a p   h a v e   b e e n   i n c o r p o r a t e d   i n t o   a   c i t a t i o n - b a s e d   r e t r i e v a l   s y s t e m   k n o w n   a s   P u b S e a r c h   t o   s u p p o r t   a u t h o r   r e t r i e v a l   o f   W e b   p u b l i c a t i o n s .   ( C )   2 0 0 2   E l s e v i e r   S c i e n c e   L t d .   A l l   r i g h t s   r e s e r v e d . 	 N a n y a n g   T e c h n o l   U n i v ,   S c h   C o m p   E n g n ,   S i n g a p o r e   6 3 9 7 9 8 ,   S i n g a p o r e 	 H e ,   Y L   ( r e p r i n t   a u t h o r ) ,   N a n y a n g   T e c h n o l   U n i v ,   S c h   C o m p   E n g n ,   N a n y a n g   A v e ,   S i n g a p o r e   6 3 9 7 9 8 ,   S i n g a p o r e . 	 	 	 	 	 	 B a e z a - Y a t e s   R .   A . ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ,   P 1 3 ;   B o l l a c k e r   K .   D . ,   1 9 9 8 ,   P r o c e e d i n g s   o f   t h e   S e c o n d   I n t e r n a t i o n a l   C o n f e r e n c e   o n   A u t o n o m o u s   A g e n t s ,   P 1 1 6 ,   D O I   1 0 . 1 1 4 5 / 2 8 0 7 6 5 . 2 8 0 7 8 6 ;   B o l l a c k e r   K D ,   2 0 0 0 ,   I E E E   I N T E L L   S Y S T   A P P ,   V 1 5 ,   P 4 2 ,   D O I   1 0 . 1 1 0 9 / 5 2 5 4 . 8 5 0 8 2 6 ;   C a l l o n   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 1 5 3 ;   C A R P E N T E R   G A ,   1 9 9 1 ,   N E U R A L   N E T W O R K S ,   V 4 ,   P 7 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 8 9 3 - 6 0 8 0 ( 9 1 ) 9 0 0 5 6 - B ;   C H E N   C ,   1 9 9 9 ,   P   I E E E   V I S   9 9   S A N   F R ,   P 4 9 9 ;   C H E N   C ,   2 0 0 0 ,   P   1 6   I F I P   W O R L D   C O M P ,   P 7 2 0 ;   C h e n   C ,   1 9 9 9 ,   P   1 0   A C M   C   H Y P   H Y P   R ,   P 5 1 ,   D O I   1 0 . 1 1 4 5 / 2 9 4 4 6 9 . 2 9 4 4 8 6 ;   C h e n   C M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 4 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 8 - 5 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D i n g   Y ,   1 9 9 8 ,   I N T   F O R U M   I N F O R M   D O C ,   V 2 3 ,   P 2 5 ;   E v e r i t t   B . S . ,   1 9 8 6 ,   C L U S T E R   A N A L ;   F a y y a d   U . ,   1 9 9 6 ,   A D V   K N O W L E D G E   D I S C O V ,   P 1 ,   D O I   D O I   1 0 . 1 6 0 9 / A I M A G . V 1 7 I 3 . 1 2 3 0 ;   G A R F I E L D   E ,   1 9 8 0 ,   C U R R E N T   C O N T E N T S   1 ,   V 4 0 ,   P 5 ;   G o r s u c h   R L ,   1 9 8 3 ,   F A C T O R   A N A L ;   G R E E N   P ,   1 9 8 9 ,   M U L T I D I M E N S I O N A L   S C A ;   H E   Y ,   2 0 0 1 ,   T H E S I S   N A N Y A N G   T U   S I ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J O H N S O N   A G ,   1 9 8 8 ,   S T A T I S T I C S ;   K o h o n e n   T . ,   1 9 9 5 ,   S E L F   O R G   M A P S ;   K r u s k a l   J .   B . ,   1 9 7 7 ,   C L A S S I F I C A T I O N   C L U S T ,   P 1 7 ;   K U R I T A   T ,   1 9 9 1 ,   P A T T E R N   R E C O G N ,   V 2 4 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 1 - 3 2 0 3 ( 9 1 ) 9 0 0 6 2 - A ;   L A R S O N   R ,   1 9 9 6 ,   P   1 9 9 6   A N N   A S I S   A M   S ;   L i n   X ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 1 ) 4 8 : 1 < 4 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 1 ;   L I N   X ,   2 0 0 0 ,   M A P   I N F O R M A T I O N   S C I ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M i t c h e l l   T . M . ,   1 9 9 9 ,   C O M M U N   A C M ,   V 4 2 ,   P 3 1 ;   P e r r y   C A ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 2 ) 4 9 : 2 < 1 5 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - V ;   S c h v a n e v e l d t   R .   W . ,   1 9 8 9 ,   P S Y C H O L   L E A R N   M O T I V ,   V 2 4 ,   P 2 4 9 ;   S P S S ,   2 0 0 0 ,   S T A T   P A C K   S O C   S C I ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   2 0 0 0 ,   P   I E E E   I N T   C   I N F   V I S ,   P 2 5 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 	 3 4 	 4 5 	 4 7 	 2 	 2 1 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 J U L 	 2 0 0 2 	 3 8 	 4 	 	 	 	 	 4 9 1 	 5 0 8 	 P I I   S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 	 1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 4 9 Z X 	 W O S : 0 0 0 1 7 5 4 7 9 1 0 0 0 0 3 	 	 
 
 J 	 B o r n m a n n ,   L ;   L e y d e s d o r f f ,   L ;   M u t z ,   R 	 	 	 	 B o r n m a n n ,   L u t z ;   L e y d e s d o r f f ,   L o e t ;   M u t z ,   R u e d i g e r 	 	 	 T h e   u s e   o f   p e r c e n t i l e s   a n d   p e r c e n t i l e   r a n k   c l a s s e s   i n   t h e   a n a l y s i s   o f   b i b l i o m e t r i c   d a t a :   O p p o r t u n i t i e s   a n d   l i m i t s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P e r c e n t i l e ;   P e r c e n t i l e   r a n k   c l a s s ;   C i t a t i o n   i m p a c t ;   R e f e r e n c e   s e t ;   N o r m a l i z e d   c i t a t i o n   i m p a c t 	 R E S E A R C H   P E R F O R M A N C E ;   R E L A T I V E   I N D I C A T O R S ;   P L O T T I N G   P O S I T I O N S ;   P U B L I C A T I O N ;   E X C E L L E N C E ;   C H A R T S ;   I M P A C T 	 P e r c e n t i l e s   h a v e   b e e n   e s t a b l i s h e d   i n   b i b l i o m e t r i c s   a s   a n   i m p o r t a n t   a l t e r n a t i v e   t o   m e a n - b a s e d   i n d i c a t o r s   f o r   o b t a i n i n g   a   n o r m a l i z e d   c i t a t i o n   i m p a c t   o f   p u b l i c a t i o n s .   P e r c e n t i l e s   h a v e   a   n u m b e r   o f   a d v a n t a g e s   o v e r   s t a n d a r d   b i b l i o m e t r i c   i n d i c a t o r s   u s e d   f r e q u e n t l y :   f o r   e x a m p l e ,   t h e i r   c a l c u l a t i o n   i s   n o t   b a s e d   o n   t h e   a r i t h m e t i c   m e a n   w h i c h   s h o u l d   n o t   b e   u s e d   f o r   s k e w e d   b i b l i o m e t r i c   d a t a .   T h i s   s t u d y   d e s c r i b e s   t h e   o p p o r t u n i t i e s   a n d   l i m i t s   a n d   t h e   a d v a n t a g e s   a n d   d i s a d v a n t a g e s   o f   u s i n g   p e r c e n t i l e s   i n   b i b l i o m e t r i c s .   W e   a l s o   a d d r e s s   p r o b l e m s   i n   t h e   c a l c u l a t i o n   o f   p e r c e n t i l e s   a n d   p e r c e n t i l e   r a n k   c l a s s e s   f o r   w h i c h   t h e r e   i s   n o t   ( y e t )   a   s a t i s f a c t o r y   s o l u t i o n .   I t   w i l l   b e   h a r d   t o   c o m p a r e   t h e   r e s u l t s   o f   d i f f e r e n t   p e r c e n t i l e - b a s e d   s t u d i e s   w i t h   e a c h   o t h e r   u n l e s s   i t   i s   c l e a r   t h a t   t h e   s t u d i e s   w e r e   d o n e   w i t h   t h e   s a m e   c h o i c e s   f o r   p e r c e n t i l e   c a l c u l a t i o n   a n d   r a n k   a s s i g n m e n t .   ( C )   2 0 1 2   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ B o r n m a n n ,   L u t z ]   M a x   P l a n c k   G e s e l l ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y ;   [ L e y d e s d o r f f ,   L o e t ]   U n i v   A m s t e r d a m ,   A S C o R ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s ;   [ M u t z ,   R u e d i g e r ]   E T H   Z u r i c h   S w i s s   F e d   I n s t   T e c h n o l   Z u r i c h ,   C H - 8 0 0 1   Z u r i c h ,   S w i t z e r l a n d 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   G e s e l l ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e ;   l o e t @ l e y d e s d o r f f . n e t ;   m u t z @ g e s s . e t h z . c h 	 M u t z ,   R u e d i g e r / A - 2 2 2 6 - 2 0 0 9 ;   B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   L e y d e s d o r f f ,   L o e t / E - 2 9 0 3 - 2 0 1 0 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   L e y d e s d o r f f ,   L o e t / 0 0 0 0 - 0 0 0 2 - 7 8 3 5 - 3 0 9 8 	 	 	 B l o m   G . ,   1 9 5 8 ,   S T A T   E S T I M A T E S   T R A N S ;   B o r n m a n n   L . ,   J   A M   S O C   I N   I N   P R E S S ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 6 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   R   S T A T   S O C   A   S T A T ,   V 1 7 4 ,   P 8 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 8 5 X . 2 0 1 1 . 0 0 6 8 9 . x ;   B o r n m a n n   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 5 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 1 1 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 9 ;   C o x   N .   J . ,   2 0 0 5 ,   C A L C U L A T I N G   P E R C E N T I ;   C U N N A N E   C ,   1 9 7 8 ,   J   H Y D R O L ,   V 3 7 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 1 6 9 4 ( 7 8 ) 9 0 0 1 7 - 3 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 3 - 8 ;   G l a n z e l   W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 1 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 0 9 - 5 ;   G R I N G O R T E N   I I ,   1 9 6 3 ,   J   G E O P H Y S   R E S ,   V 6 8 ,   P 8 1 3 ,   D O I   1 0 . 1 0 2 9 / J Z 0 6 8 i 0 0 3 p 0 0 8 1 3 ;   G u e r r e r o - B o t e   V . P . ,   2 0 1 2 ,   F U R T H E R   S T E P   F O R W A R D ;   H A R T E R   H L ,   1 9 8 4 ,   C O M M U N   S T A T - T H E O R   M ,   V 1 3 ,   P 1 6 1 3 ,   D O I   1 0 . 1 0 8 0 / 0 3 6 1 0 9 2 8 4 0 8 8 2 8 7 8 1 ;   H a z e n   A ,   1 9 1 4 ,   T   A M   S O C   C I V I L   E N G ,   V 7 7 ,   P 1 5 3 9 ;   H i n t z e   J L ,   1 9 9 8 ,   A M   S T A T ,   V 5 2 ,   P 1 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 6 8 5 4 7 8 ;   K o h l e r   U . ,   2 0 0 9 ,   D A T A   A N A L   U S I N G   S T A T ;   G o l d s t o n e   R .   L . ,   J   A M   S O C   I N   I N   P R E S S ;   L e y d e s d o r f f   L ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 7 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 3 6 - 6 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 3 4 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   N a t i o n a l   S c i e n c e   B o a r d ,   2 0 1 2 ,   1 2 0 1   N S B   N A T   S C I   F D N ;   O p t h o f   T ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 2 . 0 0 3 ;   R o u s s e a u   R ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 8 4 ;   S c h r e i b e r   M . ,   2 0 1 2 ,   I N C O N S I S T E N C I E S   R E C E ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S t a t a C o r p ,   2 0 1 1 ,   S T A T   S T A T   S O F T W   R E L ;   T i j s s e n   R . ,   2 0 0 6 ,   9   I N T   C   S C I   T E C H N   I N ,   P 1 4 6 ;   T i j s s e n   R J W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 8 2 4 3 2 6 6 0 ;   V i n k l e r   P ,   2 0 1 0 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 2 5 0 ;   V i n k l e r   P ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 2 5 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 2 . 0 0 4 ;   W a l t m a n   L . ,   2 0 1 2 ,   L E I D E N   R A N K I N G   2 0 1 1 ;   V a n   E c k   N .   J . ,   J   A M   S O C   I N   I N   P R E S S ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 	 3 4 	 4 4 	 4 4 	 6 	 7 7 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 3 	 7 	 1 	 	 	 	 	 1 5 8 	 1 6 5 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 1 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 5 B G 	 W O S : 0 0 0 3 1 3 1 2 1 3 0 0 0 1 9 	 	 
 
 J 	 D i   S t e f a n o ,   G ;   G a m b a r d e l l a ,   A ;   V e r o n a ,   G 	 	 	 	 D i   S t e f a n o ,   G i a d a ;   G a m b a r d e l l a ,   A l f o n s o ;   V e r o n a ,   G i a n m a r i o 	 	 	 T e c h n o l o g y   p u s h   a n d   d e m a n d   p u l l   p e r s p e c t i v e s   i n   i n n o v a t i o n   s t u d i e s :   C u r r e n t   f i n d i n g s   a n d   f u t u r e   r e s e a r c h   d i r e c t i o n s 	 R E S E A R C H   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 T e c h n o l o g y   p u s h ;   D e m a n d   p u l l ,   I n n o v a t i o n ;   B i b l i o m e t r i c s ;   C o - c i t a t i o n   a n a l y s i s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   O P E N   S O U R C E   S O F T W A R E ;   R - A N D - D ;   P R O D U C T   D E V E L O P M E N T ;   I N T E L L E C T U A L   S T R U C T U R E ;   S T R A T E G I C - M A N A G E M E N T ;   D Y N A M I C   C A P A B I L I T I E S ;   D I S C O N T I N U O U S   I N N O V A T I O N ;   C O M P L E M E N T A R Y   A S S E T S ;   K N O W L E D G E   M A N A G E M E N T 	 T h i s   s t u d y   u p d a t e s   t h e   d e b a t e   o n   t h e   s o u r c e s   o f   i n n o v a t i o n .   U s i n g   t e c h n i q u e s   l i k e   f a c t o r   a n a l y s i s ,   m u l t i d i m e n s i o n a l   s c a l i n g ,   a n d   p a t h f i n d e r   a n a l y s i s ,   w e   e x a m i n e   t h e   m o s t   i n f l u e n t i a l   a r t i c l e s   t h a t   h a v e   d e a l t   w i t h   t h e   t o p i c .   O u r   a n a l y s i s   p r o v i d e s   t h r e e   m a i n   f i n d i n g s .   T h e   f i r s t   m o r e   p r e c i s e l y   h i g h l i g h t s   t h e   r o l e   o f   d e m a n d   a s   a   s o u r c e   o f   i n n o v a t i o n .   T h e   s e c o n d   i l l u s t r a t e s   h o w   c o m p e t e n c e s   e n a b l e   f i r m s   t o   m a t c h   t e c h n o l o g y   w i t h   d e m a n d   a n d   c a p i t a l i z e   o n   t e c h n o l o g y   a n d   d e m a n d   a s   s o u r c e s   o f   i n n o v a t i o n .   T h e   t h i r d   u n v e i l s   a   d i s t i n c t i o n   b e t w e e n   e x t e r n a l   a n d   i n t e r n a l   s o u r c e s   o f   i n n o v a t i o n s .   T h e   s o u r c e s   o f   i n n o v a t i o n   c a n   b e   p u r e l y   e x t e r n a l   o r   i n t e r n a l l y   g e n e r a t e d   c o m p e t e n c e s   t h a t   e n a b l e   t h e   f i r m   t o   i n t e g r a t e   e x t e r n a l   k n o w l e d g e   w i t h i n   i t s   b o u n d a r i e s .   O u r   w o r k   c o n t r i b u t e s   t o   t h e   c l a s s i c   d e b a t e   b y   p r o v i d i n g   a   m o r e   g r a n u l a r   u n d e r s t a n d i n g   o f   h o w   t e c h n o l o g y   a n d   d e m a n d   i n t e r a c t .   I n   d i s c u s s i n g   o u r   f i n d i n g s ,   w e   l i n k   o u r   f r a m e w o r k   t o   s t r a t e g y ,   i n n o v a t i o n   a n d   e n t r e p r e n e u r s h i p   s t u d i e s   t h a t   e x p r e s s l y   c a l l   f o r   a   b e t t e r   u n d e r s t a n d i n g   o f   t e c h n o l o g y   a n d   d e m a n d   f a c t o r s   i n   v a l u e   c r e a t i o n   a n d   c a p t u r e .   ( C )   2 0 1 2   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ G a m b a r d e l l a ,   A l f o n s o ;   V e r o n a ,   G i a n m a r i o ]   B o c c o n i   U n i v ,   D e p t   M a n a g e m e n t   &   T e c h n o l ,   I - 2 0 1 3 6   M i l a n ,   I t a l y ;   [ D i   S t e f a n o ,   G i a d a ]   H E C   P a r i s ,   D e p t   S t r a t e g y   &   B u s i n e s s   P o l i c y ,   F - 7 8 3 5 1   J o u y   E n   J o s a s ,   F r a n c e 	 G a m b a r d e l l a ,   A   ( r e p r i n t   a u t h o r ) ,   B o c c o n i   U n i v ,   D e p t   M a n a g e m e n t   &   T e c h n o l ,   V i a   R o e n t g e n   1 ,   I - 2 0 1 3 6   M i l a n ,   I t a l y . 	 d i - s t e f a n o @ h e c . f r ;   a l f o n s o . g a m b a r d e l l a @ u n i b o c c o n i . i t ;   g i a n m a r i o . v e r o n a @ u n i b o c c o n i . i t 	 D i   S t e f a n o ,   G i a d a / E - 5 3 5 1 - 2 0 1 5 	 D i   S t e f a n o ,   G i a d a / 0 0 0 0 - 0 0 0 2 - 9 1 4 4 - 5 9 6 6 	 	 	 A c e d o   F J ,   2 0 0 6 ,   S T R A T E G I C   M A N A G E   J ,   V 2 7 ,   P 6 2 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 5 3 2 ;   A d n e r   R ,   2 0 0 1 ,   M A N A G E   S C I ,   V 4 7 ,   P 6 1 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 7 . 5 . 6 1 1 . 1 0 4 8 2 ;   A f u a h   A ,   2 0 0 0 ,   S T R A T E G I C   M A N A G E   J ,   V 2 1 ,   P 3 8 7 ;   A l d r i c h   H E ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 2 4 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 3 ;   A l l e n   J W ,   1 9 9 8 ,   J   F I N A N C   E C O N ,   V 4 8 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 9 8 ) 0 0 0 0 5 - 1 ;   A r n o l d   M J ,   2 0 0 3 ,   J   R E T A I L I N G ,   V 7 9 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 2 - 4 3 5 9 ( 0 3 ) 0 0 0 0 7 - 1 ;   A R O R A   A ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 5 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 0 1 0 0 3 - X ;   A T T E W E L L   P ,   1 9 9 2 ,   O R G A N   S C I ,   V 3 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / o r s c . 3 . 1 . 1 ;   A t u a h e n e - G i m a   K ,   2 0 0 5 ,   J   M A R K E T I N G ,   V 6 9 ,   P 6 1 ,   D O I   1 0 . 1 5 0 9 / j m k g . 2 0 0 5 . 6 9 . 4 . 6 1 ;   B A S S   F M ,   1 9 9 4 ,   M A R K E T   S C I ,   V 1 3 ,   P 2 0 3 ,   D O I   1 0 . 1 2 8 7 / m k s c . 1 3 . 3 . 2 0 3 ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B e n n e r   M J ,   2 0 0 7 ,   A C A D   M A N A G E   R E V ,   V 3 2 ,   P 7 0 3 ;   B H A V E   M P ,   1 9 9 4 ,   J   B U S   V E N T U R I N G ,   V 9 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 8 8 3 - 9 0 2 6 ( 9 4 ) 9 0 0 3 1 - 0 ;   B h u p a t i r a j u   S ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 2 0 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 1 ;   B i e r l y   P ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 1 2 3 ;   B r u n e r   G C ,   2 0 0 5 ,   J   B U S   R E S ,   V 5 8 ,   P 5 5 3 ,   D O I   1 0 . 1 0 1 6 / j . j b u s r e s . 2 0 0 3 . 0 8 . 0 0 2 ;   B U R G E L M A N   R A ,   1 9 9 4 ,   A D M I N   S C I   Q U A R T ,   V 3 9 ,   P 2 4 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 4 9 3 ;   B u r k e   R R ,   2 0 0 2 ,   J   A C A D   M A R K E T   S C I ,   V 3 0 ,   P 4 1 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 2 0 7 0 0 2 2 3 6 9 1 4 ;   B u r t   R .   S . ,   2 0 0 5 ,   B R O K E R A G E   C L O S U R E   I N ;   C a n t w e l l   J . ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E M E N T ,   V 1 8 ,   P 2 4 7 ;   C h a n d y   R . K . ,   2 0 0 0 ,   J   M A R K E T I N G ,   V 1 8 ,   P 2 4 7 ;   C h e s b r o u g h   H .   W ,   2 0 0 3 ,   O P E N   I N N O V A T I O N   N E W ;   C h r i s t e n s e n   C M ,   2 0 0 0 ,   H A R V A R D   B U S   R E V ,   V 7 8 ,   P 1 0 2 ;   C H R I S T E N S E N   C M ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 0 0 7 6 4 - K ;   C h r i s t e n s e n   C M ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 1 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 6 0 3 ) 1 7 : 3 < 1 9 7 : : A I D - S M J 8 0 4 > 3 . 0 . C O ; 2 - U ;   C O H E N   J ,   1 9 6 0 ,   E D U C   P S Y C H O L   M E A S ,   V 2 0 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 3 1 6 4 4 6 0 0 2 0 0 0 1 0 4 ;   C O H E N   W M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 1 2 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 5 3 ;   C O H E N   W M ,   1 9 8 9 ,   E C O N   J ,   V 9 9 ,   P 5 6 9 ,   D O I   1 0 . 2 3 0 7 / 2 2 3 3 7 6 3 ;   C O N N E R   K R ,   1 9 9 1 ,   M A N A G E   S C I ,   V 3 7 ,   P 1 2 5 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   D a b h o l k a r   P A ,   2 0 0 2 ,   J   A C A D   M A R K E T   S C I ,   V 3 0 ,   P 1 8 4 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 2 0 7 0 3 0 2 3 0 3 0 0 1 ;   D a n n e e l s   E ,   2 0 0 2 ,   S T R A T E G I C   M A N A G E   J ,   V 2 3 ,   P 1 0 9 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 2 7 5 ;   D a n n e e l s   E ,   2 0 0 6 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 3 ,   P 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 8 8 5 . 2 0 0 5 . 0 0 1 7 4 . x ;   D a n n e e l s   E ,   2 0 0 1 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 8 ,   P 3 5 7 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 5 8 8 5 . 1 8 6 0 3 5 7 ;   D e a r h o l t   D .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ,   P 1 ;   D e e d s   D L ,   1 9 9 6 ,   J   B U S   V E N T U R I N G ,   V 1 1 ,   P 4 1 ,   D O I   1 0 . 1 0 1 6 / 0 8 8 3 - 9 0 2 6 ( 9 5 ) 0 0 0 8 7 - 9 ;   D e m a r e s t   M . ,   1 9 9 7 ,   L O N G   R A N G E   P L A N N ,   V 3 1 ,   P 1 3 8 9 ;   D i   S t e f a n o   G ,   2 0 1 0 ,   I N D   C O R P   C H A N G E ,   V 1 9 ,   P 1 1 8 7 ,   D O I   1 0 . 1 0 9 3 / i c c / d t q 0 2 7 ;   D O S I   G ,   1 9 8 2 ,   R E S   P O L I C Y ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 2 ) 9 0 0 1 6 - 6 ;   D r u c k e r   P .   F . ,   2 0 0 7 ,   I N N O V A T I O N   E N T R E P R E N ;   D u t t a   S . ,   1 9 9 9 ,   M A R K E T   S C I ,   V 2 1 ,   P 3 8 7 ;   E c k h a r d t   J T ,   2 0 0 3 ,   J   M A N A G E ,   V 2 9 ,   P 3 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 3 0 2 9 0 0 3 0 4 ;   E l b e r s e   A ,   2 0 0 3 ,   M A R K E T   S C I ,   V 2 2 ,   P 3 2 9 ,   D O I   1 0 . 1 2 8 7 / m k s c . 2 2 . 3 . 3 2 9 . 1 7 7 4 0 ;   E T T L I E   J E ,   1 9 9 2 ,   A C A D   M A N A G E   J ,   V 3 5 ,   P 7 9 5 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 3 1 6 ;   E t z k o w i t z   H ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 3 1 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 6 9 - 4 ;   F a g e r b e r g   J ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 3 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 0 8 ;   F i s h e r   M L ,   1 9 9 7 ,   H A R V A R D   B U S   R E V ,   V 7 5 ,   P 1 0 5 ;   F r a m b a c h   R . T . ,   2 0 0 2 ,   J   B U S I N E S S   R E S ,   V 7 6 ;   F r a n k e   N ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 1 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 3 ) 0 0 0 4 9 - 0 ;   F r a n k e   N ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 6 - 9 ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   F u r m a n   J L ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 8 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 5 2 - 4 ;   G a l l o u j   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 5 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 3 0 - 9 ;   G a n s   J . S . ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 3 3 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   M A P P I N G   S T R U C T U R E   S C ,   P 9 8 ;   G A R U D   R ,   1 9 9 4 ,   O R G A N   S C I ,   V 5 ,   P 3 4 4 ,   D O I   1 0 . 1 2 8 7 / o r s c . 5 . 3 . 3 4 4 ;   G A R U D   R ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E   J ,   V 1 6 ,   P 9 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 6 0 9 1 9 ;   G a r u d   R ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 1 0 0 - 2 ;   G a t i g n o n   H ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 1 0 3 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 9 . 1 1 0 3 . 1 7 4 ;   G a t i g n o n   H ,   1 9 9 7 ,   J   M A R K E T I N G   R E S ,   V 3 4 ,   P 7 7 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 2 0 6 6 ;   G e e l s   F W ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 8 9 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 1 5 ;   G i l b e r t   C G ,   2 0 0 6 ,   O R G A N   S C I ,   V 1 7 ,   P 1 5 0 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 0 5 0 . 0 1 6 0 ;   G i l b e r t   C G ,   2 0 0 5 ,   A C A D   M A N A G E   J ,   V 4 8 ,   P 7 4 1 ;   G l y n n   M A ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 1 0 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 1 6 5 ;   H a g e d o o r n   J . ,   2 0 0 2 ,   J   M A N A G E   S T U D ,   V 4 7 ,   P 6 1 1 ;   H a n d f i e l d   R B ,   1 9 9 9 ,   C A L I F   M A N A G E   R E V ,   V 4 2 ,   P 5 9 ;   H a r h o f f   D ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 7 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 3 ) 0 0 0 6 1 - 1 ;   H a u s e r   J . R . ,   2 0 0 6 ,   M A R K E T I N G   S C I ,   V 4 0 ;   H e l f a t   C E ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E   J ,   V 1 8 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 7 0 5 ) 1 8 : 5 < 3 3 9 : : A I D - S M J 8 8 3 > 3 . 0 . C O ; 2 - 7 ;   H e n a r d   D . H . ,   2 0 0 1 ,   J   M A R K E T I N G   R E S ,   V 1 4 ,   P 2 0 9 ;   H E N D E R S O N   R ,   1 9 9 3 ,   R A N D   J   E C O N ,   V 2 4 ,   P 2 4 8 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 7 6 1 ;   H i l l   C W L ,   2 0 0 3 ,   A C A D   M A N A G E   R E V ,   V 2 8 ,   P 2 5 7 ;   H i t t   M A ,   2 0 0 0 ,   J   E N G   T E C H N O L   M A N A G E ,   V 1 7 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 3 - 4 7 4 8 ( 0 0 ) 0 0 0 2 4 - 2 ;   H i t t   M A ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 4 7 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 9 6 ;   H o b d a y   M ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 6 ,   P 6 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 4 4 - 9 ;   H o b d a y   M ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 8 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 1 1 0 - 4 ;   I m   S ,   2 0 0 4 ,   J   M A R K E T I N G ,   V 6 8 ,   P 1 1 4 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 8 . 2 . 1 1 4 . 2 7 7 8 8 ;   I r e l a n d   R D ,   2 0 0 1 ,   A C A D   M A N A G E   E X E C ,   V 1 5 ,   P 4 9 ;   K e m p   R ,   1 9 9 8 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 0 ,   P 1 7 5 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 9 8 0 8 5 2 4 3 1 0 ;   K i m   D J ,   1 9 9 6 ,   O R G A N   S C I ,   V 7 ,   P 2 8 3 ,   D O I   1 0 . 1 2 8 7 / o r s c . 7 . 3 . 2 8 3 ;   K l e i n   K J ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 1 0 5 5 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 1 6 4 ;   K l e p p e r   S ,   2 0 0 7 ,   M A N A G E   S C I ,   V 5 3 ,   P 6 1 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 6 0 . 0 6 8 3 ;   K L E V O R I C K   A K ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 0 0 7 6 2 - I ;   K L I N E   S .   J . ,   1 9 8 6 ,   P O S I T I V E   S U M   S T R A T E G ,   P 2 7 5 ;   K o g u t   B ,   1 9 9 6 ,   O R G A N   S C I ,   V 7 ,   P 5 0 2 ,   D O I   1 0 . 1 2 8 7 / o r s c . 7 . 5 . 5 0 2 ;   K r a u t   R E ,   1 9 9 8 ,   O R G A N   S C I ,   V 9 ,   P 4 3 7 ,   D O I   1 0 . 1 2 8 7 / o r s c . 9 . 4 . 4 3 7 ;   K r u s k a l   J . B ,   1 9 7 8 ,   M U L T I D I M E N S I O N A L   S C A ;   L a k h a n i   K R ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 9 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 9 5 - 1 ;   L A N G L O I S   R N ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 3 0 - 8 ;   I a n s i t i   M . ,   1 9 9 7 ,   H A R V A R D   B U S   R E V ,   V 7 5 ,   P 1 0 8 ;   L e e   Y S ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 8 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 5 7 - 8 ;   L e o n a r d   D ,   1 9 9 7 ,   H A R V A R D   B U S   R E V ,   V 7 5 ,   P 1 0 2 ;   L E O N A R D B A R T O N   D ,   1 9 9 2 ,   S T R A T E G I C   M A N A G E   J ,   V 1 3 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 3 1 0 0 9 ;   L u m p k i n   G T ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 1 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 6 3 2 ;   L u o   X M ,   2 0 0 6 ,   J   M A R K E T I N G ,   V 7 0 ,   P 1 ,   D O I   1 0 . 1 5 0 9 / j m k g . 7 0 . 4 . 1 ;   L y n n   G S ,   1 9 9 6 ,   C A L I F   M A N A G E   R E V ,   V 3 8 ,   P 8 ;   M a c C o r m a c k   A ,   2 0 0 1 ,   M A N A G E   S C I ,   V 4 7 ,   P 1 3 3 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 7 . 1 . 1 3 3 . 1 0 6 6 3 ;   M a g r e t t a   J . ,   1 9 9 8 ,   H A R V A R D   B U S   R E V ,   V 7 6 ,   P 7 3 ;   M a k r i   M ,   2 0 1 0 ,   S T R A T E G I C   M A N A G E   J ,   V 3 1 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / s m j . 8 2 9 ;   M a l e r b a   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 3 9 - 1 ;   M a r i o n   L S ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 7 2 > 3 . 0 . C O ; 2 - 8 ;   M a r t i n   B R ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 2 1 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 1 2 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M c G a h a n   A M ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 2 2 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 0 6 ;   M c M i l l a n   G S ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 6 9 ;   M e u t e r   M . L . ,   2 0 0 5 ,   J   M A R K E T I N G ,   V 3 9 ,   P 1 6 7 ;   M a r q u i s   D . G . ,   1 9 6 9 ,   S U C C E S S F U L   I N D   I N N O V ;   M i c k   D G ,   1 9 9 8 ,   J   C O N S U M   R E S ,   V 2 5 ,   P 1 2 3 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 5 3 1 ;   M o r e a u   C . P . ,   2 0 0 1 ,   J   M A R K E T I N G   R E S ,   V 6 6 ,   P 4 7 ;   M o r r i s o n   P D ,   2 0 0 0 ,   M A N A G E   S C I ,   V 4 6 ,   P 1 5 1 3 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 6 . 1 2 . 1 5 1 3 . 1 2 0 7 6 ;   M O W E R Y   D ,   1 9 7 9 ,   R E S   P O L I C Y ,   V 8 ,   P 1 0 2 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 7 9 ) 9 0 0 1 9 - 2 ;   M u r r a y   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 3 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 7 0 - 7 ;   N A M B I S A N   S ,   2 0 0 2 ,   A C A D   M A N A G E   R E V ,   V 2 7 ,   P 3 9 2 ,   D O I   D O I   1 0 . 2 3 0 7 / 4 1 3 4 3 8 6 ;   N a r v e r   J C ,   2 0 0 4 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 1 ,   P 3 3 4 ,   D O I   1 0 . 1 1 1 1 / j . 0 7 3 7 - 6 7 8 2 . 2 0 0 4 . 0 0 0 8 6 . x ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   O ' C o n n e r   G C ,   1 9 9 8 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 5 ,   P 1 5 1 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 5 8 8 5 . 1 5 2 0 1 5 1 ;   P i t t a w a y   L . ,   2 0 0 4 ,   I N T   J   M A N A G   R E V ,   V 4 7 ,   P 1 3 3 ;   P o n z i   L J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 1 9 8 2 4 8 5 0 ;   P R A H A L A D   C K ,   1 9 9 4 ,   S T R A T E G I C   M A N A G E   J ,   V 1 5 ,   P 5 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R o s e n b e r g   N . ,   1 9 8 2 ,   I N S I D E   B L A C K   B O X   T E C ;   R o t h a e r m e l   F T ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 7 6 ;   R o t h a e r m e l   F T ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 6 8 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 8 0 ;   R o t h a e r m e l   F . T . ,   2 0 0 7 ,   O R G   S C I ,   V 1 8 ;   R O T H W E L L   R ,   1 9 9 2 ,   R & D   M A N A G E ,   V 2 2 ,   P 2 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 2 . t b 0 0 8 1 2 . x ;   R o w l a n d s   I ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 5 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 9 4 ;   S c h m o o k l e r   J . ,   1 9 6 6 ,   I N V E N T I O N   E C   G R O W T H ;   S c h u m p e t e r   J . A . ,   1 9 3 4 ,   T H E O R Y   E C   D E V ;   S c h v a n e v e l d t   R .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ;   S H A N E   S ,   1 9 9 3 ,   J   B U S   V E N T U R I N G ,   V 8 ,   P 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 8 8 3 - 9 0 2 6 ( 9 3 ) 9 0 0 1 1 - S ;   S h a n e   S A ,   2 0 0 4 ,   M A N A G E   S C I ,   V 5 0 ,   P 1 3 3 ,   D O I   [ 1 0 . 1 2 8 7 / m n s c . 1 0 4 0 . 0 2 0 4 ,   1 0 . 1 2 8 7 / m n s c . 2 0 4 0 . 0 2 0 4 ] ;   S l a t e r   S F ,   1 9 9 8 ,   S T R A T E G I C   M A N A G E   J ,   V 1 9 ,   P 1 0 0 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 8 1 0 ) 1 9 : 1 0 < 1 0 0 1 : : A I D - S M J 9 9 6 > 3 . 0 . C O ; 2 - 4 ;   S o n g   X M ,   1 9 9 6 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 3 ,   P 4 2 2 ,   D O I   1 0 . 1 0 1 6 / 0 7 3 7 - 6 7 8 2 ( 9 6 ) 0 0 0 5 5 - 0 ;   S o r e n s e n   J B ,   2 0 0 0 ,   A D M I N   S C I   Q U A R T ,   V 4 5 ,   P 8 1 ,   D O I   1 0 . 2 3 0 7 / 2 6 6 6 9 8 0 ;   S r i n i v a s a n   R . ,   2 0 0 2 ,   J   M A R K E T I N G ,   V 3 8 ,   P 1 4 ;   S t e w a r t   W H ,   1 9 9 9 ,   J   B U S   V E N T U R I N G ,   V 1 4 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 9 7 ) 0 0 0 7 0 - 0 ;   S T I G L E R   G J ,   1 9 7 7 ,   A M   E C O N   R E V ,   V 6 7 ,   P 7 6 ;   S t u a r t   T E ,   2 0 0 0 ,   S T R A T E G I C   M A N A G E   J ,   V 2 1 ,   P 7 9 1 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 0 2 6 6 ( 2 0 0 0 0 8 ) 2 1 : 8 < 7 9 1 : : A I D - S M J 1 2 1 > 3 . 0 . C O ; 2 - K ;   T e e c e   D J ,   2 0 0 7 ,   S T R A T E G   M A N A G E   J ,   V 2 8 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 4 0 ;   T e e c e   D J ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E   J ,   V 1 8 ,   P 5 0 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 7 0 8 ) 1 8 : 7 < 5 0 9 : : A I D - S M J 8 8 2 > 3 . 0 . C O ; 2 - Z ;   T E E C E   D J ,   1 9 8 6 ,   R E S   P O L I C Y ,   V 1 5 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 6 ) 9 0 0 2 7 - 2 ;   T o r k z a d e h   G ,   1 9 9 9 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 7 ,   P 3 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 8 ) 0 0 0 4 9 - 8 ;   T R E A C Y   M ,   1 9 9 3 ,   H A R V A R D   B U S   R E V ,   V 7 1 ,   P 8 4 ;   T r i p s a s   M ,   2 0 0 0 ,   S T R A T E G I C   M A N A G E   J ,   V 2 1 ,   P 1 1 4 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 0 2 6 6 ( 2 0 0 0 1 0 / 1 1 ) 2 1 : 1 0 / 1 1 < 1 1 4 7 : : A I D - S M J 1 2 8 > 3 . 0 . C O ; 2 - R ;   T r i p s a s   M ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E   J ,   V 1 8 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 7 0 7 ) 1 8 : 1 + < 1 1 9 : : A I D - S M J 9 2 1 > 3 . 3 . C O ; 2 - S ;   T Y R E   M J ,   1 9 9 4 ,   O R G A N   S C I ,   V 5 ,   P 9 8 ,   D O I   1 0 . 1 2 8 7 / o r s c . 5 . 1 . 9 8 ;   V e n k a t r a m a n   N ,   1 9 9 8 ,   S L O A N   M A N A G E   R E V ,   V 4 0 ,   P 3 3 ;   V e r y z e r   R W ,   1 9 9 8 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 5 ,   P 3 0 4 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 5 8 8 5 . 1 5 4 0 3 0 4 ;   v o n   H i p p e l   E ,   1 9 9 8 ,   M A N A G E   S C I ,   V 4 4 ,   P 6 2 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 4 . 5 . 6 2 9 ;   v o n   H i p p e l   E ,   2 0 0 3 ,   O R G A N   S C I ,   V 1 4 ,   P 2 0 9 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 4 . 2 . 2 0 9 . 1 4 9 9 2 ;   v o n   H i p p e l   E ,   2 0 0 1 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 8 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 7 3 7 - 6 7 8 2 ( 0 1 ) 0 0 0 9 0 - X ;   V O N H I P P E L   E ,   1 9 9 4 ,   M A N A G E   S C I ,   V 4 0 ,   P 4 2 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 0 . 4 . 4 2 9 ;   v o n   H i p p e l   E ,   1 9 7 6 ,   R E S   P O L I C Y ,   V 5 ,   P 2 1 2 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 7 6 ) 9 0 0 2 8 - 7 ;   V o n   H i p p e l   E . ,   2 0 0 5 ,   D E M O C R A T I Z I N G   I N N O V A ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H . D . ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 6 ;   Y l i - R e n k o   H ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 5 8 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 8 3 ;   Z a h r a   S A ,   2 0 0 2 ,   S T R A T E G I C   M A N A G E   J ,   V 2 3 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 2 2 9 ;   Z a l t m a n   G ,   1 9 9 7 ,   J   M A R K E T I N G   R E S ,   V 3 4 ,   P 4 2 4 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 1 9 6 2 ;   Z h o u   K . Z . ,   2 0 0 5 ,   J   M A R K E T I N G ,   V 3 3 ,   P 8 9 7 	 1 6 4 	 4 4 	 4 6 	 1 6 	 1 3 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 4 8 - 7 3 3 3 	 1 8 7 3 - 7 6 2 5 	 	 R E S   P O L I C Y 	 R e s .   P o l i c y 	 O C T 	 2 0 1 2 	 4 1 	 8 	 	 	 	 	 1 2 8 3 	 1 2 9 5 	 	 1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 2 1 	 	 1 3 	 M a n a g e m e n t ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 0 1 3 O Y 	 W O S : 0 0 0 3 0 9 3 1 5 9 0 0 0 0 1 	 	 
 
 J 	 B o r n m a n n ,   L ;   M a r x ,   W ;   G a s p a r y a n ,   A Y ;   K i t a s ,   G 	 	 	 	 B o r n m a n n ,   L u t z ;   M a r x ,   W e r n e r ;   G a s p a r y a n ,   A r m e n   Y u r i ;   K i t a s ,   G e o r g e   D . 	 	 	 D i v e r s i t y ,   v a l u e   a n d   l i m i t a t i o n s   o f   t h e   j o u r n a l   i m p a c t   f a c t o r   a n d   a l t e r n a t i v e   m e t r i c s 	 R H E U M A T O L O G Y   I N T E R N A T I O N A L 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 B i b l i o m e t r i c s ;   P e r i o d i c a l s   a s   t o p i c ;   I m p a c t   f a c t o r ;   h - I n d e x ;   B i o m e d i c a l   j o u r n a l s ;   R h e u m a t o l o g y 	 A N G E W A N D T E - C H E M I E ;   C I T A T I O N - I N D E X ;   S C I E N C E ;   H I S T O R Y ;   Q U A L I T Y ;   E D I T O R S 	 T h e   h i g h l y   p o p u l a r   j o u r n a l   i m p a c t   f a c t o r   ( J I F )   i s   a n   a v e r a g e   m e a s u r e   o f   c i t a t i o n s   w i t h i n   1   y e a r   a f t e r   t h e   p u b l i c a t i o n   o f   a   j o u r n a l   a s   a   w h o l e   w i t h i n   t h e   t w o   p r e c e d i n g   y e a r s .   I t   i s   w i d e l y   u s e d   a s   a   p r o x y   o f   a   j o u r n a l ' s   q u a l i t y   a n d   s c i e n t i f i c   p r e s t i g e .   T h i s   a r t i c l e   d i s c u s s e s   m i s u s e s   o f   J I F   t o   a s s e s s   i m p a c t   o f   s e p a r a t e   j o u r n a l   a r t i c l e s   a n d   t h e   e f f e c t   o f   s e v e r a l   m a n u s c r i p t   v e r s i o n s   o n   J I F .   I t   a l s o   p r e s e n t s   s o m e   n e w e r   a l t e r n a t i v e   j o u r n a l   m e t r i c s   s u c h   a s   S C I m a g o   J o u r n a l   R a n k   a n d   t h e   h - i n d e x   a n d   a n a l y s e s   e x a m p l e s   o f   t h e i r   a p p l i c a t i o n   i n   s e v e r a l   s u b j e c t   c a t e g o r i e s . 	 [ G a s p a r y a n ,   A r m e n   Y u r i ;   K i t a s ,   G e o r g e   D . ]   D u d l e y   G r p   N H S   F d n   T r u s t ,   C l i n   R e s   U n i t ,   D e p t   R h e u m a t o l ,   R u s s e l l s   H a l l   H o s p ,   D u d l e y   D Y 1   2 H Q ,   W   M i d l a n d s ,   E n g l a n d ;   [ B o r n m a n n ,   L u t z ]   M a x   P l a n c k   G e s e l l ,   M u n i c h ,   G e r m a n y ;   [ M a r x ,   W e r n e r ]   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   S t u t t g a r t ,   G e r m a n y ;   [ K i t a s ,   G e o r g e   D . ]   U n i v   M a n c h e s t e r ,   A r t h r i t   R e s   U K   E p i d e m i o l   U n i t ,   M a n c h e s t e r ,   L a n c s ,   E n g l a n d 	 G a s p a r y a n ,   A Y   ( r e p r i n t   a u t h o r ) ,   D u d l e y   G r p   N H S   F d n   T r u s t ,   C l i n   R e s   U n i t ,   D e p t   R h e u m a t o l ,   R u s s e l l s   H a l l   H o s p ,   D u d l e y   D Y 1   2 H Q ,   W   M i d l a n d s ,   E n g l a n d . 	 a . g a s p a r y a n @ g m a i l . c o m 	 M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 ;   B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   G a s p a r y a n ,   A r m e n / C - 9 1 7 4 - 2 0 0 9 ;   	 M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 ;   B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   G a s p a r y a n ,   A r m e n / 0 0 0 0 - 0 0 0 1 - 8 7 4 9 - 6 0 1 8 ;   K I T A S ,   G E O R G E / 0 0 0 0 - 0 0 0 2 - 0 8 2 8 - 6 1 7 6 	 	 	 A d l e r   R ,   2 0 0 9 ,   S T A T   S C I ,   V 2 4 ,   P 1 ,   D O I   1 0 . 1 2 1 4 / 0 9 - S T S 2 8 5 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 3 6 - x ;   B e r g s t r o m   C T ,   2 0 0 8 ,   J   N E U R O S C I ,   V 2 8 ,   P 1 1 4 3 3 ,   D O I   1 0 . 1 5 2 3 / J N E U R O S C I . 0 0 0 3 - 0 8 . 2 0 0 8 ;   B O R N M A N N   L . ,   2 0 1 1 ,   E U R O P E A N   S C I   E D I T I N G ,   V 3 7 ,   P 7 7 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 0 7 ,   C H I M I A ,   V 6 1 ,   P 1 0 4 ,   D O I   1 0 . 2 5 3 3 / c h i m i a . 2 0 0 7 . 1 0 4 ;   B o r n m a n n   L ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 5 0 - 4 ;   B o r n m a n n   L ,   2 0 0 9 ,   E U R   J   O R G   C H E M ,   P 1 4 7 1 ,   D O I   1 0 . 1 0 0 2 / e j o c . 2 0 0 8 0 1 2 4 3 ;   B o r n m a n n   L ,   2 0 0 9 ,   E M B O   R E P ,   V 1 0 ,   P 2 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 0 8 . 2 3 3 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B r o w n   H ,   2 0 0 7 ,   B R I T   M E D   J ,   V 3 3 4 ,   P 5 6 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 9 1 4 2 . 4 5 4 0 8 6 . A D ;   C a r a m e l l i   B . ,   2 0 1 0 ,   E U R O P E A N   S C I   E D I T I N G ,   V 3 6 ,   P 3 8 ;   C h e n   M ,   2 0 1 1 ,   R H E U M A T O L   I N T ,   V 3 1 ,   P 1 6 1 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 9 6 - 0 1 0 - 1 5 4 1 - z ;   D i m i t r o v   J D ,   2 0 1 0 ,   N A T U R E ,   V 4 6 6 ,   P 1 7 9 ,   D O I   1 0 . 1 0 3 8 / 4 6 6 1 7 9 b ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 2 6 2 3 ,   D O I   1 0 . 1 0 9 6 / f j . 0 8 - 1 0 7 9 3 8 ;   F e r s h t   A ,   2 0 0 9 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 6 ,   P 6 8 8 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 9 0 3 3 0 7 1 0 6 ;   F r e y   B S ,   2 0 1 0 ,   J   A P P L   E C O N ,   V 1 3 ,   P 1 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a s p a r y a n   A Y ,   2 0 1 1 ,   C R O A T   M E D   J ,   V 5 2 ,   P 4 2 3 ,   D O I   1 0 . 3 3 2 5 / c m j . 2 0 1 1 . 5 2 . 4 2 3 ;   G a s p a r y a n   A r m e n   Y u r i ,   2 0 1 0 ,   I n f l a m m a t i o n   &   A l l e r g y   D r u g   T a r g e t s ,   V 9 ,   P 2 ;   G a s p a r y a n   A Y ,   2 0 0 9 ,   A R C H   M E D   S C I ,   V 5 ,   P 1 ;   G a s p a r y a n   A Y ,   2 0 1 1 ,   E U R O P E A N   S C I   E D I T I N G ,   V 3 7 ,   P 6 6 ;   G o l u b i c   R ,   2 0 0 8 ,   S C I   E N G   E T H I C S ,   V 1 4 ,   P 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 9 4 8 - 0 0 7 - 9 0 4 4 - 3 ;   G o n z a l e z   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 2 4 ;   G o n z a l e z - P e r e i r a   B ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 2 ;   H a b i b z a d e h   F ,   2 0 0 8 ,   A R C H   I R A N   M E D ,   V 1 1 ,   P 4 5 3 ,   D O I   0 8 1 1 4 / A I M . 0 0 1 8 ;   H a b i b z a d e h   F ,   2 0 1 1 ,   C R O A T   M E D   J ,   V 5 2 ,   P 2 1 2 ,   D O I   1 0 . 3 3 2 5 / c m j . 2 0 1 1 . 5 2 . 2 1 2 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o e f f e l   C ,   1 9 9 8 ,   A L L E R G Y ,   V 5 3 ,   P 1 2 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 8 . t b 0 3 8 4 8 . x ;   K a n t e r   S L ,   2 0 0 9 ,   A C A D   M E D ,   V 8 4 ,   P 1 1 6 9 ,   D O I   1 0 . 1 0 9 7 / A C M . 0 b 0 1 3 e 3 1 8 1 b 7 f f a 6 ;   K o v a c i c   N ,   2 0 0 8 ,   C R O A T   M E D   J ,   V 4 9 ,   P 1 2 ,   D O I   1 0 . 3 3 2 5 / c m j . 2 0 0 8 . 1 . 1 2 ;   K r e l l   F T ,   2 0 1 0 ,   L E A R N   P U B L ,   V 2 3 ,   P 5 9 ,   D O I   1 0 . 1 0 8 7 / 2 0 1 0 0 1 1 0 ;   L i c i n i o   J ,   2 0 0 6 ,   M O L   P S Y C H I A T R ,   V 1 1 ,   P 3 2 4 ,   D O I   1 0 . 1 0 3 8 / s j . m p . 4 0 0 1 8 2 0 ;   M a r x   W ,   2 0 0 1 ,   A N G E W   C H E M   I N T   E D I T ,   V 4 0 ,   P 1 3 9 ,   D O I   1 0 . 1 0 0 2 / 1 5 2 1 - 3 7 7 3 ( 2 0 0 1 0 1 0 5 ) 4 0 : 1 < 1 3 9 : : A I D - A N I E 1 3 9 > 3 . 3 . C O ; 2 - W ;   M a t h u r   V i j a y   P r a k a s h ,   2 0 0 9 ,   I n d i a n   J   D e n t   R e s ,   V 2 0 ,   P 8 1 ;   M e t z e   K ,   2 0 1 0 ,   C L I N I C S ,   V 6 5 ,   P 9 3 7 ,   D O I   1 0 . 1 5 9 0 / S 1 8 0 7 - 5 9 3 2 2 0 1 0 0 0 1 0 0 0 0 0 2 ;   M o e d   H F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 7 ;   O s w a l d   A J ,   2 0 0 7 ,   E C O N O M I C A ,   V 7 4 ,   P 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 3 5 . 2 0 0 6 . 0 0 5 7 5 . x ;   P o s c h l   U ,   2 0 0 4 ,   L E A R N   P U B L ,   V 1 7 ,   P 1 0 5 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 4 3 2 2 9 5 8 4 8 1 ;   R e t z e r   V ,   2 0 0 9 ,   B A S I C   A P P L   E C O L ,   V 1 0 ,   P 3 9 3 ,   D O I   1 0 . 1 0 1 6 / j . b a a e . 2 0 0 8 . 0 9 . 0 0 1 ;   R i e d e r   S ,   2 0 1 0 ,   L A N G E N B E C K   A R C H   S U R G ,   V 3 9 5 ,   p S 5 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 2 3 - 0 1 0 - 0 6 2 3 - 4 ;   R i z k a l l a h   J ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 0 2 0 4 ;   R o s s n e r   M ,   2 0 0 8 ,   J   E X P   M E D ,   V 2 0 5 ,   P 2 6 0 ,   D O I   1 0 . 1 0 8 4 / j e m . 2 0 0 8 0 0 5 3 ;   R o s s n e r   M ,   2 0 0 7 ,   J   C E L L   B I O L ,   V 1 7 9 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 8 3 / j c b . 2 0 0 7 1 1 1 4 0 ;   S a t y a n a r a y a n a   K ,   2 0 1 0 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 4 ,   P 1 9 7 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   T o g i a   A . ,   2 0 0 6 ,   I N T   J   E D U C   R E S ,   V 4 5 ,   P 3 6 2 ,   D O I   D O I   1 0 . 1 0 1 6 / J . I J E R . 2 0 0 7 . 0 2 . 0 0 1 ;   T o m l i n s o n   S ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 6 3 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 3 5 . 6 3 6 ;   [ A n o n y m o u s ] ,   2 0 0 7 ,   E U R   S C I   E D ,   V 3 3 ,   P 9 9 	 4 9 	 4 4 	 4 4 	 7 	 4 7 	 S P R I N G E R   H E I D E L B E R G 	 H E I D E L B E R G 	 T I E R G A R T E N S T R A S S E   1 7 ,   D - 6 9 1 2 1   H E I D E L B E R G ,   G E R M A N Y 	 0 1 7 2 - 8 1 7 2 	 	 	 R H E U M A T O L   I N T 	 R h e u m a t o l .   I n t . 	 J U L 	 2 0 1 2 	 3 2 	 7 	 	 	 	 	 1 8 6 1 	 1 8 6 7 	 	 1 0 . 1 0 0 7 / s 0 0 2 9 6 - 0 1 1 - 2 2 7 6 - 1 	 	 7 	 R h e u m a t o l o g y 	 R h e u m a t o l o g y 	 9 6 4 F Z 	 W O S : 0 0 0 3 0 5 6 8 0 7 0 0 0 0 1 	 2 2 1 9 3 2 1 9 	 
 
 J 	 K a j i k a w a ,   Y ;   T a k e d a ,   Y 	 	 	 	 K a j i k a w a ,   Y u y a ;   T a k e d a ,   Y o s h i y u k i 	 	 	 S t r u c t u r e   o f   r e s e a r c h   o n   b i o m a s s   a n d   b i o - f u e l s :   A   c i t a t i o n - b a s e d   a p p r o a c h 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i o m a s s ;   B i o - f u e l ;   C i t a t i o n   n e t w o r k ;   B i b l i o m e t r i c s ;   S u s t a i n a b l e   e n e r g y ;   R e n e w a b l e   e n e r g y 	 D A T A B A S E   T O M O G R A P H Y ;   B I O D I E S E L   P R O D U C T I O N ;   E T H A N O L - P R O D U C T I O N ;   E N E R G Y   C R O P S ;   B I O F U E L S ;   B I B L I O M E T R I C S ;   T E C H N O L O G Y ;   R O A D M A P S ;   S C I E N C E ;   F U T U R E 	 B i o m a s s   a n d   b i o - f u e l s   h a v e   g a i n e d   a   g r o w i n g   i n t e r e s t   a s   s u s t a i n a b l e   a n d   r e n e w a b l e   e n e r g y .   I n   t h i s   p a p e r ,   w e   p e r f o r m   a   c i t a t i o n   n e t w o r k   a n a l y s i s   o f   s c i e n t i f i c   p u b l i c a t i o n s   t o   k n o w   t h e   c u r r e n t   s t r u c t u r e   o f   b i o m a s s   a n d   b i o - f u e l   r e s e a r c h .   B y   c l u s t e r i n g   a n d   v i s u a l i z i n g   t h e   n e t w o r k ,   w e   r e v e a l e d   t h e i r   t a x o n o m i c   s t r u c t u r e .   E m e r g i n g   t e c h n o l o g i e s   a r e   d e t e c t e d   b y   a n a l y z i n g   t h e   a v e r a g e   p u b l i c a t i o n   y e a r   o f   c l u s t e r s .   A c c o r d i n g   t o   t h e   r e s u l t s ,   b i o - d i e s e l   a n d   h y d r o g e n   p r o d u c t i o n   a r e   t h e   m o s t   r a p i d l y   d e v e l o p i n g   d o m a i n s   a m o n g   b i o m a s s   b i o - f u e l   r e s e a r c h e s .   W e   a l s o   a n a l y z e d   t h e   p o s i t i o n   o f   e a c h   c l u s t e r   i n   t h e   g l o b a l   s t r u c t u r e   o f   r e s e a r c h .   B y   u s i n g   c i t a t i o n   c o u n t s   w i t h i n   a n d   o u t   o f   t h e   c l u s t e r ,   w e   c a t e g o r i z e d   e a c h   c l u s t e r   i n t o   t h e   f o l l o w i n g   f o u r   c a t e g o r i e s :   ( I )   t o p i c   s p e c i f i c ;   ( I I )   d o m a i n   s p e c i f i c ;   ( I I I )   g l o b a l   l i n k ;   a n d   ( I V )   s p e c i f i c   &   g l o b a l .   F o r   r e s e a r c h   d o m a i n s   o f   c a t e g o r y   ( I I I )   o r   ( I V ) ,   i t   i s   d i f f i c u l t   t h a t   s i n g l e   t e c h n o l o g y   o v e r c o m e s   t h e   c u r r e n t   l i m i t a t i o n   o f   b i o - e n e r g y   p r o d u c t i o n s .   R e s e a r c h   o n   l i g n o c e l l u l o s e   f e e d s t o c k   i s   a   t y p i c a l   c a s e   w h e r e   k n o w l e d g e   f r o m   o t h e r   s c i e n t i f i c   d i s c i p l i n e s   i s   n e c e s s a r y .   ( c )   2 0 0 8   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ K a j i k a w a ,   Y u y a ;   T a k e d a ,   Y o s h i y u k i ]   U n i v   T o k y o ,   S c h   E n g n ,   I n s t   E n g n   I n n o v a t ,   B u n k y o   K u ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n 	 K a j i k a w a ,   Y   ( r e p r i n t   a u t h o r ) ,   U n i v   T o k y o ,   S c h   E n g n ,   I n s t   E n g n   I n n o v a t ,   B u n k y o   K u ,   2 - 1 1 - 1 6   Y a y o i ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n . 	 k a j i @ b i z - m o d e l . t . u - t o k y o . a c . j p 	 K a j i k a w a ,   Y u y a / C - 1 9 9 6 - 2 0 1 5 	 K a j i k a w a ,   Y u y a / 0 0 0 0 - 0 0 0 3 - 3 5 7 7 - 5 1 6 7 	 	 	 A d a i   A T ,   2 0 0 4 ,   J   M O L   B I O L ,   V 3 4 0 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j m b . 2 0 0 4 . 0 4 . 0 4 7 ;   B a s i r o n   Y ,   2 0 0 7 ,   E U R   J   L I P I D   S C I   T E C H ,   V 1 0 9 ,   P 2 8 9 ,   D O I   1 0 . 1 0 0 2 / e j l t . 2 0 0 6 0 0 2 2 3 ;   B e n d e r   M ,   1 9 9 9 ,   B I O R E S O U R C E   T E C H N O L ,   V 7 0 ,   P 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 0 - 8 5 2 4 ( 9 9 ) 0 0 0 0 9 - 7 ;   B r i d g w a t e r   T ,   2 0 0 6 ,   J   S C I   F O O D   A G R ,   V 8 6 ,   P 1 7 5 5 ,   D O I   1 0 . 1 0 0 2 / j s f a . 2 6 0 5 ;   C a r t e r   C ,   2 0 0 7 ,   E U R   J   L I P I D   S C I   T E C H ,   V 1 0 9 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 2 / e j l t . 2 0 0 6 0 0 2 5 6 ;   C h o m e t   E . ,   2 0 0 2 ,   N A T U R E ,   V 4 1 8 ,   P 9 2 8 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   C l e v e l a n d   C J ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 2 ,   P 1 7 4 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 1 2 . 5 7 8 1 . 1 7 4 6 ;   C o n n o r   D ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 2 ,   P 1 7 4 3 ;   D A L P E   R ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 5 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 4 ) 0 0 7 8 7 - X ;   D e l u c a   T H ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 2 ,   P 1 7 4 3 ;   D e m i r b a s   A ,   2 0 0 7 ,   P R O G   E N E R G   C O M B U S T ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . p e c s . 2 0 0 6 . 0 6 . 0 0 1 ;   D i j k e m a   G P J ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 1 . 0 0 1 ;   F a r r e l l   A E ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 1 ,   P 5 0 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 1 4 1 6 ;   G i a m p i e t r o   M ,   2 0 0 5 ,   C R I T   R E V   P L A N T   S C I ,   V 2 4 ,   P 3 6 5 ,   D O I   1 0 . 1 0 8 0 / 0 7 3 5 2 6 8 0 5 0 0 3 1 6 3 0 0 ;   H a g e n s   N ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 2 ,   P 1 7 4 6 ;   H a h n - H a g e r d a l   B ,   2 0 0 6 ,   T R E N D S   B I O T E C H N O L ,   V 2 4 ,   P 5 4 9 ,   D O I   1 0 . 1 0 1 6 / j . t i b t e c h . 2 0 0 6 . 1 0 . 0 0 4 ;   H a l l   D O ,   1 9 9 7 ,   F O R E S T   E C O L   M A N A G ,   V 9 1 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 1 1 2 7 ( 9 6 ) 0 3 8 8 3 - 2 ;   H a n s e n   A C ,   2 0 0 5 ,   B I O R E S O U R C E   T E C H N O L ,   V 9 6 ,   P 2 7 7 ,   D O I   1 0 . 1 0 1 6 / j . b i o r t e c h . 2 0 0 4 . 0 4 . 0 0 7 ;   H e r r e r a   S ,   2 0 0 6 ,   N A T   B I O T E C H N O L ,   V 2 4 ,   P 7 5 5 ,   D O I   1 0 . 1 0 3 8 / n b t 0 7 0 6 - 7 5 5 ;   H i l l   J ,   2 0 0 7 ,   A G R O N   S U S T A I N   D E V ,   V 2 7 ,   P 1 ,   D O I   1 0 . 1 0 5 1 / a g r o : 2 0 0 7 0 0 6 ;   I E A   ( I n t e r n a t i o n a l   E n e r g y   A g e n c y ) ,   2 0 0 4 ,   B I O F   T R A N S P   I N T   P E R S ;   I E A ,   2 0 0 7 ,   B I O E N   P R O J   D E V   B I O M ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 7 7 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 5 . 0 0 5 ;   K a m m   B ,   2 0 0 4 ,   A P P L   M I C R O B I O L   B I O T ,   V 6 4 ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 5 3 - 0 0 3 - 1 5 3 7 - 7 ;   K i m   S ,   2 0 0 4 ,   B I O M A S S   B I O E N E R G ,   V 2 6 ,   P 3 6 1 ,   D O I   1 0 . 1 0 1 6 / j . b i o m b i o e . 2 0 0 3 . 0 8 . 0 0 2 ;   K o o n i n   S E ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 1 ,   P 4 3 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 4 8 8 6 ;   K o s t o f f   R N ,   2 0 0 5 ,   E N E R G Y ,   V 3 0 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 5 8 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K o s t o f f   R . N . ,   2 0 0 4 ,   A D A 4 2 1 7 8 9   D T I C   N A T   T ;   M a   F R ,   1 9 9 9 ,   B I O R E S O U R C E   T E C H N O L ,   V 7 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 0 - 8 5 2 4 ( 9 9 ) 0 0 0 2 5 - 5 ;   M a r c h e t t i   J M ,   2 0 0 7 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 1 ,   P 1 3 0 0 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 0 5 . 0 8 . 0 0 6 ;   M i e l e n z   J R ,   2 0 0 6 ,   C U R R   O P I N   B I O T E C H ,   V 1 7 ,   P 3 0 3 ,   D O I   1 0 . 1 0 1 6 / j . c o p b i o . 2 0 0 6 . 0 5 . 0 0 9 ;   M i e l e n z   J R ,   2 0 0 1 ,   C U R R   O P I N   M I C R O B I O L ,   V 4 ,   P 3 2 4 ,   D O I   1 0 . 1 0 1 6 / S 1 3 6 9 - 5 2 7 4 ( 0 0 ) 0 0 2 1 1 - 3 ;   M o r r i s   D ,   2 0 0 6 ,   J   S C I   F O O D   A G R ,   V 8 6 ,   P 1 7 4 3 ,   D O I   1 0 . 1 0 0 2 / j s f a . 2 5 6 1 ;   P a t z e k   T W ,   2 0 0 5 ,   C R I T   R E V   P L A N T   S C I ,   V 2 4 ,   P 3 2 7 ,   D O I   1 0 . 1 0 8 0 / 0 7 3 5 2 6 8 0 5 0 0 3 1 6 0 2 9 ;   P a t z e k   T W ,   2 0 0 4 ,   C R I T   R E V   P L A N T   S C I ,   V 2 3 ,   P 5 1 9 ,   D O I   1 0 . 1 0 8 0 / 0 7 3 5 2 6 8 0 4 9 0 8 8 6 9 0 5 ;   P e n n e r   S S ,   2 0 0 6 ,   E N E R G Y ,   V 3 1 ,   P 3 3 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 6 0 ;   P e t r u s   L ,   2 0 0 6 ,   G R E E N   C H E M ,   V 8 ,   P 8 6 1 ,   D O I   1 0 . 1 0 3 9 / b 6 0 5 0 3 6 k ;   R a g a u s k a s   A J ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 1 ,   P 4 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 1 4 7 3 6 ;   R a s s - H a n s e n   J ,   2 0 0 7 ,   J   C H E M   T E C H N O L   B I O T ,   V 8 2 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 2 / j c t b . 1 6 6 5 ;   S c h m i d t   L D ,   2 0 0 7 ,   N A T U R E ,   V 4 4 7 ,   P 9 1 4 ,   D O I   1 0 . 1 0 3 8 / 4 4 7 9 1 4 a ;   S c h u b e r t   C ,   2 0 0 6 ,   N A T   B I O T E C H N O L ,   V 2 4 ,   P 7 7 7 ,   D O I   1 0 . 1 0 3 8 / n b t 0 7 0 6 - 7 7 7 ;   S i m s   R E H ,   2 0 0 6 ,   G L O B A L   C H A N G E   B I O L ,   V 1 2 ,   P 2 0 5 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 4 8 6 . 2 0 0 6 . 0 1 1 6 3 . x ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   S t i c k l e n   M ,   2 0 0 6 ,   C U R R   O P I N   B I O T E C H ,   V 1 7 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / j . c o p b i o . 2 0 0 6 . 0 5 . 0 0 3 ;   T H O M A S   S M ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 3 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 9 2 0 ;   T I J S S E N   R J W ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 2 5 - Y ;   U l g i a t i   S ,   2 0 0 1 ,   C R I T   R E V   P L A N T   S C I ,   V 2 0 ,   P 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 7 3 5 - 2 6 8 9 ( 0 1 ) 8 0 0 1 3 - 7 ;   V e r t e s   A A ,   2 0 0 6 ,   N A T   B I O T E C H N O L ,   V 2 4 ,   P 7 6 1 ,   D O I   1 0 . 1 0 3 8 / n b t 0 7 0 6 - 7 6 1 ;   W i s e r   R .   H . ,   1 9 9 8 ,   R e n e w a b l e   &   S u s t a i n a b l e   E n e r g y   R e v i e w s ,   V 2 ,   P 3 6 1 ,   D O I   1 0 . 1 0 1 6 / S 1 3 6 4 - 0 3 2 1 ( 9 8 ) 0 0 0 0 7 - 0 	 5 3 	 4 4 	 4 5 	 3 	 3 1 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 8 	 7 5 	 9 	 	 	 	 	 1 3 4 9 	 1 3 5 9 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 4 . 0 0 7 	 	 1 1 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 3 8 5 L G 	 W O S : 0 0 0 2 6 1 8 1 5 1 0 0 0 0 1 	 	 
 
 J 	 V a l d e r a s ,   J M ;   M e n d i v i l ,   J ;   P a r a d a ,   A ;   L o s a d a - Y a n e z ,   M ;   A l o n s o ,   J 	 	 	 	 V a l d e r a s ,   J o s e   M . ;   M e n d i v i l ,   J o a n ;   P a r a d a ,   A n t o n i ;   L o s a d a - Y a n e z ,   M a r i n a ;   A l o n s o ,   J o r d i 	 	 	 D e v e l o p m e n t   o f   a   g e o g r a p h i c   f i l t e r   f o r   P u b M e d   t o   i d e n t i f y   s t u d i e s   p e r f o r m e d   i n   S p a i n 	 R E V I S T A   E S P A N O L A   D E   C A R D I O L O G I A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 i n f o r m a t i o n   s t o r a g e   s t a n d a r d s ;   i n f o r m a t i o n   r e t r i e v a l   s t a n d a r d s ;   b i b l i o m e t r i c s ;   d a t a b a s e s . ;   b i b l i o g r a p h i c   s t a n d a r d s ;   o r g a n i z a t i o n a l   a f f i l i a t i o n . ;   p u b l i c a t i o n   s t a n d a r d s ;   S p a i n ;   e v i d e n c e - b a s e d   m e d i c i n e ;   i n f o r m a t i o n   s y s t e m s 	 S P A N I S H   S C I E N T I F I C   P R O D U C T I O N ;   A C U T E   M Y O C A R D I A L - I N F A R C T I O N ;   I N F O R M A T I O N - R E T R I E V A L   T E C H N O L O G Y ;   C L I N I C A L - T R I A L S ;   M E D L I N E ;   A R T I C L E S ;   Q U A L I T Y ;   I M P A C T ;   P U B L I C A T I O N S ;   B I O M E D I C I N E 	 I n t r o d u c t i o n   a n d   o b j e c t i v e s .   T h e   i n c r e a s i n g   s i z e   o f   t h e   P u b M e d   ( M e d l i n e )   d a t a b a s e   h a s   m a d e   i t   n e c e s s a r y   t o   d e v e l o p   s p e c i f i c   t o o l s   f o r   i n f o r m a t i o n   r e t r i e v a l   ( i . e . ,   f i l t e r s ) .   T h e   c u r r e n t   c o n f i g u r a t i o n   o f   t h e   L i m i t s   o p t i o n   i n   P u b M e d   d o e s   n o t   e n a b l e   s e a r c h e s   t o   b e   l i m i t e d   a c c o r d i n g   t o   g e o g r a p h i c   c r i t e r i a .   O u r   o b j e c t i v e s ,   t h e r e f o r e ,   w e r e   a )   t o   d e v e l o p   a   g e o g r a p h i c   f i l t e r   f o r   t h e   r e t r i e v a l   f r o m   P u b M e d   o f   s t u d i e s   p e r f o r m e d   i n   t h e   S p a n i s h   p o p u l a t i o n ,   a n d   b )   t o   a s s e s s   i t s   p e r f o r m a n c e .   M e t h o d s .   A   s e c o n d - g e n e r a t i o n   f i l t e r   w a s   c o n s t r u c t e d   b y   r e v i e w i n g   p r e v i o u s   s t r a t e g i e s .   I t   i n v o l v e d   t h e   s e l e c t i o n   o f   t h r e e   t y p e s   o f   r e c o r d   t h a t   i n c l u d e d :   a )   t h e   t e r m   S p a i n   i n   d i f f e r e n t   l a n g u a g e s ;   b )   S p a n i s h   p l a c e   n a m e s   ( i . e . ,   m a i n l y   t h o s e   o f   a u t o n o m o u s   r e g i o n s   a n d   p r o v i n c e s ) ,   a n d   c )   a c r o n y m s   f o r   h e a l t h   s e r v i c e s   i n   a u t o n o m o u s   r e g i o n s .   T h e   p e r f o r m a n c e   o f   t h e   f i l t e r   ( i . e . ,   i t s   s e n s i t i v i t y   a n d   s p e c i f i c i t y )   w a s   a s s e s s e d   i n   a   r e p r e s e n t a t i v e   s a m p l e   ( i . e . ,   c l i n i c a l   t r i a l s   i n d e x e d   i n   P u b M e d   u n d e r   t h e   M e S H   t e r m   M y o c a r d i a l   I n f a r c t i o n )   b y   c o m p a r i s o n   w i t h   t h e   r e s u l t s   o f   a   m a n u a l   s e a r c h   ( t h e   g o l d   s t a n d a r d ) .   I n   a d d i t i o n ,   t h e   f i l t e r ' s   p e r f o r m a n c e   w a s   a l s o   e v a l u a t e d   b y   c o m p a r i n g   i t   w i t h   a   s i m p l e   s e a r c h   f o r   t h e   t e r m   S p a i n [ a d ] .   R e s u l t s .   U s e   o f   t h e   f i l t e r   r e t r i e v e d   7 4   ( 9 8 . 7 % )   o f   t h e   r e l e v a n t   r e f e r e n c e s .   T h e   s e n s i t i v i t y   ( 8 8 . 1 % )   w a s   h i g h e r   t h a n   t h a t   o f   t h e   s i m p l e   s e a r c h   s t r a t e g y   ( 4 5 . 8 % ) ,   a n d   e x c e l l e n t   s p e c i f i c i t y   ( 1 0 0 % )   w a s   a c h i e v e d   i n   b o t h   c a s e s .   C o n c l u s i o n s .   A   g e o g r a p h i c   f i l t e r   h a s   b e e n   d e v e l o p e d   f o r   i d e n t i f y i n g   s t u d i e s   i n   P u b M e d   t h a t   i n v o l v e   t h e   S p a n i s h   p o p u l a t i o n . 	 I n s t   M u n i c i p a l   I n v e s t   M e d ,   U n i d a d   I n v e s t   S e r v   S a n i t a r i o s ,   E - 0 8 0 0 3   B a r c e l o n a ,   S p a i n ;   J o h n s   H o p k i n s   S c h   P u b l   H l t h ,   D e p t   H l t h   P o l i c y ,   B a l t i m o r e ,   M D   U S A ;   J o h n s   H o p k i n s   S c h   P u b l   H l t h ,   D e p t   M a n a g e m e n t ,   B a l t i m o r e ,   M D   U S A ;   A S P B ,   B a r c e l o n a ,   S p a i n ;   A A T R M ,   B a r c e l o n a ,   S p a i n ;   B i b l i o t e c a   U n i v   P o m p e u   F a b r a ,   B a r c e l o n a ,   S p a i n ;   U n i v   A u t o n o m a   B a r c e l o n a ,   E - 0 8 1 9 3   B a r c e l o n a ,   S p a i n 	 V a l d e r a s ,   J M   ( r e p r i n t   a u t h o r ) ,   I n s t   M u n i c i p a l   I n v e s t   M e d ,   U n i d a d   I n v e s t   S e r v   S a n i t a r i o s ,   D r   A i g u a d e r   8 8 , E d i f i c i   P R B B ,   E - 0 8 0 0 3   B a r c e l o n a ,   S p a i n . 	 j m v a l d e r a s @ i m i m . e s 	 A l o n s o ,   J o r d i / A - 5 5 1 4 - 2 0 1 0 ;   V a l d e r a s ,   J o s e / G - 7 9 6 7 - 2 0 1 4 ;   V a l d e r a s ,   J o s e / D - 4 3 8 5 - 2 0 1 5 	 A l o n s o ,   J o r d i / 0 0 0 0 - 0 0 0 1 - 8 6 2 7 - 9 6 3 6 ;   V a l d e r a s ,   J o s e / 0 0 0 0 - 0 0 0 2 - 9 2 9 9 - 1 5 5 5 ;   V a l d e r a s ,   J o s e / 0 0 0 0 - 0 0 0 2 - 9 2 9 9 - 1 5 5 5 	 	 	 A l l i s o n   J J ,   1 9 9 9 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 5 ,   P 2 8 1 ;   B a d o r   P ,   2 0 0 5 ,   P R E S S E   M E D ,   V 3 4 ,   P 6 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 7 5 5 - 4 9 8 2 ( 0 5 ) 8 4 0 0 0 - X ;   B A N O S   J E ,   1 9 9 4 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 2 ,   P 4 4 1 ;   B A R E N Y S   M ,   1 9 9 2 ,   M E D   C L I N - B A R C E L O N A ,   V 9 9 ,   P 9 ;   B r o t o n s   C ,   2 0 0 2 ,   M E D   C L I N - B A R C E L O N A ,   V 1 1 9 ,   P 9 ;   C a m i   J ,   2 0 0 5 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 4 ,   P 9 3 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 0 8 6 8 ;   C a m p b e l l   D .   T . ,   1 9 8 6 ,   N E W   D I R E C T I O N S   P R O G R ,   V 3 1 ,   P 6 7 ,   D O I   D O I   1 0 . 1 0 0 2 / E V . 1 4 3 4 ;   C A M P B E L L   D . T ,   1 9 8 6 ,   A D V   Q U A S I E X P E R I M E N T A ,   P 6 7 ;   C a r d o z o   L ,   1 9 9 9 ,   J   H e a l t h c   Q u a l ,   V 2 1 ,   P 1 2 ;   C l u z e a u   F ,   2 0 0 3 ,   Q U A L   S A F   H E A L T H   C A R E ,   V 1 2 ,   P 1 8 ;   D r a z e n   J M ,   2 0 0 4 ,   N E W   E N G L   J   M E D ,   V 3 5 1 ,   P 1 3 4 3 ,   D O I   1 0 . 1 0 5 6 / N E J M e 0 4 8 2 6 0 ;   E s c u d e r o   G o m e z   C r i s t i n a ,   2 0 0 5 ,   M e d   C l i n   ( B a r c ) ,   V 1 2 5 ,   P 3 2 9 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 8 7 7 5 ;   E v e r y   N R ,   2 0 0 0 ,   C I R C U L A T I O N ,   V 1 0 1 ,   P 4 6 1 ;   F e r n a n d e z   E ,   2 0 0 3 ,   L A N C E T ,   V 3 6 1 ,   P 3 5 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 2 3 5 6 - 2 ;   G r a d   R M ,   2 0 0 5 ,   J   E V A L   C L I N   P R A C T ,   V 1 1 ,   P 5 7 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 5 3 . 2 0 0 5 . 0 0 5 9 4 . x ;   G U A R D I O L A   E ,   1 9 9 2 ,   M E D   C L I N - B A R C E L O N A ,   V 9 9 ,   P 7 9 5 ;   G U Y A T T   G ,   1 9 9 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 8 ,   P 2 4 2 0 ;   G U Y A T T   G ,   2 0 0 2 ,   U S E R S   G U I D E S   E S S E N T I ;   H a y n e s   R B ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 0 ,   P 1 1 7 9 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 4 4 6 . 4 9 8 5 4 2 . 8 F ;   * I   I N F   S A N   M I N   S A N ,   1 9 9 1 ,   M O R T   C A U S   M U E R T   1 9 9 1 ;   J e n k i n s   M i c h e l l e ,   2 0 0 4 ,   H e a l t h   I n f o   L i b r   J ,   V 2 1 ,   P 1 4 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 1 - 1 8 4 2 . 2 0 0 4 . 0 0 5 1 1 . x ;   J i m e n e z - C o n t r e r a s   E ,   2 0 0 2 ,   N A T U R E ,   V 4 1 7 ,   P 8 9 8 ,   D O I   1 0 . 1 0 3 8 / 4 1 7 8 9 8 b ;   J u n i   P ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 4 2 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 0 3 . 4 2 ;   K a g o l o v s k y   Y ,   2 0 0 3 ,   J   M E D   S Y S T ,   V 2 7 ,   P 4 0 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 6 0 3 7 0 4 6 8 0 ;   L o r i a   A ,   2 0 0 5 ,   J   M E D   L I B R   A S S O C ,   V 9 3 ,   P 3 8 1 ;   M a r t i   J ,   1 9 9 9 ,   M E D   C L I N - B A R C E L O N A ,   V 1 1 2 ,   P 2 8 ;   M e l g a r e j o - M o r e n o   A ,   2 0 0 1 ,   C L I N   C A R D I O L ,   V 2 4 ,   P 3 7 1 ;   M E R L I N I   P A ,   1 9 9 5 ,   J   A M   C O L L   C A R D I O L ,   V 2 5 ,   P 2 0 3 ,   D O I   1 0 . 1 0 1 6 / 0 7 3 5 - 1 0 9 7 ( 9 4 ) 0 0 3 6 0 - 3 ;   M i g u e l - D a s i t   A ,   2 0 0 4 ,   R E V   E S P   C A R D I O L ,   V 5 7 ,   P 8 0 6 ,   D O I   1 0 . 1 0 1 6 / S 1 8 8 5 - 5 8 5 7 ( 0 6 ) 6 0 6 4 5 - 2 ;   M o r c i l l o   C ,   2 0 0 5 ,   R E V   E S P   C A R D I O L ,   V 5 8 ,   P 6 1 8 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 6 4 1 3 ;   * N A T   L I B   M E D   U S ,   2 0 0 5 ,   M E D L   I N T ;   P e s t a n a   A ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 5 0 6 ;   P l u y e   P ,   2 0 0 5 ,   I N T   J   M E D   I N F O R M ,   V 7 4 ,   P 7 4 5 ,   D O I   1 0 . 1 0 1 6 / j . i j m e d i n f . 2 0 0 5 . 0 5 . 0 0 4 ;   R i n c o n   J M R ,   2 0 0 1 ,   M E D   C L I N - B A R C E L O N A ,   V 1 1 7 ,   P 6 4 5 ;   R o s s e l l i   D ,   1 9 9 9 ,   L A N C E T ,   V 3 5 4 ,   P 5 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 7 5 5 5 5 - 0 ;   R o t h m a n   K ,   1 9 9 8 ,   M O D E R N   E P I D E M I O L O G Y ;   R o t h w e l l   P M ,   2 0 0 5 ,   L A N C E T ,   V 3 6 5 ,   P 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 4 ) 1 7 6 7 0 - 8 ;   R u i z - P e r e z   R ,   2 0 0 2 ,   J   M E D   L I B R   A S S O C ,   V 9 0 ,   P 4 1 1 ;   S a m p s o n   M a r g a r e t ,   2 0 0 6 ,   B M C   M e d   R e s   M e t h o d o l ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 6 - 3 3 ;   S a n s   S ,   2 0 0 5 ,   E U R   H E A R T   J ,   V 2 6 ,   P 5 0 5 ,   D O I   1 0 . 1 0 9 3 / e u r h e a r t j / e h i 0 6 8 ;   S c h a t t n e r   A ,   2 0 0 3 ,   Q J M - I N T   J   M E D ,   V 9 6 ,   P 1 ,   D O I   1 0 . 1 0 9 3 / q j m e d / h c g 0 0 1 ;   S e z e r   O ,   2 0 0 0 ,   L A N C E T ,   V 3 5 5 ,   P 1 2 8 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 7 4 7 1 5 - 2 ;   T a k e i   N ,   1 9 9 9 ,   L A N C E T ,   V 3 5 4 ,   P 5 1 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 7 5 5 5 4 - 9 ;   T a p p i n   D M ,   2 0 0 5 ,   B M J - B R I T   M E D   J ,   V 3 3 1 ,   P 3 7 3 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 3 1 . 7 5 1 3 . 3 7 3 ;   * T H O M P S   R E S ,   2 0 0 2 ,   R E F   M A N   P R O F   E D   V E R S ;   T u t a r e l   O k t a y ,   2 0 0 2 ,   B M C   M e d   E d u c ,   V 2 ,   P 3 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 2 0 - 2 - 3 ;   V A R O N A   F J C ,   2 0 0 2 ,   A N   M E D   I N T E R N A ,   V 1 9 ,   P 1 5 2 	 4 7 	 4 4 	 5 5 	 3 	 1 0 	 E D I C I O N E S   D O Y M A   S / L 	 B A R C E L O N A 	 T R A V   D E   G R A C I A   1 7 - 2 1 ,   0 8 0 2 1   B A R C E L O N A ,   S P A I N 	 0 3 0 0 - 8 9 3 2 	 	 	 R E V   E S P   C A R D I O L 	 R e v .   E s p .   C a r d i o l . 	 D E C 	 2 0 0 6 	 5 9 	 1 2 	 	 	 	 	 1 2 4 4 	 1 2 5 1 	 	 1 0 . 1 1 5 7 / 1 3 0 9 6 5 9 2 	 	 8 	 C a r d i a c   &   C a r d i o v a s c u l a r   S y s t e m s 	 C a r d i o v a s c u l a r   S y s t e m   &   C a r d i o l o g y 	 1 2 0 Q E 	 W O S : 0 0 0 2 4 3 0 9 9 1 0 0 0 0 5 	 1 7 1 9 4 4 1 9 	 
 
 J 	 G u a n ,   J C ;   M a ,   N 	 	 	 	 G u a n ,   J C ;   M a ,   N 	 	 	 A   c o m p a r a t i v e   s t u d y   o f   r e s e a r c h   p e r f o r m a n c e   i n   c o m p u t e r   s c i e n c e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 L A S E R   R E S E A R C H ;   C I T A T I O N - I N D E X ;   I M P A C T   F A C T O R ;   I N D I C A T O R S ;   S C I E N T O M E T R I C S ;   J O U R N A L S ;   G R O W T H ;   C H I N A ;   I N D I A ;   B I B L I O M E T R I C S 	 T h e   p a p e r   c o m p a r e s   t h e   r e s e a r c h   p e r f o r m a n c e   i n   c o m p u t e r   s c i e n c e   o f   f o u r   m a j o r   W e s t e r n   c o u n t r i e s ,   I n d i a   a n d   C h i n a ,   b a s e d   o n   t h e   d a t a   a b s t r a c t e d   f r o m   I N S P E C   d a t a b a s e   d u r i n g   t h e   p e r i o d   1 9 9 3 - 2 0 0 2 .   A   t o t a l   o f   9 , 6 3 2   c o m p u t e r   s c i e n c e   p a p e r s   r e c o r d e d   i n   I N S P E C   d a t a b a s e   w e r e   u s e d   f o r   t h e   c o m p a r i s o n .   T h e   f i n d i n g s   i n d i c a t e   t h a t ,   o n   t h e   o n e   h a n d ,   t h e   n u m b e r   o f   p a p e r s   p r o d u c e d   i n   C h i n a   h a s   c o n s i d e r a b l y   i n c r e a s e d   i n   t h e   p a s t   f e w   y e a r s .   P a r t i c u l a r l y ,   i n   r e c e n t   y e a r s ,   C h i n a   o c c u p i e s   a   r e m a r k a b l e   h i g h   p o s i t i o n   i n   t e r m s   o f   c o u n t s   o f   p a p e r s   i n d e x e d   b y   t h e   I N S P E C   d a t a b a s e .   O n   t h e   o t h e r   h a n d ,   C h i n e s e   s c i e n t i s t s   p r e f e r r e d   t o   p u b l i s h   i n   d o m e s t i c   j o u r n a l s   a n d   p r o c e e d i n g s   a n d   s h a r e s   o f   S C I - p a p e r s   t o   t h e   t o t a l   j o u r n a l   p a p e r s   f o r   C h i n a   h a v e   s t i l l   r e m a i n e d   t h e   l o w e s t .   T h i s   i n d i c a t e s   t h a t   t h e   r e s e a r c h   a c t i v i t i e s   o f   C h i n e s e   s c i e n t i s t s   i n   c o m p u t e r   s c i e n c e   a r e   s t i l l   r a t h e r   " l o c a l "   a n d   s u f f e r   f r o m   a   l o w   i n t e r n a t i o n a l   v i s i b i l i t y .   V a r i o u s   s c i e n t o m e t r i c   i n d i c a t o r s ,   s u c h   a s   N o r m a l i z e d   I m p a c t   F a c t o r ,   r a t i o   o f   p a p e r s   i n   h i g h   q u a l i t y   j o u r n a l s   a r e   f u r t h e r   a d o p t e d   t o   a n a l y z e   r e s e a r c h   p e r f o r m a n c e   a n d   d i v e r s e   f i n d i n g   a r e   o b t a i n e d .   N e v e r t h e l e s s ,   f o r   t h e s e   s u r r o g a t e   i n d i c a t o r s ,   C h i n a   h a s   o p t i m i s t i c a l l y   a c h i e v e d   g r e a t   p r o g r e s s ,   c h a r a c t e r i z e d   w i t h   " l o w   l e v e l   o f   b e g i n n i n g   a n d   h i g h   s p e e d   o f   d e v e l o p i n g " .   T h e   p o l i c y   i m p l i c a t i o n   o f   t h e   f i n d i n g s   l i e s   i n   t h a t   C h i n a ,   a s   w e l l   a s   o t h e r   l e s s   d e v e l o p e d   c o u n t r i e s   i n   s c i e n c e ,   c a n   e a r n   r e l a t i v e   c o m p e t i t i v e   a d v a n t a g e s   i n   s o m e   n e w   e m e r g i n g   o r   y o u n g e r   d i s c i p l i n e s   s u c h   a s   c o m p u t e r   s c i e n c e   b y   p r o p e r l y   u s i n g   c a t c h - u p   s t r a t e g y . 	 B e i j i n g   U n i v   A e r o n a u t   &   A s t r o n a u t ,   S c h   M a n a g e m e n t ,   B e i j i n g   1 0 0 0 8 3 ,   P e o p l e s   R   C h i n a ;   T s i n g   H u a   U n i v ,   R e s   C t r   T e c h n o l   I n n o v a t ,   B e i j i n g   1 0 0 0 8 4 ,   P e o p l e s   R   C h i n a 	 G u a n ,   J C   ( r e p r i n t   a u t h o r ) ,   B e i j i n g   U n i v   A e r o n a u t   &   A s t r o n a u t ,   S c h   M a n a g e m e n t ,   B e i j i n g   1 0 0 0 8 3 ,   P e o p l e s   R   C h i n a . 	 g u a n j i a n c h @ s i n a . c o m 	 m a ,   n a n / B - 4 3 8 7 - 2 0 0 8 ;   M a ,   N i n a / C - 1 0 2 5 - 2 0 0 8 	 M a ,   N i n a / 0 0 0 0 - 0 0 0 2 - 2 5 0 9 - 3 6 4 0 	 	 	 A J I F E R U K E   I ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 4 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 0 0 ;   A R U N A C H A L A M   S ,   1 9 9 3 ,   C U R R   S C I   I N D I A ,   V 6 5 ,   P 8 0 9 ;   B o r d o n s   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 0 4 0 7 8 7 6 ;   B R A U N   T ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 0 0 1 6 0 0 1 0 7 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   C A R P E N T E R   M P ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 4 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 6 0 6 ;   E g g h e   L ,   2 0 0 2 ,   C A N   J   I N F O R M   L I B   S C I ,   V 2 7 ,   P 2 9 ;   F R A M E   J   D ,   1 9 7 7 ,   I n t e r c i e n c i a ,   V 2 ,   P 1 4 3 ;   F R A M E   J D ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 1 3 5 ;   G a r g   K C ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 4 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 0 8 ;   G a r g   K C ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 3 6 ;   G A R G   K C ,   1 9 9 2 ,   J   S C I   I N D   R E S   I N D I A ,   V 5 1 ,   P 3 2 9 ;   G a r g   K C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 5 0 9 2 0 3 6 5 ;   G a r g   K C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 1 5 ;   G A R G   K C ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 1 5 ;   G u a n   J C ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 3 3 0 3 . 2 5 2 9 8 . a e ;   * I N T   I N F   S E R V   P H Y S ,   E L   C O M P   C O N T R   D B   O L ;   I R V I N E   J ,   1 9 8 5 ,   N A T U R E ,   V 3 1 6 ,   P 5 8 7 ,   D O I   1 0 . 1 0 3 8 / 3 1 6 5 8 7 a 0 ;   * I S I ,   J   C I T A T I O N   R E P O R T ;   K a r k i   M M S ,   1 9 9 7 ,   J   C H E M   I N F   C O M P   S C I ,   V 3 7 ,   P 1 5 7 ,   D O I   1 0 . 1 0 2 1 / c i 9 6 0 0 3 2 z ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   L u   Q W ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 8 2 - 7 ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   N A G P A U L   P S ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 2 ,   P 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 8 6 ;   N A R I N   F ,   1 9 8 9 ,   S C I E N C E ,   V 2 4 5 ,   P 6 0 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 4 5 . 4 9 1 8 . 6 0 0 ;   P R I C E   D D ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 4 7 ;   P R I C E   D D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 3 ,   P 1 0 1 1 ;   R e n   S L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 8 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 7 7 1 3 0 1 6 6 ;   * R E S   G R O U P   D E V   S T R ,   2 0 0 2 ,   A N N   R E P   S C I   T E C H N   D E ,   P 1 4 8 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S E N   B K ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 3 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 0 1 ;   v a n   L e e u w e n   T N ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 4 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 6 0 5 ;   V A N R A A N   A F J ,   1 9 9 0 ,   P   E U R   U   I   C   R E S   M A N ;   Z h a n g   H Q ,   1 9 9 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 3 ,   P 8 1 	 3 4 	 4 4 	 5 2 	 3 	 3 7 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 4 	 6 1 	 3 	 	 	 	 	 3 3 9 	 3 5 9 	 	 1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 1 4 . 8 5 7 3 7 . 1 b 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 6 2 A A 	 W O S : 0 0 0 2 2 4 4 6 0 1 0 0 0 0 4 	 	 
 
 J 	 K i n g ,   J T 	 	 	 	 K i n g ,   J T 	 	 	 H o w   m a n y   n e u r o s u r g e o n s   d o e s   i t   t a k e   t o   w r i t e   a   r e s e a r c h   a r t i c l e ?   A u t h o r s h i p   p r o l i f e r a t i o n   i n   n e u r o s u r g i c a l   r e s e a r c h 	 N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a u t h o r s h i p ;   b i b l i o m e t r i c s ;   n e u r o s u r g e r y ;   r e s e a r c h 	 M U L T I P L E   A U T H O R S H I P ;   C I T A T I O N   A N A L Y S I S ;   J O U R N A L S ;   C O A U T H O R S H I P ;   T R E N D S ;   P U B L I C A T I O N S ;   F R E Q U E N C Y ;   P U B L I S H ;   P E R I S H ;   T O O L 	 O B J E C T I V E :   A u t h o r s h i p   p r o l i f e r a t i o n   i n   b i o m e d i c a l   r e s e a r c h   h a s   b e c o m e   r a m p a n t ;   t h e   p r o p o r t i o n   o f   s i n g l e - a u t h o r   a r t i c l e s   i s   d e c r e a s i n g ,   t h e   p e r c e n t a g e   o f   m u l t i a u t h o r   a r t i c l e s   i s   i n c r e a s i n g ,   a n d   t h e   n u m b e r   o f   a u t h o r s   p e r   p u b l i c a t i o n   i s   i n c r e a s i n g .   T o   d e t e r m i n e   w h e t h e r   a u t h o r s h i p   t r e n d s   i n   t h e   N o r t h   A m e r i c a n   n e u r o s u r g i c a l   l i t e r a t u r e   p a r a l l e l   t r e n d s   o b s e r v e d   i n   o t h e r   a r e a s   o f   t h e   b i o m e d i c a l   l i t e r a t u r e ,   I   s t u d i e d   o r i g i n a l   n e u r o s u r g i c a l   r e s e a r c h   a r t i c l e s   p u b l i s h e d   i n   t h e   p a s t   5 0   y e a r s .   M E T H O D S :   I   s a m p l e d   c l i n i c a l ,   a n a t o m i c ,   a n d   l a b o r a t o r y   i n v e s t i g a t i o n s   i n   N e u r o s u r g e r y   a n d   t h e   J o u r n a l   o f   N e u r o s u r g e r y   a t   1 0 - y e a r   i n t e r v a l s   f r o m   1 9 4 5   t o   1 9 9 5 .   F o r   e a c h   r e s e a r c h   a r t i c l e ,   I   d e t e r m i n e d   t h e   n u m b e r   o f   a u t h o r s ,   t h e   c o u n t r i e s   o f   o r i g i n ,   a n d   t h e   e d u c a t i o n a l   d e g r e e s   o f   t h e   a u t h o r s .   R E S U L T S :   T h e   m e a n   n u m b e r   o f   a u t h o r s   p e r   a r t i c l e   h a s   i n c r e a s e d   s t e a d i l y   i n   t h e   p a s t   5 0   y e a r s ,   f r o m   1 . 8   ( s t a n d a r d   d e v i a t i o n ,   + / - 0 . 8 )   a u t h o r s   p e r   a r t i c l e   i n   1 9 4 5   t o   4 . 6   ( s t a n d a r d   d e v i a t i o n ,   + / - 2 . 1 )   a u t h o r s   i n   1 9 9 5 .   T h e   p r o p o r t i o n   o f   s i n g l e - a u t h o r   a r t i c l e s   i s   d e c r e a s i n g ;   t h e s e   a r t i c l e s   a c c o u n t e d   f o r   4 3 %   o f   a r t i c l e s   i n   1 9 4 5   a n d   o n l y   3 %   o f   a r t i c l e s   i n   1 9 9 5 .   I n c r e a s e s   i n   t h e   p r o p o r t i o n s   o f   n o n - M . D .   a u t h o r s   a n d   o f   a r t i c l e s   o r i g i n a t i n g   o u t s i d e   t h e   U n i t e d   S t a t e s   w e r e   a l s o   o b s e r v e d .   C O N C L U S I O N :   T h e   p r o l i f e r a t i o n   o f   m u l t i a u t h o r   a r t i c l e s   a n d   t h e   d e c r e a s e   i n   t h e   p r o p o r t i o n   o f   s i n g l e - a u t h o r   a r t i c l e s   i n   t h e   n e u r o s u r g i c a l   l i t e r a t u r e   p a r a l l e l   t r e n d s   o b s e r v e d   i n   m a n y   o t h e r   a r e a s   o f   b i o m e d i c a l   r e s e a r c h .   P o s s i b l e   e x p l a n a t i o n s   i n c l u d e   l a r g e r   r e s e a r c h   t e a m s ,   v a r i a b l e   o r   a b s e n t   j o u r n a l   c r i t e r i a   f o r   d e f i n i n g   a u t h o r s h i p ,   a n d   t h e   i n c r e a s e d   a w a r d i n g   o f   " g i f t "   a u t h o r s h i p s . 	 U n i v   P i t t s b u r g h ,   D e p t   N e u r o l   S u r g ,   P i t t s b u r g h ,   P A   1 5 2 1 3   U S A ;   V A   P i t t s b u r g h   H e a l t h c a r e   S y s t ,   N e u r o s u r g   S e c t ,   P i t t s b u r g h ,   P A   U S A ;   V A   P i t t s b u r g h   H e a l t h c a r e   S y s t ,   C t r   H l t h   S e r v   R e s ,   P i t t s b u r g h ,   P A   U S A ;   U n i v   P i t t s b u r g h ,   C t r   R e s   H l t h   C a r e ,   D e p t   M e d ,   P i t t s b u r g h ,   P A   1 5 2 1 3   U S A 	 K i n g ,   J T   ( r e p r i n t   a u t h o r ) ,   U n i v   P i t t s b u r g h ,   D e p t   N e u r o l   S u r g ,   2 0 0   L o t h r o p   S t , B - 4 0 0   P U H ,   P i t t s b u r g h ,   P A   1 5 2 1 3   U S A . 	 	 	 	 	 	 A L V A R E Z D A R D E T   C ,   1 9 8 5 ,   N E W   E N G L   J   M E D ,   V 3 1 2 ,   P 1 5 2 1 ;   A M A C H E R   A L ,   1 9 9 5 ,   J   N E U R O S U R G ,   V 8 2 ,   P 7 0 0 ;   A N D E R S O N   C ,   1 9 9 2 ,   N A T U R E ,   V 3 5 5 ,   P 1 0 1 ;   A N D E R S O N   C ,   1 9 9 1 ,   N A T U E ,   V 3 5 4 ,   P 3 ;   A N G E L L   M ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 4 ,   P 2 6 1 ;   B U R M A N   K D ,   1 9 8 2 ,   A N N   I N T E R N   M E D ,   V 9 7 ,   P 6 0 2 ;   B Y R N E   G ,   1 9 8 8 ,   S C I E N C E ,   V 2 4 2 ,   P 1 1 3 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 4 2 . 4 8 8 2 . 1 1 3 0 - b ;   C H E W   F S ,   1 9 8 8 ,   A M   J   R O E N T G E N O L ,   V 1 5 0 ,   P 2 3 ;   C H E W   F S ,   1 9 8 6 ,   A M   J   R O E N T G E N O L ,   V 1 4 7 ,   P 1 0 5 5 ;   D A R D I K   H ,   1 9 7 7 ,   S U R G   G Y N E C O L   O B S T E T ,   V 1 4 5 ,   P 4 1 8 ;   D a v i d s o n   F ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 7 ,   P 9 2 7 ;   D I A M O N D   D ,   1 9 6 9 ,   N E W   E N G L   J   M E D ,   V 2 8 0 ,   P 1 4 8 4 ;   E P S T E I N   R J ,   1 9 9 3 ,   B R I T   M E D   J ,   V 3 0 6 ,   P 7 6 5 ;   F R I E D H O F F   A J ,   1 9 8 8 ,   S C I E N C E ,   V 2 4 2 ,   P 1 6 2 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 4 2 . 4 8 8 6 . 1 6 2 3 - a ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 9 6 ,   S C I   J   C I T A T I O N   R E P O R ;   G O L D S T E I N   A ,   1 9 8 8 ,   S C I E N C E ,   V 2 4 2 ,   P 1 6 2 3 ;   G u s t o   I n v e s t i g a t o r s ,   1 9 9 3 ,   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e ,   V 3 2 9 ,   P 6 7 3 ;   H a i q i   Z ,   1 9 9 6 ,   B u l l   M e d   L i b r   A s s o c ,   V 8 4 ,   P 4 2 3 ;   H A M I L T O N   D P ,   1 9 9 0 ,   S C I E N C E ,   V 2 5 0 ,   P 1 3 3 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 2 5 5 9 0 2 ;   H o r t o n   R ,   1 9 9 7 ,   L A N C E T ,   V 3 5 0 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 6 2 3 6 - 8 ;   H o w a r d   M O ,   1 9 9 6 ,   J   S T U D   A L C O H O L ,   V 5 7 ,   P 1 0 5 ;   H U T H   E J ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 4 ,   P 2 5 7 ;   J o n e s   G ,   1 9 9 7 ,   C A N   M E D   A S S O C   J ,   V 1 5 6 ,   P 1 3 8 2 ;   K A P O O R   V K ,   1 9 9 4 ,   L A N C E T ,   V 3 4 6 ,   P 1 0 3 9 ;   K A S S I R E R   J P ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 5 ,   P 1 5 1 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 1 1 2 1 3 2 5 2 1 1 2 ;   M U S S U R A K I S   S ,   1 9 9 3 ,   A C T A   R A D I O L ,   V 3 4 ,   P 3 1 6 ;   M U S S U R A K I S   S ,   1 9 9 3 ,   A M   J   R O E N T G E N O L ,   V 1 6 1 ,   P 1 3 1 7 ;   * N A T   S C I   B O A R D   W O R ,   1 9 8 9 ,   S C I   E N G   I N D   1 9 8 9 ,   P 1 2 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R E G A L A D O   A ,   1 9 9 5 ,   S C I E N C E ,   V 2 6 8 ,   P 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 7 0 1 3 3 4 ;   R E N N I E   D ,   1 9 9 0 ,   E T H I C S   P O L I C Y   S C I   P U ;   S c h o o n b a e r t   D ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 7 3 9 ;   S c h u l e r   G D ,   1 9 9 6 ,   S C I E N C E ,   V 2 7 4 ,   P 5 4 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 4 . 5 2 8 7 . 5 4 0 ;   S H A P I R O   D W ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 1 ,   P 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 1 . 6 . 4 3 8 ;   S l o n e   R M ,   1 9 9 6 ,   A M   J   R O E N T G E N O L ,   V 1 6 7 ,   P 5 7 1 ;   S O B A L   J ,   1 9 9 0 ,   N E W   E N G L   J   M E D ,   V 3 2 3 ,   P 4 8 8 ;   S T R U B   R L ,   1 9 7 6 ,   L A N C E T ,   V 2 ,   P 1 0 9 0 ;   W h i t e   B ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 4 6 1 ;   Y I T Z H A K I   M ,   1 9 9 0 ,   J   B I O L   C H E M ,   P 3 7 3 	 4 0 	 4 4 	 4 4 	 1 	 3 	 L I P P I N C O T T   W I L L I A M S   &   W I L K I N S 	 P H I L A D E L P H I A 	 5 3 0   W A L N U T   S T ,   P H I L A D E L P H I A ,   P A   1 9 1 0 6 - 3 6 2 1   U S A 	 0 1 4 8 - 3 9 6 X 	 	 	 N E U R O S U R G E R Y 	 N e u r o s u r g e r y 	 A U G 	 2 0 0 0 	 4 7 	 2 	 	 	 	 	 4 3 5 	 4 4 0 	 	 1 0 . 1 0 9 7 / 0 0 0 0 6 1 2 3 - 2 0 0 0 0 8 0 0 0 - 0 0 0 3 2 	 	 6 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 3 3 9 W Z 	 W O S : 0 0 0 0 8 8 5 0 2 0 0 0 0 8 5 	 1 0 9 4 2 0 1 7 	 
 
 J 	 L a r i v i e r e ,   V ;   G i n g r a s ,   Y 	 	 	 	 L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s 	 	 	 T h e   I m p a c t   F a c t o r ' s   M a t t h e w   E f f e c t :   A   N a t u r a l   E x p e r i m e n t   i n   B i b l i o m e t r i c s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N C E   S Y S T E M ;   S C A L I N G   R U L E S ;   C I T A T I O N   C H A R A C T E R I S T I C S ;   I N D I C A T O R S 	 S i n c e   t h e   p u b l i c a t i o n   o f   R o b e r t   K .   M e r t o n ' s   t h e o r y   o f   c u m u l a t i v e   a d v a n t a g e   i n   s c i e n c e   ( M a t t h e w   E f f e c t ) ,   s e v e r a l   e m p i r i c a l   s t u d i e s   h a v e   t r i e d   t o   m e a s u r e   i t s   p r e s e n c e   a t   t h e   l e v e l   o f   p a p e r s ,   i n d i v i d u a l   r e s e a r c h e r s ,   i n s t i t u t i o n s ,   o r   c o u n t r i e s .   H o w e v e r ,   t h e s e   s t u d i e s   s e l d o m   c o n t r o l   f o r   t h e   i n t r i n s i c   " q u a l i t y "   o f   p a p e r s   o r   o f   r e s e a r c h e r s - " b e t t e r "   ( h o w e v e r   d e f i n e d )   p a p e r s   o r   r e s e a r c h e r s   c o u l d   r e c e i v e   h i g h e r   c i t a t i o n   r a t e s   b e c a u s e   t h e y   a r e   i n d e e d   o f   b e t t e r   q u a l i t y .   U s i n g   a n   o r i g i n a l   m e t h o d   f o r   c o n t r o l l i n g   t h e   i n t r i n s i c   v a l u e   o f   p a p e r s - i d e n t i c a l   d u p l i c a t e   p a p e r s   p u b l i s h e d   i n   d i f f e r e n t   j o u r n a l s   w i t h   d i f f e r e n t   i m p a c t   f a c t o r s - t h i s   p a p e r   s h o w s   t h a t   t h e   j o u r n a l   i n   w h i c h   p a p e r s   a r e   p u b l i s h e d   h a v e   a   s t r o n g   i n f l u e n c e   o n   t h e i r   c i t a t i o n   r a t e s ,   a s   d u p l i c a t e   p a p e r s   p u b l i s h e d   i n   h i g h - i m p a c t   j o u r n a l s   o b t a i n ,   o n   a v e r a g e ,   t w i c e   a s   m a n y   c i t a t i o n s   a s   t h e i r   i d e n t i c a l   c o u n t e r p a r t s   p u b l i s h e d   i n   j o u r n a l s   w i t h   l o w e r   i m p a c t   f a c t o r s .   T h e   i n t r i n s i c   v a l u e   o f   a   p a p e r   i s   t h u s   n o t   t h e   o n l y   r e a s o n   a   g i v e n   p a p e r   g e t s   c i t e d   o r   n o t ,   t h e r e   i s   a   s p e c i f i c   M a t t h e w   E f f e c t   a t t a c h e d   t o   j o u r n a l s   a n d   t h i s   g i v e s   t o   p a p e r s   p u b l i s h e d   t h e r e   a n   a d d e d   v a l u e   o v e r   a n d   a b o v e   t h e i r   i n t r i n s i c   q u a l i t y . 	 [ L a r i v i e r e ,   V i n c e n t ;   G i n g r a s ,   Y v e s ]   U n i v   Q u e b e c   M o n t r e a l ,   O S T ,   C I R S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a 	 L a r i v i e r e ,   V   ( r e p r i n t   a u t h o r ) ,   U n i v   Q u e b e c   M o n t r e a l ,   O S T ,   C I R S T ,   C P   8 8 8 8 , S u c c u r s a l e   C t r   V i l l e ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a . 	 l a r i v i e r e . v i n c e n t @ u q a m . c a ;   g i n g r a s . y v e s @ u q a m . c a 	 	 	 	 	 A r c h a m b a u l t   E ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 3 6 - x ;   B L A N C E T T   S S ,   1 9 9 5 ,   J   N U R S   S C H O L A R S H I P ,   V 2 7 ,   P 5 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 7 - 5 0 6 9 . 1 9 9 5 . t b 0 0 8 1 3 . x ;   B o n i t z   M ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 4 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 8 9 ;   C o s t a s   R ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 7 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 1 7 ;   E r r a m i   M ,   2 0 0 8 ,   N A T U R E ,   V 4 5 1 ,   P 3 9 7 ,   D O I   1 0 . 1 0 3 8 / 4 5 1 3 9 7 a ;   G A R F I E L D   E ,   1 9 7 3 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   K a t z   J S ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 5 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 1 0 - 4 ;   K n o t h e   G ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 9 ;   L A R I V I E R E   V ,   2 0 0 9 ,   J   D O C U M E N T A   I N   P R E S S ;   L a u d e l   G ,   2 0 0 6 ,   H I G H   E D U C ,   V 5 2 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 4 - 6 4 1 4 - 5 ;   M e d o f f   M .   H . ,   2 0 0 6 ,   J   E C   M E T H O D O L O G Y ,   V 1 3 ,   P 4 8 5 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 0 1 7 8 0 6 0 1 0 4 9 0 7 9 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S o r o k i n a   D ,   2 0 0 6 ,   P   6   I N T   C   D A T   M I N ,   P 1 0 7 0 ;   T o l   R S J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 8 ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 5 ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 1 	 1 9 	 4 3 	 4 4 	 8 	 4 5 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 F E B 	 2 0 1 0 	 6 1 	 2 	 	 	 	 	 4 2 4 	 4 2 7 	 	 1 0 . 1 0 0 2 / a s i . 2 1 2 3 2 	 	 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 4 9 H N 	 W O S : 0 0 0 2 7 4 0 3 8 4 0 0 0 1 7 	 	 
 
 J 	 J a n s s e n s ,   F ;   L e t a ,   J ;   G l a n z e l ,   W ;   D e   M o o r ,   B 	 	 	 	 J a n s s e n s ,   F r i z o ;   L e t a ,   J a c q u e l i n e ;   G l a n z e l ,   W o l f g a n g ;   D e   M o o r ,   B a r t 	 	 	 T o w a r d s   m a p p i n g   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 f u l l - t e x t   a n a l y s i s ;   t e x t - b a s e d   c l u s t e r i n g ;   m a p p i n g   o f   s c i e n c e ;   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e 	 C O - W O R D   A N A L Y S I S ;   N E U R A L - N E T W O R K   R E S E A R C H ;   C O M B I N I N G   F U L L - T E X T ;   C O C I T A T I O N   A N A L Y S I S ;   S C I E N T O M E T R I C S ;   R E T R I E V A L ;   V A L I D A T I O N ;   I N D I C A T O R S ;   A L G O R I T H M ;   F I E L D 	 I n   a n   e a r l i e r   s t u d y   b y   t h e   a u t h o r s ,   f u l l - t e x t   a n a l y s i s   a n d   t r a d i t i o n a l   b i b l i o m e t r i c   m e t h o d s   w e r e   c o m b i n e d   t o   m a p   r e s e a r c h   p a p e r s   p u b l i s h e d   i n   t h e   j o u r n a l   S c i e n t o m e t r i c s .   T h e   m a i n   o b j e c t i v e   w a s   t o   d e v e l o p   a p p r o p r i a t e   t e c h n i q u e s   o f   f u l l - t e x t   a n a l y s i s   a n d   t o   i m p r o v e   t h e   e f f i c i e n c y   o f   t h e   i n d i v i d u a l   m e t h o d s   i n   t h e   m a p p i n g   o f   s c i e n c e .   T h e   n u m b e r   o f   p a p e r s   w a s ,   h o w e v e r ,   r a t h e r   l i m i t e d .   I n   t h e   p r e s e n t   s t u d y ,   w e   e x t e n d   t h e   q u a n t i t a t i v e   l i n g u i s t i c   p a r t   o f   t h e   p r e v i o u s   s t u d i e s   t o   a   s e t   o f   f i v e   j o u r n a l s   r e p r e s e n t i n g   t h e   f i e l d   o f   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e   ( L I S ) .   A l m o s t   1 0 0 0   a r t i c l e s   a n d   n o t e s   p u b l i s h e d   i n   t h e   p e r i o d   2 0 0 2 - 2 0 0 4   h a v e   b e e n   s e l e c t e d   f o r   t h i s   e x e r c i s e .   T h e   o p t i m u m   s o l u t i o n   f o r   c l u s t e r i n g   L I S   i s   f o u n d   f o r   s i x   c l u s t e r s .   T h e   c o m b i n a t i o n   o f   d i f f e r e n t   m a p p i n g   t e c h n i q u e s ,   a p p l i e d   t o   t h e   f u l l   t e x t   o f   s c i e n t i f i c   p u b l i c a t i o n s ,   r e s u l t s   i n   a   c h a r a c t e r i s t i c   t r i p o d   p a t t e r n .   B e s i d e s   t w o   c l u s t e r s   i n   b i b l i o m e t r i c s ,   o n e   c l u s t e r   i n   i n f o r m a t i o n   r e t r i e v a l   a n d   o n e   c o n t a i n i n g   g e n e r a l   i s s u e s ,   w e b o m e t r i c s   a n d   p a t e n t   s t u d i e s   a r e   i d e n t i f i e d   a s   s m a l l   b u t   e m e r g i n g   c l u s t e r s   w i t h i n   L I S .   T h e   s t u d y   i s   c o n c l u d e d   w i t h   t h e   a n a l y s i s   o f   c l u s t e r   r e p r e s e n t a t i o n s   b y   t h e   s e l e c t e d   j o u r n a l s .   ( c )   2 0 0 6   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 K a t h o l i e k e   U n i v   L e u v e n ,   E S A T ,   S C D ,   B - 3 0 0 1   L o u v a i n ,   B e l g i u m ;   K a t h o l i e k e   U n i v   L e u v e n ,   S t e u n p u n t   O & O   S t a t ,   L o u v a i n ,   B e l g i u m ;   U n i v   F e d   R i o   d e   J a n e i r o ,   I n s t   B i o q u i m   M e d ,   C t r   C i e n c i a s   S a u d e ,   R i o   D e   J a n e i r o ,   B r a z i l ;   H u n g a r i a n   A c a d   S c i ,   I n s t   R e s   P o l i c y   S t u d i e s ,   H - 1 0 5 1   B u d a p e s t ,   H u n g a r y 	 J a n s s e n s ,   F   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   E S A T ,   S C D ,   K a s t e e l p k   A r e n b e r g   1 0 ,   B - 3 0 0 1   L o u v a i n ,   B e l g i u m . 	 f r i z o . j a n s s e n s @ e s a t . k u l e u v e n . b e ;   J a c q u e l i n e . L e t a @ e c o n . k u l e u v e n . b e ;   W o l f g a n g . G l a n z e l @ e c o n . k u l e u v e n . b e ;   b a r t . d e m o o r @ e s a t . k u l e u v e n . b e 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 B a e z a - Y a t e s   R . ,   1 9 9 9 ,   M O D E R N   I N F O R M   R E T R I E ;   B e n - H u r   A . ,   2 0 0 2 ,   P A C   S   B I O C ,   V 7 ,   P 6 ,   D O I   D O I   1 0 . 1 0 1 6 / J . E N V H A Z . 2 0 0 7 . 0 4 . 0 0 2 ;   B e r k h i n   P . ,   2 0 0 2 ,   S U R V E Y   C L U S T E R I N G   D A ;   B e r r y   M W ,   1 9 9 5 ,   S I A M   R E V ,   V 3 7 ,   P 5 7 3 ,   D O I   1 0 . 1 1 3 7 / 1 0 3 7 1 2 7 ;   B h a t t a c h a r y a   S ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 0 4 ;   B o n n e v i e   E ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 1 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 3 2 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C a l l o n   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 1 5 3 ;   C o u r t i a l   J P ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 9 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 1 ) 4 9 : 1 < 9 8 : : A I D - A S I 1 4 > 3 . 0 . C O ; 2 - 1 ;   C O U R T I A L   J P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 7 5 ;   D a e l e m a n s   W . ,   2 0 0 5 ,   M E M O R Y   B A S E D   L A N G U A G ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D e L o o z e   M A ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 2 6 7 ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   D i n g   Y ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 5 1 - 0 ;   D u n n i n g   T . ,   1 9 9 3 ,   C o m p u t a t i o n a l   L i n g u i s t i c s ,   V 1 9 ,   P 6 1 ;   D u t t   B ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 8 1 ;   E n r i g h t   A J ,   2 0 0 1 ,   B I O I N F O R M A T I C S ,   V 1 7 ,   P 8 5 3 ,   D O I   1 0 . 1 0 9 3 / b i o i n f o r m a t i c s / 1 7 . 9 . 8 5 3 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 7 ;   G l e n i s s o n   P ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 4 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 1 ;   G l e n i s s o n   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 0 8 - 0 ;   G R Z Y B E K   P ,   2 0 0 4 ,   G L O T T O M E T R I C S ,   V 7 ,   P 9 4 ;   H a l k i d i   M ,   2 0 0 1 ,   J   I N T E L L   I N F   S Y S T ,   V 1 7 ,   P 1 0 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 8 0 1 6 1 2 4 8 3 ;   H e   S Y ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 1 ;   J a i n   A K ,   1 9 9 9 ,   A C M   C O M P U T   S U R V ,   V 3 1 ,   P 2 6 4 ,   D O I   1 0 . 1 1 4 5 / 3 3 1 4 9 9 . 3 3 1 5 0 4 ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J a n s s e n s   F . ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ,   V 1 ,   P 2 8 4 ;   K a u f m a n   L . ,   1 9 9 0 ,   F I N D I N G   G R O U P S   D A T A ;   K o s t o f f   R N ,   2 0 0 5 ,   C O R T E X ,   V 4 1 ,   P 1 0 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 8 8 5 - 2 ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   L e o p o l d   E ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 1 8 7 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   M a n n i n g   C .   D . ,   2 0 0 0 ,   F D N   S T A T   N A T U R A L   L A N ;   M a r d i a   K . V . ,   1 9 7 9 ,   M U L T I V A R I A T E   A N A L ;   M A R S H A K O V A   I ,   2 0 0 3 ,   L A N G U A G E   I N F O R M A T I O N ,   P 8 7 ;   M a r s h a k o v a - S h a i k e v i c h   I ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 3 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 7 ;   M u l l i n s   N . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 8 1 ;   N o y o n s   E ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 4 2 0 2 9 7 7 ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   O n y a n c h a   O B ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 7 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 5 ;   P e r s s o n   O ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 5 9 0 ;   P e r s s o n   O ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 4 0 0 9 4 2 8 ;   P E T E R S   H P F ,   1 9 9 3 ,   R E S   P O L I C Y ,   V 2 2 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 3 1 - C ;   P o l a n c o   X . ,   1 9 9 5 ,   P   5   I N T   C   I N T   S O C   S C ,   P 4 3 5 ;   P o r t e r   A L ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 5 8 7 ;   P O R T E R   M F ,   1 9 8 0 ,   P R O G R A M - A U T O M   L I B R ,   V 1 4 ,   P 1 3 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 4 6 8 1 4 ;   R O U S S E E U W   P J ,   1 9 8 7 ,   J   C O M P U T   A P P L   M A T H ,   V 2 0 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 0 4 2 7 ( 8 7 ) 9 0 1 2 5 - 7 ;   S a l t o n   G . ,   1 9 8 6 ,   I N T R O   M O D E R N   I N F O R M ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S c h u b e r t   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 8 6 2 0 2 4 2 5 ;   S C H U L T E   P A ,   1 9 9 3 ,   A M   J   I N D   M E D ,   V 2 3 ,   P 3 ,   D O I   1 0 . 1 0 0 2 / a j i m . 4 7 0 0 2 3 0 1 0 3 ;   S N I Z E K   W E ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 4 1 ;   S T E F A N I A K   B ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 5 ;   T I J S S E N   R J W ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 0 3 ;   T O D O R O V   R ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   P 3 5 ;   V A N R A A N   A F J ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 6 9 ;   W O U T E R S   P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 5 6 0 ;   W Y L L Y S   R E ,   1 9 7 5 ,   P   A M   S O C   I N F O R M   S C I ,   V 1 2 ,   P 3 0 ;   X u   R ,   2 0 0 5 ,   I E E E   T   N E U R A L   N E T W O R ,   V 1 6 ,   P 6 4 5 ,   D O I   1 0 . 1 1 0 9 / T N N . 2 0 0 5 . 8 4 5 1 4 1 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L ;   Z I T T   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 8 2 ;   Z I T T   M ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 2 	 6 2 	 4 3 	 4 8 	 9 	 8 4 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 D E C 	 2 0 0 6 	 4 2 	 6 	 	 	 	 	 1 6 1 4 	 1 6 4 2 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 	 	 2 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 2 T I 	 W O S : 0 0 0 2 3 8 9 6 7 1 0 0 0 1 8 	 	 
 
 J 	 M a r u s i c ,   M ;   M a r u s i c ,   A 	 	 	 	 M a r u s i c ,   M ;   M a r u s i c ,   A 	 	 	 G o o d   e d i t o r i a l   p r a c t i c e :   E d i t o r s   a s   e d u c a t o r s 	 C R O A T I A N   M E D I C A L   J O U R N A L 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c r o s s - c u l t u r a l   c o m p a r i s o n ;   e d u c a t i o n ,   p r o f e s s i o n a l ,   r e t r a i n i n g ;   i n d e x i n g ;   j o u r n a l s ;   p e r i o d i c a l s ;   p r a c t i c e   g u i d e l i n e s ;   p r a c t i c e   p a t t e r n s ,   p r o f e s s i o n a l ;   p u b l i s h i n g ;   t r a i n i n g   s u p p o r t 	 J O U R N A L S ;   P U B L I C A T I O N ;   C O U N T R I E S 	 T h e r e   m a y   b e   v a l u a b l e   r e s e a r c h   g o i n g   o n   i n   t h e   d e v e l o p i n g   a n d   f i n a n c i a l l y   l e s s - p r i v i l e g e d   c o u n t r i e s ,   b u t   i t   u s u a l l y   d o e s   n o t   r e a c h   i n t e r n a t i o n a l   v i s i b i l i t y ,   i n   s p i t e   o f   a   l a r g e   n u m b e r   o f   s c i e n t i f i c   j o u r n a l s   i n   t h e s e   c o u n t r i e s .   S u c h   j o u r n a l s   a r e   n o t   o n l y   i n v i s i b l e   b u t ,   b y   p e r p e t u a t i n g   a   v i c i o u s   c i r c l e   o f   i n a d e q u a c y ,   m a y   b e   d i r e c t l y   d a m a g i n g   t o   t h e   l o c a l   s c i e n c e   a n d   r e s e a r c h   c u l t u r e .   W e   c a l l   f o r   a n   i n t e r n a t i o n a l   a c t i o n   t o   h e l p   j o u r n a l   e d i t o r s   i n   l e s s   p r i v i l e g e d   c o u n t r i e s .   I n t e r n a t i o n a l   a s s o c i a t i o n s   o f   e d i t o r s   m a y   b e   l e a d e r s   o f   t h e s e   a c t i v i t i e s   b y   d e f i n i n g ,   p r o m o t i n g ,   a n d   p e r h a p s   c o n t r o l l i n g   g o o d   e d i t o r i a l   p r a c t i c e ,   a s   a   m a i n   c r i t e r i o n   f o r   i n t e r n a t i o n a l   r e c o g n i t i o n   o f   a   j o u r n a l .   H o w e v e r ,   t h e   e d i t o r s   o f   s m a l l   j o u r n a l s   h a v e   t h e   p o w e r   a n d   m o r a l   o b l i g a t i o n   t o   b e c o m e   a   s t r o n g h o l d   o f   q u a l i t y   a n d   a d v a n c e m e n t   i n   t h e i r   s c i e n t i f i c   c o m m u n i t y .   T h e i r   e d u c a t i o n a l   " t o o l s "   a r e   e d i t o r i a l   i n t e g r i t y   a n d   a u t h o r - f r i e n d l y   p o l i c y .   E d i t o r s   c a n   t e a c h   t h e   a u t h o r s   s t u d y   d e s i g n   s t a t i s t i c a l   a n a l y s i s ,   p r e c i s i o n ,   p u n c t u a l i t y ,   r e s e a r c h   i n t e g r i t y ,   s t y l e   a n d   f o r m a t   o f   w r i t i n g ,   a n d   o t h e r   a s p e c t s   o f   s c i e n t i f i c   c o m m u n i c a t i o n .   T h e   e d i t o r s   o f   " b i g " ,   m a i n s t r e a m   s c i e n t i f i c   j o u r n a l s   c a n   a c t   a s   g l o b a l   e d u c a t o r s ,   t e a c h i n g   a n d   p r o v i d i n g   g u i d a n c e   t o   e d i t o r s   o f   s m a l l   j o u r n a l s .   T h e   e d i t o r s   f r o m   d e v e l o p e d   c o u n t r i e s   a s   l e a d e r s ,   a n d   e d i t o r s   f r o m   l e s s   a d v a n t a g e o u s   e n v i r o n m e n t s   a s   t e a c h e r s   a r e   t h e   k e y   f i g u r e s   i n   s h a p i n g   r e s e a r c h   c o m m u n i c a t i o n   i n   l e s s   p r i v i l e g e d   s c i e n t i f i c   c o m m u n i t i e s . 	 U n i v   Z a g r e b ,   S c h   M e d ,   C r o a t i a n   M e d   J o u r n a l ,   Z a g r e b   1 0 0 0 0 ,   C r o a t i a 	 M a r u s i c ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   Z a g r e b ,   S c h   M e d ,   C r o a t i a n   M e d   J o u r n a l ,   S a l a t a   3 B ,   Z a g r e b   1 0 0 0 0 ,   C r o a t i a . 	 	 M a r u s i c ,   A n a / E - 7 6 8 3 - 2 0 1 3 ;   	 M a r u s i c ,   A n a / 0 0 0 0 - 0 0 0 1 - 6 2 7 2 - 0 9 1 7 ;   M a r u s i c ,   M a t k o / 0 0 0 0 - 0 0 0 1 - 5 5 6 2 - 1 7 7 7 	 	 	 A L T M A N   D G ,   1 9 9 9 ,   P E E R   R E V   H L T H   S C I ,   P 1 5 7 ;   B a s h c h i n s k i y   S ,   2 0 0 1 ,   C R O A T   M E D   J ,   V 4 2 ,   P 1 2 1 ;   B E K A V A C   A ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 2 2 - 1 ;   C l e v e r   L H ,   1 9 9 7 ,   A N N   I N T E R N   M E D ,   V 1 2 6 ,   P 3 6 ;   C u r r i e   C J ,   1 9 9 8 ,   L A N C E T ,   V 3 5 1 ,   P 1 5 1 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 7 8 9 1 6 - 9 ;   D i x o n   J   R   J r ,   1 9 9 8 ,   Q u a l   A s s u r ,   V 6 ,   P 6 5 ;   E B L E N   R A ,   1 9 9 4 ,   E N C Y   E N V ,   P 7 0 2 ;   E g g e r   M ,   1 9 9 7 ,   L a n c e t ,   V 3 5 0 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 7 ) 0 2 4 1 9 - 7 ;   F l e t c h e r   R H ,   1 9 9 9 ,   P E E R   R E V   H L T H   S C I ,   P 4 5 ;   G A I L L A R D   J ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 3 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 9 1 4 ;   H o r t o n   R ,   2 0 0 0 ,   L A N C E T ,   V 3 5 5 ,   P 2 2 4 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 7 2 7 4 1 - 0 ;   H o w i e   S   J ,   1 9 9 4 ,   Q u a l   A s s u r ,   V 3 ,   P 2 3 7 ;   J O N J I C   S ,   1 9 9 6 ,   C R O A T   M E D   J ,   V 3 7 ,   P 2 ;   M a r i c i c   S ,   2 0 0 0 ,   D R U S   I S T R A Z ,   V 9 ,   P 1 ;   M A R I C I C   S ,   1 9 9 2 ,   C R O A T I A N   B I B L I O   B ,   V 2 4 ,   P 1 0 9 ;   M a r u s i c   A ,   1 9 9 9 ,   C R O A T   M E D   J ,   V 4 0 ,   P 5 0 8 ;   M A R U S I C   A ,   1 9 9 7 ,   C R O A T   M E D   J ,   V 3 8 ,   P 3 ;   M A R U S I C   A ,   2 0 0 0 ,   S C I   E D I T O R ,   V 2 3 ,   P 8 1 ;   M A R U S I C   M ,   1 9 9 7 ,   C R O A T   M E D   J ,   V 3 8 ,   P 5 ;   M A R U S I C   M ,   2 0 0 0 ,   C R O A T   M E D   J ,   V 4 1 ,   P 4 ;   M A R U S I C   M ,   1 9 9 8 ,   V I D L J I V A   N E V I D L J I V A ,   P 4 7 ;   M i s a k   A ,   2 0 0 1 ,   C R O A T   M E D   J ,   V 4 2 ,   P 4 ;   * N A T   L I B   M E D ,   2 0 0 1 ,   U S   N A T   L I B   M E D   F A C T ;   N U N D Y   S ,   1 9 9 1 ,   B R I T   M E D   J ,   P 7 4 ;   N Y L E N N A   M ,   1 9 9 4 ,   C R O A T   M E D   J ,   V 3 5 ,   P 1 9 5 ;   P e t r o v e c k i   M ,   2 0 0 1 ,   C R O A T   M E D   J ,   V 4 2 ,   P 7 ;   R e n n i e   D ,   1 9 9 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 2 ,   P 7 8 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 2 . 8 . 7 8 3 ;   S A H N I   P ,   1 9 9 2 ,   L A N C E T ,   V 3 3 9 ,   P 1 5 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 2 ) 9 1 8 4 4 - X ;   S c h e e t z   M D ,   1 9 9 9 ,   C R O A T   M E D   J ,   V 4 0 ,   P 3 2 1 ;   S U R S O C K   A ,   2 0 0 1 ,   Q U A L I T Y   A S S U R A N C   J A N ;   1 9 9 7 ,   N A R O D N E   N O V I N E ,   V 2 ;   1 9 9 7 ,   N A R O D N E   N O V I N E ,   V 3 8 	 3 2 	 4 3 	 4 3 	 1 	 6 	 P A B S T   S C I E N C E   P U B L I S H E R S 	 L E N G E R I C H 	 E I C H E N G R U N D   2 8 ,   D - 4 9 5 2 5   L E N G E R I C H ,   G E R M A N Y 	 0 3 5 3 - 9 5 0 4 	 	 	 C R O A T   M E D   J 	 C r o a t .   M e d .   J . 	 A P R 	 2 0 0 1 	 4 2 	 2 	 	 	 	 	 1 1 3 	 1 2 0 	 	 	 	 8 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 4 4 0 L Q 	 W O S : 0 0 0 1 6 9 1 7 7 1 0 0 0 0 2 	 1 1 2 5 9 7 3 0 	 
 
 J 	 G L A N Z E L ,   W ;   S C H O E P F L I N ,   U 	 	 	 	 G L A N Z E L ,   W ;   S C H O E P F L I N ,   U 	 	 	 L I T T L E   S C I E N T O M E T R I C S ,   B I G   S C I E N T O M E T R I C S   . . .   A N D   B E Y O N D 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 4 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   B i b l i o m e t r i c s ,   I n f o r m e t r i c s   a n d   S c i e n t o m e t r i c s ,   i n   M e m o r y   o f   D e r e k   J o h n   d e   S o l l a   P r i c e   ( 1 9 2 2 - 1 9 8 3 ) 	 S E P   1 1 - 1 5 ,   1 9 9 3 	 B E R L I N ,   G E R M A N Y 	 M i n i s t e r   S c i   &   R e s   L a n d   B e r l i n 	 	 	 	 A l t h o u g h   t h e   f i e l d   o f   s c i e n t o m e t r i e s / b i b l i o m e t r i e s   i s   r a p i d l y   g r o w i n g ,   a n d   t h e   i n t e r e s t   i n   s c i e n t o m e t r i c   i n d i c a t o r s   i s   c o n s t a n t l y   r i s i n g ,   t h e   f i e l d   i s   i n   a   c r i s i s :   s u b f i e l d s   a r e   d r i f t i n g   a p a r t ,   t h e   f i e l d   i s   l a c k i n g   c o n s e n s u s   i n   b a s i c   q u e s t i o n s   a n d   o f   i n t e r n a l   c o m m u n i c a t i o n ,   t h e   q u a l i t y   o f   s c i e n t o m e t r i c   r e s e a r c h   i s   q u e s t i o n e d   b y   o t h e r   d i s c i p l i n e s .   A m o n g   t h e   c a u s e s   s t a t e d   a r e :   t h e   l o s s   o f   i n t e g r a t i n g   p e r s o n a l i t i e s ;   s h i f t   f r o m   b a s i c   a n d   m e t h o d o l o g i c a l   r e s e a r c h   t o   a p p l i e d   b i b l i o m e t r i c s ;   d o m i n a t i o n   o f   t h e   i n t e r e s t s   o f   s c i e n c e   p o l i c y   a n d   b u s i n e s s   i n   c o m m i s s i o n i n g   a n d   f u n d i n g   r e s e a r c h ;   v e n d o r   p o l i c i e s   a n d   f a i l i n g   q u a l i t y - m a n a g e m e n t   o n   t h e   s i d e   o f   d a t a b a s e - p r o d u c e r s ;   m i s u s e   o f   b i b l i o m e t r i c   r e s e a r c h   r e s u l t s   a n d   d i s r e g a r d   f o r   s c i e n t i f i c   s t a n d a r d s .   T o   o v e r c o m e   t h e   s i t u a t i o n ,   t h e   a u t h o r s   p l e a d   f o r   i n t e g r a t i v e   a n d   i n t e r d i s c i p l i n a r y   r e s e a r c h   a p p r o a c h e s ,   f o r   r e i n f o r c i n g   f u n d a m e n t a l ,   m e t h o d o l o g i c a l   a n d   e x p e r i m e n t a l   r e s e a r c h   p r o g r a m s   i n   s c i e n t o m e t r i c s ,   f o r   i n d e p e n d e n t   f u n d i n g   o f   r e s e a r c h ,   a n d   f o r   a n   e n h a n c e m e n t   o f   s c i e n t o m e t r i c   d a t a b a s e s .   T h e   n e e d   f o r   a c k n o w l e d g e d   t e c h n i c a l   a n d   s c i e n t i f i c   s t a n d a r d s   i n   r e s e a r c h   a n d   p u b l i c a t i o n   i s   s t r e s s e d .   F i n a l l y ,   t h e   e s t a b l i s h m e n t   o f   a   C o d e   o f   E t h i c s   f o r   t h e   f i e l d   o f   s c i e n t o m e t r i c s   i s   p r o p o s e d . 	 M A X   P L A N C K   I N S T   H U M A N   D E V   &   E D U C , D - 1 4 1 9 5   B E R L I N , G E R M A N Y ;   R E S   A S S O C   S C I   C O M M U N   &   I N F O R M A T , D - 1 0 1 1 7   B E R L I N , G E R M A N Y 	 G L A N Z E L ,   W   ( r e p r i n t   a u t h o r ) ,   L I B   H U N G A R I A N   A C A D   S C I , I N F O R M A T   S C I   &   S C I E N T O M E T R   R E S   U N I T , P O B   7 , H - 1 3 6 1   B U D A P E S T , H U N G A R Y . 	 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R O O K E S   B C ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 3 1 ;   B U J D O S O   E ,   1 9 8 6 ,   B I B L I O M E T R I A   T U D O M A N ;   C O U R T I A L   J P ,   1 9 9 0 ,   I N T R O   S C I ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   N A C K E   O ,   1 9 7 9 ,   N A C H R   D O K ,   P 2 1 9 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R A O   I K R ,   1 9 8 3 ,   Q U A N T I T A T I V E   M E T H O D S ;   S C H O E P F L I N   U ,   1 9 9 1 ,   D T S C H   D O K U M E N T A R T A G ,   P 1 0 1 ;   V a n   R a a n   A n t h o n y   F .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   W e i n s t o c k   M . ,   1 9 7 1 ,   E N C Y   L I B R A R Y   I N F O R M A ,   V 5 ,   P 1 6 	 1 2 	 4 3 	 4 6 	 0 	 2 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N - A U G 	 1 9 9 4 	 3 0 	 2 - 3 	 	 	 	 	 3 7 5 	 3 8 4 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 7 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 N R 5 4 4 	 W O S : A 1 9 9 4 N R 5 4 4 0 0 0 0 2 	 	 
 
 J 	 G e h a n n o ,   J F ;   T a k a h a s h i ,   K ;   D a r m o n i ,   S ;   W e b e r ,   J 	 	 	 	 G e h a n n o ,   J e a n - F r a n c o i s ;   T a k a h a s h i ,   K e n ;   D a r m o n i ,   S t e p h a n ;   W e b e r ,   J a c q u e s 	 	 	 C i t a t i o n   c l a s s i c s   i n   o c c u p a t i o n a l   m e d i c i n e   j o u r n a l s 	 S C A N D I N A V I A N   J O U R N A L   O F   W O R K   E N V I R O N M E N T   &   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   n u m e r i c a l   d a t a ;   o c c u p a t i o n a l   h e a l t h ;   p e r i o d i c a l ;   s t a t i s t i c s 	 M O S T - C I T E D   A R T I C L E S ;   A R C H I V E S ;   H E A L T H 	 O b j e c t i v e s   T h e   n u m b e r   o f   c i t a t i o n s   a n   a r t i c l e   r e c e i v e s   a f t e r   i t s   p u b l i c a t i o n   n o t   o n l y   r e f l e c t s   i t s   i m p a c t   o n   t h e   s c i e n t i f i c   c o m m u n i t y ,   b u t   a l s o   t h e   i m p a c t   o f   t h e   i n s t i t u t i o n s   o r   c o u n t r i e s   i n   t h e   f i e l d   s t u d i e d .   I n   1 9 8 7 ,   G a r f i e l d   i n t r o d u c e d   t h e   c o n c e p t   o f   " c i t a t i o n   c l a s s i c s "   f o r   t h e   b e s t - c i t e d   a r t i c l e s .   A n   a n a l y s i s   o f   t o p - c i t e d   a r t i c l e s   c o m i n g   f r o m   j o u r n a l s   i n   t h e   f i e l d   o f   o c c u p a t i o n a l   m e d i c i n e   ( e g ,   O c c u p a t i o n a l   a n d   E n v i r o n m e n t a l   M e d i c i n e ,   S c a n d i n a v i a n   J o u r n a l   o f   W o r k ,   E n v i r o n m e n t   &   H e a l t h )   h a s   n o t   y e t   b e e n   r e p o r t e d .   T h e   p u r p o s e   o f   t h i s   s t u d y   w a s   t o   a s s e s s   w h e t h e r   o r   n o t   s u c h   c i t a t i o n   c l a s s i c s   e x i s t   i n   t h i s   f i e l d   a n d   t o   a n a l y z e   t h e i r   c h a r a c t e r i s t i c s .   M e t h o d s   T h e   m o s t   f r e q u e n t l y   c i t e d   a r t i c l e s   p u b l i s h e d   i n   t h e   f i v e   m a j o r   j o u r n a l s   i n   o c c u p a t i o n a l   m e d i c i n e   w e r e   i d e n t i f i e d   u s i n g   t h e   d a t a b a s e   o f   S c i e n c e   C i t a t i o n   I n d e x   E x p a n d e d .   T h e   d a t a   w e r e   o b t a i n e d   b y   s e a r c h i n g   o n e   y e a r   a n d   o n e   j o u r n a l   a t   a   t i m e .   A l l   o f   t h e   a r t i c l e s   c i t e d   m o r e   t h a n   1 0 0   t i m e s   w e r e   c o l l e c t e d   a n d   a n a l y z e d .   R e s u l t s   A m o n g   t h e   1 5   5 5 3   a r t i c l e s   p u b l i s h e d   b y   t h e   f i v e   j o u r n a l s   s i n c e   1 9 4 9 ,   o n l y   8 5   a r t i c l e s   h a d   b e e n   c i t e d   m o r e   t h a n   1 0 0   t i m e s .   T h e   o l d e s t   h a d   b e e n   p u b l i s h e d   i n   1 9 5 0   a n d   t h e   l a t e s t   i n   1 9 9 7 .   T h e   U n i t e d   K i n g d o m   c o n t r i b u t e d   2 8 %   o f   t h e   c i t a t i o n   c l a s s i c s   a n d   t h e   U n i t e d   S t a t e s   o r   S w e d e n   p r o d u c e d   1 9 % .   T h e   m o s t   c i t e d   a r t i c l e   h a d   b e e n   c i t e d   9 7 9   t i m e s .   T h e   m a i n   t o p i c s   o f   a r t i c l e s   w e r e   m e t a b o l i s m ,   o c c u p a t i o n a l   n e o p l a s m s ,   a n d   w o r k - r e l a t e d   m u s c u l o s k e l e t a l   d i s o r d e r s .   C o n c l u s i o n s   S i n c e   t h e   1 9 8 0 s ,   S c a n d i n a v i a   a n d   t h e   U n i t e d   S t a t e s   h a v e   t a k e n   t h e   l e a d e r s h i p   i n   t h e   p u b l i c a t i o n   o f   c i t a t i o n   c l a s s i c   p a p e r s .   N e v e r t h e l e s s ,   a c c o r d i n g   t o   t h e   l e v e l   o f   c i t a t i o n s ,   t h e   i n f l u e n c e   o f   l i t e r a t u r e   p u b l i s h e d   i n   o c c u p a t i o n a l   m e d i c i n e   j o u r n a l s   r e m a i n s   l i m i t e d . 	 R o u e n   U n i v   H o s p ,   I n s t   O c c u p a t   M e d ,   R o u e n ,   F r a n c e ;   U n i v   O c c u p a t   &   E n v i r o n m   H l t h ,   K i t a k y u s h u ,   F u k u o k a   8 0 7 ,   J a p a n ;   R o u e n   U n i v   H o s p ,   C o m p   &   N e t w o r k s   D e p t ,   R o u e n ,   F r a n c e ;   R o u e n   U n i v   H o s p ,   P e d a g o g   B o a r d ,   R o u e n ,   F r a n c e 	 G e h a n n o ,   J F   ( r e p r i n t   a u t h o r ) ,   R o u e n   U n i v   H o s p ,   I n s t   O c c u p a t   M e d ,   R o u e n ,   F r a n c e . 	 j e a n - f r a n c o i s . g e h a n n o @ c h u - r o u e n . f r 	 S t e f a n ,   D a r m o n i / H - 4 5 5 4 - 2 0 1 6 	 	 	 	 A L B E R T   D M ,   1 9 8 8 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 0 6 ,   P 4 6 5 ;   A r o n s o n   J K ,   2 0 0 4 ,   B R I T   J   C L I N   P H A R M A C O ,   V 5 8 ,   p S 6 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 1 2 5 . 2 0 0 4 . 0 2 3 1 7 . x ;   B a l t u s s e n   A ,   2 0 0 4 ,   I N T E N S   C A R E   M E D ,   V 3 0 ,   P 9 0 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 4 - 2 1 9 5 - 7 ;   D a r m o n i   S t e f a n   J ,   2 0 0 6 ,   B M C   M e d   I n f o r m   D e c i s   M a k ,   V 6 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 6 - 7 ;   D U B I N   D ,   1 9 9 3 ,   A R C H   D E R M A T O L ,   V 1 2 9 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 0 1 / a r c h d e r m . 1 2 9 . 9 . 1 1 2 1 ;   F e n t o n   J E ,   2 0 0 2 ,   J   L A R Y N G O L   O T O L ,   V 1 1 6 ,   P 4 9 4 ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G e h a n n o   J F ,   2 0 0 0 ,   O C C U P   E N V I R O N   M E D ,   V 5 7 ,   P 7 0 6 ,   D O I   1 0 . 1 1 3 6 / o e m . 5 7 . 1 0 . 7 0 6 ;   H a l l   G M ,   1 9 9 8 ,   B R I T   J   A N A E S T H ,   V 8 0 ,   P 4 ;   K E Y   J D ,   1 9 8 8 ,   A R C H   P H Y S   M E D   R E H A B ,   V 6 9 ,   P 1 0 5 8 ;   K E Y   J D ,   1 9 8 7 ,   F E R T I L   S T E R I L ,   V 4 7 ,   P 9 1 0 ;   M C C U N N E Y   R J ,   1 9 9 2 ,   J   O C C U P   E N V I R O N   M E D ,   V 3 4 ,   P 2 7 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 3 7 6 4 - 1 9 9 2 0 3 0 0 0 - 0 0 0 1 2 ;   O l l e r t o n   J E ,   2 0 0 5 ,   J   T R A U M A ,   V 5 8 ,   P 3 6 4 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T A . 0 0 0 0 1 4 1 8 8 2 . 3 1 2 8 1 . 6 6 ;   P a l a d u g u   R ,   2 0 0 2 ,   W O R L D   J   S U R G ,   V 2 6 ,   P 1 0 9 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 6 8 - 0 0 2 - 6 3 7 6 - 7 ;   P i c k n e t t   T ,   1 9 9 9 ,   J   M o l   B i o l ,   V 2 9 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 6 / j m b i . 1 9 9 9 . 3 1 4 8 ;   R u o t s a l a i n e n   J H ,   2 0 0 6 ,   A M   J   I N D   M E D ,   V 4 9 ,   P 8 6 5 ,   D O I   1 0 . 1 0 0 2 / a i j m . 2 0 3 7 1 ;   S A B I N   A B ,   1 9 6 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 1 7 3 ,   P 1 5 2 1 ;   T e r a j i m a   K ,   2 0 0 3 ,   A C T A   A N A E S T H   S C A N D ,   V 4 7 ,   P 6 5 5 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 3 7 . x ;   T h o m a s   K ,   2 0 0 3 ,   E U R   U R O L ,   V 4 3 ,   P 5 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 2 - 2 8 3 8 ( 0 3 ) 0 0 1 4 3 - X 	 1 9 	 4 2 	 4 2 	 0 	 9 	 S C A N D   J   W O R K   E N V   H E A L T H 	 H E L S I N K I 	 T O P E L I U K S E N K A T U   4 1 A ,   S F - 0 0 2 5 0   H E L S I N K I ,   F I N L A N D 	 0 3 5 5 - 3 1 4 0 	 	 	 S C A N D   J   W O R K   E N V   H E A 	 S c a n d .   J .   W o r k   E n v i r o n .   H e a l t h 	 A U G 	 2 0 0 7 	 3 3 	 4 	 	 	 	 	 2 4 5 	 2 5 1 	 	 	 	 7 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 2 0 8 H D 	 W O S : 0 0 0 2 4 9 3 0 9 5 0 0 0 0 2 	 1 7 7 1 7 6 1 5 	 
 
 J 	 G a r t n e r ,   W B ;   D a v i d s s o n ,   P ;   Z a h r a ,   S A 	 	 	 	 G a r t n e r ,   W B ;   D a v i d s s o n ,   P ;   Z a h r a ,   S A 	 	 	 A r e   y o u   t a l k i n g   t o   m e ?   T h e   n a t u r e   o f   c o m m u n i t y   i n   e n t r e p r e n e u r s h i p   s c h o l a r s h i p 	 E N T R E P R E N E U R S H I P   T H E O R Y   A N D   P R A C T I C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 J O U R N A L   C O C I T A T I O N   A N A L Y S I S ;   I N T E L L E C T U A L   S T R U C T U R E ;   C I T A T I O N   A N A L Y S I S ;   F I E L D ;   B I B L I O M E T R I C S ;   E C O N O M I C S ;   A R T I C L E S ;   S C I E N C E ;   A U T H O R S ;   S E A R C H 	 T h i s   s p e c i a l   i s s u e   i s   d e v o t e d   t o   u n d e r s t a n d i n g   t h e   s c i e n t i f i c   s t r u c t u r e   o f   e n t r e p r e n e u r s h i p   r e s e a r c h .   R e s e a r c h   i n   e n t r e p r e n e u r s h i p   h a s   g r o w n   r a p i d l y ,   e n c o m p a s s i n g   m u l t i p l e   t h e o r e t i c a l   a n d   m e t h o d o l o g i c a l   t r a d i t i o n s .   A r t i c l e s   i n   t h i s   i s s u e   u s e   b i b l i o m e t r i c   t e c h n i q u e s   t o   f i n d   l i n k a g e s   a m o n g   p u b l i s h e d   e n t r e p r e n e u r s h i p   s c h o l a r s .   T h e s e   a n a l y s e s   s h o w   t h a t   r e s e a r c h   i n   t h e   e n t r e p r e n e u r s h i p   f i e l d   c o n t a i n s :   m u l t i p l e   b u t   d i s c o n n e c t e d   t h e m e s ;   d o m i n a n t   t h e m e s   t h a t   r e f l e c t   t h e   d i s c i p l i n a r y   t r a i n i n g   a n d   l e n s   o f   t h e i r   a u t h o r s ;   a n d   c o n s i d e r a b l e   d y n a m i s m   a n d   c h a n g e   i n   k e y   r e s e a r c h   t h e m e s   o v e r   t i m e .   T h e s e   s p e c i a l   i s s u e   a r t i c l e s   p r o v i d e   r i c h   o p p o r t u n i t i e s   f o r   i d e n t i f y i n g   i n s i g h t f u l ,   i n f l u e n t i a l ,   a n d   c r e a t i v e   r e s e a r c h   n i c h e s   i n   t h e   e n t r e p r e n e u r s h i p   f i e l d . 	 C l e m s o n   U n i v ,   S p i r o   C t r   E n t r e p r e n e u r i a l   L e a d e r s h i p ,   C l e m s o n ,   S C   2 9 6 3 4   U S A ;   B r i s b a n e   G r a d   S c h   B u s i n e s s ,   B r i s b a n e ,   Q l d   4 0 0 0 ,   A u s t r a l i a ;   U n i v   M i n n e s o t a ,   C a r l s o n   S c h   M a n a g e m e n t ,   C t r   E n t r e p r e n e u r i a l   S t u d i e s ,   M i n n e a p o l i s ,   M N   5 5 4 5 5   U S A 	 G a r t n e r ,   W B   ( r e p r i n t   a u t h o r ) ,   C l e m s o n   U n i v ,   S p i r o   C t r   E n t r e p r e n e u r i a l   L e a d e r s h i p ,   3 4 5   S i r r i n e   H a l l ,   C l e m s o n ,   S C   2 9 6 3 4   U S A . 	 g a r t n e r @ c l e m s o n . e d u ;   p e r . d a v i d s s o n @ q u t . e d u . a u ;   s z a h r a @ c s o m . u m n . e d u 	 	 	 	 	 A L D R I C H   H E ,   2 0 0 2 ,   E N T R E P R E N E U R S H I P   2 0 0 ,   P 3 7 7 ;   B a u m o l   W .   J . ,   1 9 8 3 ,   E N T R E P R E N E U R S H I P ,   P 2 9 ;   B i a n c h i   M ,   2 0 0 5 ,   K Y K L O S ,   V 5 8 ,   P 3 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 0 0 2 3 - 5 9 6 2 . 2 0 0 5 . 0 0 2 9 2 . x ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   B r a u n   T ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 4 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 4 3 0 0 2 5 6 0 ;   B u r t   R .   S . ,   1 9 9 2 ,   S T R U C T U R A L   H O L E S   S O C ;   B u s e n i t z   L W ,   2 0 0 3 ,   J   M A N A G E ,   V 2 9 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 0 6 3 ( 0 3 ) 0 0 0 1 3 - 8 ;   C a h l i k   T ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 3 8 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 3 5 0 6 0 6 1 ;   C o l e m a n   J . S . ,   1 9 8 8 ,   A M   J   S O C I O L ,   V 9 4 ,   P 9 5 ,   D O I   D O I   1 0 . 1 0 8 6 / 2 2 8 9 4 3 ;   C o r n e l i u s   B ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 5 . x ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   D a v i d s s o n   P . ,   2 0 0 4 ,   R E S   E N T R E P R E N E U R S H I P ;   D A V I D S S O N   P ,   2 0 0 3 ,   C O G N I T I V E   A P P R O A C H E S ,   V 6 ,   P 3 1 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 1 0 7 4 - 7 5 4 0 ( 0 3 ) 0 6 0 1 0 - 0 ;   D e r y   R ,   1 9 9 6 ,   C A N   J   A D M   S C I ,   V 1 3 ,   P 2 8 5 ;   G A R F I E L D   E ,   1 9 8 6 ,   C U R R   C O N T E N T S ,   P 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R T N E R   W B ,   1 9 8 5 ,   A C A D   M A N A G E   R E V ,   V 1 0 ,   P 6 9 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 0 3 9 ;   G a r t n e r   W . ,   2 0 0 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 5 ,   P 2 7 ;   G L A N Z E L   W ,   2 0 0 5 ,   B I B L I O M E T R I C S   R E S   F I ;   G m u r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 1 9 5 0 3 0 0 5 ;   G r a n o v e t t e r   M S ,   1 9 7 3 ,   A M   J   S O C I O L ,   D O I   1 0 . 1 0 8 6 / 2 2 5 4 6 9 ;   G r e g o i r e   D . ,   2 0 0 1 ,   F R O N T I E R S   E N T R E P R E N E ,   P 6 4 4 ;   G r e g o i r e   D A ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 4 . x ;   H e r t z e l   D .   H ,   1 9 8 7 ,   E N C Y   L I B R A R Y   I N F O   S 7 ,   P 1 4 4 ;   K a t z   J A ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 2 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 2 ) 0 0 0 9 8 - 8 ;   L A N D S T R O M   H ,   2 0 0 1 ,   1 5   R E N T   C   T U R K   F I N L ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   L o w   M .   B . ,   2 0 0 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 5 ,   P 1 7 ;   L O W   M B ,   1 9 8 8 ,   J   M A N A G E ,   V 1 4 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 8 8 0 1 4 0 0 2 0 2 ;   M C C A I N   K W ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 9 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 2 1 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 4 . 2 1 7 ;   P a r k i n s o n   S ,   2 0 0 1 ,   C L I M   P O L I C Y ,   V 1 ,   P 5 5 ,   D O I   1 0 . 3 7 6 3 / c p o l . 2 0 0 1 . 0 1 0 6 ;   P e a r c e   J . ,   2 0 0 3 ,   A C A D   M A N A G E M E N T   N E W S ,   V 3 4 ,   P 1 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R a t n a t u n g a   J ,   1 9 9 7 ,   J   B U S   V E N T U R I N G ,   V 1 2 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 9 6 ) 0 0 0 6 2 - 6 ;   R e a d e r   D ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 4 1 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 7 . x ;   R E A D E R   D ,   2 0 0 1 ,   1 5   R E N T   C   T U R K   F I N L ;   R I C K E Y   B ,   1 9 9 5 ,   B R A N C H   R I C K E Y S   L I T T L ;   S c h i l d t   H A ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 6 . x ;   S C H I L D T   H A ,   2 0 0 4 ,   B A B S   K A U F F M   E N T R   R E S ;   S h a n e   S ,   2 0 0 0 ,   A C A D   M A N A G E   R E V ,   V 2 5 ,   P 2 1 7 ,   D O I   1 0 . 5 4 6 5 / a m r . 2 0 0 0 . 2 7 9 1 6 1 1 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   T s a y   M Y ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 6 7 3 1 8 9 3 4 ;   V a n   R a a n   A n t h o n y   F .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   V e n k a t a r a m a n   S . ,   1 9 9 4 ,   J   B U S I N E S S   V E N T U R I N G ,   V 9 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / 0 8 8 3 - 9 0 2 6 ( 9 4 ) 9 0 0 2 3 - X ;   W A T K I N S   D ,   1 9 9 5 ,   S M A L L   B U S I N E S S   E N T E R ,   V 2 ,   P 5 9 ;   W a t k i n s   D . ,   2 0 0 3 ,   1 7   R E N T   C   L O D Z   P O L ;   W A T K I N S   D S ,   1 9 9 4 ,   S M A L L   B U S I N E S S   E N T E R ,   V 1 ,   P 2 8 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W O R T M A N   M S ,   1 9 8 7 ,   J   M A N A G E ,   V 1 3 ,   P 2 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 8 7 0 1 3 0 0 2 0 5 ;   Z a h r a   S ,   2 0 0 1 ,   A C A D   M A N A G E   R E V ,   V 2 6 ,   P 8 ,   D O I   1 0 . 5 4 6 5 / A M R . 2 0 0 1 . 4 0 1 1 9 1 6 ;   Z a h r a   S . ,   2 0 0 5 ,   H D B   E N T R E P R E N E U R S H I P ,   V 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / 0 - 3 8 7 - 2 3 6 2 2 - 8 _ 1 2 ;   Z I P F G K ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 6 2 	 4 2 	 4 4 	 3 	 3 8 	 B L A C K W E L L   P U B L I S H I N G 	 O X F O R D 	 9 6 0 0   G A R S I N G T O N   R D ,   O X F O R D   O X 4   2 D Q ,   O X O N ,   E N G L A N D 	 1 0 4 2 - 2 5 8 7 	 	 	 E N T R E P   T H E O R Y   P R A C T 	 E n t r e p .   T h e o r y   P r a c t . 	 M A Y 	 2 0 0 6 	 3 0 	 3 	 	 	 	 	 3 2 1 	 3 3 1 	 	 1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 3 . x 	 	 1 1 	 B u s i n e s s 	 B u s i n e s s   &   E c o n o m i c s 	 0 3 2 T Z 	 W O S : 0 0 0 2 3 6 7 9 9 3 0 0 0 0 1 	 	 
 
 J 	 B O R G M A N ,   C L ;   R I C E ,   R E 	 	 	 	 B O R G M A N ,   C L ;   R I C E ,   R E 	 	 	 T H E   C O N V E R G E N C E   O F   I N F O R M A T I O N - S C I E N C E   A N D   C O M M U N I C A T I O N   -   A   B I B L I O M E T R I C   A N A L Y S I S 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C O - C I T A T I O N   A N A L Y S I S ;   S C H O L A R L Y   C O M M U N I C A T I O N ;   S T R U C T U R A L   E Q U I V A L E N C E ;   J O U R N A L   N E T W O R K ;   S C I E N T I F I C   L I T E R A T U R E ;   E D I T O R S   I N T R O D U C T I O N ;   T E C H N O L O G Y 	 T h i s   s t u d y   a s k s   w h e t h e r   t h e   d i s c i p l i n e s   o f   i n f o r m a t i o n   s c i e n c e   a n d   c o m m u n i c a t i o n   a r e   c o n v e r g i n g ,   a s   i n d i c a t e d   b y   a   b i b l i o m e t r i c   s t u d y   o f   a l l   c o r e   j o u r n a l s   o f   b o t h   d i s c i p l i n e s   i n   t h e   S o c i a l   S c i e n c e s   C i t a t i o n   I n d e x   ( S S C I ( R ) )   f o r   t h e   p e r i o d   1 9 7 7   t o   1 9 8 7 .   R e s u l t s   s h o w   v e r y   l i t t l e   c o n v e r g e n c e   b e t w e e n   t h e s e   d i s c i p l i n e s ,   a t   l e a s t   o n   t h e   b a s i s   o f   c r o s s - d i s c i p l i n a r y   j o u r n a l   c i t a t i o n   p a t t e r n s ,   a l t h o u g h   t h e   n u m b e r   o f   j o u r n a l s   i n v o l v e d   h a s   i n c r e a s e d   s l i g h t l y   o v e r   t i m e .   A   f e w   j o u r n a l s   a r e   m a i n l y   r e s p o n s i b l e   f o r   t h e   c r o s s - d i s c i p l i n a r y   c i t i n g ,   a n d   t h e y   a r e   p r i m a r i l y   i n f o r m a t i o n   s c i e n c e   j o u r n a l s   c i t i n g   c o m m u n i c a t i o n   j o u r n a l s .   T h e   r e s u l t s   m a y   b e   o f   i n t e r e s t   t o   t h o s e   s t u d y i n g   s c h o l a r l y   c o m m u n i c a t i o n   o r   b i b l i o m e t r i c s ,   t o   f a c u l t y   c o n s t r u c t i n g   c u r r i c u l a   i n   e i t h e r   o f   t h e   d i s c i p l i n e s ,   t o   c o m m u n i c a t i o n   a n d   i n f o r m a t i o n   s c i e n c e   s c h o l a r s   s e e k i n g   n e w   a r e a s   o f   r e s e a r c h ,   a n d   t o   c o l l e c t i o n   d e v e l o p m e n t   l i b r a r i a n s   i n   d r a w i n g   t h e   b o u n d a r i e s   o f   t h e s e   d i s c i p l i n e s . 	 R U T G E R S   S T A T E   U N I V ,   S C H   C O M M U N   I N F O R M A T   &   L I B   S T U D I E S ,   N E W   B R U N S W I C K ,   N J   0 8 9 0 3   U S A 	 U N I V   C A L I F   L O S   A N G E L E S ,   G R A D   S C H   L I B   &   I N F O R M A T   S C I ,   L O S   A N G E L E S ,   C A   9 0 0 2 4   U S A . 	 	 	 B o r g m a n ,   C h r i s t i n e / 0 0 0 0 - 0 0 0 2 - 9 3 4 4 - 1 0 2 9 	 	 	 B A K E R   F B ,   1 9 8 1 ,   S O C I O L   M E T H O D   R E S ,   V 9 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 9 1 2 4 1 8 1 0 0 9 0 0 3 0 5 ;   B A R N E T T   G A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 1 0 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 4 0 0 3 ;   B A R N E T T   G A ,   1 9 8 9 ,   S C I   B A S E D   C I T A T I O N S ;   B E N I G E R   J R ,   1 9 8 8 ,   C O M M U N   R E S ,   V 1 5 ,   P 1 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 8 0 1 5 0 0 2 0 0 5 ;   B E R G E R   C R ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 3 1 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 7 . x ;   B O R G M A N   C L ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 2 ;   B o r g m a n   C h r i s t i n e   L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 1 0 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B O R K O   H ,   1 9 6 8 ,   A M   D O C ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 9 0 1 0 3 ;   C O B L A N S   H ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 5 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 3 0 ;   C O T T R I L L   C A ,   1 9 8 9 ,   K N O W L E D G E ,   V 1 1 ,   P 1 8 1 ;   D A N S E Y   P ,   1 9 7 3 ,   A S L I B   P R O C ,   V 2 5 ,   P 2 5 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 0 4 1 2 ;   D O N O H U E   J C ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 5 0 6 ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 4 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 6 1 1 ;   E I S E N H A R D T   O H ,   1 9 7 9 ,   N A C H R   D O K ,   V 3 0 ,   P 8 1 ;   H A N S O N   C W ,   1 9 6 3 ,   J   D O C ,   V 1 9 ,   P 6 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 3 2 7 ;   H A R T E R   S P ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 2 6 3 ;   H A Y E S   R M ,   1 9 6 9 ,   L I B R I ,   V 1 9 ,   P 2 1 6 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 6 9 . 1 9 . 1 - 4 . 2 1 6 ;   H A Y E S   R M ,   1 9 8 3 ,   J   E D U C   L I B R A R I A N S H I P ,   V 2 3 ,   P 1 5 1 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 2 8 8 0 ;   J O H N S O N   S C ,   1 9 6 7 ,   P S Y C H O M E T R I K A ,   V 3 2 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 8 9 5 8 8 ;   L A R O S E   A J ,   1 9 8 9 ,   R Q ,   V 2 9 ,   P 2 9 ;   L O C K E T T   M W ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 2 8 1 ;   M E A D O W   C T ,   1 9 7 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 0 ,   P 3 6 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 0 0 6 1 5 ;   M I D O R I K A W A   N ,   1 9 8 4 ,   L I B R A R Y   I N F O R M A T I O N ,   V 2 2 ,   P 8 7 ;   M O E D   H F ,   1 9 8 9 ,   J   I N F O R M   S C I ,   V 1 5 ,   P 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 9 0 1 5 0 0 2 0 5 ;   P A I S L E Y   W ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 7 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 1 0 ;   P a i s l e y   W i l l i a m   J . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 2 8 1 ;   P a i s l e y   W i l l i a m ,   1 9 8 6 ,   L I B R A R I E S   I N F O R M A T I O ,   P 1 2 2 ;   P a i s l e y   W .   J . ,   1 9 8 4 ,   P R O G R   C O M M U N I C A T I O N ,   P 1 ;   P A I S L E Y   W J ,   1 9 9 0 ,   I N F O R M A T I O N   S C I   I N T E ;   P A R K E R   E B ,   1 9 6 7 ,   B I B L I O   C I T A T I O N S   U N O ;   P E M B E R T O N   J M ,   1 9 9 0 ,   I N F O R M A T I O N   S C I   I N T E ;   P e r i t z   B .   C . ,   1 9 8 1 ,   L I B R   R E S ,   V 3 ,   P 4 7 ;   P O P E   A ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 6 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 6 0 4 0 3 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R E A R D O N   K K ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 8 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 5 . x ;   R E E V E S   B ,   1 9 8 3 ,   H U M   C O M M U N   R E S ,   V 1 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 3 . t b 0 0 0 0 7 . x ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   R I C E   R E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 0 2 ;   R I C E   R E ,   1 9 8 5 ,   P R O G R   C O M M U N I C A T I O N ,   V 6 ,   P 1 0 5 ;   R i c e   R .   E . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 1 3 8 ;   R I C H A R D S   W D ,   1 9 8 1 ,   S O C   N E T W O R K S ,   V 3 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 1 ) 9 0 0 1 7 - 4 ;   S A I T O   Y ,   1 9 8 4 ,   L I B   I N F O R M A T I O N   S C I ,   V 2 2 ,   P 6 1 ;   S A R A C E V I C   T ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 1 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 2 0 7 ;   S A R A C E V I C   T ,   1 9 7 1 ,   A N N   R E V   I N F O R M A T I O N ,   V 7 ,   P 1 2 7 ;   S C H E M E N T   J ,   I N   P R E S S   I N F O R M A T I O N ,   V 3 ;   S c h r a m m   W .   L . ,   1 9 7 1 ,   P R O C E S S   E F F E C T S   M A S S ;   S E L L E N   M K ,   1 9 8 4 ,   C O L L   R E S   L I B R ,   V 4 5 ,   P 1 2 9 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 7 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 1 ) 9 0 0 4 0 - 6 ;   S O   C Y K ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 3 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 3 . x ;   S W I S H E R   R ,   1 9 8 2 ,   C O L L   R E S   L I B R ,   V 4 3 ,   P 5 1 ;   T O D O R O V   R ,   1 9 8 2 ,   I N T   F O R U M   I N F O R M   D O C ,   V 7 ,   P 2 2 ;   W E L L I S C H   H ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 2 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 3 1 5 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 	 5 8 	 4 2 	 4 3 	 3 	 1 7 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 J U L 	 1 9 9 2 	 4 3 	 6 	 	 	 	 	 3 9 7 	 4 1 1 	 	 1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 3 9 7 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - M 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 J A 7 8 9 	 W O S : A 1 9 9 2 J A 7 8 9 0 0 0 0 1 	 	 
 
 J 	 F r a n c e s c h e t ,   M ;   C o s t a n t i n i ,   A 	 	 	 	 F r a n c e s c h e t ,   M a s s i m o ;   C o s t a n t i n i ,   A n t o n i o 	 	 	 T h e   f i r s t   I t a l i a n   r e s e a r c h   a s s e s s m e n t   e x e r c i s e :   A   b i b l i o m e t r i c   p e r s p e c t i v e 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   a s s e s s m e n t ;   P e e r   r e v i e w ;   B i b l i o m e t r i c s 	 C I T A T I O N   D I S T R I B U T I O N S ;   H I R S C H - I N D E X ;   H - I N D E X ;   I N D I C A T O R S ;   S C I E N C E ;   U N I V E R S A L I T Y ;   V A L I D A T I O N ;   C H E M I S T R Y ;   M E T R I C S ;   I M P A C T 	 I n   D e c e m b e r   2 0 0 3 ,   s e v e n t e e n   y e a r s   a f t e r   t h e   f i r s t   U K   r e s e a r c h   a s s e s s m e n t   e x e r c i s e ,   I t a l y   s t a r t e d   u p   i t s   f i r s t - e v e r   n a t i o n a l   r e s e a r c h   e v a l u a t i o n ,   w i t h   t h e   a i m   t o   e v a l u a t e ,   u s i n g   t h e   p e e r   r e v i e w   m e t h o d ,   t h e   e x c e l l e n c e   o f   t h e   n a t i o n a l   r e s e a r c h   p r o d u c t i o n .   T h e   e v a l u a t i o n   i n v o l v e d   2 0   d i s c i p l i n a r y   a r e a s ,   1 0 2   r e s e a r c h   s t r u c t u r e s ,   1 8 , 5 0 0   r e s e a r c h   p r o d u c t s   a n d   6 6 6 1   p e e r   r e v i e w e r s   ( 1 4 6 5   f r o m   a b r o a d ) ;   i t   h a d   a   d i r e c t   c o s t   o f   3 . 5 5   m i l l i o n s   E u r o s   a n d   a   t i m e   l e n g t h   s p a n n i n g   o v e r   1 8   m o n t h s .   T h e   i n t r o d u c t i o n   o f   r a t i n g s   b a s e d   o n   e x   p o s t   q u a l i t y   o f   o u t p u t   a n d   n o t   o n   e x   a n t e   r e s p e c t   f o r   p a r a m e t e r s   a n d   c o m p l i a n c e   i s   a n   i m p o r t a n t   l e a p   f o r w a r d   o f   t h e   n a t i o n a l   r e s e a r c h   e v a l u a t i o n   s y s t e m   t o w a r d   m e r i t o c r a c y .   F r o m   t h e   b i b l i o m e t r i c   p e r s p e c t i v e ,   t h e   n a t i o n a l   a s s e s s m e n t   o f f e r e d   t h e   u n p r e c e d e n t e d   o p p o r t u n i t y   t o   p e r f o r m   a   l a r g e - s c a l e   c o m p a r i s o n   o f   p e e r   r e v i e w   a n d   b i b l i o m e t r i c   i n d i c a t o r s   f o r   a n   i m p o r t a n t   s h a r e   o f   t h e   I t a l i a n   r e s e a r c h   p r o d u c t i o n .   T h e   p r e s e n t   i n v e s t i g a t i o n   t a k e s   f u l l   a d v a n t a g e   o f   t h i s   o p p o r t u n i t y   t o   t e s t   w h e t h e r   p e e r   r e v i e w   j u d g e m e n t s   a n d   ( a r t i c l e   a n d   j o u r n a l )   b i b l i o m e t r i c   i n d i c a t o r s   a r e   i n d e p e n d e n t   v a r i a b l e s   a n d ,   i n   t h e   n e g a t i v e   c a s e ,   t o   m e a s u r e   t h e   s i g n   a n d   s t r e n g t h   o f   t h e   a s s o c i a t i o n .   O u t c o m e s   a l l o w   u s   t o   a d v o c a t e   t h e   u s e   o f   b i b l i o m e t r i c   e v a l u a t i o n ,   s u i t a b l y   i n t e g r a t e d   w i t h   e x p e r t   r e v i e w ,   f o r   t h e   f o r t h c o m i n g   n a t i o n a l   a s s e s s m e n t   e x e r c i s e s ,   w i t h   t h e   g o a l   o f   s h i f t i n g   f r o m   t h e   a s s e s s m e n t   o f   r e s e a r c h   e x c e l l e n c e   t o   t h e   e v a l u a t i o n   o f   a v e r a g e   r e s e a r c h   p e r f o r m a n c e   w i t h o u t   s i g n i f i c a n t   i n c r e a s e   o f   e x p e n s e s .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ F r a n c e s c h e t ,   M a s s i m o ]   U n i v   U d i n e ,   D e p t   M a t h   &   C o m p   S c i ,   I - 3 3 1 0 0   U d i n e ,   I t a l y ;   [ C o s t a n t i n i ,   A n t o n i o ]   U n i v   U d i n e ,   D e p t   A g r   &   E n v i r o n m   S c i ,   I - 3 3 1 0 0   U d i n e ,   I t a l y 	 F r a n c e s c h e t ,   M   ( r e p r i n t   a u t h o r ) ,   U n i v   U d i n e ,   D e p t   M a t h   &   C o m p   S c i ,   V i a   S c i   2 0 6 ,   I - 3 3 1 0 0   U d i n e ,   I t a l y . 	 m a s s i m o . f r a n c e s c h e t @ u n i u d . i t 	 	 	 	 	 A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   A l t h o u s e   B .   M . ,   2 0 0 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 2 7 ;   A S K N E S   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ;   B a l l   P ,   2 0 0 7 ,   N A T U R E ,   V 4 4 8 ,   P 7 3 7 ,   D O I   1 0 . 1 0 3 8 / 4 4 8 7 3 7 a ;   B l e i k l i e   I . ,   1 9 9 8 ,   E U R O P E A N   J   E D ,   V 3 3 ,   P 2 9 9 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 1 . 0 0 2 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B o r n m a n n   L ,   2 0 1 1 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 5 ,   P 1 9 9 ;   B o r n m a n n   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 6 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 7 6 ;   B u t l e r   L ,   2 0 0 9 ,   P O L I T   S T U D   R E V ,   V 7 ,   P 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 8 - 9 2 9 9 . 2 0 0 8 . 0 0 1 6 7 . x ;   C A L Z A   L ,   1 9 9 5 ,   N A T U R E ,   V 3 7 4 ,   P 4 9 2 ,   D O I   1 0 . 1 0 3 8 / 3 7 4 4 9 2 a 0 ;   C a m p b e l l   P . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 5 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 8 . C U R R Y ;   C H U B I N   D E ,   1 9 9 0 ,   P E E R L E S S   S C I   P E E R   R E ,   P 1 7 ;   C r o n i n   B ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 3 - 8 ;   F a w c e t t   T ,   2 0 0 6 ,   P A T T E R N   R E C O G N   L E T T ,   V 2 7 ,   P 8 6 1 ,   D O I   1 0 . 1 0 1 6 / j . p a t r e c . 2 0 0 5 . 1 0 . 0 1 0 ;   F r a n c e s c h e t   M . ,   2 0 1 0 ,   C O M M U N   A C M ,   V 5 3 ,   P 1 2 9 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 8 5 9 2 0 4 . 1 8 5 9 2 3 4 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 5 4 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 3 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 1 - 2 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 8 . 0 0 1 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K r a e m e r   H C ,   2 0 0 3 ,   J   A M   A C A D   C H I L D   P S Y ,   V 4 2 ,   P 1 5 2 4 ,   D O I   1 0 . 1 0 9 7 / 0 1 . c h i . 0 0 0 0 0 9 1 5 0 7 . 4 6 8 5 3 . d 1 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M i n e l l i   E ,   2 0 0 8 ,   E U R O P E A N   U N I V E R S I T I E S   I N   T R A N S I T I O N :   I S S U E S ,   M O D E L S   A N D   C A S E S ,   P 2 2 1 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N e a v e   G . ,   1 9 9 8 ,   E U R O P E A N   J   E D ,   V 3 3 ,   P 2 6 5 ;   O p p e n h e i m   C . ,   2 0 0 3 ,   J   D O C ,   V 5 6 ,   P 7 0 9 ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R e a l e   E ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 2 1 6 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 2 7 5 0 1 ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S t r i n g e r   M J ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 1 6 8 3 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 . 8 2 4 4 1 . f 1 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 	 3 9 	 4 1 	 4 1 	 3 	 4 6 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 A P R 	 2 0 1 1 	 5 	 2 	 	 	 	 	 2 7 5 	 2 9 1 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 2 . 0 0 2 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 3 2 A V 	 W O S : 0 0 0 2 8 8 1 5 4 7 0 0 0 0 4 	 	 
 
 J 	 S t r i n g e r ,   M J ;   S a l e s - P a r d o ,   M ;   A m a r a l ,   L A N 	 	 	 	 S t r i n g e r ,   M i c h a e l   J . ;   S a l e s - P a r d o ,   M a r t a ;   A m a r a l ,   L u i s   A .   N u n e s 	 	 	 S t a t i s t i c a l   V a l i d a t i o n   o f   a   G l o b a l   M o d e l   f o r   t h e   D i s t r i b u t i o n   o f   t h e   U l t i m a t e   N u m b e r   o f   C i t a t i o n s   A c c r u e d   b y   P a p e r s   P u b l i s h e d   i n   a   S c i e n t i f i c   J o u r n a l 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I M P A C T ;   B E H A V I O R ;   S C I E N C E ;   P O W E R 	 A   c e n t r a l   i s s u e   i n   e v a l u a t i v e   b i b l i o m e t r i c s   i s   t h e   c h a r a c t e r i z a t i o n   o f   t h e   c i t a t i o n   d i s t r i b u t i o n   o f   p a p e r s   i n   t h e   s c i e n t i f i c   l i t e r a t u r e .   H e r e ,   w e   p e r f o r m   a   l a r g e - s c a l e   e m p i r i c a l   a n a l y s i s   o f   j o u r n a l s   f r o m   e v e r y   f i e l d   i n   T h o m s o n   R e u t e r s '   W e b   o f   S c i e n c e   d a t a b a s e .   W e   f i n d   t h a t   o n l y   3 0   o f   t h e   2 , 1 8 4   j o u r n a l s   h a v e   c i t a t i o n   d i s t r i b u t i o n s   t h a t   a r e   i n c o n s i s t e n t   w i t h   a   d i s c r e t e   l o g n o r m a l   d i s t r i b u t i o n   a t   t h e   r e j e c t i o n   t h r e s h o l d   t h a t   c o n t r o l s   t h e   f a l s e   d i s c o v e r y   r a t e   a t   0 . 0 5 .   W e   f i n d   t h a t   l a r g e ,   m u l t i d i s c i p l i n a r y   j o u r n a l s   a r e   o v e r - r e p r e s e n t e d   i n   t h i s   s e t   o f   3 0   j o u r n a l s ,   l e a d i n g   u s   t o   c o n c l u d e   t h a t ,   w i t h i n   a   d i s c i p l i n e ,   c i t a t i o n   d i s t r i b u t i o n s   a r e   l o g n o r m a l .   O u r   r e s u l t s   s t r o n g l y   s u g g e s t   t h a t   t h e   d i s c r e t e   l o g n o r m a l   d i s t r i b u t i o n   i s   a   g l o b a l l y   a c c u r a t e   m o d e l   f o r   t h e   d i s t r i b u t i o n   o f   " e v e n t u a l   i m p a c t "   o f   s c i e n t i f i c   p a p e r s   p u b l i s h e d   i n   s i n g l e - d i s c i p l i n e   j o u r n a l   i n   a   s i n g l e   y e a r   t h a t   i s   r e m o v e d   s u f f i c i e n t l y   f r o m   t h e   p r e s e n t   d a t e . 	 [ S t r i n g e r ,   M i c h a e l   J . ]   N o r t h w e s t e r n   U n i v ,   D e p t   P h y s   &   A s t r o n ,   E v a n s t o n ,   I L   6 0 2 0 8   U S A ;   [ S t r i n g e r ,   M i c h a e l   J . ;   S a l e s - P a r d o ,   M a r t a ]   N o r t h w e s t e r n   U n i v ,   N I C O ,   E v a n s t o n ,   I L   6 0 2 0 8   U S A ;   [ S a l e s - P a r d o ,   M a r t a ;   A m a r a l ,   L u i s   A .   N u n e s ]   N o r t h w e s t e r n   U n i v ,   D e p t   B i o l   &   C h e m   E n g n ,   E v a n s t o n ,   I L   6 0 2 0 8   U S A ;   [ S a l e s - P a r d o ,   M a r t a ]   U n i v   R o v i r a   &   V i r g i l i ,   D e p t   E n g n   Q u i m ,   T a r r a g o n a   4 3 0 0 7 ,   S p a i n ;   [ A m a r a l ,   L u i s   A .   N u n e s ]   N o r t h w e s t e r n   U n i v ,   H o w a r d   H u g h e s   M e d   I n s t ,   E v a n s t o n ,   I L   6 0 2 0 8   U S A 	 S t r i n g e r ,   M J   ( r e p r i n t   a u t h o r ) ,   N o r t h w e s t e r n   U n i v ,   D e p t   P h y s   &   A s t r o n ,   E v a n s t o n ,   I L   6 0 2 0 8   U S A . 	 m - s t r i n g e r @ n o r t h w e s t e r n . e d u 	 A m a r a l ,   L u i s / A - 4 9 8 0 - 2 0 0 8 ;   A m a r a l ,   L u i s   N . / C - 5 4 8 5 - 2 0 0 9 ;   S a l e s - P a r d o ,   M a r t a / C - 1 7 2 5 - 2 0 0 8 	 A m a r a l ,   L u i s / 0 0 0 0 - 0 0 0 2 - 3 7 6 2 - 7 8 9 X ;   S a l e s - P a r d o ,   M a r t a / 0 0 0 0 - 0 0 0 2 - 8 1 4 0 - 6 5 2 5 	 H o w a r d   H u g h e s   M e d i c a l   I n s t i t u t e ;   N I G M S   N I H   H H S   [ K 2 5   G M 0 6 9 5 4 6 - 0 5 ] 	 	 A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A I T C H I S O N   J ,   1 9 5 5 ,   J   A M   S T A T   A S S O C ,   V 5 0 ,   P 9 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 1 1 7 5 ;   B E N J A M I N I   Y ,   1 9 9 5 ,   J   R O Y   S T A T   S O C   B   M E T ,   V 5 7 ,   P 2 8 9 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 0 1 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   B u r r e l l   Q L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 3 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 0 7 ;   B u r r e l l   Q L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 5 1 5 0 9 9 7 5 ;   C o l e   J R ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 2 8 1 ;   E f r o n   R . ,   1 9 9 4 ,   I N T R O   B O O T S T R A P ;   E f r o n   B ,   2 0 0 7 ,   A N N   S T A T ,   V 3 5 ,   P 1 3 5 1 ,   D O I   1 0 . 1 2 1 4 / 0 0 9 0 5 3 6 0 6 0 0 0 0 0 1 4 6 0 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 0 3 > 3 . 0 . C O ; 2 - 8 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T I S T ,   V 1 8 ,   P 8 ;   K r a p i v s k y   P L ,   2 0 0 1 ,   P H Y S   R E V   E ,   V 6 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 3 . 0 6 6 1 2 3 ;   L a n e   J ,   2 0 0 9 ,   S C I E N C E ,   V 3 2 4 ,   P 1 2 7 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 7 5 3 3 5 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   N a d a r a j a h   S ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 1 7 - 9 ;   P e r l i n e   R ,   2 0 0 5 ,   S T A T   S C I ,   V 2 0 ,   P 6 8 ,   D O I   1 0 . 1 2 1 4 / 0 8 8 3 4 2 3 0 4 0 0 0 0 0 0 2 1 5 ;   P r e s s   W . ,   2 0 0 2 ,   N U M E R I C A L   R E C I P E S   C ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R e d n e r   S ,   2 0 0 5 ,   P H Y S   T O D A Y ,   V 5 8 ,   P 4 9 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 9 9 6 4 7 5 ;   R e d n e r   S ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 3 5 9 ;   S h i f f r i n   R M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 8 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 8 5 2 1 0 0 ;   S H O C K L E Y   W ,   1 9 5 7 ,   P   I R E ,   V 4 5 ,   P 2 7 9 ,   D O I   1 0 . 1 1 0 9 / J R P R O C . 1 9 5 7 . 2 7 8 3 6 4 ;   S i m k i n   M V ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 6 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 5 3 ;   S T E W A R T   J A ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 6 7 - 1 ;   S t r i n g e r   M J ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 1 6 8 3 ;   T A Y L O R   J . R . ,   1 9 9 7 ,   I N T R O   E R R O R   A N A L ;   T o m l i n   S ,   2 0 0 5 ,   N A T U R E ,   V 4 3 8 ,   P 5 4 7 ,   D O I   1 0 . 1 0 3 8 / 4 3 8 5 4 7 a ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   N A T U R E ,   V 4 3 5 ,   P 1 0 0 3 ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   N A T U R E ,   V 4 5 7 ,   P 7 	 3 2 	 4 1 	 4 1 	 2 	 1 9 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U L 	 2 0 1 0 	 6 1 	 7 	 	 	 	 	 1 3 7 7 	 1 3 8 5 	 	 1 0 . 1 0 0 2 / a s i . 2 1 3 3 5 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 1 5 Q V 	 W O S : 0 0 0 2 7 9 1 5 1 6 0 0 0 0 6 	 2 1 8 5 8 2 5 1 	 
 
 J 	 S h a d g a n ,   B ;   R o i g ,   M ;   H a j G h a n b a r i ,   B ;   R e i d ,   W D 	 	 	 	 S h a d g a n ,   B a b a k ;   R o i g ,   M a r c ;   H a j G h a n b a r i ,   B a h a r e h ;   R e i d ,   W .   D a r l e n e 	 	 	 T o p - C i t e d   A r t i c l e s   i n   R e h a b i l i t a t i o n 	 A R C H I V E S   O F   P H Y S I C A L   M E D I C I N E   A N D   R E H A B I L I T A T I O N 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 B i b l i o m e t r i c s ;   P h y s i c a l   t h e r a p y   m o d a l i t i e s ;   R e h a b i l i t a t i o n ;   R e v i e w   [ p u b l i c a t i o n   t y p e ] 	 1 0 0   C I T A T I O N - C L A S S I C S ;   P H Y S I C A L - T H E R A P Y ;   O C C U P A T I O N A L - M E D I C I N E ;   J O U R N A L S ;   A S S O C I A T I O N ;   A R C H I V E S ;   S C I E N C E ;   B I A S 	 O b j e c t i v e :   T o   i d e n t i f y   t h e   1 0 0   t o p - c i t e d   a r t i c l e s   e v e r   p u b l i s h e d   i n   r e h a b i l i t a t i o n   j o u r n a l s   a n d   t o   a n a l y z e   t h e i r   c h a r a c t e r i s t i c s   a s   a   q u a n t i t a t i v e   a p p r o a c h   t o   i n v e s t i g a t i n g   t h e   q u a l i t y   a n d   e v o l u t i o n   o f   r e h a b i l i t a t i o n   r e s e a r c h .   D a t a   S o u r c e s :   T h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   W e b   o f   K n o w l e d g e   D a t a b a s e   a n d   t h e   2 0 0 7   a n d   2 0 0 8   J o u r n a l   C i t a t i o n   R e p o r t   S c i e n c e   E d i t i o n s   w e r e   u s e d   t o   r e t r i e v e   t h e   1 0 0   t o p - c i t e d   a r t i c l e s   f r o m   3 0   r e h a b i l i t a t i o n   d e d i c a t e d   j o u r n a l s .   S t u d y   S e l e c t i o n :   T h e   1 0 0   t o p - c i t e d   a r t i c l e s   i n c l u d e d   r a n d o m i z e d   c o n t r o l l e d   t r i a l s ,   c a s e - c o n t r o l   s t u d i e s ,   c a s e   s e r i e s   s t u d i e s ,   c a s e   r e p o r t s ,   m e t h o d o l o g i c   s t u d i e s ,   s y s t e m a t i c   r e v i e w s ,   n a r r a t i v e   r e v i e w s ,   a n d   e x p e r t   o p i n i o n s .   D a t a   E x t r a c t i o n :   T w o   i n d e p e n d e n t   r e v i e w e r s   p e r f o r m e d   d a t a   e x t r a c t i o n   f r o m   t h e   r e t r i e v e d   a r t i c l e s   a n d   c o m p a r e d   t h e i r   r e s u l t s .   T h e   S a c k e t t ' s   i n i t i a l   r u l e s   o f   e v i d e n c e   w e r e   u s e d   t o   c a t e g o r i z e   t h e   t y p e   o f   s t u d y   d e s i g n   a s   w e l l   a s   t o   e v a l u a t e   t h e   l e v e l   o f   e v i d e n c e   p r o v i d e d   b y   t h e   r e s u l t s   o f   t h e   1 0 0   t o p - c i t e d   a r t i c l e s .   D a t a   S y n t h e s i s :   A m o n g   t h e   4 5 , 7 0 0   a r t i c l e s   p u b l i s h e d   i n   t h e s e   j o u r n a l s ,   t h e   1 0 0   t o p - c i t e d   a r t i c l e s   w e r e   p u b l i s h e d   b e t w e e n   1 9 5 9   a n d   2 0 0 2   w i t h   a n   a v e r a g e   o f   2 0 0   c i t a t i o n s   a n   a r t i c l e   ( r a n g e ,   1 3 1 - 1 1 0 9 ) .   T o p - c i t e d   a r t i c l e s   w e r e   a l l   E n g l i s h - l a n g u a g e ,   p r i m a r i l y   f r o m   N o r t h   A m e r i c a   ( U n i t e d   S t a t e s = 6 7 % ;   C a n a d a = 1 1 % )   a n d   p u b l i s h e d   i n   1 1   j o u r n a l s   l e d   b y   t h e   A r c h i v e s   o f   P h y s i c a l   M e d i c i n e   a n d   R e h a b i l i t a t i o n .   E i g h t y - f o u r   p e r c e n t   o f   t h e   a r t i c l e s   w e r e   o r i g i n a l   p u b l i c a t i o n s   a n d   w e r e   m o s t   c o m m o n l y   p r o s p e c t i v e   ( 7 6 % )   c a s e   s e r i e s   s t u d i e s   ( 6 7 % )   t h a t   u s e d   h u m a n   s u b j e c t s   ( 9 6 % )   p r o v i d i n g   l e v e l   4   e v i d e n c e .   N e u r o r e h a b i l i t a t i o n   ( 4 1 % ) ,   d i s a b i l i t y   ( 1 9 % ) ,   a n d   b i o m e c h a n i c s   ( 1 8 % )   w e r e   t h e   m o s t   c o m m o n   f i e l d s   o f   s t u d y .   C o n c l u s i o n s :   W e   d e m o n s t r a t e d   t h a t   m e t h o d o l o g i c   o b s e r v a t i o n a l   s t u d i e s   p e r f o r m e d   i n   N o r t h   A m e r i c a   a n d   p u b l i s h e d   i n   E n g l i s h   h a v e   h a d   t h e   h i g h e s t   c i t a t i o n s   i n   r e h a b i l i t a t i o n   j o u r n a l s . 	 [ S h a d g a n ,   B a b a k ]   U n i v   B r i t i s h   C o l u m b i a ,   E x p t   M e d   P r o g r a m ,   V a n c o u v e r ,   B C   V 5 Z   1 M 9 ,   C a n a d a ;   [ S h a d g a n ,   B a b a k ;   R o i g ,   M a r c ;   H a j G h a n b a r i ,   B a h a r e h ;   R e i d ,   W .   D a r l e n e ]   U n i v   B r i t i s h   C o l u m b i a ,   M u s c l e   B i o p h y s   L a b ,   V a n c o u v e r ,   B C   V 5 Z   1 M 9 ,   C a n a d a ;   [ S h a d g a n ,   B a b a k ;   R o i g ,   M a r c ;   H a j G h a n b a r i ,   B a h a r e h ;   R e i d ,   W .   D a r l e n e ]   U n i v   B r i t i s h   C o l u m b i a ,   D e p t   P h y s   T h e r a p y ,   V a n c o u v e r ,   B C   V 5 Z   1 M 9 ,   C a n a d a 	 S h a d g a n ,   B   ( r e p r i n t   a u t h o r ) ,   V a n c o u v e r   C o a s t a l   H l t h   R e s   I n s t ,   6 1 7 - 8 2 8   W   1 0 t h   A v e ,   V a n c o u v e r ,   B C   V 5 Z   1 L 8 ,   C a n a d a . 	 s h a d g a n @ i n t e r c h a n g e . u b c . c a 	 	 	 B r i t i s h   C o l u m b i a   L u n g   A s s o c i a t i o n ;   M i c h a e l   S m i t h   F o u n d a t i o n   f o r   H e a l t h   R e s e a r c h ;   C a n a d i a n   I n s t i t u t e s   o f   H e a l t h   R e s e a r c h 	 S u p p o r t e d   b y   t h e   B r i t i s h   C o l u m b i a   L u n g   A s s o c i a t i o n ,   t h e   M i c h a e l   S m i t h   F o u n d a t i o n   f o r   H e a l t h   R e s e a r c h ,   a n d   t h e   C a n a d i a n   I n s t i t u t e s   o f   H e a l t h   R e s e a r c h . 	 A d a m s   A l e x a n d e r   B ,   2 0 0 4 ,   R e s p i r   C a r e ,   V 4 9 ,   P 2 7 6 ;   A L B E R T   D M ,   1 9 8 8 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 0 6 ,   P 4 6 5 ;   B a l t u s s e n   A ,   2 0 0 4 ,   I N T E N S   C A R E   M E D ,   V 3 0 ,   P 9 0 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 4 - 2 1 9 5 - 7 ;   B a l t u s s e n   A ,   2 0 0 4 ,   A N E S T H   A N A L G ,   V 9 8 ,   P 4 4 3 ,   D O I   1 0 . 1 2 1 3 / 0 1 . A N E . 0 0 0 0 0 9 6 1 8 5 . 1 3 4 7 4 . 0 A ;   B o h a n n o n   R   W ,   1 9 8 9 ,   A m   J   P h y s   M e d   R e h a b i l ,   V 6 8 ,   P 2 5 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 2 0 6 0 - 1 9 8 9 1 0 0 0 0 - 0 0 0 1 4 ;   B o h a n n o n   R   W ,   1 9 9 1 ,   I n t   J   R e h a b i l   R e s ,   V 1 4 ,   P 3 3 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 4 3 5 6 - 1 9 9 1 1 2 0 0 0 - 0 0 0 0 6 ;   B O H A N N O N   R W ,   1 9 8 6 ,   P H Y S   T H E R ,   V 6 6 ,   P 5 4 0 ;   C A M P B E L L   F M ,   1 9 9 0 ,   B   M E D   L I B R   A S S O C ,   V 7 8 ,   P 3 7 6 ;   * C A N   I   H L T H   I N F ,   M E D   L E N G T H   S T A Y   I N P ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 9 ;   D U B I N   D ,   1 9 9 3 ,   A R C H   D E R M A T O L ,   V 1 2 9 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 0 1 / a r c h d e r m . 1 2 9 . 9 . 1 1 2 1 ;   D U M O N T   J E ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 3 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 9 6 8 - 0 0 0 4 ( 8 9 ) 9 0 1 6 4 - 3 ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G e h a n n o   J F ,   2 0 0 7 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 3 ,   P 2 4 5 ;   H a l l   G M ,   1 9 9 8 ,   B R I T   J   A N A E S T H ,   V 8 0 ,   P 4 ;   H e n n e s s e y   K ,   2 0 0 9 ,   C U A J - C A N   U R O L   A S S O C ,   V 3 ,   P 2 9 3 ;   K U H L E M E I E R   K V ,   1 9 9 2 ,   A R C H   P H Y S   M E D   R E H A B ,   V 7 3 ,   P 1 2 6 ;   L i n   A M . ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 4 6 ;   L O O N E N   M P J ,   2 0 0 8 ,   P L A S T   R E C O N S T R   S U R G ,   V 2 1 ,   P 3 2 0 ;   M a r x   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 9 8 9 1 1 7 9 2 ;   M I C H E L S   E ,   1 9 8 2 ,   P H Y S   T H E R ,   V 6 2 ,   P 8 2 8 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   O l l e r t o n   J E ,   2 0 0 5 ,   J   T R A U M A ,   V 5 8 ,   P 3 6 4 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T A . 0 0 0 0 1 4 1 8 8 2 . 3 1 2 8 1 . 6 6 ;   P a l a d u g u   R ,   2 0 0 2 ,   W O R L D   J   S U R G ,   V 2 6 ,   P 1 0 9 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 6 8 - 0 0 2 - 6 3 7 6 - 7 ;   P o r t n e y   L G ,   2 0 0 0 ,   F D N   C L I N   R E S   A P P L   P R ;   R O B E R T S   D ,   1 9 9 2 ,   S C A N D   J   R E H A B I L   M E D ,   V 2 4 ,   P 1 6 7 ;   R u b i n   R .   E . ,   2 0 0 4 ,   F D N   L I B   I N F O R M   S C I ;   S m i t h   D R ,   2 0 0 8 ,   O C C U P   M E D - O X F O R D ,   V 5 8 ,   P 8 0 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / k q m 1 5 4 ;   S m i t h   D R ,   2 0 0 9 ,   M A N U A L   T H E R ,   V 1 4 ,   P 4 5 6 ,   D O I   1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 1 1 . 0 0 4 ;   T s a i   Y L ,   2 0 0 6 ,   A M   J   E M E R G   M E D ,   V 2 4 ,   P 6 4 7 ,   D O I   1 0 . 1 0 1 6 / j . a j e m . 2 0 0 6 . 0 1 . 0 0 1 ;   W a k i j i   E M ,   1 9 9 7 ,   B   M E D   L I B R   A S S O C ,   V 8 5 ,   P 2 8 4 ;   R E H A B I L I T A T I O N 	 3 4 	 4 1 	 4 1 	 1 	 1 8 	 W   B   S A U N D E R S   C O - E L S E V I E R   I N C 	 P H I L A D E L P H I A 	 1 6 0 0   J O H N   F   K E N N E D Y   B O U L E V A R D ,   S T E   1 8 0 0 ,   P H I L A D E L P H I A ,   P A   1 9 1 0 3 - 2 8 9 9   U S A 	 0 0 0 3 - 9 9 9 3 	 	 	 A R C H   P H Y S   M E D   R E H A B 	 A r c h .   P h y s .   M e d .   R e h a b i l . 	 M A Y 	 2 0 1 0 	 9 1 	 5 	 	 	 	 	 8 0 6 	 8 1 5 	 	 1 0 . 1 0 1 6 / j . a p m r . 2 0 1 0 . 0 1 . 0 1 1 	 	 1 0 	 R e h a b i l i t a t i o n ;   S p o r t   S c i e n c e s 	 R e h a b i l i t a t i o n ;   S p o r t   S c i e n c e s 	 5 9 4 L K 	 W O S : 0 0 0 2 7 7 5 3 9 0 0 0 0 2 1 	 2 0 4 3 4 6 2 2 	 
 
 J 	 F a l a g a s ,   M E ;   K a r a v a s i o u ,   A I ;   B l i z i o t i s ,   I A 	 	 	 	 F a l a g a s ,   M a t t h e w   E . ;   K a r a v a s i o u ,   A n t o n i a   I . ;   B l i z i o t i s ,   I o a n n i s   A . 	 	 	 A   b i b l i o m e t r i c   a n a l y s i s   o f   g l o b a l   t r e n d s   o f   r e s e a r c h   p r o d u c t i v i t y   i n   t r o p i c a l   m e d i c i n e 	 A C T A   T R O P I C A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t r o p i c a l   m e d i c i n e   l i t e r a t u r e ;   1 0   :   9 0   g a p ;   I n t e r n a t i o n a l   r e p r e s e n t a t i o n ;   b i b l i o m e t r i c s ;   i m p a c t   f a c t o r ;   r e s e a r c h   a n d   d e v e l o p m e n t ;   r e s e a r c h   c o l l a b o r a t i o n 	 P U B L I C A T I O N ;   C O U N T R I E S ;   A R T I C L E S ;   D I S E A S E S ;   S C I E N C E ;   I N D E X E S ;   W O R L D 	 T h e   f i e l d   o f   t r o p i c a l   m e d i c i n e   h a s   a   l o n g   h i s t o r y   d u e   t o   t h e   s i g n i f i c a n c e   o f   t h e   r e l e v a n t   d i s e a s e s   f o r   t h e   h u m a n i t y .   W e   e s t i m a t e d   t h e   c o n t r i b u t i o n   o f   d i f f e r e n t   w o r l d   r e g i o n s   t o   r e s e a r c h   p u b l i s h e d   i n   t h e   m a i n   j o u r n a l s   o f   t r o p i c a l   m e d i c i n e .   U s i n g   t h e   P u b M e d   a n d   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( I S I )   " W e b   o f   S c i e n c e "   d a t a b a s e s ,   w e   r e t r i e v e d   a r t i c l e s   f r o m   1 2   j o u r n a l s   i n c l u d e d   i n   t h e   " T r o p i c a l   M e d i c i n e "   c a t e g o r y   o f   t h e   " J o u r n a l   C i t a t i o n   R e p o r t s "   d a t a b a s e   o f   I S I   f o r   t h e   p e r i o d   1 9 9 5 - 2 0 0 3 .   D a t a   o n   t h e   c o u n t r y   o f   o r i g i n   o f   t h e   r e s e a r c h   w e r e   a v a i l a b l e   f o r   1 1 , 8 6 0   a r t i c l e s   i n   P u b M e d   ( 9 8 . 1   %   o f   a l l   a r t i c l e s   f r o m   t h e   t r o p i c a l   m e d i c i n e   c a t e g o r y ) .   T h e   c o n t r i b u t i o n   o f   d i f f e r e n t   w o r l d   r e g i o n s   d u r i n g   t h e   s t u d i e d   p e r i o d ,   a s   e s t i m a t e d   b y   t h e   l o c a t i o n   o f   t h e   a f f i l i a t i o n   o f   t h e   f i r s t   a u t h o r ,   w a s :   W e s t e r n   E u r o p e   2 2 . 7 % ,   A f r i c a   2 0 . 9 % ,   L a t i n   A m e r i c a   a n d   t h e   C a r i b b e a n   2 0 . 7 % ,   A s i a   ( e x c l u d i n g   J a p a n )   1 9 . 8 % ,   U S A   1 0 . 6 % ,   O c e a n i a   2 . 1 % ,   J a p a n   1 . 5 % ,   E a s t e r n   E u r o p e   1 . 3 % ,   a n d   C a n a d a   0 . 6 % .   T h e   c o n t r i b u t i o n   o f   r e g i o n s ,   e s t i m a t e d   b y   t h e   l o c a t i o n   o f   t h e   a f f i l i a t i o n   o f   a t   l e a s t   o n e   a u t h o r   o f   t h e   p u b l i s h e d   p a p e r s   ( r e t r i e v e d   f r o m   t h e   I S I   d a t a b a s e ) ,   w a s   s i m i l a r :   W e s t e r n   E u r o p e   3 6 . 6 % ,   A f r i c a   2 7 . 7 % ,   L a t i n   A m e r i c a   a n d   t h e   C a r i b b e a n   2 4 . 4 % ,   a n d   A s i a   2 3 . 3 % .   T h e   m e a n   i m p a c t   f a c t o r   o f   a r t i c l e s   p u b l i s h e d   i n   t r o p i c a l   m e d i c i n e   j o u r n a l s   w a s   h i g h e s t   f o r   t h e   U S A   ( 1 . 6 5 ) .   O u r   a n a l y s i s   s u g g e s t s   t h a t   t h e   d e v e l o p i n g   a r e a s   o f   t h e   w o r l d   p r o d u c e   a   c o n s i d e r a b l e   a m o u n t   o f   r e s e a r c h   i n   t r o p i c a l   m e d i c i n e ;   h o w e v e r ,   g i v e n   t h e   s p e c i f i c   g e o g r a p h i c   d i s t r i b u t i o n   o f   t r o p i c a l   d i s e a s e s   t h e y   p r o b a b l y   s t i l l   n e e d   h e l p   b y   t h e   d e v e l o p e d   n a t i o n s   t o   p r o d u c e   m o r e   r e s e a r c h   i n   t h i s   f i e l d .   ( c )   2 0 0 6   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 A l f a   I n s t   B i o m e d   S c i ,   M a r o u s s i   1 5 1 2 3 ,   G r e e c e ;   H e n r y   D u n a n t   H o s p ,   D e p t   M e d ,   A t h e n s ,   G r e e c e ;   T u f t s   U n i v ,   S c h   M e d ,   D e p t   M e d ,   B o s t o n ,   M A   0 2 1 1 1   U S A 	 F a l a g a s ,   M E   ( r e p r i n t   a u t h o r ) ,   A l f a   I n s t   B i o m e d   S c i ,   9   N e a p o l e o s   S t ,   M a r o u s s i   1 5 1 2 3 ,   G r e e c e . 	 m . f a l a g a s @ a i b s . g r 	 B l i z i o t i s ,   I o a n n i s / C - 3 8 0 1 - 2 0 1 1 	 B l i z i o t i s ,   I o a n n i s / 0 0 0 0 - 0 0 0 2 - 3 8 2 5 - 4 1 6 7 	 	 	 B l i z i o t i s   I A ,   2 0 0 5 ,   B M C   I N F E C T   D I S ,   V 5 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 3 3 4 - 5 - 1 6 ;   F a l a g a s   M E ,   2 0 0 6 ,   B M C   I N F E C T   D I S ,   V 6 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 3 3 4 - 6 - 5 6 ;   F a l a g a s   M E ,   2 0 0 5 ,   J   M E D   V I R O L ,   V 7 6 ,   P 2 2 9 ,   D O I   1 0 . 1 0 0 2 / j m v . 2 0 3 4 6 ;   G a l l a g h e r   E J ,   1 9 9 8 ,   A N N   E M E R G   M E D ,   V 3 1 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 6 - 0 6 4 4 ( 9 8 ) 7 0 2 8 6 - 0 ;   G a l v e z   A ,   2 0 0 0 ,   A M   S C I ,   V 8 8 ,   P 5 2 6 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G e n s i n i   G   F ,   1 9 9 9 ,   A n n   I t a l   M e d   I n t ,   V 1 4 ,   P 1 3 0 ;   G l o v e r   S W ,   2 0 0 4 ,   T R O P   M E D   I N T   H E A L T H ,   V 9 ,   P 1 3 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 5 6 . 2 0 0 4 . 0 1 3 3 1 . x ;   H o r t o n   R ,   2 0 0 0 ,   L A N C E T ,   V 3 5 5 ,   P 2 2 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 0 ) 0 2 4 1 4 - 4 ;   * I   S C I   I N F ,   2 0 0 4 ,   S C I   S C I   C I T   I N D   J   C I ;   K e i s e r   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 2 7 - 3 ;   K e i s e r   J ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 8 ,   P 1 2 2 9 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 0 6 9 . 5 1 8 1 3 7 . F 6 ;   L U U K K O N E N   T ,   1 9 9 0 ,   A N N   M E D ,   V 2 2 ,   P 1 4 5 ,   D O I   1 0 . 3 1 0 9 / 0 7 8 5 3 8 9 9 0 0 9 1 4 7 2 5 9 ;   M U L L I G A N   H W ,   1 9 8 1 ,   T   R O Y   S O C   T R O P   M E D   H ,   V 7 5 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 5 - 9 2 0 3 ( 8 1 ) 9 0 4 5 5 - 7 ;   * N A T   L I B   M E D ,   2 0 0 4 ,   I N D   M E D   D A T ;   R a j a   A J ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ,   P 1 4 2 9 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 9 . 7 4 8 0 . 1 4 2 9 ;   R o s m a r a k i s   E S ,   2 0 0 5 ,   I N T   J   C A R D I O L ,   V 1 0 0 ,   P 4 4 3 ,   D O I   1 0 . 1 0 1 6 / j . i j c a r d . 2 0 0 4 . 1 1 . 0 0 5 ;   S c h o o n b a e r t   D ,   2 0 0 4 ,   T R O P   M E D   I N T   H E A L T H ,   V 9 ,   P 1 1 4 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 5 6 . 2 0 0 4 . 0 1 3 2 7 . x ;   S u m a t h i p a l a   A ,   2 0 0 4 ,   B M C   M E D   E T H I C S ,   V 5 ,   P 5 ,   D O I   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 3 9 - 5 - 5 ;   * U N ,   2 0 0 4 ,   U N   S T A T   Y B   2 ,   P 3 3 ;   V e r g i d i s   P I ,   2 0 0 5 ,   E U R   J   C L I N   M I C R O B I O L ,   V 2 4 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 9 6 - 0 0 5 - 1 3 0 6 - x ;   W h i t e h o u s e   G H ,   2 0 0 2 ,   E U R   R A D I O L ,   V 1 2 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 3 0 - 0 0 1 - 1 2 1 2 - 2 	 2 2 	 4 1 	 8 0 	 1 	 3 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 0 1 - 7 0 6 X 	 	 	 A C T A   T R O P 	 A c t a   T r o p . 	 O C T 	 2 0 0 6 	 9 9 	 2 - 3 	 	 	 	 	 1 5 5 	 1 5 9 	 	 1 0 . 1 0 1 6 / j . a c t a t r o p i c a . 2 0 0 6 . 0 7 . 0 1 0 	 	 5 	 P a r a s i t o l o g y ;   T r o p i c a l   M e d i c i n e 	 P a r a s i t o l o g y ;   T r o p i c a l   M e d i c i n e 	 1 2 2 G H 	 W O S : 0 0 0 2 4 3 2 1 3 2 0 0 0 0 6 	 1 7 0 1 4 8 0 6 	 
 
 J 	 K o s t o f f ,   R N ;   T s h i t e y a ,   R ;   P f e i l ,   K M ;   H u m e n i k ,   J A ;   K a r y p i s ,   G 	 	 	 	 K o s t o f f ,   R N ;   T s h i t e y a ,   R ;   P f e i l ,   K M ;   H u m e n i k ,   J A ;   K a r y p i s ,   G 	 	 	 P o w e r   s o u r c e   r o a d m a p s   u s i n g   b i b l i o m e t r i c s   a n d   d a t a b a s e   t o m o g r a p h y 	 E N E R G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 T E C H N I C A L   I N T E L L I G E N C E ;   C I T A T I O N ;   I N F O R M A T I O N ;   T R E N D S ;   I M P A C T 	 D a t a b a s e   T o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   ( 1 )   a l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i - w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i - w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   ( 2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   w a s   u s e d   t o   d e r i v e   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a   P o w e r   S o u r c e s   d a t a b a s e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x .   P h r a s e   f r e q u e n c y   a n a l y s i s   b y   t h e   t e c h n i c a l   d o m a i n   e x p e r t s   p r o v i d e d   t h e   p e r v a s i v e ,   t e c h n i c a l   t h e m e s   o f   t h e   P o w e r   S o u r c e s   d a t a b a s e ,   a n d   t h e   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   B i b l i o m e t r i c   a n a l y s i s   o f   t h e   P o w e r   S o u r c e s   l i t e r a t u r e   s u p p l e m e n t e d   t h e ,   D T   r e s u l t s   w i t h   a u t h o r / j o u m a l / i n s t i t u t i o n / c o u n t r y   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a .   P u b l i s h e d   b y   E l s e v i e r   L t d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   D D l   O M N I   E n g n   L L C ,   M c l e a n ,   V A   2 2 1 0 2   U S A ;   N o e s i s   I n c ,   M a n a s s a s ,   V A   2 0 1 0 9   U S A ;   U n i v   M i n n e s o t a ,   D e p t   C o m p   S c i   &   E n g n ,   M i n n e a p o l i s ,   M N   5 5 4 5 5   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   C o d e   3 5 , 8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 C u t t i n g   D .   R . ,   1 9 9 2 ,   P   1 5   A N N   I N T   A C M   S I G ,   P 3 1 8 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 3 1 6 0 . 1 3 3 2 1 4 ;   D a v i d s e   R J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 3 6 ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   G o l d m a n   J A ,   1 9 9 9 ,   M E T H O D   I N F O R M   M E D ,   V 3 8 ,   P 9 6 ;   G o r d o n   J S ,   1 9 9 8 ,   A M   H E R I T A G E ,   V 4 9 ,   P 8 ;   G r e e n g r a s s   E . ,   1 9 9 7 ,   T R R 5 2 0 2 9 6   N A T   S E C   A G ;   G u h a   S ,   1 9 9 8 ,   P   A C M   S I G M O D   I N T   C   M ,   P 7 3 ,   D O I   1 0 . 1 1 4 5 / 2 7 6 3 0 4 . 2 7 6 3 1 2 ;   H e a r s t   M . ,   1 9 9 9 ,   P   3 7   A N N   M   A S S   C O M P ,   P 3 ,   D O I   D O I   1 0 . 3 1 1 5 / 1 0 3 4 6 7 8 . 1 0 3 4 6 7 9 ;   H e a r s t   M .   A . ,   1 9 9 9 ,   N A T U R A L   L A N G U A G E   I N F ,   P 3 3 3 ;   * I   S C I   I N F ,   S C I   S C I   C I T   I N D ;   K A R Y P I S   G ,   C L U O T   C L U S T E T I N G   T O O ;   K A R Y P I S   G ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 8 ,   D O I   D O I   1 0 . 1 1 0 9 / 2 . 7 8 1 6 3 7 ;   K o s t o f f   R N ,   2 0 0 4 ,   I N T   J   B I F U R C A T   C H A O S ,   V 1 4 ,   P 6 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 1 2 7 4 0 4 0 0 9 0 8 9 ;   K o s t o f f   R N ,   2 0 0 4 ,   F R A C T A L S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 ;   K o s t o f f   R N ,   2 0 0 3 ,   M E D   H Y P O T H E S E S ,   V 6 1 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 9 8 7 7 ( 0 3 ) 0 0 1 6 7 - 1 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K o s t o f f   R . N . ,   2 0 0 3 ,   I N T   H D B   I N N O V A T I O N ,   P 3 8 8 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 0 8 0 4 4 1 9 8 - 6 / 5 0 0 2 7 - 9 ;   K o s t o f f   R . N . ,   2 0 0 4 ,   A D A 4 2 1 7 8 9   D T I C   N A T   T ;   K o s t o f f   R N ,   1 9 9 3 ,   C O M P E T   I N T E L L   R E V ,   V 4 ,   P 3 8 ,   D O I   1 0 . 1 0 0 2 / c i r . 3 8 8 0 0 4 0 1 0 9 ;   K O S T O F F   R N ,   2 0 0 0 ,   P A X R T R 2 0 0 8 4   T R   N A W C A ;   K O S T O F F   R N ,   2 0 0 3 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 4 ,   P 2 7 8 9 ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   M a c R o b e r t s   M .   H . ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N A R I N   F ,   1 9 7 6 ,   C 6 3 7   N S F ;   P r e c h e l t   L ,   2 0 0 2 ,   J   U N I V E R S   C O M P U T   S C I ,   V 8 ,   P 1 0 1 6 ;   R a s m u s s e n   E . ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ,   P 4 1 9 ;   S C H U B E R T   A ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 4 ;   S t e i n b a c h   M i c h a e l ,   2 0 0 0 ,   0 0 0 3 4   U   M I N N   D E P   C O M ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   V i a t o r   J A ,   2 0 0 1 ,   J   A C O U S T   S O C   A M ,   V 1 0 9 ,   P 1 7 7 9 ,   D O I   1 0 . 1 1 2 1 / 1 . 1 3 6 6 7 1 1 ;   W I L L E T T   P ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 7 - 1 ;   W I S E   M J ,   1 9 9 2 ,   S T R I N G   S I M I L A R I T Y   V I ;   Z a m i r   O . ,   1 9 9 8 ,   P r o c e e d i n g s   o f   t h e   2 1 s t   A n n u a l   I n t e r n a t i o n a l   A C M   S I G I R   C o n f e r e n c e   o n   R e s e a r c h   a n d   D e v e l o p m e n t   i n   I n f o r m a t i o n   R e t r i e v a l ,   P 4 6 ,   D O I   1 0 . 1 1 4 5 / 2 9 0 9 4 1 . 2 9 0 9 5 6 ;   Z h a o   Y ,   2 0 0 4 ,   M A C H   L E A R N ,   V 5 5 ,   P 3 1 1 ,   D O I   1 0 . 1 0 2 3 / B : M A C H . 0 0 0 0 0 2 7 7 8 5 . 4 4 5 2 7 . d 6 ;   Z h u   D H ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 5 7 - 3 ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 4 7 	 4 1 	 4 3 	 0 	 1 7 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 6 0 - 5 4 4 2 	 	 	 E N E R G Y 	 E n e r g y 	 A P R 	 2 0 0 5 	 3 0 	 5 	 	 	 	 	 7 0 9 	 7 3 0 	 	 1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 5 8 	 	 2 2 	 T h e r m o d y n a m i c s ;   E n e r g y   &   F u e l s 	 T h e r m o d y n a m i c s ;   E n e r g y   &   F u e l s 	 8 8 9 U X 	 W O S : 0 0 0 2 2 6 4 6 9 3 0 0 0 1 0 	 	 
 
 J 	 M o e d ,   H F ;   L u w e i ,   M ;   N e d e r h o f ,   A J 	 	 	 	 M o e d ,   H F ;   L u w e i ,   M ;   N e d e r h o f ,   A J 	 	 	 T o w a r d s   r e s e a r c h   p e r f o r m a n c e   i n   t h e   h u m a n i t i e s 	 L I B R A R Y   T R E N D S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 B I B L I O M E T R I C   I N D I C A T O R S ;   B E H A V I O R A L - S C I E N C E S ;   L A W   R E V I E W S ;   J O U R N A L S ;   P R O D U C T I V I T Y ;   Q U A L I T Y 	 T H I S   P A P E R   D E S C R I B E S   A   g e n e r a l   m e t h o d o l o g y   f o r   d e v e l o p i n g   b i b l i o m e t r i c   p e r f o r m a n c e   i n d i c a t o r s .   S u c h   a   d e s c r i p t i o n   p r o v i d e s   a   f r a m e w o r k   o r   p a r a d i g m   f o r   a p p l i c a t i o n - o r i e n t e d   r e s e a r c h   i n   t h e   f i e l d   o f   e v a l u a t i v e   q u a n t i t a t i v e   s c i e n c e   a n d   t e c h n o l o g y   s t u d i e s ,   p a r t i c u l a r l y   i n   t h e   h u m a n i t i e s   a n d   s o c i a l   s c i e n c e s .   I t   i s   b a s e d   o n   o u r   s t u d y   o f   s c h o l a r l y   o u t p u t   i n   t h e   f i e l d   o f   L a w   a t   t h e   f o u r   m a j o r   u n i v e r s i t i e s   i n   F l a n d e r s ,   t h e   D u t c h   s p e a k i n g   p a r t   o f   B e l g i u m .   T h e   s t u d y   i l l u s t r a t e s   t h a t   b i b l i o m e t r i c s   i s   m u c h   m o r e   t h a n   c o n d u c t i n g   c i t a t i o n   a n a l y s e s   b a s e d   o n   t h e   i n d e x e s   p r o d u c e d   b y   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( I S I ) ,   s i n c e   c i t a t i o n   d a t a   d o   n o t   p l a y   a   r o l e   i n   t h e   s t u d y .   I n t e r a c t i o n   w i t h   s c h o l a r s   i n   t h e   f i e l d s   u n d e r   c o n s i d e r a t i o n   a n d   o p e n n e s s   i n   t h e   p r e s e n t a t i o n   o f   t h e   q u a n t i t a t i v e   o u t c o m e s   a r e   t h e   b a s i c   f e a t u r e s   o f   t h e   m e t h o d o l o g y .   B i b l i o m e t r i c s   s h o u l d   b e   u s e d   a s   a i r   i n s t r u m e n t   t o   c r e a t e   a   m i r r o r .   W h i l e   n o t   a   d i r e c t   r e f l e c t i o n ,   t h i s   s t u d y   p r o v i d e s   a   t h o r o u g h   a n a l y s i s   o f   h o w   s c h o l a r s   i n   t h e   h u m a n i t i e s   a n d   s o c i a l   s c i e n c e s   s t r u c t u r e   t h e i r   a c t i v i t i e s   a n d   t h e i r   r e s e a r c h   o u t p u t .   T h i s   s t r u c t u r e   c a n   b e   e x a m i n e d   e m p i r i c a l l y   f r o m   t h e   p o i n t   o f   v i e w   o f   i t s   c o n s i s t e n c y   a n d   t h e   d e g r e e   o f   c o n s e n s u s   a m o n g   s c h o l a r s .   R e l e v a n t   i s s u e s   c a n   b e   r a i s e d   t h a t   a r e   w o r t h   c o n s i d e r i n g   i n   m o r e   d e t a i l   i n   f o l l o w u p   s t u d i e s ,   a n d   c o n c l u s i o n s   f r o m   o u r   e m p i r i c a l   m a t e r i a l s   m a y   i l l u m i n a t e   s u c h   i s s u e s .   W e   a r g u e   t h a t   t h e   p r i n c i p a l   a i m   o f   t h e   d e v e l o p m e n t   a n d   a p p l i c a t i o n   o f   b i b l i o m e t r i c   i n d i c a t o r s   i s   t o   s t i m u l a t e   a   d e b a t e   a m o n g   s c h o l a r s   i n   t h e   f i e l d   u n d e r   i n v e s t i g a t i o n   o n   t h e   n a t u r e   o f   s c h o l a r l y   q u a l i t y ,   i t s   p r i n c i p a l   d i m e n s i o n s ,   a n d   o p e r a t i o n a l i z a t i o n s .   T h i s   a i m   p r o v i d e s   a   c r i t e r i o n   o f   " p r o d u c t i v i t y "   o f   t h e   d e v e l o p m e n t   p r o c e s s .   W e   f u r t h e r   c o n t e n d   t h a t   l i b r a r i a n s   a r e   n o t   i n f r e q u e n t l y   r e q u e s t e d   t o   p r o v i d e   a s s i s t a n c e   i n   c o l l e c t i n g   d a t a   r e l a t e d   t o   r e s e a r c h   p e r f o r m a n c e   a s s e s s m e n t s ,   a n d   t h a t   t h e   m e t h o d o l o g y   d e s c r i b e d   i n   t h e   p a p e r   a i m s   a t   o f f e r i n g   a   g e n e r a l   f r a m e w o r k   f o r   s u c h   a c t i v i t i e s ,   a n d   c a n   b e   u s e d   b y   l i b r a r i a n s   a s   a   l i n e   o f   a c t i o n   w h e n e v e r   t h e y   b e c o m e   i n v o l v e d . 	 L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   C W T S ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s ;   M i n i s t   F l e m i s h   C o m m u n i t y ,   S c i   &   I n n o v a t   A d m ,   B r u s s e l s ,   B e l g i u m 	 M o e d ,   H F   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   C W T S ,   P O B   9 5 5 5 ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s . 	 	 	 	 	 	 C O L E   S ,   1 9 8 3 ,   A M   J   S O C I O L ,   V 8 9 ,   P 1 1 1 ,   D O I   1 0 . 1 0 8 6 / 2 2 7 8 3 5 ;   C o l e   S t e p h e n ,   1 9 7 8 ,   M E T R I C   S C I ,   P 2 0 9 ;   E L L M A N   I M ,   1 9 8 3 ,   J   L E G A L   E D U C ,   V 3 3 ,   P 6 8 1 ;   F I N K E N S T A E D T   T ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 4 0 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 7 0 3 ;   G A R F I E L D   E ,   1 9 8 6 ,   C U R R   C O N T E N T S ,   P 3 ;   G A R F I E L D   E ,   1 9 7 9 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 4 ,   P 2 3 8 ;   H e m l i n   S ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 5 6 ;   H e m l i n   S . ,   1 9 9 6 ,   R E S   E V A L U A T ,   V 6 ,   P 5 3 ;   * I N T   C O M M   F L E M   F A C ,   1 9 9 6 ,   A S S   P E R F   J U R   R E S ;   J U S T I S S   L K ,   1 9 9 3 ,   L A W   L I B R   J ,   V 8 5 ,   P 4 0 7 ;   K Y V I K   S ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 9 ;   L U W E L   M ,   1 9 9 9 ,   D 1 9 9 9 2 9 3 9 9   V L A A M S   U ;   M c G r a t h   W E ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 8 3 ;   N E D E R H O F   A J ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 3 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 8 ;   N E D E R H O F   A J ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 4 ) 4 3 : 3 < 2 4 9 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - I ;   N e d e r h o f   A J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 3 2 3 2 6 8 8 ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 3 ;   * R E V   C O M M   J U R   R E S ,   1 9 9 6 ,   Q U A L   A S S   R E S   R E C H T S G ;   S H A P I R O   F R ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 6 ) 4 3 : 5 < 3 3 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - T ;   S O R E N S E N   J R ,   1 9 9 4 ,   J   C R I M   J U S T ,   V 2 2 ,   P 5 3 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 7 - 2 3 5 2 ( 9 4 ) 9 0 0 9 4 - 9 ;   S W Y G E R T   M I ,   1 9 8 5 ,   J   L E G A L   E D U C ,   V 3 5 ,   P 3 7 3 ;   V a n   d e n   B e r g h e   H ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 5 9 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - # ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   W O O D   J B ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 7 6 3 	 2 4 	 4 0 	 4 2 	 3 	 1 8 	 G S L I S   P U B L I C A T I O N S 	 C H A M P A I G N 	 5 0 1   E   D A N I E L   S T ,   C H A M P A I G N ,   I L   6 1 8 2 0 - 6 2 1 1   U S A 	 0 0 2 4 - 2 5 9 4 	 	 	 L I B R   T R E N D S 	 L i b r .   T r e n d s 	 W I N 	 2 0 0 2 	 5 0 	 3 	 	 	 	 	 4 9 8 	 5 2 0 	 	 	 	 2 3 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 6 5 M M 	 W O S : 0 0 0 1 7 6 3 7 4 1 0 0 0 1 2 	 	 
 
 J 	 I n g w e r s e n ,   P ;   C h r i s t e n s e n ,   F H 	 	 	 	 I n g w e r s e n ,   P ;   C h r i s t e n s e n ,   F H 	 	 	 D a t a   s e a   i s o l a t i o n   f o r   b i b l i o m e t r i c   o n l i n e   a n a l y s e s   o f   r e s e a r c h   p u b l i c a t i o n s :   F u n d a m e n t a l   m e t h o d o l o g i c a l   i s s u e s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   P E R F O R M A N C E ;   R E T R I E V A L 	 T h e   a i m   o f   t h e   a r t i c l e   i s   t o   e m p h a s i z e   a n d   i l l u s t r a t e   t h e   r e t r i e v a l   d i m e n s i o n s   o f   d a t a   c o l l e c t i o n   a c t i v i t y   o n l i n e   a n d   t h e i r   i n f l u e n c e   o n   t h e   r e s e a r c h   e v a l u a t i o n   o u t c o m e .   T h e   a t t e m p t   i s   t o   r e i n f o r c e   t h e   l i n k   b e t w e e n   o n l i n e   r e t r i e v a l   a n d   b i b l i o m e t r i c s .   G i v e n   t h a t   v a r i o u s   f o r m s   o f   p u b l i c a t i o n   c o u n t s   a n d   c i t a t i o n   a n a l y s e s   p r o v i d e   a   v a l u a b l e   a n d   r e v e a l i n g   q u a n t i t a t i v e   s t a r t i n g   p o i n t   f o r   m o r e   q u a l i t a t i v e   i n d i c a t i o n s   a n d   a s s e s s m e n t s   o f   S c i e n c e   a n d   T e c h n o l o g y   ( S & T )   p e r f o r m a n c e ,   i t   i s   e v i d e n t   t h a t   t h e i r   r e l i a b i l i t y   a n d   o b j e c t i v i t y   m u s t   b e   u n d i s p u t e d   a s   f a r   a s   p o s s i b l e .   T h e   a r t i c l e   d i s c u s s e s   t h e   b a s i c   p r o b l e m s   a n d   l i m i t a t i o n s   i n h e r e n t   i n   o n l i n e   b i b l i o m e t r i c   d a t a   c o l l e c t i o n   a n d   a n a l y s e s ,   a n d   p o i n t s   t o   p o s s i b l e   s o l u t i o n s   b y   m e a n s   o f   i l l u s t r a t i v e   c a s e   s t u d i e s   a n d   e x a m p l e s .   T h e   r e a s o n   f o r   p e r f o r m i n g   l o c a l   p u b l i c a t i o n   a n a l y s e s   o n l i n e   o f t e n   a r i s e s   b e c a u s e   o f   t h e   i n c r e a s e d   u s e   o f   e x t e r n a l   r e s e a r c h   a s s e s s m e n t s   m a d e   b y   c e n t r a l i z e d   b o d i e s .   F o r   s m a l l   i n s t i t u t i o n s   i n   s m a l l   c o u n t r i e s ,   l i k e   t h e   N o r t h   E u r o p e a n   o n e ,   s u c h   s e l f - a n a l y s e s   m a y   i n   a d d i t i o n   p r o v i d e   v a l u a b l e   a n d   i n e x p e n s i v e   i n s i g h t s   i n t o   n o v e l   S & T   n i c h e s   t o   e x p l o r e .   T h e   m a j o r   c o n c e r n   i s   t h e   e x t e n t   t o   w h i c h   o n l i n e   b i b l i o g r a p h i c   a n d   d o m a i n   d e p e n d e n t   d a t a b a s e s ,   a s   a   s u p p l e m e n t   t o   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( I S I )   c i t a t i o n   f i l e s ,   a r e   s u i t a b l e   f o r   q u a n t i t a t i v e   a n a l y s i s   a n d   m a p p i n g   o f   R & D   o u t c o m e .   B y   m e r g i n g   t h e s e   t w o   d i f f e r e n t   t y p e s   o f   d a t a b a s e s   i n t o   a   s i n g l e   c l u s t e r ,   t h e   m e t h o d   o f   d u p l i c a t e   r e m o v a l   b e c o m e s   c r u c i a l .   T h e   a r t i c l e   i n t r o d u c e s   a   n o v e l   r e m o v a l   p r o c e d u r e   b y   d e s c r i b i n g   a n d   e x e m p l i f y i n g   t h e   p r i n c i p l e   o f   R e v e r s e d   D u p l i c a t e   R e m o v a l   ( R D R ) .   R D R   e n a b l e s   t h e   a n a l y s t   t o   t a k e   c o n t r o l   o f   t h e   l o c a t i o n   o f   t h e   d u p l i c a t e s   a n d   t o   p e r f o r m   t a i l o r e d   a n a l y s e s   o f   t h e   o v e r l a p   o f   i d e n t i c a l   d o c u m e n t s   b e t w e e n   f i l e s .   I t   i s   w e l l   k n o w n   t h a t   t h e   d a t a b a s e s   t h e m s e l v e s   p r e s e n t   o b s t a c l e s   d i r e c t l y   a s s o c i a t e d   w i t h   t h e   p r o c e s s   o f   p e r f o r m i n g   o n l i n e   r e t r i e v a l   o f   t h e   i n f o r m a t i o n   n e c e s s a r y   f o r   f u r t h e r   a n a l y s i s .   P r o b l e m s   e n c o u n t e r e d   a r e ,   f o r   i n s t a n c e ,   p o o r   o r   i n c o n s i s t e n t   s u b j e c t   i n d e x i n g   w i t h i n   a   s i n g l e   d a t a b a s e   o r   a m o n g   s e v e r a l   d a t a b a s e s .   N a m e   f o r m   i n c o n s i s t e n c i e s   a s   t o   a u t h o r s ,   i n s t i t u t i o n s ,   a n d   j o u r n a l s ,   t h e   l a c k   o r   i n a c c e s s i b i l i t y   o f   v i t a l   d a t a   i n   t h e   d a t a b a s e   s t r u c t u r e s ,   e t c . ,   a l s o   p r e s e n t   o b s t a c l e s .   O n   t h e   o t h e r   h a n d ,   c o m p r e h e n s i v e   o n l i n e   b i b l i o m e t r i c   a n a l y s e s   a r e   i n   m a n y   w a y s   e a s i e r ,   f a s t e r ,   a n d   l e s s   e x p e n s i v e   t o   p e r f o r m   l o c a l l y   t h a n   t h o s e   m a d e   u s i n g   t h e   i n d e p e n d e n t   C D - R O M   v e r s i o n s   o f   t h e   r e l e v a n t   d a t a b a s e s .   I n   c o n t r a s t   t o   t h e   o n l i n e   v e r s i o n s ,   t h e   C D - R O M   s y s t e m s   d e m o n s t r a t e   a   v i t a l   s h o r t a g e   o f   r o b u s t   d a t a   p r o c e s s i n g   a n d   m a n i p u l a t i o n   f a c i l i t i e s .   T h e   d o w n l o a d i n g   o f   r e c o r d s   f r o m   a   v a r i e t y   o f   C D - R O M   f i l e s ,   t h e   c l e a n i n g - u p   p r o c e s s ,   a n d   t h e   e n s u i n g   d a t a   p r o c e s s i n g   a c t i v i t i e s   b e c o m e   c u m b e r s o m e   a n d   r e s o u r c e   d e m a n d i n g .   R e g a r d l e s s   o f   d a t a b a s e   v e r s i o n i n g ,   t h e   d e g r e e   o f   a w a r e n e s s   o f   t h e s e   r e t r i e v a l   a n d   s e t   i s o l a t i o n   f a c t o r s ,   s u c h   a s   t h e   r e l e v a n t   s e a r c h   c o m m a n d s ,   s y n t a x ,   a n d   t h e   a n a l y s i s   a s s u m p t i o n s   o n   t h e   p a r t   o f   t h e   a n a l y s t ,   p l a y s   a n   i m p o r t a n t   r o l e   f o r   t h e   q u a l i t y   o f   t h e   a n a l y s i s   o u t c o m e . 	 	 R O Y A L   S C H   L I B R A R I A N S H I P ,   C T R   I N F O R M E T R   S T U D I E S ,   B I R K E T I N G E T   6 ,   D K - 2 3 0 0   C O P E N H A G E N ,   D E N M A R K . 	 	 	 	 	 	 C H R I S T E N S E N   F H ,   1 9 9 5 ,   P   5   B I E N N   C   I N T   S O C ,   P 1 0 3 ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   * D I A L   I N F   S E R V ,   1 9 9 3 ,   D I A L   C H R O N               F E B ,   P 2 7 ;   D o u   H . ,   1 9 9 0 ,   I n f o r m a t i o n   S e r v i c e s   &   U s e ,   V 1 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   H U B E R   C F ,   1 9 9 5 ,   D A T A B A S E                   A P R ,   P 5 2 ;   I N G W E R S E N   P ,   1 9 8 4 ,   O N L I N E   R E V ,   V 8 ,   P 4 6 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 1 6 7 ;   I N G W E R S E N   P ,   1 9 8 9 ,   K N O W L E D G E   I N D ,   P 2 0 5 ;   L U U K K O N E N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 9 ;   M I L L E R   C ,   1 9 9 0 ,   O N L I N E                       J U L ,   P 2 7 ;   M O E D   H F ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 6 ;   N O R R E T R A N D E R S   T ,   1 9 9 0 ,   D A N S K   D Y N A M I T   D A N S K ;   O L S E N   T B ,   1 9 9 4 ,   N O R D I S K   F O R S K N I N G   I N ;   P A O   M L ,   1 9 9 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 9 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 3 ) 9 0 0 2 6 - A ;   P E R S S O N   O ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 1 ;   P E R S S O N   O ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 2 2 9 ;   S A N D I S O N   A ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 5 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 3 9 ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   S e g l e n   P   O ,   1 9 8 9 ,   N o r d   M e d ,   V 1 0 4 ,   P 3 3 1 ;   S E G L E N   P O ,   1 9 8 9 ,   N O R D   M E D ,   V 1 0 4 ,   P 3 4 1 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   T H O R N E   F C ,   1 9 7 7 ,   J   C L I N   P S Y C H O L ,   V 3 3 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 6 7 9 ( 1 9 7 7 1 0 ) 3 3 : 4 < 1 1 5 7 : : A I D - J C L P 2 2 7 0 3 3 0 4 5 3 > 3 . 0 . C O ; 2 - B ;   W I S S M A N N   C ,   1 9 9 3 ,   J   I N F O R M   S C I ,   V 1 9 ,   P 3 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 3 0 1 9 0 0 5 0 4 	 2 3 	 4 0 	 4 0 	 2 	 1 0 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 M A R 	 1 9 9 7 	 4 8 	 3 	 	 	 	 	 2 0 5 	 2 1 7 	 	 1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 W J 5 5 5 	 W O S : A 1 9 9 7 W J 5 5 5 0 0 0 0 3 	 	 
 
 J 	 K o s t o f f ,   R N ;   K o y t c h e f f ,   R G ;   L a u ,   C G Y 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   K o y t c h e f f ,   R a y m o n d   G . ;   L a u ,   C l i f f o r d   G .   Y . 	 	 	 G l o b a l   n a n o t e c h n o l o g y   r e s e a r c h   m e t r i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t 	 	 T e x t   m i n i n g   w a s   u s e d   t o   e x t r a c t   t e c h n i c a l   i n t e l l i g e n c e   f r o m   t h e   o p e n   s o u r c e   g l o b a l   n a n o t e c h n o l o g y   a n d   n a n o s c i e n c e   r e s e a r c h   l i t e r a t u r e .   A n   e x t e n s i v e   n a n o t e c h n o l o g y / n a n o s c i e n c e - f o c u s e d   q u e r y   w a s   a p p l i e d   t o   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S C I / S S C I )   d a t a b a s e s .   T h e   n a n o t e c h n o l o g y / n a n o s c i e n c e   r e s e a r c h   l i t e r a t u r e   i n f r a s t r u c t u r e   ( p r o l i f i c   a u t h o r s ,   k e y   j o u r n a l s / i n s t i t u t i o n s / c o u n t r i e s ,   m o s t   c i t e d   a u t h o r s / j o u r n a l s / d o c u m e n t s )   w a s   o b t a i n e d   u s i n g   b i b l i o m e t r i c s .   A   n o v e l   a d d i t i o n   w a s   t h e   u s e   o f   i n s t i t u t i o n   a n d   c o u n t r y   a u t o - c o r r e l a t i o n   m a p s   t o   s h o w   c o - p u b l i s h i n g   n e t w o r k s   a m o n g   i n s t i t u t i o n s   a n d   a m o n g   c o u n t r i e s ,   a n d   t h e   u s e   o f   i n s t i t u t i o n - p h r a s e   a n d   c o u n t r y - p h r a s e   c r o s s - c o r r e l a t i o n   m a p s   t o   s h o w   i n s t i t u t i o n   n e t w o r k s   a n d   c o u n t r y   n e t w o r k s   b a s e d   o n   u s e   o f   c o m m o n   t e r m i n o l o g y   ( p r o x y   f o r   c o m m o n   i n t e r e s t s ) .   T h e   u s e   o f   f a c t o r   m a t r i c e s   q u a n t i f i e d   f u r t h e r   t h e   s t r e n g t h   o f   t h e   l i n k a g e s   a m o n g   i n s t i t u t i o n s   a n d   a m o n g   c o u n t r i e s ,   a n d   v a l i d a t e d   t h e   c o - p u b l i s h i n g   n e t w o r k s   s h o w n   g r a p h i c a l l y   o n   t h e   m a p s . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   I n s t   D e f   A n a l y s e s ,   A l e x a n d r i a ,   V A   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K O S T O F F   R N ,   2 0 0 6 ,   A D A 4 4 4 6 2 5   D T I C ;   K o s t o f f   R .   N . ,   2 0 0 6 ,   A D A 4 4 3 3 1 5   D T I C ;   K O S T O F F   R N ,   2 0 0 7 ,   S T R U C T U R E   G L O B A L   N A N ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   * S C I ,   C E R T   D A T   I N C L   H E R   D E ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 	 8 	 3 9 	 4 0 	 2 	 3 2 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A R 	 2 0 0 7 	 7 0 	 3 	 	 	 	 	 5 6 5 	 6 0 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 3 - 5 	 	 3 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 4 0 M O 	 W O S : 0 0 0 2 4 4 5 0 9 6 0 0 0 0 3 	 	 
 
 J 	 M o r r i s ,   S ;   D e Y o n g ,   C ;   W u ,   Z ;   S a l m a n ,   S ;   Y e m e n u ,   D 	 	 	 	 M o r r i s ,   S ;   D e Y o n g ,   C ;   W u ,   Z ;   S a l m a n ,   S ;   Y e m e n u ,   D 	 	 	 D I V A :   a   v i s u a l i z a t i o n   s y s t e m   f o r   e x p l o r i n g   d o c u m e n t   d a t a b a s e s   f o r   t e c h n o l o g y   f o r e c a s t i n g 	 C O M P U T E R S   &   I N D U S T R I A L   E N G I N E E R I N G 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t e c h n o l o g y   f o r e c a s t i n g ;   i n f o r m a t i o n   v i s u a l i z a t i o n ;   k n o w l e d g e   d i s c o v e r y   i n   d a t a b a s e s ;   K D D ;   d a t a   m i n i n g ;   c i t a t i o n   a n a l y s i s ;   d o c u m e n t   m a p p i n g ;   b i b l i o m e t r i c s ;   s c i e n t o m e t r i c s 	 D I S C O V E R Y 	 D a t a b a s e   I n f o r m a t i o n   V i s u a l i z a t i o n   a n d   A n a l y s i s   s y s t e m   ( D I V A )   i s   a   c o m p u t e r   p r o g r a m   t h a t   h e l p s   p e r f o r m   b i b l i o m e t r i c   a n a l y s i s   o f   c o l l e c t i o n s   o f   s c i e n t i f i c   l i t e r a t u r e   a n d   p a t e n t s   f o r   t e c h n o l o g y   f o r e c a s t i n g .   D o c u m e n t s ,   d r a w n   f r o m   t h e   t e c h n o l o g i c a l   f i e l d   o f   i n t e r e s t ,   a r e   v i s u a l i z e d   a s   c l u s t e r s   o n   a   t w o   d i m e n s i o n a l   m a p ,   p e r m i t t i n g   e x p l o r a t i o n   o f   t h e   r e l a t i o n s h i p s   a m o n g   t h e   d o c u m e n t s   a n d   d o c u m e n t   c l u s t e r s   a n d   a l s o   p e r m i t t i n g   d e r i v a t i o n   o f   s u m m a r y   d a t a   a b o u t   e a c h   d o c u m e n t   c l u s t e r .   S u c h   i n f o r m a t i o n ,   w h e n   p r o v i d e d   t o   s u b j e c t   m a t t e r   e x p e r t s   p e r f o r m i n g   a   t e c h n o l o g y   f o r e c a s t ,   c a n   y i e l d   i n s i g h t   i n t o   t r e n d s   i n   t h e   t e c h n o l o g i c a l   f i e l d   o f   i n t e r e s t .   T h i s   p a p e r   d i s c u s s e s   t h e   d o c u m e n t   v i s u a l i z a t i o n   a n d   a n a l y s i s   p r o c e s s :   a c q u i s i t i o n   o f   d o c u m e n t s ,   m a p p i n g   d o c u m e n t s ,   c l u s t e r i n g ,   e x p l o r a t i o n   o f   r e l a t i o n s h i p s ,   a n d   g e n e r a t i o n   o f   s u m m a r y   a n d   t r e n d   i n f o r m a t i o n .   D e t a i l e d   d i s c u s s i o n   o f   D I V A   e x p l o r a t i o n   f u n c t i o n s   i s   p r e s e n t e d   a n d   f o l l o w e d   b y   a n   e x a m p l e   o f   v i s u a l i z a t i o n   a n d   a n a l y s i s   o f   a   s e t   o f   d o c u m e n t s   a b o u t   c h e m i c a l   s e n s o r s .   ( C )   2 0 0 2   P u b l i s h e d   b y   E l s e v i e r   S c i e n c e   L t d . 	 O k l a h o m a   S t a t e   U n i v ,   S c h   E l e c t   &   C o m p   E n g n ,   S t i l l w a t e r ,   O K   7 4 0 7 8   U S A ;   O k l a h o m a   S t a t e   U n i v ,   S c h   I n d   E n g n   &   M a n a g e m e n t ,   S t i l l w a t e r ,   O K   7 4 0 7 8   U S A 	 M o r r i s ,   S   ( r e p r i n t   a u t h o r ) ,   O k l a h o m a   S t a t e   U n i v ,   S c h   E l e c t   &   C o m p   E n g n ,   2 0 2   E n g n   S ,   S t i l l w a t e r ,   O K   7 4 0 7 8   U S A . 	 	 	 S a l m a n ,   S i n a n / 0 0 0 0 - 0 0 0 2 - 4 0 7 2 - 4 5 0 0 	 	 	 D a v i d s o n   G S ,   1 9 9 8 ,   J   I N T E L L   I N F   S Y S T ,   V 1 1 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 6 9 0 0 0 8 8 5 6 ;   G A R F I E L D   E ,   1 9 9 4 ,   C U R R E N T   C O N T E N T   0 1 0 3 ;   K o s t o f f   R . N . ,   1 9 9 7 ,   H D B   R E S   I M P A C T   A S S E S ;   L A W R E N C E   S ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 7 ;   * M A T H W   I N C ,   1 9 9 9 ,   D A T   T O O L B ;   M c C a i n   K W ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 0 5 3 ;   M O G E E   M E ,   1 9 9 1 ,   R E S   T E C H N O L   M A N A G E ,   V 3 4 ,   P 4 3 ;   M o g e e   M .   E . ,   1 9 9 7 ,   K E E P I N G   A B R E A S T   S C I ;   M O R R I S   S A ,   2 0 0 1 ,   P   I E E E   I N T   J O I N T   C   N ;   S a l t o n   G . ,   1 9 8 9 ,   A U T O M A T I C   T E X T   P R O C E ;   S m a l l   H ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 4 ;   S p a s s e r   M A ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 3 1 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 	 1 3 	 3 9 	 4 3 	 4 	 3 7 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 6 0 - 8 3 5 2 	 	 	 C O M P U T   I N D   E N G 	 C o m p u t .   I n d .   E n g . 	 S E P 	 2 0 0 2 	 4 3 	 4 	 	 	 	 	 8 4 1 	 8 6 2 	 P I I   S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 1 4 3 - 2 	 1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 1 4 3 - 2 	 	 2 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   E n g i n e e r i n g ,   I n d u s t r i a l 	 C o m p u t e r   S c i e n c e ;   E n g i n e e r i n g 	 5 9 6 F E 	 W O S : 0 0 0 1 7 8 1 5 2 9 0 0 0 1 4 	 	 
 
 J 	 K o s t o f f ,   R N ;   B r a u n ,   T ;   S c h u b e r t ,   A ;   T o o t h m a n ,   D R ;   H u m e n i k ,   J A 	 	 	 	 K o s t o f f ,   R N ;   B r a u n ,   T ;   S c h u b e r t ,   A ;   T o o t h m a n ,   D R ;   H u m e n i k ,   J A 	 	 	 F u l l e r e n e   d a t a   m i n i n g   u s i n g   b i b l i o m e t r i c s   a n d   d a t a b a s e   t o m o g r a p h y 	 J O U R N A L   O F   C H E M I C A L   I N F O R M A T I O N   A N D   C O M P U T E R   S C I E N C E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 D a t a b a s e   t o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   ( 1 )   a l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   ( 2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   w a s   u s e d   t o   d e r i v e   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a   f u l l e r e n e s   d a t a b a s e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   a n d   t h e   E n g i n e e r i n g   C o m p e n d e x .   P h r a s e   f r e q u e n c y   a n a l y s i s   b y   t h e   t e c h n i c a l   d o m a i n   e x p e r t s   p r o v i d e d   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s   o f   t h e   f u l l e r e n e s   d a t a b a s e ,   a n d   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   B i b l i o m e t r i c   a n a l y s i s   o f   t h e   f u l l e r e n e s   l i t e r a t u r e   s u p p l e m e n t e d   t h e   D T   r e s u l t s   w i t h   a u t h o r / j o u r n a l / i n s t i t u t i o n   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a .   C o m p a r i s o n s   o f   f u l l e r e n e s   r e s u l t s   w i t h   p a s t   a n a l y s e s   o f   s i m i l a r l y   s t r u c t u r e d   n e a r - e a r t h   s p a c e ,   c h e m i s t r y ,   h y p e r s o n i c / s u p e r s o n i c   f l o w ,   a i r c r a f t ,   a n d   s h i p   h y d r o d y n a m i c s   d a t a b a s e s   a r e   m a d e .   O n e   i m p o r t a n t   f i n d i n g   i s   t h a t   m a n y   o f   t h e   n o r m a l i z e d   b i b l i o m e t r i c   d i s t r i b u t i o n   f u n c t i o n s   a r e   e x t r e m e l y   c o n s i s t e n t   a c r o s s   t h e s e   d i v e r s e   t e c h n i c a l   d o m a i n s   a n d   c o u l d   r e a s o n a b l y   b e   e x p e c t e d   t o   a p p l y   t o   b r o a d e r   c h e m i c a l   t o p i c s   t h a n   f u l l e r e n e s   t h a t   s p a n   m u l t i p l e   s t r u c t u r a l   c l a s s e s .   F i n a l l y ,   l e s s o n s   l e a r n e d   a b o u t   i n t e g r a t i n g   t h e   t e c h n i c a l   d o m a i n   e x p e r t s   w i t h   t h e   d a t a   m i n i n g   t o o l s   a r e   p r e s e n t e d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   E o t v o s   L o r a n d   U n i v ,   I n s t   I n o r g a n   &   A n a l y t   C h e m ,   H - 1 4 4 3   B u d a p e s t ,   H u n g a r y ;   H u n g a r i a n   A c a d   S c i   L i b ,   B u d a p e s t ,   H u n g a r y ;   R S I S   I n c ,   M c l e a n ,   V A   U S A ;   N o e s i s   I n c ,   A r l i n g t o n ,   V A   2 2 2 0 3   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 K O S T O F R @ O N R . N A V Y . M I L 	 S c h u b e r t ,   A n d r a s / H - 8 0 4 5 - 2 0 1 5 	 S c h u b e r t ,   A n d r a s / 0 0 0 0 - 0 0 0 1 - 8 3 4 8 - 1 7 7 5 	 	 	 A N W A R   M A ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 ;   B R A D F O R D   S C ,   1 9 3 4 ,   E N G I N E E R I N G ,   P 1 3 7 ;   * E N G   I N F   I N C ,   1 9 9 9 ,   E N G   C O M P ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   * I   S C I   I N F ,   1 9 9 9 ,   S C I   C I T   I N D ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 5 2 7 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K O S T O F F   R N ,   1 9 9 7 ,   S C I   E N G   E T H I C S ,   V 3 ,   P 2 ;   K O S T O F F   R N ,   1 9 9 7 ,   A D A 2 9 6 0 2 1   D T I C ;   K O S T O F F   R N ,   1 9 9 3 ,   C O M P E T I T I V E   I N T E L L I G ,   V 4 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 1 ;   L O T K A   A J ,   1 9 2 6 ,   J   W A S H   A C A D   S C I ,   P 1 6 ;   M a c R o b e r t s   M .   H . ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 1 9 	 3 9 	 4 0 	 0 	 1 7 	 A M E R   C H E M I C A L   S O C 	 W A S H I N G T O N 	 1 1 5 5   1 6 T H   S T ,   N W ,   W A S H I N G T O N ,   D C   2 0 0 3 6   U S A 	 0 0 9 5 - 2 3 3 8 	 	 	 J   C H E M   I N F   C O M P   S C I 	 J .   C h e m .   I n f .   C o m p u t .   S c i . 	 J A N - F E B 	 2 0 0 0 	 4 0 	 1 	 	 	 	 	 1 9 	 3 9 	 	 1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n 	 	 2 1 	 C h e m i s t r y ,   M u l t i d i s c i p l i n a r y ;   C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s 	 C h e m i s t r y ;   C o m p u t e r   S c i e n c e 	 2 7 8 Y P 	 W O S : 0 0 0 0 8 5 0 1 6 8 0 0 0 0 2 	 	 
 
 J 	 L I E V R O U W ,   L A 	 	 	 	 L I E V R O U W ,   L A 	 	 	 T H E   I N V I S I B L E   C O L L E G E   R E C O N S I D E R E D   -   B I B L I O M E T R I C S   A N D   T H E   D E V E L O P M E N T   O F   S C I E N T I F I C   C O M M U N I C A T I O N - T H E O R Y 	 C O M M U N I C A T I O N   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 L I E V R O U W ,   L A   ( r e p r i n t   a u t h o r ) ,   R U T G E R S   S T A T E   U N I V , D E P T   L A B   M E D , N E W   B R U N S W I C K , N J   0 8 9 0 3 ,   U S A . 	 	 	 	 	 	 B R O A D U S   R N ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 ;   C H U B I N   D E ,   1 9 7 6 ,   S O C I O L   Q U A R T ,   V 1 7 ,   P 4 4 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 3 - 8 5 2 5 . 1 9 7 6 . t b 0 1 7 1 5 . x ;   C H U B I N   D E ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 2 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 8 ;   C H U B I N   D E ,   1 9 8 7 ,   K N O W L E D G E ,   V 9 ,   P 2 5 4 ;   C h u b i n   D a r y l   E . ,   1 9 8 3 ,   S O C I O L O G Y   S C I   A N N O T A ;   C R A N E   D ,   1 9 7 0 ,   I N T   S O C   S C I   J ,   V 2 2 ,   P 2 8 ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   C R A N E   D ,   I N   P R E S S   C U R R E N T   C O N ;   C R A W F O R D   S ,   1 9 7 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 2 0 5 0 2 ;   E d g e   D a v i d ,   1 9 7 7 ,   S O C   S O C I A L   S T U D I E S   S ,   V 2 ,   P 1 3 ;   E D G E   D O ,   1 9 6 8 ,   H I S T   S C I ,   V 1 7 ,   P 1 0 2 ;   G a r f i e l d   E . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 7 9 ;   G A R V E Y   W .   D . ,   1 9 7 9 ,   C O M M U N I C A T I O N   E S S E N C ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   G R I F F I T H   B C ,   1 9 8 7 ,   S T U D I E S   I N F O R M A T   O C T ;   H A G S T R O M   W O ,   1 9 7 3 ,   R E V   C R A N E S   I N V I S I B L E ,   V 2 ,   P 3 8 1 ;   H A G S T R O M   W O ,   1 9 6 8 ,   S C I E N T I F I C   C O M M U N I T Y ;   H I C K S   D ,   1 9 8 7 ,   S O C   S T U D   S C I ,   V 1 7 ,   P 2 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 7 0 1 7 0 0 2 0 0 4 ;   K A D U S H I N   C ,   1 9 6 6 ,   A M   S O C I O L   R E V ,   V 3 1 ,   P 7 8 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 6 5 8 ;   K N O R R C E T I N A   K D ,   1 9 8 8 ,   T H I N K I N G   T A L K   E T H N O G ;   K n o r r - C e t i n a   K . K . ,   1 9 8 1 ,   M A N U F A C T U R E   K N O W L E D G ;   L A T O U R   B ,   1 9 7 9 ,   L A B O R A T O R Y   L I F E   S O C I ;   L I E V R O U W   L A ,   1 9 8 7 ,   S O C   N E T W O R K S ,   V 9 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 7 ) 9 0 0 2 1 - 9 ;   L I E V R O U W   L A ,   1 9 8 8 ,   K N O W L E D G E   S O C ,   V 1 ,   P 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 8 7 2 1 0 ;   L i n g w o o d   D .   A . ,   1 9 6 9 ,   T H E S I S   S T A N F O R D   U   S T ;   M A C R O B E R T S   M H ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 3 0 5 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - I ;   M E N Z E L   H ,   1 9 6 8 ,   F   A C C E S S   K N O W L E D G E   S ;   M U L K A Y   M ,   1 9 7 4 ,   S O C   S C I   I N F O R M ,   V 1 3 ,   P 1 0 9 ;   M U L L I N S   N C ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 5 5 2 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 5 5 4 ;   M U L L I N S   N C ,   1 9 6 8 ,   A M   S O C I O L   R E V ,   V 3 3 ,   P 7 8 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 8 8 8 ;   P a i s l e y   W .   J . ,   1 9 8 4 ,   P R O G R   C O M M U N I C A T I O N ,   V 5 ,   P 1 ;   P A I S L E Y   W J ,   1 9 6 5 ,   F L O W   B E H A V I O R A L   S C I ;   P a i s l e y   W .   J . ,   1 9 7 2 ,   E D U C   R E S ,   V 1 ,   P 5 ,   D O I   1 0 . 2 3 0 7 / 1 1 7 5 1 6 5 ;   P A R K E R   E B ,   1 9 6 7 ,   B I B L I O   C I T A T I O N S   U N O ;   P r i c e   D .   J .   d .   S . ,   1 9 6 1 ,   S C I   B A B Y L O N ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P R I T C H A R D   A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 5 8 ;   R E S T I V O   S ,   1 9 8 3 ,   S U P P O R T I N G   L A B O R A T O R ;   R I C E   R E ,   I N   P R E S S   S C I E N T O M E T R ;   R O G E R S   E M ,   1 9 8 7 ,   I N T E R P R E T I V E   A P P R O A C ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   T H A C K R A Y   A ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 1 ;   V a n   M a a n e n   J . ,   1 9 8 3 ,   Q U A L I T A T I V E   M E T H O D O L ,   P 9 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T L E Y   R D ,   1 9 6 9 ,   S O C I O L   R E V ,   V 1 7 ,   P 2 1 9 	 4 6 	 3 9 	 3 9 	 5 	 1 2 	 S A G E   S C I E N C E   P R E S S 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0 	 0 0 9 3 - 6 5 0 2 	 	 	 C O M M U N   R E S 	 C o m m u n .   R e s . 	 O C T 	 1 9 8 9 	 1 6 	 5 	 	 	 	 	 6 1 5 	 6 2 8 	 	 1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 	 	 1 4 	 C o m m u n i c a t i o n 	 C o m m u n i c a t i o n 	 A U 9 7 8 	 W O S : A 1 9 8 9 A U 9 7 8 0 0 0 0 4 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   S o l a z z i ,   M 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   S o l a z z i ,   M a r c o 	 	 	 T h e   r e l a t i o n s h i p   b e t w e e n   s c i e n t i s t s '   r e s e a r c h   p e r f o r m a n c e   a n d   t h e   d e g r e e   o f   i n t e r n a t i o n a l i z a t i o n   o f   t h e i r   r e s e a r c h 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   c o l l a b o r a t i o n ;   I n t e r n a t i o n a l i z a t i o n ;   R e s e a r c h   p e r f o r m a n c e ;   U n i v e r s i t y ;   B i b l i o m e t r i c s ;   I t a l y 	 R E S E A R C H   C O L L A B O R A T I O N ;   R E S E A R C H   P R O D U C T I V I T Y ;   C O - A U T H O R S H I P S ;   U N I V E R S I T I E S ;   M E T H O D O L O G Y 	 P o l i c y   m a k e r s ,   a t   v a r i o u s   l e v e l s   o f   g o v e r n a n c e ,   g e n e r a l l y   e n c o u r a g e   t h e   d e v e l o p m e n t   o f   r e s e a r c h   c o l l a b o r a t i o n .   H o w e v e r   t h e   u n d e r l y i n g   d e t e r m i n a n t s   o f   c o l l a b o r a t i o n   a r e   n o t   c o m p l e t e l y   c l e a r .   I n   p a r t i c u l a r ,   t h e   l i t e r a t u r e   l a c k s   s t u d i e s   t h a t ,   t a k i n g   t h e   i n d i v i d u a l   r e s e a r c h e r   a s   t h e   u n i t   o f   a n a l y s i s ,   a t t e m p t   t o   u n d e r s t a n d   i f   a n d   t o   w h a t   e x t e n t   t h e   r e s e a r c h e r ' s   s c i e n t i f i c   p e r f o r m a n c e   m i g h t   i m p a c t   o n   h i s / h e r   d e g r e e   o f   c o l l a b o r a t i o n   w i t h   f o r e i g n   c o l l e a g u e s .   T h e   c u r r e n t   w o r k   e x a m i n e s   t h e   i n t e r n a t i o n a l   c o l l a b o r a t i o n s   o f   I t a l i a n   u n i v e r s i t y   r e s e a r c h e r s   f o r   t h e   p e r i o d   2 0 0 1 - 2 0 0 5 ,   a n d   p u t s   t h e m   i n   r e l a t i o n   t o   e a c h   i n d i v i d u a l ' s   r e s e a r c h   p e r f o r m a n c e .   T h e   r e s u l t s   o f   t h e   i n v e s t i g a t i o n ,   w h i c h   a s s u m e s   c o - a u t h o r s h i p   a s   p r o x y   o f   r e s e a r c h   c o l l a b o r a t i o n ,   s h o w   t h a t   b o t h   r e s e a r c h   p r o d u c t i v i t y   a n d   a v e r a g e   q u a l i t y   o f   o u t p u t   h a v e   p o s i t i v e   e f f e c t s   o n   t h e   d e g r e e   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n   a c h i e v e d   b y   a   s c i e n t i s t . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   S o l a z z i ,   M a r c o ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   D e p t   M a n a g e m e n t ,   D i p a r t i m e n t o   I n g n   I m p r e s a , S c h   E n g n ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I - 2 7 1 0 0   P a v i a ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   D e p t   M a n a g e m e n t ,   D i p a r t i m e n t o   I n g n   I m p r e s a , S c h   E n g n ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 2 - 2 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 0 9 ,   T E C H N O V A T I O N ,   V 2 9 ,   P 4 9 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 1 1 . 0 0 3 ;   A b t   H A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 6 - z ;   A r c h i b u g i   D ,   2 0 0 4 ,   T E C H N O V A T I O N ,   V 2 4 ,   P 5 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 3 ) 0 0 1 4 1 - X ;   G l a n z e l   W ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 2 5 7 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 7 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 6 8 4 5 0 5 0 3 5 ;   O l m e d a   G o m e z   C . ,   2 0 0 9 ,   A S L I B   P ,   V 6 1 ,   P 8 3 ;   H e   Z L ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 3 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 1 1 ;   H i c k s   D M ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 3 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 4 0 1 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K a t z   J .   S . ,   2 0 0 0 ,   S C I   P U B L   P O L I C Y ,   V 2 7 ,   P 2 3 ,   D O I   [ 1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ] ;   L a u d e l   G ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 6 1 ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   M O R A V C S I K   M J ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 4 ;   S C H M O C H   U ,   2 0 0 5 ,   6 2 0 0 5   B U N D   B I L D   F O R S ;   S c h m o c h   U ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 1 8 - 5 ;   S u a r e z - B a l s e i r o   C ,   2 0 0 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 5 ,   P 4 6 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 9 . 0 3 . 0 0 1 ;   S U B R A M A N Y A M   K ,   1 9 8 3 ,   J   I N F O R M   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 3 0 0 6 0 0 1 0 5 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 5 ;   Z I T T   M ,   2 0 0 4 ,   4   P R O X   C   P R O X   N E T W   C 	 2 3 	 3 8 	 4 2 	 2 	 6 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A R 	 2 0 1 1 	 8 6 	 3 	 	 	 	 	 6 2 9 	 6 4 3 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 8 4 - 7 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 1 1 Y F 	 W O S : 0 0 0 2 8 6 6 2 7 5 0 0 0 0 6 	 	 
 
 J 	 C u r r a n ,   C S ;   B r o r i n g ,   S ;   L e k e r ,   J 	 	 	 	 C u r r a n ,   C l i v e - S t e v e n ;   B r o r i n g ,   S t e f a n i e ;   L e k e r ,   J e n s 	 	 	 A n t i c i p a t i n g   c o n v e r g i n g   i n d u s t r i e s   u s i n g   p u b l i c l y   a v a i l a b l e   d a t a 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C o n v e r g i n g   i n d u s t r i e s ;   P a t e n t   a n a l y s i s ;   N u t r a c e u t i c a l s   a n d   F u n c t i o n a l   F o o d s ;   C o s m e c e u t i c a l s ;   P h y t o s t e r o l s ;   C h e m i c a l   i n d u s t r y ;   B i b l i o m e t r i c s 	 B I B L I O M E T R I C   I N D I C A T O R S ;   K N O W L E D G E   T R A N S F E R ;   S C I E N C E ;   I N N O V A T I O N ;   T E C H N O L O G Y ;   B I O T E C H N O L O G Y ;   P E R F O R M A N C E ;   P A T E N T S ;   I N F O R M A T I O N ;   P A T T E R N S 	 I n d u s t r y   c o n v e r g e n c e ,   d e s c r i b e d   a s   t h e   b l u r r i n g   o f   b o u n d a r i e s   b e t w e e n   i n d u s t r i e s ,   p l a y s   a n   i n c r e a s i n g l y   p i v o t a l   r o l e   i n   s h a p i n g   m a r k e t s   a n d   i n d u s t r i e s .   T r a d i t i o n a l l y ,   t h i s   p h e n o m e n o n   h a s   b e e n   d i s c u s s e d   i n   r e s p e c t   t o   t e l e c o m m u n i c a t i o n s ,   i n f o r m a t i o n   t e c h n o l o g i e s   a n d   e l e c t r o n i c s ,   b u t   m o r e   r e c e n t l y   a l s o   t h e   c h e m i c a l   a n d   i t s   r e l a t e d   i n d u s t r i e s   f i n d   t h e m s e l v e s   a f f e c t e d   b y   a   l a r g e r   c o n v e r g e n c e   p r o c e s s .   W i t h   t h e   p r i m a r y   e x a m p l e   o f   p h y t o s t e r o l s   i n   t h e   t w o   c o n v e r g i n g   i n d u s t r i e s   o f   C o s m e c e u t i c a l s   a n d   o f   N u t r a c e u t i c a l s   a n d   F u n c t i o n a l   F o o d s ,   w e   a n a l y z e   7 4 5 5   s c i e n t i f i c   a n d   p a t e n t   r e f e r e n c e s   i n   r e s p e c t   t o   f i r s t   i n d i c a t o r s   f o r   s i g n s   o f   c o n v e r g e n c e .   F u r t h e r m o r e ,   w e   p r e s e n t   a n d   d i s c u s s   a   m u l t i p l e   i n d i c a t o r   c o n c e p t   f o r   m o n i t o r i n g   c o n v e r g e n c e   i n   a n   R & D - i n t e n s i v e   f i e l d   o n   t h e   b a s i s   o f   p u b l i c l y   a v a i l a b l e   d a t a .   ( C )   2 0 0 9   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ C u r r a n ,   C l i v e - S t e v e n ;   L e k e r ,   J e n s ]   U n i v   M u n s t e r ,   I n s t   B u s i n e s s   A d m ,   D e p t   C h e m   &   P h a r m ,   D - 4 8 1 4 9   M u n s t e r ,   G e r m a n y ;   [ B r o r i n g ,   S t e f a n i e ]   W a g e n i n g e n   U n i v ,   N L - 6 7 0 6   K N   W a g e n i n g e n ,   N e t h e r l a n d s ;   [ B r o r i n g ,   S t e f a n i e ]   U n i v   A p p l   S c i   O s n a b r u c k ,   D - 4 9 0 9 0   O s n a b r u c k ,   G e r m a n y 	 C u r r a n ,   C S   ( r e p r i n t   a u t h o r ) ,   U n i v   M u n s t e r ,   I n s t   B u s i n e s s   A d m ,   D e p t   C h e m   &   P h a r m ,   L e o n a r d o   C a m p u s   1 ,   D - 4 8 1 4 9   M u n s t e r ,   G e r m a n y . 	 c u r r a n @ u n i - m u e n s t e r . d e 	 	 	 	 	 A g r a w a l   A ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 4 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 4 4 . 1 4 2 7 9 ;   B i e r l y   P . E . ,   2 0 0 1 ,   I N T   J   M A N U F A C T U R I N G ,   V 3 ,   P 3 1 ;   B o y a c k   K W ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 9 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 0 9 1 0 0 ;   B r o r i n g   S ,   2 0 0 6 ,   R & D   M A N A G E ,   V 3 6 ,   P 4 8 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 6 . 0 0 4 4 9 . x ;   B r o r i n g   S ,   2 0 0 5 ,   F R O N T   E N D   I N N O V A T I O N ;   B r o r i n g   S . ,   2 0 0 7 ,   C R E A T I V I T Y   I N N O V A T I O ,   V 1 6 ,   P 1 6 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 9 1 . 2 0 0 7 . 0 0 4 2 5 . x ;   B u t c h e r   J ,   2 0 0 5 ,   T E C H N O V A T I O N ,   V 2 5 ,   P 1 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 0 6 . 0 0 3 ;   C a n o n g i a   C ,   2 0 0 4 ,   T E C H N O V A T I O N ,   V 2 4 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 3 . 1 0 . 0 0 1 ;   C h o i   D . ,   2 0 0 1 ,   E U R O P E A N   M A N A G E M E N T ,   V 1 9 ,   P 4 2 4 ,   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 2 3 7 3 ( 0 1 ) 0 0 0 4 5 - 7 ;   C O L E   M ,   1 9 9 1 ,   I N T   R E V                     J U N ,   P 1 5 ;   C R O M P T O N   S ,   2 0 0 7 ,   T I M E S   O N L I N E   T I M E S   N ;   D A I Z A D E H   I ,   2 0 0 6 ,   J   C O M M E R C I A L   B I O T E C H ,   V 1 3 ,   P 2 8 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j c b . 3 0 5 0 0 3 2 ;   D o n n e l l y   W J ,   2 0 0 8 ,   I N T   J   D A I R Y   T E C H N O L ,   V 6 1 ,   P 1 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 1 - 0 3 0 7 . 2 0 0 8 . 0 0 3 6 9 . x ;   D u r e j a   H a r i s h ,   2 0 0 5 ,   I N D I A N   J   P H A R M ,   V 3 7 ,   P 1 5 5 ;   D u y s t e r s   G . ,   1 9 9 8 ,   I N T   J   E C   B U S I N E S S ,   V 5 ,   P 3 5 5 ;   E R N S T   H ,   1 9 9 5 ,   T E C H N O V A T I O N ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 4 9 7 2 ( 9 5 ) 9 6 6 0 5 - S ;   E r n s t   H ,   1 9 9 8 ,   T E C H N O V A T I O N ,   V 1 8 ,   P 7 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 8 ) 0 0 0 6 9 - 8 ;   E r n s t   H . ,   1 9 9 6 ,   P A T E N T I N F O R M A T I O N E N ;   F a i   F . ,   2 0 0 1 ,   S t r u c t u r a l   C h a n g e   a n d   E c o n o m i c   D y n a m i c s ,   V 1 2 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 4 - 3 4 9 X ( 0 0 ) 0 0 0 3 5 - 7 ;   G a m b a r d e l l a   A ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 4 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 6 2 - 6 ;   G A S S M A N N   O . ,   2 0 0 6 ,   P A T E N T M A N A G E M E N T   I N N ;   G i l l   T ,   2 0 0 8 ,   J   M A R K E T I N G ,   V 7 2 ,   P 4 6 ,   D O I   1 0 . 1 5 0 9 / j m k g . 7 2 . 2 . 4 6 ;   G i t t e l m a n   M ,   2 0 0 3 ,   M A N A G E   S C I ,   V 4 9 ,   P 3 6 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 9 . 4 . 3 6 6 . 1 4 4 2 0 ;   G u a n   J C ,   2 0 0 5 ,   I N T   J   T E C H N O L   M A N A G E ,   V 3 2 ,   P 2 2 5 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 5 . 0 0 7 3 3 1 ;   H a g e d o o r n   J ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 3 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 1 3 7 - 3 ;   H a g e d o o r n   J ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 4 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 2 0 - 2 ;   H a u s c h i l d t   J . ,   2 0 0 7 ,   I N N O V A T I O N S M A N A G E M E N ;   H e n z i n g e r   M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 8 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 2 8 1 0 0 ;   H i c k s   D M ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 3 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 4 0 1 ;   H o w e l l s   J ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 2 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 0 4 - 3 ;   J A R V E N P A A   H ,   2 0 0 7 ,   R   D   M A N   C   2 0 0 7   R I S K ;   K a t z   M .   L . ,   1 9 9 6 ,   I N D   C O R P   C H A N G E ,   V 5 ,   P 1 0 7 9 ;   L e e   S ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 1 6 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 8 . 0 0 5 0 9 . x ;   M a k r i   M ,   2 0 0 7 ,   R & D   M A N A G E ,   V 3 7 ,   P 3 0 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 7 . 0 0 4 7 7 . x ;   M e y e r   M ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 4 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 4 0 - 2 ;   M E Y E R   M ,   2 0 0 4 ,   Z   B E T R   W I R T S C H   F O R S C ,   V 6 0 ,   P 1 5 3 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e h r l e   M . G . ,   2 0 0 4 ,   C R E A T I V I T Y   I N N O V A T I O ,   V 1 3 ,   P 2 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 0 9 6 3 - 1 6 9 0 . 2 0 0 4 . 0 0 3 1 2 . x ;   M o r u i s i   K G ,   2 0 0 6 ,   J   A M   C O L L   N U T R ,   V 2 5 ,   P 4 1 ;   M O W E R Y   D ,   1 9 7 9 ,   R E S   P O L I C Y ,   V 8 ,   P 1 0 2 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 7 9 ) 9 0 0 1 9 - 2 ;   M u r r a y   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 3 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 7 0 - 7 ;   * N A T   C A N C   I ,   2 0 0 8 ,   P H Y T ;   N i e d e r g a s s e l   B e n j a m i n ,   2 0 0 7 ,   I n t e r n a t i o n a l   J o u r n a l   o f   T e c h n o l o g y   I n t e l l i g e n c e   a n d   P l a n n i n g ,   V 3 ,   D O I   1 0 . 1 5 0 4 / I J T I P . 2 0 0 7 . 0 1 6 3 0 4 ;   O r t e g a   L ,   2 0 0 6 ,   C O L L   R E S   L I B R ,   V 6 7 ,   P 4 4 6 ;   O s t l u n d   R E ,   2 0 0 2 ,   A N N U   R E V   N U T R ,   V 2 2 ,   P 5 3 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . n u t r . 2 2 . 0 2 0 7 0 2 . 0 7 5 2 2 0 ;   P e n n i n g s   J . ,   2 0 0 1 ,   E C I S   C   F U T   I N N   S T U D ;   P O R T E R   A L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 4 ;   R i n i a   E J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 7 8 3 3 1 7 5 2 ;   S c h m o o k l e r   J . ,   1 9 6 6 ,   I N V E N T I O N   E C   G R O W T H ;   V a l e n t i n   F . ,   2 0 0 2 ,   E C O N   S Y S T   R E S ,   V 1 4 ,   P 3 6 3 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 5 3 1 0 2 2 0 0 0 0 2 4 8 4 2 ;   V e r b e e k   A ,   2 0 0 2 ,   I N T   J   M A N A G   R E V ,   V 4 ,   P 1 7 9 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 2 3 7 0 . 0 0 0 8 3 ;   W a t t s   R J ,   1 9 9 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 6 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 ;   W a t t s   R .   J . ,   1 9 9 8 ,   C O M P E T I T I V E   I N T E L L I G ,   V 9 ,   P 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 5 2 0 - 6 3 8 6 ( 1 9 9 8 1 0 / 1 2 ) 9 : 4 < 1 1 : : A I D - C I R 4 > 3 . 0 . C O ; 2 - V ;   Y o o n   B ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 5 1 ;   Z u c k e r   L G ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 3 8 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 1 3 8 . 1 4 2 7 4 ;   I C H I J I   Y ,   2 0 0 4 ,   P a t e n t   N o .   2 0 0 4 2 5 0 4 0 2 ;   W A C H T E R   R ,   1 9 9 8 ,   P a t e n t   N o .   9 8 1 7 2 4 1 ;   M E Y E R   H ,   2 0 0 1 ,   P a t e n t   N o .   0 1 8 7 2 5 7 ;   E I S F E L D   W ,   2 0 0 2 ,   P a t e n t   N o .   1 0 1 2 6 4 4 8 	 5 9 	 3 8 	 3 8 	 3 	 4 0 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 M A R 	 2 0 1 0 	 7 7 	 3 	 	 	 	 	 3 8 5 	 3 9 5 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 1 0 . 0 0 2 	 	 1 1 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 5 7 4 P U 	 W O S : 0 0 0 2 7 6 0 0 4 9 0 0 0 0 3 	 	 
 
 J 	 A g a r w a l ,   P ;   S e a r l s ,   D B 	 	 	 	 A g a r w a l ,   P a n k a j ;   S e a r l s ,   D a v i d   B . 	 	 	 C a n   l i t e r a t u r e   a n a l y s i s   i d e n t i f y   i n n o v a t i o n   d r i v e r s   i n   d r u g   d i s c o v e r y ? 	 N A T U R E   R E V I E W S   D R U G   D I S C O V E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 N E T W O R K S ;   S C I E N C E ;   I M P A C T ;   A N T I B I O T I C S ;   P U B L I C A T I O N ;   T H E R A P I E S ;   T A R G E T S ;   T R E N D S ;   F I E L D ;   A C T 	 D r u g   d i s c o v e r y   m u s t   b e   g u i d e d   n o t   o n l y   b y   m e d i c a l   n e e d   a n d   c o m m e r c i a l   p o t e n t i a l ,   b u t   a l s o   b y   t h e   a r e a s   i n   w h i c h   n e w   s c i e n c e   i s   c r e a t i n g   t h e r a p e u t i c   o p p o r t u n i t i e s ,   s u c h   a s   t a r g e t   i d e n t i f i c a t i o n   a n d   t h e   u n d e r s t a n d i n g   o f   d i s e a s e   m e c h a n i s m s .   T o   s y s t e m a t i c a l l y   i d e n t i f y   s u c h   a r e a s   o f   h i g h   s c i e n t i f i c   a c t i v i t y ,   w e   u s e   b i b l i o m e t r i c s   a n d   r e l a t e d   d a t a - m i n i n g   m e t h o d s   t o   a n a l y s e   o v e r   h a l f   a   t e r a b y t e   o f   d a t a ,   i n c l u d i n g   P u b M e d   a b s t r a c t s ,   l i t e r a t u r e   c i t a t i o n   d a t a   a n d   p a t e n t   f i l i n g s .   T h e s e   a n a l y s e s   r e v e a l   t r e n d s   i n   s c i e n t i f i c   a c t i v i t y   r e l a t e d   t o   d i s e a s e   s t u d i e d   a t   v a r y i n g   l e v e l s ,   d o w n   t o   i n d i v i d u a l   g e n e s   a n d   p a t h w a y s ,   a n d   p r o v i d e   m e t h o d s   t o   m o n i t o r   a r e a s   i n   w h i c h   s c i e n t i f i c   a d v a n c e s   a r e   l i k e l y   t o   c r e a t e   n e w   t h e r a p e u t i c   o p p o r t u n i t i e s . 	 [ A g a r w a l ,   P a n k a j ;   S e a r l s ,   D a v i d   B . ]   G l a x o S m i t h K l i n e   I n c ,   C o m p u t a t   B i o l   D e p t ,   K i n g   O f   P r u s s i a ,   P A   1 9 4 0 6   U S A 	 A g a r w a l ,   P   ( r e p r i n t   a u t h o r ) ,   G l a x o S m i t h K l i n e   I n c ,   C o m p u t a t   B i o l   D e p t ,   7 0 9   S w e d e l a n d   R d , P O B   1 5 3 9 ,   K i n g   O f   P r u s s i a ,   P A   1 9 4 0 6   U S A . 	 P a n k a j . A g a r w a l @ g s k . c o m 	 	 A g a r w a l ,   P a n k a j / 0 0 0 0 - 0 0 0 2 - 4 1 6 5 - 9 9 9 0 	 	 	 A g a r w a l   P ,   2 0 0 8 ,   B R I E F   B I O I N F O R M ,   V 9 ,   P 4 7 9 ,   D O I   1 0 . 1 0 9 3 / b i b / b b n 0 3 5 ;   * A M   A S S   A D V   S C I ,   2 0 0 8 ,   H I S T   D A T   F E D   R   D   F Y ;   A s h i y a   M ,   2 0 0 7 ,   N A T   R E V   D R U G   D I S C O V ,   V 6 ,   P 7 7 7 ,   D O I   1 0 . 1 0 3 8 / n r d 2 4 2 0 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B r e n   L ,   2 0 0 1 ,   F D A   C o n s u m ,   V 3 5 ,   P 2 4 ;   C a l a b r e s e   L ,   2 0 0 0 ,   A M   J   M E D ,   V 1 0 8 ,   P 4 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 9 3 4 3 ( 9 9 ) 0 0 4 0 8 - 8 ;   C a r d   D ,   2 0 0 1 ,   A M   E C O N   R E V ,   V 9 1 ,   P 9 7 ,   D O I   1 0 . 1 2 5 7 / a e r . 9 1 . 2 . 9 7 ;   C a v i e d e s   J E ,   2 0 0 4 ,   J   B I O M E D   I N F O R M ,   V 3 7 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / j . j b i . 2 0 0 4 . 0 2 . 0 0 1 ;   C h i n - D u s t i n g   J ,   2 0 0 5 ,   N A T   R E V   D R U G   D I S C O V ,   V 4 ,   P 8 9 1 ,   D O I   1 0 . 1 0 3 8 / n r d 1 8 7 9 ;   C o a t e s   A R M ,   2 0 0 7 ,   B R I T   J   P H A R M A C O L ,   V 1 5 2 ,   P 1 1 4 7 ,   D O I   1 0 . 1 0 3 8 / s j . b j p . 0 7 0 7 4 3 2 ;   C o h e n   F J ,   2 0 0 5 ,   N A T   R E V   D R U G   D I S C O V ,   V 4 ,   P 7 8 ,   D O I   1 0 . 1 0 3 8 / n r d 1 6 1 0 ;   C o h e n   J ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 1 ,   P 5 2 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 2 1 . 5 8 8 8 . 5 2 0 ;   C o h e n   J o n ,   2 0 0 8 ,   S c i e n c e ,   V 3 2 1 ,   P 5 1 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 2 1 . 5 8 8 8 . 5 1 8 ;   D a s   S K ,   2 0 0 5 ,   M I N I - R E V   M E D   C H E M ,   V 5 ,   P 1 0 1 9 ,   D O I   1 0 . 2 1 7 4 / 1 3 8 9 5 5 7 0 5 7 7 4 5 7 5 2 7 3 ;   D a v e n p o r t   T .   H . ,   2 0 0 7 ,   C O M P E T I N G   A N A L   N E W   S ;   D o r s e y   E R ,   2 0 0 6 ,   A N N   N E U R O L ,   V 6 0 ,   P 6 5 2 ,   D O I   1 0 . 1 0 0 2 / a n a . 2 1 0 4 7 ;   D u c o r   P ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 9 ,   P 8 7 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 9 . 5 4 8 1 . 8 7 3 ;   E v a n s   J A ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 1 ,   P 3 9 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 0 4 7 3 ;   F a l k e n h e i m   J .   C . ,   2 0 0 8 ,   2 0 0 7   R E C O R D S   5   C O N S E ;   F o n t e n o t   J D ,   2 0 0 5 ,   N A T   I M M U N O L ,   V 6 ,   P 3 3 1 ,   D O I   1 0 . 1 0 3 8 / n i 1 1 7 9 ;   G a b l e   D R ,   2 0 0 6 ,   A T H E R O S C L E R O S I S ,   V 1 8 8 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / j . a t h e r o s c l e r o s i s . 2 0 0 6 . 0 2 . 0 1 0 ;   G a r f i e l d   E ,   1 9 9 7 ,   C E L L   D E A T H   D I F F E R ,   V 4 ,   P 3 5 2 ,   D O I   1 0 . 1 0 3 8 / s j . c d d . 4 4 0 0 2 6 1 ;   K A L B E R E R   J T ,   1 9 7 9 ,   C A N C E R   R E S ,   V 3 9 ,   P 4 2 7 4 ;   K a r p a s   A ,   2 0 0 4 ,   B I O L   R E V ,   V 7 9 ,   P 9 1 1 ,   D O I   1 0 . 1 0 1 7 / S ;   K n e l l e r   R ,   2 0 0 5 ,   N A T   B I O T E C H N O L ,   V 2 3 ,   P 5 2 9 ,   D O I   1 0 . 1 0 3 8 / n b t 0 5 0 5 - 5 2 9 ;   L a w r e n c e   P A ,   2 0 0 3 ,   N A T U R E ,   V 4 2 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 2 2 2 5 9 a ;   L a w r e n c e   P A ,   2 0 0 7 ,   C U R R   B I O L ,   V 1 7 ,   p R 5 8 3 ,   D O I   1 0 . 1 0 1 6 / j . c u b . 2 0 0 7 . 0 6 . 0 1 4 ;   L E H M A N N   J M ,   1 9 9 5 ,   J   B I O L   C H E M ,   V 2 7 0 ,   P 1 2 9 5 3 ;   M a t h e r s   C D ,   2 0 0 3 ,   5 4   W H O ;   M e s a   R A ,   2 0 0 8 ,   C U R R   O P I N   H E M A T O L ,   V 1 5 ,   P 1 2 1 ,   D O I   1 0 . 1 0 9 7 / M O H . 0 b 0 1 3 e 3 2 8 2 f 3 d e b d ;   M o r r a l   N ,   2 0 0 3 ,   T R E N D S   E N D O C R I N   M E T ,   V 1 4 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / S 1 0 4 3 - 2 7 6 0 ( 0 3 ) 0 0 0 3 1 - 6 ;   M u r r a y   F ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 3 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 7 0 - 7 ;   * N A T   S C I   F D N ,   D O C T   D E G R   A W   D E T   F I E ;   P a t e l   C h i n t a n   O ,   2 0 0 6 ,   A M I A   A n n u   S y m p   P r o c ,   P 6 2 4 ;   P a y n e   D J ,   2 0 0 7 ,   N A T   R E V   D R U G   D I S C O V ,   V 6 ,   P 2 9 ,   D O I   1 0 . 1 0 3 8 / n r d 2 2 0 1 ;   P e d e r s e n   T ,   2 0 0 7 ,   J   B I O M E D   I N F O R M ,   V 4 0 ,   P 2 8 8 ,   D O I   1 0 . 1 0 1 6 / j . j b i . 2 0 0 6 . 0 6 . 0 0 4 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a m a n a n a - R a h a r y   S ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 3 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 2 0 - 4 ;   R o s v a l l   M ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 1 1 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 6 8 5 1 1 0 5 ;   R u f f o l o   R R ,   2 0 0 6 ,   E X P E R T   O P I N   D R U G   D I S ,   V 1 ,   P 9 9 ,   D O I   1 0 . 1 5 1 7 / 1 7 4 6 0 4 4 1 . 1 . 2 . 9 9 ;   S a m s - D o d d   F ,   2 0 0 5 ,   D R U G   D I S C O V   T O D A Y ,   V 1 0 ,   P 1 0 4 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 5 9 - 6 4 4 6 ( 0 5 ) 0 3 5 3 9 - 7 ;   S a y e r s   E . ,   2 0 0 4 ,   B U I L D I N G   C U S T O M I Z E D ;   S e a r l s   D   B ,   2 0 0 1 ,   P h a r m a c o g e n o m i c s   J ,   V 1 ,   P 8 8 ;   S h u m w a y   R .   H . ,   2 0 0 5 ,   T I M E   S E R I E S   A N A L   I T S ;   T a k a h a s h i   K ,   1 9 9 9 ,   O C C U P   M E D - O X F O R D ,   V 4 9 ,   P 5 7 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / 4 9 . 1 . 5 7 - a ;   T a r o n c h e r - O l d e n b u r g   G ,   2 0 0 7 ,   N A T   B I O T E C H N O L ,   V 2 5 ,   P 9 6 1 ,   D O I   1 0 . 1 0 3 8 / n b t 0 9 0 7 - 9 6 1 ;   T e i t e l b a u m   M S ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 1 ,   P 6 4 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 6 0 2 7 2 ;   U l l m a n   F ,   2 0 0 8 ,   D R U G   D I S C O V   T O D A Y ,   V 1 3 ,   P 5 4 3 ,   D O I   1 0 . 1 0 1 6 / j . d r u d i s . 2 0 0 8 . 0 3 . 0 1 1 ;   U .   S .   D e p a i   t u i e n t   o f   H e a l t h   a n d   H u m a n   S e r v i c e s   F o o d   a n d   D r u g   A d m i n i s t r a t i o n ,   2 0 0 4 ,   I N N   S T A G N   C H A L L   O P P ;   V a l l a n c e   P ,   2 0 0 7 ,   C L I N   P H A R M A C O L   T H E R ,   V 8 2 ,   P 3 6 3 ,   D O I   1 0 . 1 0 3 8 / s j . c l p t . 2 0 0 7 . 6 1 0 0 3 3 3 ;   V i c e n t e   M ,   2 0 0 6 ,   F E M S   M I C R O B I O L   R E V ,   V 3 0 ,   P 8 4 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 7 4 - 6 9 7 6 . 2 0 0 6 . 0 0 0 3 8 . x ;   W A N G   X ,   2 0 0 4 ,   M E D I N F O ,   V 1 1 ,   P 5 5 5 ;   W e b b y   R J ,   2 0 0 3 ,   S C I E N C E ,   V 3 0 2 ,   P 1 5 1 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 9 0 3 5 0 ;   Z h o n g   X T ,   2 0 0 7 ,   N A T   B I O T E C H N O L ,   V 2 5 ,   P 9 4 5 ,   D O I   1 0 . 1 0 3 8 / n b t 0 8 0 7 - 9 4 5 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y 	 5 6 	 3 8 	 3 9 	 0 	 1 4 	 N A T U R E   P U B L I S H I N G   G R O U P 	 L O N D O N 	 M A C M I L L A N   B U I L D I N G ,   4   C R I N A N   S T ,   L O N D O N   N 1   9 X W ,   E N G L A N D 	 1 4 7 4 - 1 7 7 6 	 	 	 N A T   R E V   D R U G   D I S C O V 	 N a t .   R e v .   D r u g   D i s c o v . 	 N O V 	 2 0 0 9 	 8 	 1 1 	 	 	 	 	 8 6 5 	 8 7 8 	 	 1 0 . 1 0 3 8 / n r d 2 9 7 3 	 	 1 4 	 B i o t e c h n o l o g y   &   A p p l i e d   M i c r o b i o l o g y ;   P h a r m a c o l o g y   &   P h a r m a c y 	 B i o t e c h n o l o g y   &   A p p l i e d   M i c r o b i o l o g y ;   P h a r m a c o l o g y   &   P h a r m a c y 	 5 1 4 I R 	 W O S : 0 0 0 2 7 1 3 8 8 2 0 0 0 2 0 	 1 9 8 7 6 0 4 1 	 
 
 J 	 T h e l w a l l ,   M 	 	 	 	 T h e l w a l l ,   M i k e 	 	 	 B i b l i o m e t r i c s   t o   w e b o m e t r i c s 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 b i b l i o m e t r i c s ;   s c h o l a r l y   p u b l i s h i n g ;   w e b o m e t r i c s 	 W E B   S I T E   I N T E R L I N K I N G ;   I N F O R M A T I O N - S C I E N C E ;   S E A R C H   E N G I N E S ;   C I T A T I O N   A N A L Y S I S ;   G O O G L E   S C H O L A R ;   S C I E N T I F I C   L I T E R A T U R E ;   A U T H O R   C O C I T A T I O N ;   L O G   A N A L Y S I S ;   R S S   F E E D S ;   H - I N D E X 	 B i b l i o m e t r i c s   h a s   c h a n g e d   o u t   o f   a l l   r e c o g n i t i o n   s i n c e   1 9 5 8 ;   b e c o m i n g   e s t a b l i s h e d   a s   a   f i e l d ,   b e i n g   t a u g h t   w i d e l y   i n   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e   s c h o o l s ,   a n d   b e i n g   a t   t h e   c o r e   o f   a   n u m b e r   o f   s c i e n c e   e v a l u a t i o n   r e s e a r c h   g r o u p s   a r o u n d   t h e   w o r l d .   T h i s   w a s   a l l   m a d e   p o s s i b l e   b y   t h e   w o r k   o f   E u g e n e   G a r f i e l d   a n d   h i s   S c i e n c e   C i t a t i o n   I n d e x .   T h i s   a r t i c l e   r e v i e w s   t h e   d i s t a n c e   t h a t   b i b l i o m e t r i c s   h a s   t r a v e l l e d   s i n c e   1 9 5 8   b y   c o m p a r i n g   e a r l y   b i b l i o m e t r i c s   w i t h   c u r r e n t   p r a c t i c e ,   a n d   b y   g i v i n g   a n   o v e r v i e w   o f   a   r a n g e   o f   r e c e n t   d e v e l o p m e n t s ,   s u c h   a s   p a t e n t   a n a l y s i s ,   n a t i o n a l   r e s e a r c h   e v a l u a t i o n   e x e r c i s e s ,   v i s u a l i z a t i o n   t e c h n i q u e s ,   n e w   a p p l i c a t i o n s ,   o n l i n e   c i t a t i o n   i n d e x e s ,   a n d   t h e   c r e a t i o n   o f   d i g i t a l   l i b r a r i e s .   W e b o m e t r i c s ,   a   m o d e r n ,   f a s t -   g r o w i n g   o f f s h o o t   o f   b i b l i o m e t r i c s ,   i s   r e v i e w e d   i n   d e t a i l .   F i n a l l y ,   f u t u r e   p r o s p e c t s   a r e   d i s c u s s e d   w i t h   r e g a r d   t o   b o t h   b i b l i o m e t r i c s   a n d   w e b o m e t r i c s . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I T ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 T h e l w a l l ,   M   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I T ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d . 	 m . t h e l w a l l @ w l v . a c . u k 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A d a m s   J ,   2 0 0 2 ,   S C I E N C E ,   V 2 9 6 ,   P 8 0 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 6 . 5 5 6 9 . 8 0 5 ;   A g u i l l o   I F ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 9 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 3 3 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B a r - I l a n   J ,   2 0 0 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 8 ,   P 2 3 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 8 0 1 0 6 ;   B a r - I l a n   J ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 8 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 4 9 ;   B a r a b a s i   A L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 0 9 ;   B a r - I l a n   J ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 / 3 ;   B a r j a k   F ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 7 6 ;   B a r j a k   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 7 6 ;   B e n c e   V ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 3 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 5 8 5 4 ;   B e n s m a n   S J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 9 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 1 0 ;   B j o r n e b o r n   L ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 2 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 7 7 ;   B j o r n e b o r n   L . ,   2 0 0 4 ,   T H E S I S   R O Y A L   S C H   L I B ;   B j o r n e b o r n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 9 - 8 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B O Y A C K   K ,   2 0 0 7 ,   P   I S S I   2 0 0 7   C S I C   M A D ,   V 1 ,   P 1 2 4 ;   b o y d   d a n a h ,   2 0 0 6 ,   1   M O N D A Y ,   V 1 1 ;   B o y d   D ,   2 0 0 4 ,   C   H U M   F A C T   C O M P   S Y S T ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B r o d e r   A ,   2 0 0 0 ,   C O M P U T   N E T W ,   V 3 3 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 9 - 1 2 8 6 ( 0 0 ) 0 0 0 8 3 - 9 ;   B r o d y   T ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 0 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 7 3 ;   B u t l e r   L ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 ;   C A W K E L L   A ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ,   P 1 7 7 ;   C h e n   C . ,   2 0 0 4 ,   I N F O R M   V I S U A L I Z A T I O N ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   C o z z e n s   S E ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 0 7 8 1 7 7 7 4 2 1 ;   C r a v e n   T C ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 2 6 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 2 8 0 5 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   D a v i s   P M ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 2 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 6 1   - 8 ;   * D E S T ,   I   G R A N T S   S C H E M ;   E S C H E R   T ,   2 0 0 7 ,   G E O G R A P H Y   O N L I N E   S O C ;   G a m o n   M ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 6 4 6 ,   P 1 2 1 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E ,   2 0 0 5 ,   5   I N T   C   P E E R   R E V   B I O ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G i b b o n s   M . ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G o l d e r   S . ,   2 0 0 7 ,   3   I N T   C   C O M M   T E C H N   C ;   G r u h l   D ,   2 0 0 4 ,   I B M   S Y S T   J ,   V 4 3 ,   P 6 4 ;   G r u h l   D . ,   2 0 0 5 ,   K D D   0 5 ,   P 7 8 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 0 8 1 8 7 0 . 1 0 8 1 8 8 3 ;   G R U H L   D ,   2 0 0 4 ,   W W W 2 0 0 4 ;   H a r n a d   S ,   2 0 0 7 ,   P r o c e e d i n g s   o f   I S S I   2 0 0 7 :   1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l   S o c i e t y   f o r   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s ,   V o l s   I   a n d   I I ,   P 2 7 ;   H a r r i e s   G ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 4 3 6 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 6 7 3 6 ;   H e i m e r i k s   G ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 9 6 8 1 2 8 3 0 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H u n t i n g t o n   P ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 5 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 7 7 6 6 1 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   I n t r o n a   L u c a s ,   2 0 0 0 ,   I N F O R M A T I O N   S O C ,   V 1 6 ,   P 1 ;   J a c s o   P ,   2 0 0 5 ,   O N L I N E   I N F O R M   R E V ,   V 2 9 ,   P 2 0 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 5 1 0 5 9 8 0 6 6 ;   J o n e s   S . ,   2 0 0 0 ,   I n t e r n a t i o n a l   J o u r n a l   o n   D i g i t a l   L i b r a r i e s ,   V 3 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 7 9 9 9 9 0 0 0 2 2 ;   K e   H R ,   2 0 0 2 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 0 2 ) 0 0 1 2 6 - 3 ;   K O E H L E R   W ,   I N F O R M   R E S ,   V 9 ;   K o u s h a   K ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 0 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 8 4 ;   K o u s h a   K ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 6 - 9 ;   K u r t z   M J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 9 6 ;   L a w r e n c e   S ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 3 8 / 2 1 9 8 7 ;   L e y d e s d o r f f   L ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 4 5 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 4 ;   L i   X M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 1 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 7 - 6 ;   M a r e k   K ,   2 0 0 2 ,   L I B R I ,   V 5 2 ,   P 2 2 0 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 2 . 2 2 0 ;   M a r s h a k o v a   I . ,   1 9 7 3 ,   N A U C H N O   T E K H N I C H E S K A ,   V 2 ,   P 3 ;   M a y r   P . ,   2 0 0 5 ,   G O O G L E   W E B   A P I S   I N S T ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M e t t r o p   W ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 6 2 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 9 6 ;   M e y e r   M ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 7 3 5 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N i c o l a i s e n   J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 6 0 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 2 0 ;   N o r r i s   M ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 1 ;   O P P E N H E I M   C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 4 ;   O p p e n h e i m   C ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 4 0 5 ;   O p p e n h e i m   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 0 ;   O r t e g a   J L ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 3 4 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 5 7 8 5 ;   P A Y N E   N ,   2 0 0 7 ,   L O N G I T U D I N A L   S T U D Y   A ;   P a y n e   N ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 5 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 5 - y ;   P e n n o c k   D M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 5 2 0 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 2 0 8 5 6 9 9 ;   P i e n a a r   M ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 2 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 0 7 8 1 7 7 7 3 9 5 ;   P R E S C O T T   L ,   2 0 0 7 ,   H I T W I S E   U S   C O N S U M E R ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   R o b i n s o n   S . ,   2 0 0 6 ,   R O L E   N E T W O R K I N G   R E S ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S i l v a n i   A ,   2 0 0 5 ,   R E S   E V A L U A T ,   V 1 4 ,   P 2 0 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 5 7 8 1 7 7 6 0 9 4 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S M I T H   A J ,   2 0 0 2 ,   P R O T E I N   S E Q U E N C I N G   P ,   P 1 3 3 ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   * T E R T   E D   C O M M ,   2 0 0 3 ,   P E R F   B A S   R E S   F U N D   G U ;   T H A C K R A Y   B ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ,   P 1 1 ;   T h e l w a l l   M ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 2 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T h e l w a l l   M . ,   2 0 0 4 ,   L I N K   A N A L   I N F O R M   S C I ;   T H E L W A L L   M ,   J   A M   S O C   I N   I N   P R E S S ;   T h e l w a l l   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 3 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 0 4 ;   T h e l w a l l   M ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 3 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 0 4 ;   T h e l w a l l   M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 6 4 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 3 4 ;   T h o m a s   O ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 3 8 ;   v a n   d e r   M e u l e n   B ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 1 1 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 0 7 8 1 7 7 7 4 4 9 ;   V a n   C o u v e r i n g   E l i z a b e t h ,   2 0 0 4 ,   A N N   C   I N T   A S S   M E D   C O ;   V a u g h a n   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 9 9 ;   V a u g h a n   L ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 6 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 3 ) 0 0 0 6 3 - 3 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 3 8 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W i l k i n s o n   D ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 1 0 9 	 3 8 	 4 1 	 1 1 	 8 4 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F   S C I 	 J .   I n f .   S c i . 	 A U G 	 2 0 0 8 	 3 4 	 4 	 	 	 	 	 6 0 5 	 6 2 1 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 8 7 2 3 8 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 3 4 X N 	 W O S : 0 0 0 2 5 8 2 5 5 2 0 0 0 1 7 	 	 
 
 J 	 V a n   E c k ,   N J ;   W a l t m a n ,   L 	 	 	 	 V a n   E c k ,   N e e s   J a n ;   W a l t m a n ,   L u d o 	 	 	 B i b l i o m e t r i c   m a p p i n g   o f   t h e   c o m p u t a t i o n a l   i n t e l l i g e n c e   f i e l d 	 I N T E R N A T I O N A L   J O U R N A L   O F   U N C E R T A I N T Y   F U Z Z I N E S S   A N D   K N O W L E D G E - B A S E D   S Y S T E M S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b i b l i o m e t r i c   m a p p i n g ;   c o m p u t a t i o n a l   i n t e l l i g e n c e ;   n e u r a l   n e t w o r k s ;   f u z z y   s y s t e m s ;   e v o l u t i o n a r y   c o m p u t a t i o n 	 N E U R A L - N E T W O R K   R E S E A R C H ;   D I S C I P L I N E ;   J A C K K N I F E ;   S C I E N C E ;   M A P S 	 I n   t h i s   p a p e r ,   a   b i b l i o m e t r i c   s t u d y   o f   t h e   c o m p u t a t i o n a l   i n t e l l i g e n c e   f i e l d   i s   p r e s e n t e d .   B i b l i o m e t r i c   m a p s   s h o w i n g   t h e   a s s o c i a t i o n s   b e t w e e n   t h e   m a i n   c o n c e p t s   i n   t h e   f i e l d   a r e   p r o v i d e d   f o r   t h e   p e r i o d s   1 9 9 6 - 2 0 0 0   a n d   2 0 0 1 - 2 0 0 5 .   B o t h   t h e   c u r r e n t   s t r u c t u r e   o f   t h e   f i e l d   a n d   t h e   e v o l u t i o n   o f   t h e   f i e l d   o v e r   t h e   l a s t   d e c a d e   a r e   a n a l y z e d .   I n   a d d i t i o n ,   a   n u m b e r   o f   e m e r g i n g   a r e a s   i n   t h e   f i l d   a r e   i d e n t i f i e d .   I t   t u r n s   o u t   t h a t   t h e   c o m p u t a t i o n a l   i n t e l l i g e n c e   c a n   b e s t   b e   s e e n   a s   a   f i e l d   t h a t   i s   s t r u c t u r e d   a r o u n d   f o u r   i m p o r t a n t   t y p e s   o f   p r o b l e m s ,   n a m e l y   c o n t r o l   p r o b l e m s ,   c l a s s i f i c a t i o n   p r o b l e m s ,   r e g r e s s i o n   p r o b l e m s m   a n d   o p t i m i z a t i o n   p r o b l e m s .   W i t h i n   t h e   c o m p u t a t i o n a l   i n t e l l i g e n c e   f i e l d ,   t h e   n e u r a l   n e t w o r k s   a n d   f u z z y   s y s t e m s   s u d f i e l d s   a r e   f a i r l y   i n t e r t w i n e d ,   w h e r e a s   t h e   e v o l u t i o n a r y   c o m p u t a t i o n   s u b f i e l d   h a s   a   r e l a t i v e l y   i n d e p e n d e n t   p o s t i o n . 	 E r a s m u s   U n i v ,   E r a s m u s   S c h   E c o n ,   I n s t   E c o n o m e t r ,   N L - 3 0 0 0   D R   R o t t e r d a m ,   N e t h e r l a n d s 	 V a n   E c k ,   N J   ( r e p r i n t   a u t h o r ) ,   E r a s m u s   U n i v ,   E r a s m u s   S c h   E c o n ,   I n s t   E c o n o m e t r ,   P O   B o x   1 7 3 8 ,   N L - 3 0 0 0   D R   R o t t e r d a m ,   N e t h e r l a n d s . 	 n v a n e c k @ f e w . e u r . n l ;   w a l t m a n @ f e w . e u r . n l 	 W a l t m a n ,   L u d o / B - 5 5 6 1 - 2 0 0 8 ;   v a n   E c k ,   N e e s   J a n / B - 6 0 4 2 - 2 0 0 8 	 v a n   E c k ,   N e e s   J a n / 0 0 0 0 - 0 0 0 1 - 8 4 4 8 - 4 5 2 1 	 	 	 B o r g   I . ,   2 0 0 5 ,   M O D E R N   M U L T I D I M E N S I O ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   C h e n   C . ,   2 0 0 6 ,   I N F O R M   V I S U A L I Z A T I O N ;   D E L E E U W   J ,   1 9 8 6 ,   J   C L A S S I F ,   V 3 ,   P 9 7 ;   E n g e l b r e c h t   A .   P . ,   2 0 0 3 ,   C O M P U T A T I O N A L   I N T E L L ;   H E I S E R   W J ,   1 9 8 3 ,   J   E C O N O M E T R I C S ,   V 2 2 ,   P 1 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 7 6 ( 8 3 ) 9 0 0 9 7 - 0 ;   H E I S E R   W J ,   1 9 8 3 ,   A P P L   P S Y C H   M E A S ,   V 7 ,   P 3 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 6 6 2 1 6 8 3 0 0 7 0 0 4 0 2 ;   H I N Z E   S ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 3 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 3 3 4 4 5 ;   J u s t e s o n   J .   S . ,   1 9 9 5 ,   N A T   L A N G   E N G ,   V 1 ,   P 9 ,   D O I   D O I   1 0 . 1 0 1 7 / S 1 3 5 1 3 2 4 9 0 0 0 0 0 0 4 8 ;   K o n a r   A . ,   2 0 0 5 ,   C O M P U T A T I O N A L   I N T E L L ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   N o v a k   J .   D . ,   1 9 8 4 ,   L E A R N I N G   L E A R N ;   N o y o n s   E C M ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 2 3 7 ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   P E T E R S   H P F ,   1 9 9 3 ,   R E S   P O L I C Y ,   V 2 2 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 3 1 - C ;   R I P   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 5 8 2 7 ;   S c o t t   D a v i d   W . ,   1 9 9 2 ,   M U L T I V A R I A T E   D E N S I T Y ;   V a n   E c k   N J ,   2 0 0 7 ,   S T U D   C L A S S   D A T A   A N A L ,   P 2 9 9 ;   v a n   E c k   N J ,   2 0 0 6 ,   I E E E   C O M P U T   I N T E L L   M ,   V 1 ,   P 6 ,   D O I   1 0 . 1 1 0 9 / C I - M . 2 0 0 6 . 2 4 8 0 4 3 ;   V A N E C K   N J ,   2 0 0 6 ,   P   1 0   I N T   C   I N F   V I S ,   P 2 7 0 ;   V A N E C K   N J ,   2 0 0 6 ,   P   2 0 0 6   I E E E   I N T   C   F U ,   P 7 8 6 2 ;   V A N R A A N   A F J ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 6 9 ;   W E I N B E R G   S L ,   1 9 8 4 ,   P S Y C H O M E T R I K A ,   V 4 9 ,   P 4 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 3 0 2 5 8 6 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 	 2 4 	 3 8 	 3 8 	 0 	 2 2 	 W O R L D   S C I E N T I F I C   P U B L   C O   P T E   L T D 	 S I N G A P O R E 	 5   T O H   T U C K   L I N K ,   S I N G A P O R E   5 9 6 2 2 4 ,   S I N G A P O R E 	 0 2 1 8 - 4 8 8 5 	 	 	 I N T   J   U N C E R T A I N   F U Z Z 	 I n t .   J .   U n c e r t a i n t y   F u z z i n e s s   K n o w l . - B a s e d   S y s t . 	 O C T 	 2 0 0 7 	 1 5 	 5 	 	 	 	 	 6 2 5 	 6 4 5 	 	 1 0 . 1 1 4 2 / S 0 2 1 8 4 8 8 5 0 7 0 0 4 9 1 1 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e 	 C o m p u t e r   S c i e n c e 	 2 3 8 D G 	 W O S : 0 0 0 2 5 1 4 2 6 9 0 0 0 0 8 	 	 
 
 J 	 N i e m i n e n ,   P ;   R u c k e r ,   G ;   M i e t t u n e n ,   J ;   C a r p e n t e r ,   J ;   S c h u m a c h e r ,   M 	 	 	 	 N i e m i n e n ,   P e n t t i ;   R u c k e r ,   G e r t a ;   M i e t t u n e n ,   J o u k o ;   C a r p e n t e r ,   J a m e s ;   S c h u m a c h e r ,   M a r t i n 	 	 	 S t a t i s t i c a l l y   s i g n i f i c a n t   p a p e r s   i n   p s y c h i a t r y   w e r e   c i t e d   m o r e   o f t e n   t h a n   o t h e r s 	 J O U R N A L   O F   C L I N I C A L   E P I D E M I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   b i a s ;   p u b l i c a t i o n   b i a s ;   r e v i e w   l i t e r a t u r e ;   p s y c h i a t r y ;   b i b l i o m e t r i c s ;   d a t a   i n t e r p r e t a t i o n 	 P U B L I C A T I O N   B I A S ;   C I T A T I O N   B I A S ;   E M P I R I C A L - E V I D E N C E ;   R A N D O M I Z E D - T R I A L S ;   C L I N I C A L - R E S E A R C H ;   M E D I C A L   J O U R N A L S ;   I M P A C T   F A C T O R S ;   Q U A L I T Y ;   P E R F O R M A N C E ;   I N D I C A T O R S 	 O b j e c t i v e :   C i t a t i o n s   b y   o t h e r   r e s e a r c h e r s   a r e   i m p o r t a n t   i n   t h e   d i s s e m i n a t i o n   o f   r e s e a r c h   f i n d i n g s .   W e   a i m e d   t o   i n v e s t i g a t e   w h e t h e r   p r e f e r e n t i a l   c i t a t i o n   o f   s t a t i s t i c a l l y   s i g n i f i c a n t   a r t i c l e s   e x i s t s   i n   t h e   p s y c h i a t r i c   l i t e r a t u r e .   S t u d y   D e s i g n   a n d   S e t t i n g s :   W e   a n a l y z e d   a l l   o r i g i n a l   r e s e a r c h   p a p e r s   p u b l i s h e d   i n   1 9 9 6   i n   f o u r   p s y c h i a t r i c   j o u r n a l s .   U s i n g   a   s t a n d a r d i z e d   q u e s t i o n n a i r e ,   f r o m   e a c h   p a p e r ,   w e   e x t r a c t e d   t h e   p r i m a r y   o u t c o m e   a n d   i t s   s t a t i s t i c a l   s i g n i f i c a n c e .   T h e   n u m b e r   o f   c i t a t i o n s ,   e x c l u d i n g   a u t h o r s '   " s e l f - c i t a t i o n s , "   r e c e i v e d   b y   A p r i l   2 0 0 5   w a s   o b t a i n e d .   R e g r e s s i o n   a n a l y s i s   w a s   u s e d   t o   r e l a t e   c i t a t i o n   f r e q u e n c y   t o   s t a t i s t i c a l   s i g n i f i c a n c e ,   a d j u s t i n g   f o r   c o n f o u n d e r s .   R e s u l t s :   O f   4 4 8   e x t r a c t e d   p a p e r s ,   3 6 8   u s e d   s t a t i s t i c a l   s i g n i f i c a n c e   t e s t i n g   a n d   2 8 7   ( 7 7 . 8 % )   r e p o r t e d   P   <   0 . 0 5 .   T h e   m e d i a n   n u m b e r   o f   c i t a t i o n s   f o r   p a p e r s   r e p o r t i n g   " s i g n i f i c a n t "   a n d   " n o n s i g n i f i c a n t "   r e s u l t s   w a s   3 3   v s .   1 6 .   A f t e r   a d j u s t m e n t   f o r   j o u r n a l ,   s t u d y   d e s i g n ,   r e p o r t i n g   q u a l i t y ,   w h e t h e r   o u t c o m e   c o n f i r m e d   p r e v i o u s   f i n d i n g s   a n d   s t u d y   s i z e ,   t h e   r a t i o   o f   t h e   n u m b e r   o f   c i t a t i o n s   p e r   a r t i c l e   f o r   a r t i c l e s   r e p o r t i n g   " P   <   0 . 0 5 "   o n   t h e   p r i m a r y   o u t c o m e   t o   t h o s e   r e p o r t i n g   " P   >   0 . 0 5 "   w a s   1 . 6 3   ( 9 5 %   c o n f i d e n c e   i n t e r v a l   [ C I ] :   1 . 3 2 ,   2 . 0 2 ,   P   <   0 . 0 0 1 ) .   C o n c l u s i o n :   A u t h o r s   c i t e   s t u d i e s   b a s e d   o n   t h e i r   P - v a l u e   r a t h e r   t h a n   i n t r i n s i c   s c i e n t i f i c   m e r i t .   T h i s   p r a c t i c e   s k e w s   t h e   r e s e a r c h   e v i d e n c e .   S y s t e m a t i c   s t u d y   r e g i s t r a t i o n   a n d   i n c l u s i o n   i n   m e t a - a n a l y s i s   s h o u l d   b e   e n c o u r a g e d .   ( c )   2 0 0 7   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 O u l u   U n i v ,   M e d   I n f o r m a t   G r p ,   F I N - 9 0 0 1 4   O u l u ,   F i n l a n d ;   U n i v   F r e i b u r g ,   I n s t   M e d   B i o m e t r y   &   M e d   I n f o r m a t ,   D - 7 9 1 1 5   F r e i b u r g ,   G e r m a n y ;   O u l u   U n i v ,   D e p t   P s y c h i a t ,   F I N - 9 0 0 1 4   O u l u ,   F i n l a n d 	 N i e m i n e n ,   P   ( r e p r i n t   a u t h o r ) ,   O u l u   U n i v ,   M e d   I n f o r m a t   G r p ,   P O B   5 0 0 0 , A a p i s t i e   5 A ,   F I N - 9 0 0 1 4   O u l u ,   F i n l a n d . 	 p e n t t i . n i e m i n e n @ o u l u . f i 	 R u c k e r ,   G e r t a / B - 2 9 6 5 - 2 0 0 9 ;   N i e m i n e n ,   P e n t t i / A - 7 5 7 1 - 2 0 1 2 ;   	 R u c k e r ,   G e r t a / 0 0 0 0 - 0 0 0 2 - 2 1 9 2 - 2 5 6 0 ;   N i e m i n e n ,   P e n t t i / 0 0 0 0 - 0 0 0 3 - 0 5 9 1 - 5 8 6 X ;   M i e t t u n e n ,   J o u k o / 0 0 0 0 - 0 0 0 3 - 0 5 7 5 - 2 6 6 9 	 	 	 A l t m a n   D G ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 7 6 5 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 7 6 5 ;   A L T M A N   D G ,   1 9 9 1 ,   S T A T   M E D ,   V 1 0 ,   P 1 8 9 7 ,   D O I   1 0 . 1 0 0 2 / s i m . 4 7 8 0 1 0 1 2 0 6 ;   B E G G   C B ,   1 9 8 8 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 5 1 ,   P 4 1 9 ,   D O I   1 0 . 2 3 0 7 / 2 9 8 2 9 9 3 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   C a r t e r   A O ,   2 0 0 6 ,   J   C L I N   E P I D E M I O L ,   V 5 9 ,   P 2 4 1 ,   D O I   1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 5 . 0 8 . 0 1 1 ;   C h a n   A W ,   2 0 0 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 1 ,   P 2 4 5 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 1 . 2 0 . 2 4 5 7 ;   C H R I S T E N S E N S Z A L A N S K I   J J J ,   1 9 8 4 ,   A M   P S Y C H O L ,   V 3 9 ,   P 7 5 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 3 9 . 1 . 7 5 ;   D I C K E R S I N   K ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 3 8 5 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 3 8 5 ;   E A S T E R B R O O K   P J ,   1 9 9 1 ,   L A N C E T ,   V 3 3 7 ,   P 8 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 1 ) 9 0 2 0 1 - Y ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   G A R F I E L D   E ,   1 9 8 3 ,   C I T A T I O N   I N D E X I N G   T H ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 6 3 ;   G l u u d   L L ,   2 0 0 6 ,   A M   J   E P I D E M I O L ,   V 1 6 3 ,   P 4 9 3 ,   D O I   1 0 . 1 0 9 3 / a j e / k w j 0 6 9 ;   G O T Z S C H E   P C ,   1 9 8 7 ,   B R I T   M E D   J ,   V 2 9 5 ,   P 6 5 4 ;   H o w a r d   L ,   1 9 9 7 ,   B R I T   J   P S Y C H I A T ,   V 1 7 0 ,   P 1 0 9 ,   D O I   1 0 . 1 1 9 2 / b j p . 1 7 0 . 2 . 1 0 9 ;   H U T C H I S O N   B G ,   1 9 9 5 ,   C A N   F A M   P H Y S I C I A N ,   V 4 1 ,   P 1 3 5 6 ;   I o a n n i d i s   J P A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 4 ,   P 2 1 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 4 . 2 . 2 1 8 ;   I o a n n i d i s   J P A ,   2 0 0 5 ,   E U R   J   E P I D E M I O L ,   V 2 0 ,   P 7 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 5 4 - 0 0 5 - 2 0 2 8 - 1 ;   I o a n n i d i s   J P A ,   2 0 0 5 ,   J   C L I N   E P I D E M I O L ,   V 5 8 ,   P 5 4 3 ,   D O I   1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 4 . 1 0 . 0 1 9 ;   I o a n n i d i s   J P A ,   2 0 0 3 ,   T R E N D S   M O L   M E D ,   V 9 ,   P 1 3 5 ,   D O I   1 0 . 1 0 1 6 / S 1 4 7 1 - 4 9 1 4 ( 0 3 ) 0 0 0 3 0 - 3 ;   K j a e r g a r d   L L ,   2 0 0 2 ,   J   C L I N   E P I D E M I O L ,   V 5 5 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 4 3 5 6 ( 0 1 ) 0 0 5 1 3 - 3 ;   K O R E N   G ,   1 9 9 1 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 6 ,   P 1 8 2 4 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 6 . 1 3 . 1 8 2 4 ;   M c C u l l a g h   P ,   1 9 8 9 ,   G E N   L I N E A R   M O D E L S ;   M i e t t u n e n   J ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 3 7 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 0 5 6 7 1 8 5 8 7 ;   M i e t t u n e n   J ,   2 0 0 2 ,   N O R D   J   P S Y C H I A T ,   V 5 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 8 0 3 9 4 8 0 2 3 1 7 6 0 7 2 1 9 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N i e m i n e n   P ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 0 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 3 ;   O j a s o o   T ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 6 9 ;   P a n t e l   J ,   1 9 9 9 ,   N E R V E N A R Z T ,   V 7 0 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 1 5 0 0 5 0 4 3 5 ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   R A V N S K O V   U ,   1 9 9 2 ,   B R I T   M E D   J ,   V 3 0 5 ,   P 1 5 ;   S C H U L Z   K F ,   1 9 9 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 3 ,   P 4 0 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 3 . 5 . 4 0 8 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S H A D I S H   W R ,   1 9 9 5 ,   S O C   S T U D   S C I ,   V 2 5 ,   P 4 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 5 0 2 5 0 0 3 0 0 3 ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   S o n g   F . ,   2 0 0 0 ,   H E A L T H   T E C H N O L   A S S E S ,   V 4 ,   P 1 0 ;   S T E R L I N G   T D ,   1 9 9 5 ,   A M   S T A T ,   V 4 9 ,   P 1 0 8 ,   D O I   1 0 . 2 3 0 7 / 2 6 8 4 8 2 3 	 3 7 	 3 8 	 3 8 	 0 	 3 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 8 9 5 - 4 3 5 6 	 	 	 J   C L I N   E P I D E M I O L 	 J .   C l i n .   E p i d e m i o l . 	 S E P 	 2 0 0 7 	 6 0 	 9 	 	 	 	 	 9 3 9 	 9 4 6 	 	 1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 6 . 1 1 . 0 1 4 	 	 8 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 2 0 2 V I 	 W O S : 0 0 0 2 4 8 9 3 1 7 0 0 0 1 0 	 1 7 6 8 9 8 1 0 	 
 
 J 	 H o l d e n ,   G ;   R o s e n b e r g ,   G ;   B a r k e r ,   K 	 	 	 	 H o l d e n ,   G ;   R o s e n b e r g ,   G ;   B a r k e r ,   K 	 	 	 B i b l i o m e t r i c s :   A   p o t e n t i a l   d e c i s i o n   m a k i n g   a i d   i n   h i r i n g ,   r e a p p o i n t m e n t ,   t e n u r e   a n d   p r o m o t i o n   d e c i s i o n s 	 S O C I A L   W O R K   I N   H E A L T H   C A R E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 h i r i n g ;   r e a p p o i n t m e n t ;   t e n u r e   a n d   p r o m o t i o n   d e c i s i o n s ;   f a c u l t y ;   s c h o l a r s h i p ;   b i b l i o m e t r i c ;   i n f o r m e t r i c s ;   s c i e n t o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   s o c i o l o g y   o f   s c i e n c e ;   t e n u r e ;   p r o m o t i o n ;   s o c i a l   w o r k   e d u c a t i o n 	 S O C I A L - W O R K   J O U R N A L S ;   C I T A T I O N   A N A L Y S I S ;   S C H O L A R L Y   P R O D U C T I V I T Y ;   M U L T I P L E   A U T H O R S H I P ;   I M P A C T   F A C T O R S ;   P U B L I C A T I O N   P R O D U C T I V I T Y ;   S E L F - E F F I C A C Y ;   C O M M U N I T Y - S E R V I C E ;   D O C T O R A L   P R O G R A M S ;   F A C U L T Y 	 T h e   a s s e s s m e n t   o f   s c h o l a r s h i p   a s s u m e s   a   c e n t r a l   r o l e   i n   t h e   e v a l u a t i o n   o f   i n d i v i d u a l   f a c u l t y ,   e d u c a t i o n a l   p r o g r a m s   a n d   a c a d e m i c   f i e l d s .   B e c a u s e   t h e   p r o d u c t i o n   a n d   a s s e s s m e n t   o f   s c h o l a r s h i p   i s   s o   c e n t r a l   t o   t h e   f a c u l t y   r o l e ,   i t   i s   i n c u m b e n t   u p o n   d e c i s i o n   m a k e r s   t o   s t r i v e   t o   m a k e   a s s e s s m e n t s   o f   s c h o l a r s h i p   f a i r   a n d   e q u i t a b l e .   T h i s   p a p e r   w i l l   f o c u s   o n   a n   a p p r o a c h   t o   t h e   a s s e s s m e n t   o f   t h e   q u a n t i t y   a n d   i m p a c t   o f   t h e   m o s t   i m p o r t a n t   S u b s e t   o f   a n   i n d i v i d u a l ' s   s c h o l a r s h i p - p e e r - r e v i e w e d   j o u r n a l   a r t i c l e s .   T h e   p r i m a r y   g o a l   o f   t h i s   p a p e r   i s   t o   s t i m u l a t e   d i s c u s s i o n   r e g a r d i n g   s c h o l a r s h i p   a s s e s s m e n t   i n   h i r i n g ,   r e a p p o i n t m e n t ,   t e n u r e   a n d   p r o m o t i o n   d e c i s i o n s . 	 N Y U ,   S c h   S o c i a l   W o r k ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A ;   M t   S i n a i   S c h   M e d ,   N e w   Y o r k ,   N Y   1 0 0 2 9   U S A ;   C U N Y   M e d g a r   E v e r s   C o l l ,   B r o o k l y n ,   N Y   1 1 2 2 5   U S A 	 H o l d e n ,   G   ( r e p r i n t   a u t h o r ) ,   N Y U ,   S c h   S o c i a l   W o r k ,   R o o m   4 0 7 , M C   6 1 1 2 , 1   W a s h i n g t o n   S q   N ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A . 	 g a r y . h o l d e n @ n y u . e d u 	 H o l d e n ,   G a r y / A - 2 2 9 0 - 2 0 0 8 ;   	 H o l d e n ,   G a r y / 0 0 0 0 - 0 0 0 2 - 7 2 2 7 - 3 6 5 2 	 	 	 A k s n e s   D W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 1 9 2 2 8 3 6 8 ;   A m e r i c a n   P s y c h o l o g i c a l   A s s o c i a t i o n   ( A P A ) ,   2 0 0 2 ,   E T H   P R I N C   P S Y C H   C O D ;   B A K E R   D R ,   1 9 9 2 ,   J   S O C   W O R K   E D U C ,   V 2 8 ,   P 2 0 4 ;   B A K E R   D R ,   1 9 9 1 ,   J   S O C   W O R K   E D U C ,   V 2 7 ,   P 4 1 ;   B A K E R   D R ,   1 9 9 0 ,   S O C   W O R K   R E S   A B S T R ,   V 2 6 ,   P 3 ;   B a k e r   D .   R . ,   1 9 9 2 ,   J   S O C I A L   S E R V I C E   R E S ,   V 1 5 ,   P 1 5 3 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 1 5 n 0 3 _ 0 9 ;   B L O O M   M ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 7 7 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o r n s t e i n   R .   F . ,   1 9 9 0 ,   H D B   R E P L I C A T I O N   R E S ,   P 7 1 ;   B u s h   I R ,   1 9 9 7 ,   S O C   W O R K   R E S ,   V 2 1 ,   P 4 5 ;   C H E U N G   K F M ,   1 9 9 0 ,   S O C   W O R K   R E S   A B S T R ,   V 2 6 ,   P 2 3 ;   C N A A N   R A ,   1 9 9 4 ,   J   S O C   W O R K   E D U C ,   V 3 0 ,   P 1 8 5 ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 3 ) 4 5 : 2 < 6 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - F ;   C U Z Z I   L F ,   1 9 9 3 ,   S O C   W O R K   H E A L T H   C A R E ,   V 1 8 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 1 8 n 0 2 _ 0 1 ;   D a v e n p o r t   E . ,   2 0 0 1 ,   N e w   R e v i e w   o f   A c a d e m i c   L i b r a r i a n s h i p ,   V 7 ,   P 5 1 ;   E n d e r s b y   J W ,   1 9 9 6 ,   S O C   S C I   Q U A R T ,   V 7 7 ,   P 3 7 5 ;   E U S T E R   G L ,   1 9 9 4 ,   J   S O C   W O R K   E D U C ,   V 3 0 ,   P 3 1 7 ;   E U S T E R   G L ,   1 9 8 3 ,   J   E D U C   S O C   W O R K ,   V 1 9 ,   P 1 0 8 ;   E U S T E R   G L ,   1 9 8 6 ,   J   S O C I A L   W O R K   E D ,   V 3 ,   P 7 9 ;   F O R T U N E   A E ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 5 0 5 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 0 9 ;   F r a n c k   G ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 5 9 4 0 2 6 1 8 ;   F r a n k   M ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 ;   F U R R   L A ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 8 ;   G a r f i e l d   E ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 9 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 9 6 2 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - X ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 8 3 ,   C U R R   C O N T E N T S ,   V 4 5 ,   P 5 ;   G a r f i e l d   E . ,   1 9 8 3 ,   C U R R   C O N T E N T S ,   V 4 4 ,   P 5 ;   G a s t e l   B ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 4 1 ;   G e l m a n   S R ,   1 9 9 9 ,   J   S O C   W O R K   E D U C ,   V 3 5 ,   P 2 0 3 ;   G I B B S   P ,   1 9 8 9 ,   J   S O C   W O R K   E D U C ,   V 2 5 ,   P 1 2 6 ;   G I B E L M A N   M ,   1 9 9 9 ,   A R E T E ,   V 2 3 ,   P 7 7 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G r e e n   R G ,   1 9 9 8 ,   J   S O C   W O R K   E D U C ,   V 3 4 ,   P 4 1 5 ;   G r e e n   R G ,   1 9 9 7 ,   J   S O C   W O R K   E D U C ,   V 3 3 ,   P 5 4 1 ;   G R E E N   R G ,   1 9 9 2 ,   S O C   S E R V   R E V ,   V 6 6 ,   P 4 4 1 ;   G r e e n   R G ,   2 0 0 1 ,   J   S O C   S E R V   R E S ,   V 2 7 ,   P 4 1 ;   G R E E N   R G ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 8 8 ;   G R E E N   R G ,   2 0 0 1 ,   J   S O C I A L   W O R K   E D ,   V 3 5 ,   P 1 9 5 ;   G R E E N   R G ,   2 0 0 2 ,   J   S O C I A L   W O R K   E D ,   V 3 7 ,   P 1 3 5 ;   G R I N N E L L   R M ,   1 9 8 3 ,   J   S O C I A L   S E R V I C E   R E S ,   V 6 ,   P 1 4 7 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 V 0 6 N 0 3 _ 1 1 ;   H A R G E N S   L L ,   1 9 9 0 ,   S O C   S C I   R E S ,   V 1 9 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 9 - 0 8 9 X ( 9 0 ) 9 0 0 0 6 - 5 ;   H A R R I S O N   D F ,   1 9 8 9 ,   J   S O C   W O R K   E D U C ,   V 2 5 ,   P 1 1 7 ;   H A R S A N Y I   M A ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 3 2 5 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 1 ;   H o l d e n   G ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 3 6 5 ;   H O L D E N   G ,   1 9 9 0 ,   P S Y C H O L   R E P ,   V 6 6 ,   P 1 0 4 4 ,   D O I   1 0 . 2 4 6 6 / P R 0 . 6 6 . 3 . 1 0 4 4 - 1 0 4 6 ;   H O L D E N   G ,   1 9 9 1 ,   S O C   W O R K   H E A L T H   C A R E ,   V 1 6 ,   P 5 3 ;   H o l d e n   G ,   1 9 9 9 ,   J   S O C   W O R K   E D U C ,   V 3 5 ,   P 4 6 3 ;   H O L D E N   G ,   1 9 9 3 ,   S O C   W O R K   H E A L T H   C A R E ,   V 1 9 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 1 9 n 0 2 _ 0 1 ;   H O W A R D   M O ,   1 9 9 2 ,   J   S T U D   A L C O H O L ,   V 5 3 ,   P 4 2 7 ;   * I S I ,   2 0 0 3 ,   I N T E R P R E T A T I O N ;   J A Y A R A T N E   S ,   1 9 7 9 ,   J   E D U C   S O C   W O R K ,   V 1 5 ,   P 7 2 ;   J O H N S O N   H W ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 5 8 ;   J O N E S   J F ,   1 9 8 6 ,   N A T L   T A I W A N   U   J   S O C I ,   V 1 8 ,   P 2 0 7 ;   K I R K   S A ,   1 9 9 1 ,   S O C   W O R K   R E S   A B S T R ,   V 2 7 ,   P 3 ;   K I R K   S A ,   1 9 7 7 ,   J   S O C I A L   W E L F A R E   W I N ,   P 9 0 ;   K I R K   S A ,   1 9 8 0 ,   S O C I A L   W O R K             M A Y ,   P 2 0 4 ;   K I R K   S A ,   1 9 8 4 ,   J   S O C I A L   S E R V I C E   R E S ,   V 7 ,   P 5 9 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 0 7 n 0 3 _ 0 5 ;   K L E I N   W C ,   1 9 9 2 ,   J   S O C   W O R K   E D U C ,   V 2 8 ,   P 2 9 1 ;   K o s t o f f   R N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 1 9 2 0 1 7 2 ;   K o s t o f f   R N ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 5 ;   K r e u g e r   L W ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 0 8 ;   K R E U G E R   L W ,   1 9 9 3 ,   J   S O C   W O R K   E D U C ,   V 2 9 ,   P 2 4 0 ;   L e n n o n   T .   M . ,   2 0 0 2 ,   S T A T   S O C I A L   W O R K   E D ;   L I N D S E Y   D ,   1 9 7 6 ,   A M   P S Y C H O L ,   V 3 1 ,   P 7 9 9 ;   L i n d s e y   D ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 1 5 ;   L I N D S E Y   D ,   1 9 9 2 ,   S O C   S E R V   R E V ,   V 6 6 ,   P 2 9 5 ;   L I N D S E Y   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 2 ;   L I N D S E Y   D ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 8 ;   L I N D S E Y   D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 4 ;   L I N D S E Y   D ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 3 ,   P 3 4 9 ;   L i n d s e y   D . ,   1 9 7 8 ,   S C I   P U B L I C A T I O N   S Y S T ;   M A C R O B E R T S   M H ,   1 9 9 2 ,   S O C   W O R K   R E S   A B S T R ,   V 2 8 ,   P 4 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M A I L I C K   M D ,   1 9 9 4 ,   H E A L T H   S O C   W O R K ,   V 1 9 ,   P 1 0 3 ;   M A R S H   J C ,   1 9 9 2 ,   J   S O C   W O R K   E D U C ,   V 2 8 ,   P 1 3 2 ;   M C M U R T Y   S L ,   2 0 0 3 ,   7   A N N   S O C   S O C   W O R K   R ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N e u l i e p   J .   W . ,   1 9 9 0 ,   H D B   R E P L I C A T I O N   R E S ,   P 8 5 ;   N o r t o n   M .   J . ,   2 0 0 0 ,   I N T R O   C O N C E P T S   I N F O R ;   O R O M A N E R   M ,   1 9 7 4 ,   S O C   S C I   I N F O R M ,   V 1 4 ,   P 1 4 7 ;   P a r d e c k   J T ,   2 0 0 2 ,   P S Y C H O L   R E P ,   V 9 0 ,   P 1 0 5 1 ,   D O I   1 0 . 2 4 6 6 / P R 0 . 9 0 . 3 . 1 0 5 1 - 1 0 5 4 ;   P h e l a n   T J ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 7 2 ;   P O R T E R   A L ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 5 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 7 ;   R o s e n b e r g   G ,   1 9 9 7 ,   S O C   W O R K   H E A L T H   C A R E ,   V 2 5 ,   P 9 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 2 5 n 0 1 _ 0 3 ;   R o s e n b e r g   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 3 5 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 2 ;   N e u l i p   J . W . ,   1 9 9 0 ,   H D B   R E P L I C A T I O N   R E S ,   P 1 ;   R o t h m a n   J ,   2 0 0 3 ,   S O C   W O R K   R E S ,   V 2 7 ,   P 1 0 5 ;   R u b i n   R M ,   2 0 0 3 ,   H E A L T H   E C O N ,   V 1 2 ,   P 4 0 3 ,   D O I   1 0 . 1 0 0 2 / h e c . 8 0 2 ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   S A N S O N E   F A ,   2 0 0 0 ,   J   B A C C A L A U R E A T E   S O C ,   V 5 ,   P 2 7 ;   S C H A F E R   W D ,   2 0 0 1 ,   E D 4 5 8 2 1 7 ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S e a b e r g   J R ,   1 9 9 8 ,   J   S O C   W O R K   E D U C ,   V 3 4 ,   P 7 ;   S e g l e n   P e r   O . ,   1 9 9 7 ,   B R I T   M E D   J ,   P 3 1 4 ;   S e i p e l   M M O ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 7 9 ;   S E L L E N   M K ,   1 9 9 3 ,   B I B L I O   A N N O T A T E D   B I B ;   S h o w e r s   N ,   1 9 9 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 2 2 ,   P 1 9 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 2 2 n 0 1 _ 0 2 ;   S I N G E R   M ,   2 0 0 2 ,   C H R O N I C L E   H I G H E R   E D ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   S P I T Z E R   W ,   2 0 0 1 ,   J   S O C I A L   W O R K   E D ,   V 3 7 ,   P 1 ;   T H Y E R   B A ,   1 9 8 6 ,   J   S O C   W O R K   E D U C ,   V 2 2 ,   P 6 7 ;   T W I N I N G   J ,   2 0 0 2 ,   B I B L I O   O V E R V I E W ;   V i n k l e r   P ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 0 2 ;   V O N U N G E R N S T E R N B ,   2 0 0 0 ,   S C I   C O M M U N I C A T I O N   B I ;   W A G N E R   M K ,   1 9 9 4 ,   P S Y C H O L   R E P ,   V 7 4 ,   P 1 7 9 ;   W h i t e h o u s e   G ,   2 0 0 1 ,   B R I T   J   R A D I O L ,   V 7 4 ,   P 1 ;   W h i t l e y   K M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 2 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 9 2 ;   W o r m e l l   I ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 2 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 8 8 0 6 0 8 4 ;   W o r m e l l   I ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 2 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 6 7 2 2 0 1 4 	 1 1 1 	 3 8 	 3 8 	 1 	 2 3 	 H A W O R T H   P R E S S   I N C 	 B I N G H A M T O N 	 1 0   A L I C E   S T ,   B I N G H A M T O N ,   N Y   1 3 9 0 4 - 1 5 8 0   U S A 	 0 0 9 8 - 1 3 8 9 	 	 	 S O C   W O R K   H E A L T H   C A R E 	 S o c .   W o r k   H e a l t h   C a r e 	 	 2 0 0 5 	 4 1 	 3 - 4 	 	 	 	 	 6 7 	 9 2 	 	 1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 3 	 	 2 6 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 9 9 9 H Y 	 W O S : 0 0 0 2 3 4 3 8 1 6 0 0 0 0 3 	 1 6 2 3 6 6 3 9 	 
 
 J 	 J o n e s ,   A W 	 	 	 	 J o n e s ,   A W 	 	 	 I m p a c t   f a c t o r s   o f   f o r e n s i c   s c i e n c e   a n d   t o x i c o l o g y   j o u r n a l s :   w h a t   d o   t h e   n u m b e r s   r e a l l y   m e a n ? 	 F O R E N S I C   S C I E N C E   I N T E R N A T I O N A L 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 4 0 t h   A n n u a l   M e e t i n g   o f   t h e   I n t e r n a t i o n a l - A s s o c i a t i o n - o f - F o r e n s i c - T o x i c o l o g i s t s 	 A U G   2 6 - 3 0 ,   2 0 0 2 	 P A R I S ,   F R A N C E 	 I n t e r n a t   A s s o c   F o r e n s i c   T o x i c o l o g i s t s 	 	 a u t h o r s h i p ;   b i b l i o m e t r i c s ;   f o r e n s i c   s c i e n c e ;   i m p a c t   f a c t o r ;   j o u r n a l s ;   t o x i c o l o g y 	 M E D I C A L   J O U R N A L S ;   C I T A T I O N   A N A L Y S I S ;   A U T H O R S H I P ;   S C I E N T I S T S ;   I N D I C A T O R S ;   Q U A L I T Y ;   E R R O R S ;   W O R K ;   R O O M 	 T h i s   a r t i c l e   p r e s e n t s   r e v i e w   a n d   o p i n i o n   a b o u t   t h e   u s e   a n d   a b u s e   o f   j o u r n a l   i m p a c t   f a c t o r s   f o r   j u d g i n g   t h e   i m p o r t a n c e   a n d   p r e s t i g e   o f   s c i e n t i f i c   j o u r n a l s   i n   t h e   f i e l d   o f   f o r e n s i c   s c i e n c e   a n d   t o x i c o l o g y .   T h e   a p p l i c a t i o n   o f   i m p a c t   f a c t o r s   f o r   e v a l u a t i n g   t h e   p u b l i s h e d   w o r k   o f   i n d i v i d u a l   s c i e n t i s t s   i s   a l s o   d i s c u s s e d .   T h e   i m p a c t   f a c t o r   o f   a   p a r t i c u l a r   j o u r n a l   i s   c a l c u l a t e d   b y   d i v i d i n g   t h e   n u m b e r   o f   c u r r e n t   y e a r   c i t a t i o n s   t o   a   j o u r n a l ' s   a r t i c l e s   t h a t   w e r e   p u b l i s h e d   i n   t h e   p r e v i o u s   2   y e a r s   b y   t h e   t o t a l   n u m b e r   o f   c i t a b l e   i t e m s   ( a r t i c l e s   a n d   r e v i e w s )   p u b l i s h e d   i n   t h e   s a m e   2 - y e a r   p e r i o d .   J o u r n a l   i m p a c t   f a c t o r s   d i f f e r   f r o m   d i s c i p l i n e   t o   d i s c i p l i n e   a n d   r a n g e   f r o m   0   f o r   a   j o u r n a l   w h o s e   a r t i c l e s   a r e   n o t   c i t e d   i n   t h e   p r e v i o u s   2   y e a r s   t o   4 6   f o r   a   j o u r n a l   w h e r e   t h e   a v e r a g e   r e c e n t   a r t i c l e   i s   c i t e d   4 6   t i m e s   p e r   y e a r .   T h e   i m p a c t   f a c t o r   r e f l e c t s   t h e   c i t a t i o n   r a t e   o f   t h e   a v e r a g e   a r t i c l e   i n   a   j o u r n a l   a n d   n o t   a   s p e c i f i c   a r t i c l e .   M a n y   p a r a m e t e r s   i n f l u e n c e   t h e   c i t a t i o n   r a t e   o f   a   p a r t i c u l a r   j o u r n a l ' s   a r t i c l e s   a n d ,   t h e r e f o r e ,   i t s   i m p a c t   f a c t o r .   T h e s e   i n c l u d e   t h e   v i s i b i l i t y   a n d   s i z e   o f   t h e   c i r c u l a t i o n   o f   t h e   j o u r n a l   i n c l u d i n g   a v a i l a b i l i t y   o f   e l e c t r o n i c   f o r m a t s   a n d   o p t i o n s   f o r   o n - l i n e   s e a r c h   a n d   r e t r i e v a l .   O t h e r   t h i n g s   t o   c o n s i d e r   a r e   e d i t o r i a l   s t a n d a r d s   e s p e c i a l l y   r a p i d   a n d   e f f e c t i v e   p e e r - r e v i e w i n g   a n d   a   s h o r t   t i m e   l a g   b e t w e e n   a c c e p t a n c e   a n d   a p p e a r a n c e   i n   p r i n t .   T h e   n u m b e r   o f   s e l f - c i t a t i o n s   a n d   c i t a t i o n   d e n s i t y   ( t h e   r a t i o   o f   r e f e r e n c e s   t o   a r t i c l e s )   a n d   a l s o   t h e   i n c l u s i o n   o f   m a n y   r e v i e w   a r t i c l e s   c o n t a i n i n g   h u n d r e d s   o f   r e f e r e n c e s   t o   r e c e n t l y   p u b l i s h e d   a r t i c l e s   w i l l   b o o s t   t h e   i m p a c t   f a c t o r .   J u d g i n g   t h e   i m p o r t a n c e   o f   a   s c i e n t i s t ' s   w o r k   b a s e d   o n   t h e   a v e r a g e   o r   m e d i a n   i m p a c t   f a c t o r   o f   t h e   j o u r n a l s   u s e d   t o   p u b l i s h   a r t i c l e s   i s   n o t   r e c o m m e n d e d .   I n s t e a d   a n   a r t i c l e - b y - a r t i c l e   c i t a t i o n   c o u n t   s h o u l d   b e   d o n e ,   b u t   t h i s   i n v o l v e s   m u c h   m o r e   t i m e   a n d   e f f o r t .   M o r e o v e r ,   s o m e   w e i g h t i n g   f a c t o r   i s   n e c e s s a r y   t o   a l l o w   f o r   t h e   n u m b e r   o f   c o - a u t h o r s   o n   e a c h   a r t i c l e   a n d   t h e   r e l a t i v e   p o s i t i o n i n g   o f   t h e   i n d i v i d u a l   n a m e s   s h o u l d   a l s o   b e   c o n s i d e r e d .   A u t h o r s   s h o u l d   s u b m i t   t h e i r   r e s e a r c h   r e s u l t s   a n d   m a n u s c r i p t s   t o   j o u r n a l s   t h a t   a r e   e a s i l y   a v a i l a b l e   a n d   a r e   r e a d   b y   t h e i r   p e e r s   ( t h e   m o s t   i n t e r e s t e d   a u d i e n c e )   a n d   p a y   l e s s   a t t e n t i o n   t o   j o u r n a l   i m p a c t   f a c t o r s .   T o   a s s e s s   t h e   t r u e   u s e f u l n e s s   o f   a   p e r s o n ' s   c o n t r i b u t i o n s   t o   f o r e n s i c   s c i e n c e   a n d   t o x i c o l o g y   o n e   n e e d s   t o   l o o k   b e y o n d   i m p a c t   f a c t o r   a n d   c i t a t i o n   c o u n t s .   F o r   e x a m p l e ,   o n e   m i g h t   c o n s i d e r   w h e t h e r   t h e   a r t i c l e s   c o n t a i n e d   n e w   i d e a s   o r   i n n o v a t i o n s   t h a t   p r o v e d   u s e f u l   i n   r o u t i n e   f o r e n s i c   c a s e w o r k   o r   a r e   w i d e l y   r e l i e d   u p o n   i n   c o u r t s   o f   l a w   a s   p r o o f   s o u r c e .   ( C )   2 0 0 3   E l s e v i e r   S c i e n c e   I r e l a n d   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   H o s p ,   D e p t   F o r e n s   T o x i c o l ,   S - 5 8 1 8 5   L i n k o p i n g ,   S w e d e n 	 J o n e s ,   A W   ( r e p r i n t   a u t h o r ) ,   U n i v   H o s p ,   D e p t   F o r e n s   T o x i c o l ,   S - 5 8 1 8 5   L i n k o p i n g ,   S w e d e n . 	 	 J o n e s ,   A l a n / C - 2 2 0 2 - 2 0 0 8 	 	 	 	 A D A M S   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 0 ;   B h o p a l   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 1 0 0 9 ;   B R U N S   D E ,   2 0 0 0 ,   C L I N   C H E M ,   V 4 6 ,   P 1 4 3 ;   B U R N H A M   J C ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 3 2 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 3 2 3 ;   C H A R I O T   P ,   1 9 9 4 ,   F O R E N S I C   S C I   I N T ,   V 6 6 ,   P 2 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 9 - 0 7 3 8 ( 9 4 ) 9 0 3 4 6 - 8 ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 9 ;   C r o n i n   B ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 1 ;   D E S O L L A   D J P ,   1 9 9 6 ,   L I T T L E   S C I   B I G   S C I ,   P 1 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 2 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G a r f i e l d   E ,   1 9 9 7 ,   S C I E N T I S T ,   V 1 1 ,   P 1 1 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 0 ;   G a r f i e l d   E ,   2 0 0 1 ,   C o r t e x ,   V 3 7 ,   P 5 7 5 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 8 3 ,   S C I E N T I S T ,   V 6 ,   P 3 6 3 ;   G a s t e l   B ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 4 1 ;   G i s v o l d   S E ,   1 9 9 9 ,   A C T A   A N A E S T H   S C A N D ,   V 4 3 ,   P 9 7 1 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 1 9 9 9 . 4 3 1 0 0 1 . x ;   H e c h t   F ,   1 9 9 8 ,   C A N C E R   G E N E T   C Y T O G E N ,   V 1 0 4 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 6 0 8 ( 9 7 ) 0 0 4 5 9 - 7 ;   H o r t o n   R ,   1 9 9 8 ,   L A N C E T ,   V 3 5 2 ,   P 8 9 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 0 0 3 0 - X ;   H U D S O N J O N E S   A ,   1 9 9 8 ,   L A N C E T ,   V 3 5 2 ,   P 8 9 4 ;   * I   S C I   I N F ,   2 0 0 1 ,   I S I   W E B   K N O W L   O N   L I N ;   J O N E S   A W ,   1 9 9 5 ,   J   F O R E N S I C   S C I ,   V 4 0 ,   P 5 2 9 ;   J o n e s   A W ,   1 9 9 6 ,   A L C O H O L   A L C O H O L I S M ,   V 3 1 ,   P 1 1 ;   J O N E S   A W ,   1 9 9 3 ,   F O R E N S I C   S C I   I N T ,   V 6 2 ,   P 1 7 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 9 - 0 7 3 8 ( 9 3 ) 9 0 2 0 6 - P ;   J o n e s   A W ,   2 0 0 2 ,   J   A N A L   T O X I C O L ,   V 2 6 ,   P 2 ;   J o n e s   A W ,   1 9 9 9 ,   A L C O H O L   A L C O H O L I S M ,   V 3 4 ,   P 2 5 ,   D O I   1 0 . 1 0 9 3 / a l c a l c / 3 4 . 1 . 2 5 ;   J O N E S   A W ,   1 9 9 9 ,   J   F O R E N S I C   S C I ,   V 4 3 ,   P 4 3 9 ;   J o s e p h   K S ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 7 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K o t i a h o   J S ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 3 0 7 ,   D O I   1 0 . 1 0 3 8 / 2 2 4 0 5 ;   K R O N I C K   D A ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 3 2 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 3 2 1 ;   L o k   C K W ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 4 ,   P 2 2 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 8 . x ;   O p t h o f   T ,   1 9 9 9 ,   C A R D I O V A S C   R E S ,   V 4 1 ,   P 1 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R E L M A N   A S ,   1 9 8 9 ,   N E W   E N G L   J   M E D ,   V 3 2 1 ,   P 8 2 7 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 8 9 0 9 2 1 3 2 1 1 2 1 1 ;   R e n n i e   D ,   1 9 9 8 ,   L A N C E T ,   V 3 5 2 ,   P 1 8 ;   R I E S E N B E R G   D ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 4 ,   P 1 8 5 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 4 . 1 4 . 1 8 5 7 ;   R o s t a m i - H o d j e g a n   A ,   2 0 0 1 ,   B R I T   J   C L I N   P H A R M A C O ,   V 5 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 1 2 5 . 2 0 0 1 . 0 1 3 4 9 . x ;   S c h o o n b a e r t   D ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 7 3 9 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S H U L K I N   D J ,   1 9 9 3 ,   A C A D   M E D ,   V 6 8 ,   P 6 8 8 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 8 8 8 - 1 9 9 3 0 9 0 0 0 - 0 0 0 1 5 ;   S i e b e r s   R ,   2 0 0 0 ,   L A N C E T ,   V 3 5 6 ,   P 1 4 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 7 4 0 9 0 - 3 ;   S U S S E R   M ,   1 9 9 7 ,   J   P U B L I C   H L T H ,   V 8 7 ,   P 1 ;   T a g l i a r o   F ,   1 9 9 8 ,   L A N C E T ,   V 3 5 1 ,   P 1 9 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 7 ) 1 0 1 0 1 - 5 ;   T o p o l   E J ,   1 9 9 8 ,   L A N C E T ,   V 3 5 2 ,   P 8 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 0 0 3 6 - 0 ;   T r a y h u r n   P ,   2 0 0 2 ,   B R I T   J   N U T R ,   V 8 8 ,   P 1 ,   D O I   1 0 . 1 0 7 9 / B J N 2 0 0 2 6 1 8 ;   W e n n e r a s   C ,   1 9 9 7 ,   N A T U R E ,   V 3 8 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 3 8 / 3 8 7 3 4 1 a 0 ;   W i e r z b i c k i   A S ,   2 0 0 2 ,   J   C L I N   P A T H O L ,   V 5 5 ,   P 4 9 5 ;   W i l l i a m s   G ,   1 9 9 8 ,   B R I T   M E D   J ,   V 3 1 6 ,   P 1 0 7 9 ;   Z e t t e r s t r o m   R ,   1 9 9 9 ,   A C T A   P A E D I A T R ,   V 8 8 ,   P 7 9 3 ,   D O I   1 0 . 1 0 8 0 / 0 8 0 3 5 2 5 9 9 5 0 1 6 8 6 6 7 ;   Z v o s e c   D L ,   2 0 0 1 ,   N E W   E N G L   J   M E D ,   V 3 4 4 ,   P 8 7 ,   D O I   1 0 . 1 0 5 6 / N E J M 2 0 0 1 0 1 1 1 3 4 4 0 2 0 2 ;   2 0 0 2 ,   L A N C E T ,   V 3 6 0 ;   1 9 9 7 ,   N A T U R E ,   V 3 8 7 ,   P 8 3 1 	 5 5 	 3 8 	 4 1 	 3 	 1 7 	 E L S E V I E R   S C I   I R E L A N D   L T D 	 C L A R E 	 C U S T O M E R   R E L A T I O N S   M A N A G E R ,   B A Y   1 5 ,   S H A N N O N   I N D U S T R I A L   E S T A T E   C O ,   C L A R E ,   I R E L A N D 	 0 3 7 9 - 0 7 3 8 	 	 	 F O R E N S I C   S C I   I N T 	 F o r e n s i c   S c i . I n t . 	 A P R   2 3 	 2 0 0 3 	 1 3 3 	 1 - 2 	 	 	 	 	 1 	 8 	 	 1 0 . 1 0 1 6 / S 0 3 7 9 - 0 7 3 8 ( 0 3 ) 0 0 0 4 2 - 2 	 	 8 	 M e d i c i n e ,   L e g a l 	 L e g a l   M e d i c i n e 	 6 8 1 G J 	 W O S : 0 0 0 1 8 3 0 2 8 2 0 0 0 0 2 	 1 2 7 4 2 6 8 2 	 
 
 J 	 D a v i s ,   K 	 	 	 	 D a v i s ,   K a t e 	 	 	 D i f f e r e n t   s t a k e h o l d e r   g r o u p s   a n d   t h e i r   p e r c e p t i o n s   o f   p r o j e c t   s u c c e s s 	 I N T E R N A T I O N A L   J O U R N A L   O F   P R O J E C T   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P r o j e c t   s u c c e s s   a n d   s t r a t e g y ;   M a n a g i n g   s t a k e h o l d e r s ;   P r o j e c t   s u c c e s s   f a c t o r s ;   P e r c e p t i o n   o f   p r o j e c t   s u c c e s s   f a c t o r s ;   M u l t i p l e   s t a k e h o l d e r s 	 M A N A G E M E N T ;   I M P L E M E N T A T I O N ;   B I B L I O M E T R I C S ;   S E A R C H 	 T h i s   i s   a   t h e o r e t i c a l   p a p e r   u s i n g   t h e   W e b   o f   S c i e n c e   s e a r c h   e n g i n e   a n d   B i b e x c e l   a n a l y s i s   f u n c t i o n s   t o   d e t e r m i n e   k e y   l i t e r a t u r e   r e l a t e d   t o   ' p r o j e c t   s u c c e s s ' .   T h e   p a p e r   f i r s t l y   p r o v i d e s   b a c k g r o u n d   t o   t h e   d e v e l o p m e n t   o f   p r o j e c t   s u c c e s s   s i n c e   t h e   1 9 7 0 s .   T h e n ,   a n   i n d u c t i v e   t h e m a t i c   a n a l y s i s   i n v e s t i g a t e s   w h i c h   f a c t o r s   s t a k e h o l d e r s ,   i n v o l v e d   i n   p r o j e c t s ,   p e r c e i v e d   a s   k e y   t o   p r o j e c t   s u c c e s s .   I t   p r o v i d e s   a   b e t t e r   u n d e r s t a n d i n g   o f   p r o j e c t   s u c c e s s   a n d   i d e n t i f i e s   p e r c e p t i o n s   b y   s e n i o r   m a n a g e m e n t ,   p r o j e c t   c o r e   t e a m   a n d   p r o j e c t   r e c i p i e n t   s t a k e h o l d e r   g r o u p s .   T h e   m a i n   i s s u e   h i g h l i g h t e d   b y   t h e   r e s e a r c h   w a s   t h a t ,   f o r   s o m e   g r o u p s ,   t h e r e   w e r e   n o   c o m m o n   s u c c e s s   f a c t o r s .   T h i s   s u g g e s t s   a   l a c k   o f   a g r e e m e n t   i n   p e r c e p t i o n s   o f   p r o j e c t   s u c c e s s   f a c t o r s   b e t w e e n   t h e s e   t h r e e   g r o u p s ,   h i g h l i g h t i n g   d i s c o n t i n u i t y   b e t w e e n   t h e m   a n d   p r o v i d e s   a   c a s e   f o r   e m p i r i c a l   r e s e a r c h   i n t o   m u l t i p l e   s t a k e h o l d e r   g r o u p s '   p e r c e p t i o n s   o f   p r o j e c t   s u c c e s s .   T h e   a p p r o a c h   s e l e c t e d   e m p l o y e d   a   c o m b i n a t i o n   o f   a   s y s t e m a t i c   i n t e g r a t i v e   l i t e r a t u r e   r e v i e w ,   c o d i n g   f r a m e w o r k   a n d   t h e m a t i c   a n a l y s i s .   ( C )   2 0 1 3   E l s e v i e r   L t d .   A P M   a n d   I P M A .   A l l   r i g h t s   r e s e r v e d . 	 K i n g s t o n   U n i v   L o n d o n ,   K i n g s t o n   U p o n   T h a m e s   K T 2   7 L B ,   S u r r e y ,   E n g l a n d 	 D a v i s ,   K   ( r e p r i n t   a u t h o r ) ,   K i n g s t o n   U n i v   L o n d o n ,   K h - B s 2 0 7 , K i n g s t o n   H i l l ,   K i n g s t o n   U p o n   T h a m e s   K T 2   7 L B ,   S u r r e y ,   E n g l a n d . 	 k a t e . d a v i s @ k i n g s t o n . a c . u k 	 	 	 	 	 A n d e r s e n   E . S . ,   1 9 8 7 ,   G O A L   D I R E C T E D   P R O J E C ;   A n d e r s e n   E . S . ,   2 0 0 4 ,   G O A L   D I R E C T E D   P R O J E C ;   A T K I N S O N   R ,   1 9 9 9 ,   M A C W O R L D                   A U G ,   P 1 7 ;   B a r c l a y   C . ,   2 0 0 9 ,   I N T E R N A T I O N A L   J O U R N A ,   V 1 2 4 ,   P 2 7 2 ;   B e l a s s i   W . ,   1 9 9 6 ,   I N T   J   P R O J   M A N A G ,   V 1 4 ,   P 1 4 1 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 2 6 3 - 7 8 6 3 ( 9 5 ) 0 0 0 6 4 - X ;   B e l o u t   A . ,   2 0 0 4 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P r o j e c t   M a n a g e m e n t ,   V 2 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 7 8 6 3 ( 0 3 ) 0 0 0 0 3 - 6 ;   B l o m q u i s t   T ,   2 0 1 0 ,   P R O J   M A N A G   J ,   V 4 1 ,   P 5 ,   D O I   1 0 . 1 0 0 2 / p m j . 2 0 1 4 1 ;   B l u m b e r g   B . ,   2 0 1 1 ,   B U S I N E S S   R E S E A R C H   M E ;   B o u n d s   G ,   1 9 9 8 ,   I I E   S O L U T I O N S ,   V 3 0 ,   P 4 1 ;   H o w a r d   M . ,   2 0 1 0 ,   P R O C U R I N G   C O M P L E X   P E ;   D a v i e s   A . ,   2 0 0 9 ,   T H E   P R O C E E D I N G S   O F   E ;   B r a d y   T ,   2 0 1 0 ,   I N T   J   P R O J   M A N A G ,   V 2 8 ,   P 7 8 7 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 1 0 . 0 8 . 0 0 1 ;   B r a d y   T ,   2 0 1 0 ,   I N T   J   P R O J   M A N A G ,   V 2 8 ,   P 1 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 0 9 . 1 1 . 0 1 1 ;   B r y d e   D .   J . ,   2 0 0 5 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P r o j e c t   M a n a g e m e n t ,   V 2 3 ,   P 6 2 2 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 0 5 . 0 5 . 0 0 3 ;   B r y m a n   A . ,   2 0 0 7 ,   B U S I N E S S   R E S E A R C H   M E ;   C a l d i c o t t   C V ,   2 0 0 5 ,   P A T I E N T   E D U C   C O U N S ,   V 5 6 ,   P 1 0 4 ,   D O I   1 0 . 1 0 1 6 / j . p e c . 2 0 0 3 . 1 2 . 0 1 4 ;   C h e n   L D ,   2 0 1 0 ,   I N F O R M   M A N A G E - A M S T E R ,   V 4 7 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / j . i m . 2 0 0 9 . 0 9 . 0 0 3 ;   C l e l a n d   D .   I . ,   2 0 0 2 ,   P R O J E C T   M A N A G E M E N T   S ;   C o b o   M J ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 8 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 2 5 ;   C o o k e - D a v i e s   T . ,   2 0 0 2 ,   I N T   J   P R O J   M A N A G ,   V 2 0 ,   P 1 8 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 7 8 6 3 ( 0 1 ) 0 0 0 6 7 - 9 ;   C o o k e - D a v i e s   T . ,   1 9 9 0 ,   M A N A G E M E N T   T O D A Y   B U S ,   P 1 1 9 ;   D a l c h e r   D . ,   2 0 0 3 ,   T H E   P R O C E E D I N G S   O F   T ;   F r e e m a n   M . ,   1 9 9 2 ,   J O U R N A L   O F   P R O J E C T   M ,   V 2 3 ,   P 8 ;   F r i t h   H . ,   2 0 0 4 ,   P S Y C H O L   M E N   M A S C U L I N ,   V 5 ,   P 4 0 ,   D O I   D O I   1 0 . 1 0 3 7 / 1 5 2 4 - 9 2 2 0 . 5 . 1 . 4 0 ;   G h a u r i   P . ,   2 0 1 0 ,   R E S E A R C H   M E T H O D S   I N ;   G o u r l a y   S . ,   2 0 1 0 ,   W O R K I N G   W I T H   B I B L I O G ;   H e m i n g w a y   P . ,   2 0 0 9 ,   W H A T   I S   A   S Y S T E M A T I C ;   H e r t h e r   N . ,   2 0 0 8 ,   W E B   B A S E D   T O O L S   F O R ;   J u g d e v   K . ,   2 0 0 5 ,   P R O J E C T   M A N A G E M E N T   J ,   V 3 6 ,   P 1 9 ;   K e n d r a   K . ,   2 0 0 4 ,   P R O J E C T   M A N A G E M E N T   J ,   V 3 5 ,   P 3 0 ;   K E R Z N E R   H ,   1 9 8 7 ,   J   S Y S T   M A N A G E ,   V 3 8 ,   P 3 0 ;   K l o p p e n b o r g   T . ,   2 0 0 2 ,   P R O J E C T   M A N A G E M E N T   J ,   V 3 ,   P 3 ;   K w a k   Y H ,   2 0 0 9 ,   I N T   J   P R O J   M A N A G ,   V 2 7 ,   P 4 3 5 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 0 8 . 0 8 . 0 0 4 ;   L e s t e r   D H ,   1 9 9 8 ,   R E S   T E C H N O L   M A N A G E ,   V 4 1 ,   P 3 6 ;   L e v y   Y . ,   2 0 0 6 ,   I n f o r m i n g   S c i e n c e ,   V 9 ,   P 1 8 1 ;   L i m   C   S ,   1 9 9 9 ,   I N T   J   P R O J   M A N A G ,   V 1 7 ,   P 2 4 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 7 8 6 3 ( 9 8 ) 0 0 0 4 0 - 4 ;   M o r r i s   P .   W .   G . ,   1 9 8 7 ,   T H E   A N A T O M Y   O F   M A J O R ;   M o r r i s   P .   W .   G . ,   1 9 9 7 ,   T H E   M A N A G E M E N T   O F   P R ;   M u l l e r   R a l f ,   2 0 0 7 ,   E u r o p e a n   M a n a g e m e n t   J o u r n a l ,   V 2 5 ,   P 2 9 8 ,   D O I   1 0 . 1 0 1 6 / j . e m j . 2 0 0 7 . 0 6 . 0 0 3 ;   M u l l e r   R ,   2 0 0 3 ,   C O M M U N I C A T I O N   O F   I T ;   M u n n s   A ,   1 9 9 6 ,   I N T   J   P R O J   M A N A G ,   V 1 4 ,   P 8 1 ,   D O I   [ 1 0 . 1 0 1 6 / 0 2 6 3 - 7 8 6 3 ( 9 5 ) 0 0 0 5 7 - 7 ,   D O I   1 0 . 1 0 1 6 / 0 2 6 3 - 7 8 6 3 ( 9 5 ) 0 0 0 5 7 - 7 ] ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N e u m a n   W .   L . ,   2 0 1 1 ,   S O C I A L   R E S E A R C H   M E T H ;   O f f i c e   o f   G o v e r n m e n t   C o m m e r c e ,   2 0 0 9 ,   P R I N C E 2 ;   P e t e r s   T . ,   1 9 9 9 ,   F A S T   C O M P A N Y ,   V 2 4 ,   P 1 3 8 ;   P i n t o   J K ,   2 0 0 9 ,   I N T   J   P R O J   M A N A G ,   V 2 7 ,   P 6 3 8 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 0 8 . 0 9 . 0 1 0 ;   P I N T O   J K ,   1 9 8 9 ,   R E S   T E C H N O L   M A N A G E ,   V 3 2 ,   P 3 1 ;   P I N T O   J K ,   1 9 9 0 ,   J   M A N A G E   S T U D ,   V 2 7 ,   P 3 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 1 9 9 0 . t b 0 0 2 4 9 . x ;   P I N T O   J K ,   1 9 8 7 ,   I E E E   T   E N G   M A N A G E ,   V 3 4 ,   P 2 2 ;   P i n t o   J .   K . ,   1 9 8 8 ,   P R O J E C T   M A N A G E M E N T   J ,   V 1 9 ,   P 6 7 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P r o j e c t   M a n a g e m e n t   I n s t i t u t e ,   2 0 0 8 ,   G U I D   P R O J   M A N   B O D   K N ;   R i t c h i e   J . ,   2 0 1 0 ,   Q U A L I T A T I V E   R E S E A R C H ;   S a u n d e r s   M . ,   2 0 0 9 ,   R E S E A R C H   M E T H O D S   F O R ;   S a v i l l   R . ,   2 0 0 9 ,   T E L E G R A P H ;   S h e n h a r   A . ,   1 9 9 7 ,   P R O J E C T   M A N A G E M E N T   J ,   V 2 8 ,   P 5 ;   S h e n h a r   A .   J . ,   2 0 0 7 ,   P R O J E C T   M A N A G E M E N T   J ,   V 3 8 ,   P 9 3 ;   S l e v i n   D . P . ,   1 9 8 6 ,   P R O J E C T   M A N A G E M E N T   J ,   V 1 7 ,   P 5 7 ;   S m i t h - D o e r r   L ,   2 0 0 4 ,   J   E N G   T E C H N O L   M A N A G E ,   V 2 1 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / j . j e n g t e c m a n . 2 0 0 3 . 1 2 . 0 0 4 ;   T h e   S t a n d i s h   G r o u p ,   1 9 9 5 ,   C H A O S   S U M M A R Y   1 9 9 5 ;   S t a n d i s h   G r o u p ,   2 0 0 9 ,   C H A O S   S U M M A R Y   2 0 0 9 ;   T i s h l e r   A ,   1 9 9 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 1 ,   P 1 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 5 ) 0 0 1 9 7 - 2 ;   T o o r   S U R ,   2 0 1 0 ,   I N T   J   P R O J   M A N A G ,   V 2 8 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 0 9 . 0 5 . 0 0 5 ;   T u k e l   O I ,   2 0 0 1 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 1 ,   P 4 0 0 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 1 1 0 3 6 4 7 0 4 ;   T u r n e r   J .   R . ,   2 0 1 2 ,   P R O J E C T   M A N A G E M E N T   J ,   V 4 3 ,   P 8 7 ;   T u r n e r   J .   R . ,   2 0 0 7 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P r o j e c t   M a n a g e m e n t ,   V 2 5 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 0 6 . 0 4 . 0 0 3 ;   T u r n e r   J . R . ,   2 0 0 6 ,   C H O O S I N G   A P P R O P R I A T E ;   T u r n e r   J . R . ,   1 9 9 9 ,   T H E   H A N D B O O K   O F   P R O J ;   T u r n e r   J . R . ,   2 0 0 9 ,   T H E   P R O C E E D I N G S   O F   I ;   T u r n e r   J . R . ,   2 0 0 5 ,   P R O J E C T   M A N A G E M E N T   J ,   V 2 ,   P 4 9 ;   T u r n e r   J .   R ,   2 0 0 9 ,   T H E   H A N D B O O K   O F   P R O J ;   T u r n e r   J .   R . ,   2 0 0 4 ,   I N T   J   P R O J   M A N A G ,   V 2 2 ,   P 3 4 9 ;   V i c t o r   L . ,   2 0 0 8 ,   S O C I A L   R E S E A R C H   U P D A ,   P 5 4 ;   W a n g   X . ,   2 0 0 6 ,   I N T   J   P R O J   M A N A G ,   V 2 4 ,   P 2 5 3 ,   D O I   D O I   1 0 . 1 0 1 6 / J . I J P R O M A N . 2 0 0 5 . 1 1 . 0 0 6 ;   W a t e r i d g e   J . ,   1 9 9 5 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P r o j e c t   M a n a g e m e n t ,   V 1 3 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 2 6 3 - 7 8 6 3 ( 9 5 ) 0 0 0 2 0 - Q ;   W a t e r i d g e   J . ,   1 9 9 8 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P r o j e c t   M a n a g e m e n t ,   V 1 6 ,   P 5 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 7 8 6 3 ( 9 7 ) 0 0 0 2 2 - 7 ;   W e b   o f   S c i e n c e ,   2 0 1 1 ,   D A T A B A S E   I N F O R M A T I O N ;   W e b s t e r   J . ,   2 0 0 2 ,   M I S   Q ,   V 2 6 ,   P 1 3 ;   W e n e l l   T ,   2 0 0 0 ,   W E N E L L   O N   P R O J E C T S ;   W h i t t e m o r e   R ,   2 0 0 5 ,   J   A D V   N U R S ,   V 5 2 ,   P 5 4 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 5 . 0 3 6 2 1 . x 	 8 0 	 3 7 	 3 7 	 1 5 	 6 8 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 2 6 3 - 7 8 6 3 	 1 8 7 3 - 4 6 3 4 	 	 I N T   J   P R O J   M A N A G 	 I n t .   J .   P r o j .   M a n a g . 	 F E B 	 2 0 1 4 	 3 2 	 2 	 	 	 	 	 1 8 9 	 2 0 1 	 	 1 0 . 1 0 1 6 / j . i j p r o m a n . 2 0 1 3 . 0 2 . 0 0 6 	 	 1 3 	 M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 2 9 0 P J 	 W O S : 0 0 0 3 2 9 7 7 0 5 0 0 0 0 1 	 	 
 
 J 	 B a n z i ,   R ;   M o j a ,   L ;   P i s t o t t i ,   V ;   F a c c h i n i ,   A ;   L i b e r a t i ,   A 	 	 	 	 B a n z i ,   R i t a ;   M o j a ,   L o r e n z o ;   P i s t o t t i ,   V a n n a ;   F a c c h i n i ,   A n d r e a ;   L i b e r a t i ,   A l e s s a n d r o 	 	 	 C o n c e p t u a l   f r a m e w o r k s   a n d   e m p i r i c a l   a p p r o a c h e s   u s e d   t o   a s s e s s   t h e   i m p a c t   o f   h e a l t h   r e s e a r c h :   a n   o v e r v i e w   o f   r e v i e w s 	 H E A L T H   R E S E A R C H   P O L I C Y   A N D   S Y S T E M S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 R e s e a r c h   g o v e r n a n c e ;   R e s e a r c h   i m p a c t ;   H e a l t h   r e s e a r c h ;   B i b l i o m e t r i c s 	 T E C H N O L O G Y - A S S E S S M E N T   P R O G R A M ;   M E D I C A L - R E S E A R C H ;   P U B L I C - H E A L T H ;   O F - H E A L T H ;   P A Y B A C K ;   O U T C O M E S ;   C H A L L E N G E S ;   E X P E R I E N C E ;   L E S S O N S ;   F I E L D 	 B a c k g r o u n d :   H o w   t o   a s s e s s   t h e   i m p a c t   o f   r e s e a r c h   i s   o f   g r o w i n g   i n t e r e s t   t o   f u n d e r s ,   p o l i c y   m a k e r s   a n d   r e s e a r c h e r s   m a i n l y   t o   u n d e r s t a n d   t h e   v a l u e   o f   i n v e s t m e n t s   a n d   t o   i n c r e a s e   a c c o u n t a b i l i t y .   B r o a d l y   s p e a k i n g   t h e   t e r m   " r e s e a r c h   i m p a c t "   r e f e r s   t o   t h e   c o n t r i b u t i o n   o f   r e s e a r c h   a c t i v i t i e s   t o   a c h i e v e   d e s i r e d   s o c i e t a l   o u t c o m e s .   T h e   a i m   o f   t h i s   o v e r v i e w   i s   t o   i d e n t i f y   t h e   m o s t   c o m m o n   a p p r o a c h e s   t o   r e s e a r c h   i m p a c t   a s s e s s m e n t ,   c a t e g o r i e s   o f   i m p a c t   a n d   t h e i r   r e s p e c t i v e   i n d i c a t o r s .   M e t h o d s :   W e   s y s t e m a t i c a l l y   s e a r c h e d   t h e   r e l e v a n t   l i t e r a t u r e   ( P u b M e d ,   T h e   C o c h r a n e   L i b r a r y   ( 1 9 9 0 - 2 0 0 9 ) )   a n d   f u n d i n g   a g e n c y   w e b s i t e s .   W e   i n c l u d e d   s y s t e m a t i c   r e v i e w s ,   t h e o r e t i c a l   a n d   m e t h o d o l o g i c a l   p a p e r s ,   a n d   e m p i r i c a l   c a s e - s t u d i e s   o n   h o w   t o   e v a l u a t e   r e s e a r c h   i m p a c t .   W e   q u a l i t a t i v e l y   s u m m a r i s e d   t h e   i n c l u d e d   r e p o r t s ,   a s   w e l l   t h e   c o n c e p t u a l   f r a m e w o r k s .   R e s u l t s :   W e   i d e n t i f i e d   t w e n t y - t w o   r e p o r t s   b e l o n g i n g   t o   f o u r   s y s t e m a t i c   r e v i e w s   a n d   1 4   p r i m a r y   s t u d i e s .   T h e s e   p u b l i c a t i o n s   r e p o r t e d   s e v e r a l   t h e o r e t i c a l   f r a m e w o r k s   a n d   m e t h o d o l o g i c a l   a p p r o a c h e s   ( b i b l i o m e t r i c s ,   e c o n o m e t r i c s ,   a d   h o c   c a s e   s t u d i e s ) .   T h e   " p a y b a c k   m o d e l "   e m e r g e d   a s   t h e   m o s t   f r e q u e n t l y   u s e d .   F i v e   b r o a d   c a t e g o r i e s   o f   i m p a c t   w e r e   i d e n t i f i e d :   a )   a d v a n c i n g   k n o w l e d g e ,   b )   c a p a c i t y   b u i l d i n g ,   c )   i n f o r m i n g   d e c i s i o n - m a k i n g ,   d )   h e a l t h   b e n e f i t s ,   e )   b r o a d   s o c i o - e c o n o m i c   b e n e f i t s .   F o r   e a c h   p r o p o s e d   c a t e g o r y   o f   i m p a c t   w e   s u m m a r i z e d   a   s e t   o f   i n d i c a t o r s   w h o s e   p r o s   a n d   c o n s   a r e   p r e s e n t e d   a n d   b r i e f l y   d i s c u s s e d .   C o n c l u s i o n s :   T h i s   o v e r v i e w   i s   a   c o m p r e h e n s i v e ,   y e t   d e s c r i p t i v e ,   c o n t r i b u t i o n   t o   s u m m a r i z e   t h e   c o n c e p t u a l   f r a m e w o r k   a n d   t a x o n o m y   o f   a n   h e t e r o g e n e o u s   a n d   e v o l v i n g   a r e a   o f   r e s e a r c h .   A   s h a r e d   a n d   c o m p r e h e n s i v e   c o n c e p t u a l   f r a m e w o r k   d o e s   n o t   s e e m   t o   b e   a v a i l a b l e   y e t   a n d   i t s   s i n g l e   c o m p o n e n t s   ( e p i d e m i o l o g i c ,   e c o n o m i c ,   a n d   s o c i a l )   a r e   o f t e n   v a l u e d   d i f f e r e n t l y   i n   d i f f e r e n t   m o d e l s . 	 [ B a n z i ,   R i t a ;   M o j a ,   L o r e n z o ;   P i s t o t t i ,   V a n n a ;   L i b e r a t i ,   A l e s s a n d r o ]   I s t   R i c   F a r m a c o l   M a r i o   N e g r i ,   C t r   C o c h r a n e   I t a l i a n o ,   M i l a n ,   I t a l y ;   [ M o j a ,   L o r e n z o ]   U n i v   M i l a n ,   D i p a r t i m e n t o   S a n i t a   P u b b l   M i c r o b i o l   V i r o l ,   M i l a n ,   I t a l y ;   [ F a c c h i n i ,   A n d r e a ]   I s t   O r t o p e d   R i z z o l i ,   B o l o g n a ,   I t a l y ;   [ L i b e r a t i ,   A l e s s a n d r o ]   U n i v   M o d e n a   &   R e g g i o   E m i l i a ,   D i p a r t i m e n t o   O n c o l   E m a t o l   &   M a l a t t i e   A p p a r a t o   R e s ,   M o d e n a ,   I t a l y ;   [ F a c c h i n i ,   A n d r e a ]   U n i v   B o l o g n a ,   B o l o g n a ,   I t a l y ;   [ L i b e r a t i ,   A l e s s a n d r o ]   A g e n z i a   S a n i t   &   S o c i a l e   R e g   E m i l i a   R o m a g n a ,   B o l o g n a ,   I t a l y 	 L i b e r a t i ,   A   ( r e p r i n t   a u t h o r ) ,   I s t   R i c   F a r m a c o l   M a r i o   N e g r i ,   C t r   C o c h r a n e   I t a l i a n o ,   M i l a n ,   I t a l y . 	 a l e s s a n d r o . l i b e r a t i @ u n i m o r e . i t 	 	 m o j a ,   l o r e n z o / 0 0 0 0 - 0 0 0 1 - 6 6 8 0 - 6 5 0 7 	 	 	 [ A n o n y m o u s ] ,   2 0 0 9 ,   D O S S   A S S R   N   1 8 2   R I C ;   A u s t r a l i a n   S o c i e t y   f o r   M e d i c a l   R e s e a r c h ,   2 0 0 8 ,   A C C   E C   E X C   R E T   V A L   I ;   B u x t o n   M ,   1 9 9 8 ,   J   R O Y   S O C   M E D ,   V 9 1 ,   P 2 ;   B u x t o n   M ,   2 0 0 4 ,   B   W O R L D   H E A L T H   O R G A N ,   V 8 2 ,   P 7 3 3 ;   B u x t o n   M ,   1 9 9 6 ,   J   H e a l t h   S e r v   R e s   P o l i c y ,   V 1 ,   P 3 5 ;   B u x t o n   M ,   1 9 9 9 ,   2 5   B R U N   U ;   C a n a d i a n   A c a d e m y   o f   H e a l t h   S c i e n c e s ,   2 0 0 9 ,   C A N   A C   H L T H   S C I   M A K ;   C h a l m e r s   I a i n ,   2 0 0 9 ,   L a n c e t ,   V 3 7 4 ,   P 8 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 9 ) 6 0 3 2 9 - 9 ;   C o r y n   C L S ,   2 0 0 7 ,   A M   J   E V A L ,   V 2 8 ,   P 4 3 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 7 3 0 8 2 9 0 ;   C u t l e r   D M ,   1 9 9 9 ,   E C   B E T T E R   H L T H   C A S E ;   D e v e l o p m e n t   A s s i s t a n c e   C o m m i t t e e   W o r k i n g   P a r t y   o n   A i d   E v a l u a t i o n ,   2 0 0 2 ,   G L O S S   K E Y   T E R M S   E V   R ;   F l e u r e n c e   R L ,   2 0 0 7 ,   H E A L T H   E C O N ,   V 1 6 ,   P 1 3 4 5 ,   D O I   1 0 . 1 0 0 2 / h e c . 1 2 2 5 ;   F r a n k   C ,   2 0 0 9 ,   C A N   M E D   A S S O C   J ,   V 1 8 0 ,   P 5 2 8 ,   D O I   1 0 . 1 5 0 3 / c m a j . 0 9 0 0 1 6 ;   G r a n t   J ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 1 1 0 7 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 4 2 . 1 1 0 7 ;   G u t m a n   M A ,   2 0 0 9 ,   A M   J   P R E V   M E D ,   V 3 6 ,   p S 2 2 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 1 0 . 0 0 9 ;   H a n n e y   S ,   2 0 0 7 ,   H E A L T H   T E C H N O L   A S S E S ,   V 1 1 ,   P 1 ;   H a n n e y   S R ,   2 0 0 6 ,   D I A B E T I C   M E D ,   V 2 3 ,   P 1 7 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 4 - 5 4 9 1 . 2 0 0 5 . 0 1 7 5 3 . x ;   H a n n e y   S t e p h e n   R ,   2 0 0 4 ,   H e a l t h   R e s   P o l i c y   S y s t ,   V 2 ,   P 4 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 8 - 4 5 0 5 - 2 - 4 ;   H a n n e y   S t e p h e n   R ,   2 0 0 3 ,   H e a l t h   R e s   P o l i c y   S y s t ,   V 1 ,   P 2 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 8 - 4 5 0 5 - 1 - 2 ;   H i g g i n s   J ,   2 0 0 8 ,   C O C H R A N E   H D B   S Y S T E M A ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   N A T   P R I O R   C O M P   E F F   R ;   J a c o b   R ,   1 9 9 7 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 3 ,   P 6 8 ;   J o h n s t o n   S C ,   2 0 0 6 ,   L A N C E T ,   V 3 6 7 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 6 ) 6 8 5 7 8 - 4 ;   K a l u c y   L ,   2 0 0 7 ,   P R I M A R Y   H L T H   C A R E   R E ;   K a l u c y   L . ,   2 0 0 9 ,   E X P L O R I N G   I M P A C T   P R I ;   R o b e r t   S ,   1 9 9 2 ,   H A R V A R D   B U S I N E S S   J A N ,   P 7 1 ;   K u r u v i l l a   S ,   2 0 0 6 ,   B M C   H E A L T H   S E R V   R E S ,   V 6 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 6 3 - 6 - 1 3 4 ;   K w a n   P ,   2 0 0 7 ,   B M C   H E A L T H   S E R V   R E S ,   V 7 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 6 3 - 7 - 1 2 1 ;   L a n d r y   R ,   2 0 0 1 ,   S C I   C O M M U N ,   V 3 9 6 ,   P 4 4 2 ;   [ A n o n y m o u s ] ,   2 0 0 0 ,   F U N D   1   E X C   R E T   E C   V A ;   L a v i s   J o h n ,   2 0 0 3 ,   J   H e a l t h   S e r v   R e s   P o l i c y ,   V 8 ,   P 1 6 5 ,   D O I   1 0 . 1 2 5 8 / 1 3 5 5 8 1 9 0 3 3 2 2 0 2 9 5 2 0 ;   L i b e r a t i   A ,   2 0 1 0 ,   E U R   J   C L I N   I N V E S T ,   V 4 0 ,   P 6 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 3 6 2 . 2 0 0 9 . 0 2 2 2 6 . x ;   L i n e e   G u i d a   C I V R ,   2 0 0 6 ,   C O M   I N D   V A L   R I C   C I V R ;   M u s h k i n   S . ,   1 9 7 9 ,   B I O M E D I C A L   R E S   C O S T S ;   O t t o s o n   J M ,   2 0 0 9 ,   A M   J   P R E V   M E D ,   V 3 6 ,   p S 3 4 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 8 . 1 0 . 0 1 0 ;   R a f t e r y   J ,   2 0 0 9 ,   I N T   J   T E C H N O L   A S S E S S ,   V 2 5 ,   P 1 ,   D O I   1 0 . 1 0 1 7 / S 0 2 6 6 4 6 2 3 0 9 0 9 0 0 1 1 ;   R o y a l   N e t h e r l a n d s   A c a d e m y   o f   A r t s   a n d   S c i e n c e s ,   2 0 0 2 ,   S O C   I M P   A P P L   R E S   Q U A ;   R u c h - R o s s   H ,   2 0 0 8 ,   P E D I A T R I C S ,   V 1 2 2 ,   p E 5 6 4 ,   D O I   1 0 . 1 5 4 2 / p e d s . 2 0 0 6 - 3 2 7 3 ;   S a n t o r i   G ,   2 0 0 8 ,   T R A N S P L   P ,   V 4 0 ,   P 1 8 2 0 ,   D O I   1 0 . 1 0 1 6 / j . t r a n s p r o c e e d . 2 0 0 8 . 0 5 . 0 1 7 ;   S h a h   S ,   2 0 0 1 ,   A U S T   N Z   J   P U B L   H E A L ,   V 2 5 ,   P 5 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 4 2 X . 2 0 0 1 . t b 0 0 3 2 5 . x ;   S h i e l   A ,   2 0 0 9 ,   R E T U R N   I N V E S T M E N T S   H ;   S o p e r   B ,   2 0 0 8 ,   I M P L E M E N T   S C I ,   V 3 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 8 - 5 9 0 8 - 3 - 4 6 ;   S t r y e r   D ,   2 0 0 0 ,   H E A L T H   S E R V   R E S ,   V 3 5 ,   P 9 7 7 ;   S u n g   N S ,   2 0 0 3 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 9 ,   P 1 2 7 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 9 . 1 0 . 1 2 7 8 ;   T o m l i n s o n   S ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 6 3 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 3 5 . 6 3 6 ;   T o w n s e n d   J ,   2 0 0 3 ,   H e a l t h   T e c h n o l   A s s e s s ,   V 7 ,   P 1 ;   T o w n s e n d   J ,   2 0 0 3 ,   H E A L T H   T E C H N O L   A S S E S ,   V 7 ,   p i i i   1 ;   U n i v e r s i t y   H e a l t h   N e t w o r k ,   2 0 0 8 ,   A C C   O U R   P A T   W E   M E A S ;   U K   C l i n i c a l   R e s e a r c h   C o l l a b o r a t i v e ,   2 0 0 6 ,   U K   H L T H   R E S   A N ;   N I H ,   1 9 9 3 ,   N I H   C O S T   S A V   R E S   N I H ,   V 2 ;   V a n   A r k   G ,   2 0 0 7 ,   S W E D   R E S   C O U N C   W O R K S ;   W e i s s   A P ,   2 0 0 7 ,   A M   J   P S Y C H I A T ,   V 1 6 4 ,   P 2 0 6 ,   D O I   1 0 . 1 1 7 6 / a p p i . a j p . 1 6 4 . 2 . 2 0 6 ;   W i l l i a m s   V ,   2 0 0 9 ,   R A N D   M O N O G R A P S ;   W o o d i n g   S ,   2 0 0 5 ,   R H E U M A T O L O G Y ,   V 4 4 ,   P 1 1 4 5 ,   D O I   1 0 . 1 0 9 3 / r h e u m a t o l o g y / k e h 7 0 8 ;   W o o l f   S H ,   2 0 0 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 9 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 7 . 2 6 ;   [ A n o n y m o u s ] ,   R E S   E X C E L L E N C E   F R A M E 	 5 6 	 3 7 	 3 7 	 5 	 2 9 	 B I O M E D   C E N T R A L   L T D 	 L O N D O N 	 2 3 6   G R A Y S   I N N   R D ,   F L O O R   6 ,   L O N D O N   W C 1 X   8 H L ,   E N G L A N D 	 1 4 7 8 - 4 5 0 5 	 	 	 H E A L T H   R E S   P O L I C Y   S Y 	 H e a l t h   R e s .   P o l i c y   S y s t . 	 J U N   2 4 	 2 0 1 1 	 9 	 	 	 	 	 	 	 	 2 6 	 1 0 . 1 1 8 6 / 1 4 7 8 - 4 5 0 5 - 9 - 2 6 	 	 1 0 	 H e a l t h   P o l i c y   &   S e r v i c e s 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s 	 8 9 1 C J 	 W O S : 0 0 0 3 0 0 1 9 3 7 0 0 0 0 1 	 2 1 7 0 2 9 3 0 	 
 
 J 	 J a n s s e n s ,   F ;   G l a n z e l ,   W ;   D e   M o o r ,   B 	 	 	 	 J a n s s e n s ,   F r i z o ;   G l a n z e l ,   W o l f g a n g ;   D e   M o o r ,   B a r t 	 	 	 A   h y b r i d   m a p p i n g   o f   i n f o r m a t i o n   s c i e n c e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l - S o c i e t y - f o r - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s 	 J U N   2 5 - 2 7 ,   2 0 0 7 	 M a d r i d ,   S P A I N 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r ,   C S I C ,   M i n i s t   E d u c   &   C i e n c i a ,   F E C Y T ,   C o m u n i d a d   M a d r i d ,   E u g e n e   G a r f i e l d   F d n ,   T h o m s o n ,   E l s e v i e r ,   J o u r n a l   I n f o r m e t r ,   S c o p u s ,   A y u n t a m i e n t o   M a d r i d ,   S c i   M e t r i x ,   U n i v   C a r l o s   I I I   M a d r i d 	 	 	 S C I E N T I F I C   P A P E R S ;   V I S U A L I Z A T I O N ;   W E B 	 P r e v i o u s   s t u d i e s   h a v e   s h o w n   t h a t   h y b r i d   c l u s t e r i n g   m e t h o d s   t h a t   i n c o r p o r a t e   t e x t u a l   c o n t e n t   a n d   b i b l i o m e t r i c   i n f o r m a t i o n   c a n   o u t p e r f o r m   c l u s t e r i n g   m e t h o d s   t h a t   u s e   o n l y   o n e   o f   t h e s e   c o m p o n e n t s .   I n   t h i s   p a p e r   w e   a p p l y   a   h y b r i d   c l u s t e r i n g   m e t h o d   b a s e d   o n   F i s h e r ' s   i n v e r s e   c h i - s q u a r e   t o   i n t e g r a t e   f u l l - t e x t   w i t h   c i t a t i o n s   a n d   t o   p r o v i d e   a   m a p p i n g   o f   t h e   f i e l d   o f   i n f o r m a t i o n   s c i e n c e .   W e   q u a n t i t a t i v e l y   a n d   q u a l i t a t i v e l y   a s s e s   t h e   a d d e d   v a l u e   o f   s u c h   a n   i n t e g r a t e d   a n a l y s i s   a n d   w e   i n v e s t i g a t e   w h e t h e r   t h e   c l u s t e r i n g   o u t c o m e   i s   a   b e t t e r   r e p r e s e n t a t i o n   o f   t h e   f i e l d   b y   c o m p a r i n g   w i t h   a   t e x t - o n l y   c l u s t e r i n g   a n d   w i t h   a n o t h e r   h y b r i d   m e t h o d   b a s e d   o n   l i n e a r   c o m b i n a t i o n   o f   d i s t a n c e   m a t r i c e s .   O u r   d a t a   s e t   c o n s i s t s   o f   a l m o s t   1 0 0 0   a r t i c l e s   a n d   n o t e s   p u b l i s h e d   i n   t h e   p e r i o d   2 0 0 2 - 2 0 0 4   i n   5   r e p r e s e n t a t i v e   j o u r n a l s .   T h e   o p t i m a l   n u m b e r   o f   c l u s t e r s   f o r   t h e   f i e l d   i s   5 ,   d e t e r m i n e d   b y   u s i n g   a   c o m b i n a t i o n   o f   d i s t a n c e - b a s e d   a n d   s t a b i l i t y - b a s e d   m e t h o d s .   T e r m   n e t w o r k s   p r e s e n t   t h e   c o g n i t i v e   s t r u c t u r e   o f   t h e   f i e l d   a n d   a r e   c o m p l e m e n t e d   b y   t h e   m o s t   r e p r e s e n t a t i v e   p u b l i c a t i o n s .   T h r e e   l a r g e   t r a d i t i o n a l   s u b - d i s c i p l i n e s ,   p a r t i c u l a r l y ,   i n f o r m a t i o n   r e t r i e v a l ,   b i b l i o m e t r i c s / s c i e n t o m e t r i c s ,   a n d   m o r e   s o c i a l   a s p e c t s ,   a n d   t w o   s m a l l e r   c l u s t e r s   a b o u t   p a t e n t   a n a l y s i s   a n d   w e b o m e t r i c s ,   c a n   b e   d i s t i n g u i s h e d . 	 [ J a n s s e n s ,   F r i z o ;   D e   M o o r ,   B a r t ]   K a t h o l i e k e   U n i v   L e u v e n ,   D e p t   E l e c t   E n g n ,   E S A T   S C D ,   B - 3 0 0 1   L e u v e n ,   B e l g i u m ;   [ J a n s s e n s ,   F r i z o ;   G l a n z e l ,   W o l f g a n g ]   K a t h o l i e k e   U n i v   L e u v e n ,   S t e u n p u n t   O & O   I n d i c a t o r e n ,   B - 3 0 0 1   L e u v e n ,   B e l g i u m ;   [ G l a n z e l ,   W o l f g a n g ]   H u n g a r i a n   A c a d   S c i ,   I S P R ,   B u d a p e s t ,   H u n g a r y 	 J a n s s e n s ,   F   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   D e p t   E l e c t   E n g n ,   E S A T   S C D ,   K a s t e e l p k   A r e n b e r g   1 0 ,   B - 3 0 0 1   L e u v e n ,   B e l g i u m . 	 F r i z o . J a n s s e n s @ e s a t . k u l e u v e n . b e 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 B a e z a - Y a t e s   R . ,   1 9 9 9 ,   M O D E R N   I N F O R M   R E T R I E ;   B a t a g e l j   V ,   2 0 0 2 ,   L E C T   N O T E S   C O M P U T   S C ,   V 2 2 6 5 ,   P 4 7 7 ;   B e n - H u r   A . ,   2 0 0 2 ,   P A C   S   B I O C ,   V 7 ,   P 6 ,   D O I   D O I   1 0 . 1 0 1 6 / J . E N V H A Z . 2 0 0 7 . 0 4 . 0 0 2 ;   B e r r y   M W ,   1 9 9 5 ,   S I A M   R E V ,   V 3 7 ,   P 5 7 3 ,   D O I   1 0 . 1 1 3 7 / 1 0 3 7 1 2 7 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   C a l a d o   P ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 2 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 6 6 ;   C a l a d o   P ,   2 0 0 3 ,   A C M   T   I N F O R M   S Y S T ,   V 2 1 ,   P 4 2 ,   D O I   1 0 . 1 1 4 5 / 6 3 5 4 8 4 . 6 3 5 4 8 6 ;   C O H N   D ,   2 0 0 0 ,   N E U R A L   I N F O R M   P R O C E S ,   P 1 3 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D u n n i n g   T . ,   1 9 9 3 ,   C o m p u t a t i o n a l   L i n g u i s t i c s ,   V 1 9 ,   P 6 1 ;   G l e n i s s o n   P ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 4 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 1 ;   H a t c h e r   E . ,   2 0 0 4 ,   L U C E N E   A C T I O N ;   H e d g e s   L .   V . ,   1 9 8 5 ,   S T A T   M E T H O D S   M E T A A N A ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J a n s s e n s   F . ,   2 0 0 6 ,   P   1   I N T   C   M U L T   I N F   S ,   P 6 1 5 ;   J a n s s e n s   F . ,   2 0 0 7 ,   T H E S I S   K A T H O L I E K E   U ;   J a n s s e n s   F ,   2 0 0 7 ,   P r o c e e d i n g s   o f   I S S I   2 0 0 7 :   1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l   S o c i e t y   f o r   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s ,   V o l s   I   a n d   I I ,   P 4 0 8 ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   J o a c h i m s   T . ,   2 0 0 1 ,   P   1 8   I N T   C   M A C H   L E A R ,   P 2 5 0 ;   K a u f m a n   L . ,   1 9 9 0 ,   F I N D I N G   G R O U P S   D A T A ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   M a n n i n g   C .   D . ,   2 0 0 0 ,   F D N   S T A T   N A T U R A L   L A N ;   M o d h a   D .   S . ,   2 0 0 0 ,   A C M   2 0 0 0   H y p e r t e x t .   P r o c e e d i n g s   o f   t h e   E l e v e n t h   A C M   C o n f e r e n c e   o n   H y p e r t e x t   a n d   H y p e r m e d i a ,   P 1 4 3 ;   M o r r i s   S A ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 9 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 6 0 4 1 0 0 ;   M o r r i s   S A ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 7 ;   M u l l i n s   N . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 8 1 ;   P O R T E R   M F ,   1 9 8 0 ,   P R O G R A M - A U T O M   L I B R ,   V 1 4 ,   P 1 3 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 4 6 8 1 4 ;   R O U S S E E U W   P J ,   1 9 8 7 ,   J   C O M P U T   A P P L   M A T H ,   V 2 0 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 0 4 2 7 ( 8 7 ) 9 0 1 2 5 - 7 ;   S a l t o n   G . ,   1 9 8 6 ,   I N T R O   M O D E R N   I N F O R M ;   S N I Z E K   W E ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 4 1 ;   W a n g   Y G ,   2 0 0 2 ,   P R O C E E D I N G S   O F   T H E   4 T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   N O N L I N E A R   M E C H A N I C S ,   P 4 9 9 ;   W A R D   J H ,   1 9 6 3 ,   J   A M   S T A T   A S S O C ,   V 5 8 ,   P 2 3 6 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 2 9 6 7 	 3 2 	 3 7 	 3 8 	 3 	 5 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 0 8 	 7 5 	 3 	 	 	 	 	 6 0 7 	 6 3 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 0 2 - 7 	 	 2 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 1 4 W J 	 W O S : 0 0 0 2 5 6 8 3 9 6 0 0 0 1 2 	 	 
 
 J 	 G a r f i e l d ,   E 	 	 	 	 G a r f i e l d ,   E 	 	 	 U s e   o f   J o u r n a l   C i t a t i o n   R e p o r t s   a n d   J o u r n a l   P e r f o r m a n c e   I n d i c a t o r s   i n   m e a s u r i n g   s h o r t   a n d   l o n g   t e r m   j o u r n a l   i m p a c t 	 C R O A T I A N   M E D I C A L   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   i m p a c t   f a c t o r ;   j o u r n a l   a r t i c l e ;   l i b r a r y   s c i e n c e ;   m e d i c a l   i n f o r m a t i c s ;   m e d i c a l   l i t e r a t u r e   a n a l y s i s   a n d   r e t r i e v a l   s y s t e m 	 	 T h e   i m p a c t   f a c t o r   h a s   b e c o m e   t h e   s u b j e c t   o f   w i d e s p r e a d   c o n t r o v e r s y .   I t   h a s   g r a d u a l l y   d e v e l o p e d   t o   m e a n   b o t h   j o u r n a l   a n d   a u t h o r   i m p a c t .   T h e   e m p h a s i s   o n   i m p a c t   f a c t o r s   o b s c u r e s   t h e   m a i n   p u r p o s e   o f   b i b l i o g r a p h i c   d a t a b a s e s   c r e a t e d   a t   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n .   I   w i l l   h e r e   s h o w   h o w   t w o   o f   t h e s e   d a t a b a s e s ,   J o u r n a l   C i t a t i o n   R e p o r t s   a n d   t h e   J o u r n a l   P e r f o r m a n c e   I n d i c a t o r s ,   c a n   b e   u s e d   t o   s t u d y   s c i e n t i f i c   j o u r n a l s   a n d   t h e   a r t i c l e s   t h e y   p u b l i s h ,   a s   w e l l   a s   t h e   e v o l u t i o n   o f   s c i e n t i f i c   f i e l d s . 	 I n s t   S c i   I n f o r m a t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 G a r f i e l d ,   E   ( r e p r i n t   a u t h o r ) ,   T h e   S c i e n t i s t ,   3 5 0 1   M a r k e t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 	 G a r f i e l d ,   E u g e n e / A - 1 0 0 9 - 2 0 0 8 	 	 	 	 B e n s m a n   S J ,   1 9 9 8 ,   L I B R   R E S O U R   T E C H   S E R ,   V 4 2 ,   P 1 4 7 ;   B R O A D Y   A ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 1 3 0 0 ;   B R O D M A N   E ,   1 9 6 0 ,   B   M E D   L I B   A S S ,   V 3 2 ,   P 4 7 9 ;   F e n t o n   J E ,   2 0 0 0 ,   C L I N   O T O L A R Y N G O L ,   V 2 5 ,   P 4 0 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 2 7 3 . 2 0 0 0 . 0 0 3 2 2 . x ;   F O S T E R   W R ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 1 3 0 1 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 2 ;   G A R F I E L D   E ,   1 9 7 3 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 0 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 7 6 ,   C U R R E N T   C O N T E N T   0 2 0 9 ;   G A R F I E L D   E ,   1 9 7 2 ,   C U R R E N T   C O N T E N T   0 6 2 8 ;   H a n s e n   H B ,   1 9 9 7 ,   C L I N   P H Y S I O L ,   V 1 7 ,   P 4 0 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 2 8 1 . 1 9 9 7 . 0 4 5 4 5 . x ;   H o e f f e l   C ,   1 9 9 8 ,   A L L E R G Y ,   V 5 3 ,   P 1 2 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 8 . t b 0 3 8 4 8 . x ;   L o b o   R A ,   2 0 0 0 ,   J   S O C   G Y N E C O L   I N V E S T ,   V 7 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / S 1 0 7 1 - 5 5 7 6 ( 9 9 ) 0 0 0 6 4 - 7 ;   O p t h o f   T ,   1 9 9 9 ,   C A R D I O V A S C   R E S ,   V 4 1 ,   P 1 ;   O r e o p o u l o s   D G ,   2 0 0 0 ,   P E R I T O N   D I A L Y S I S   I N T ,   V 2 0 ,   P 5 ;   P i c u s   D ,   2 0 0 0 ,   J   V A S C   I N T E R V   R A D I O L ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 1 6 / S 1 0 5 1 - 0 4 4 3 ( 0 7 ) 6 1 4 5 8 - 4 ;   P i t t l e r   M H ,   2 0 0 0 ,   J   C L I N   E P I D E M I O L ,   V 5 3 ,   P 4 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 4 3 5 6 ( 9 9 ) 0 0 2 2 0 - 6 ;   R e n   S L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 1 6 8 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 4 5 . 1 6 8 3 ;   S e m e n z a t o   G ,   2 0 0 0 ,   S A R C O I D O S I S   V A S C   D I F ,   V 1 7 ,   P 2 2 ;   S o r r e n t i n o   D ,   2 0 0 0 ,   D I G E S T I O N ,   V 6 1 ,   P 7 7 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 0 7 7 3 8 ;   V A N L E E U W E N   T N ,   1 9 9 7 ,   C H E M   I N T E L L ,   V 3 ,   P 3 2 	 2 4 	 3 7 	 4 0 	 4 	 1 8 	 P A B S T   S C I E N C E   P U B L I S H E R S 	 L E N G E R I C H 	 E I C H E N G R U N D   2 8 ,   D - 4 9 5 2 5   L E N G E R I C H ,   G E R M A N Y 	 0 3 5 3 - 9 5 0 4 	 	 	 C R O A T   M E D   J 	 C r o a t .   M e d .   J . 	 D E C 	 2 0 0 0 	 4 1 	 4 	 	 	 	 	 3 6 8 	 3 7 4 	 	 	 	 7 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 3 8 1 T J 	 W O S : 0 0 0 1 6 5 7 7 9 3 0 0 0 0 3 	 1 1 0 6 3 7 5 7 	 
 
 J 	 A g u i l l o ,   I F 	 	 	 	 A g u i l l o ,   I s i d r o   F . 	 	 	 I s   G o o g l e   S c h o l a r   u s e f u l   f o r   b i b l i o m e t r i c s ?   A   w e b o m e t r i c   a n a l y s i s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 3 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s 	 J U L   0 4 - 0 7 ,   2 0 1 1 	 U n i v   Z u l u l a n d ,   D u r b a n ,   S O U T H   A F R I C A 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r   ( I S S I ) ,   D u r b a n   U n i v   T e c h n o l 	 U n i v   Z u l u l a n d 	 G o o g l e   S c h o l a r ;   B i b l i o m e t r i c s ;   W e b o m e t r i c s ;   G e o g r a p h i c a l   c o v e r a g e ;   T o p   i n s t i t u t i o n s ;   Q u a l i t y   c o n t r o l 	 H - I N D E X ;   S C I E N C E ;   W E B ;   S C O P U S ;   I M P A C T 	 G o o g l e   S c h o l a r ,   t h e   a c a d e m i c   b i b l i o g r a p h i c   d a t a b a s e   p r o v i d e d   f r e e - o f - c h a r g e   b y   t h e   s e a r c h   e n g i n e   g i a n t   G o o g l e ,   h a s   b e e n   s u g g e s t e d   a s   a n   a l t e r n a t i v e   o r   c o m p l e m e n t a r y   r e s o u r c e   t o   t h e   c o m m e r c i a l   c i t a t i o n   d a t a b a s e s   l i k e   W e b   o f   K n o w l e d g e   ( I S I / T h o m s o n )   o r   S c o p u s   ( E l s e v i e r ) .   I n   o r d e r   t o   c h e c k   t h e   u s e f u l n e s s   o f   t h i s   d a t a b a s e   f o r   b i b l i o m e t r i c   a n a l y s i s ,   a n d   e s p e c i a l l y   r e s e a r c h   e v a l u a t i o n ,   a   n o v e l   a p p r o a c h   i s   i n t r o d u c e d .   I n s t e a d   o f   n a m e s   o f   a u t h o r s   o r   i n s t i t u t i o n s ,   a   w e b o m e t r i c   a n a l y s i s   o f   a c a d e m i c   w e b   d o m a i n s   i s   p e r f o r m e d .   T h e   b i b l i o g r a p h i c   r e c o r d s   f o r   2 2 5   t o p   l e v e l   w e b   d o m a i n s   ( T L D ) ,   1 9 , 2 4 0   u n i v e r s i t y   a n d   6 , 3 8 0   r e s e a r c h   c e n t r e s   i n s t i t u t i o n a l   w e b   d o m a i n s   h a v e   b e e n   c o l l e c t e d   f r o m   t h e   G o o g l e   S c h o l a r   d a t a b a s e .   A b o u t   6 3 . 8 %   o f   t h e   r e c o r d s   a r e   h o s t e d   i n   g e n e r i c   d o m a i n s   l i k e   . c o m   o r   . o r g ,   c o n f i r m i n g   t h a t   m o s t   o f   t h e   S c h o l a r   d a t a   c o m e   f r o m   l a r g e   c o m m e r c i a l   o r   n o n - p r o f i t   s o u r c e s .   C o n s i d e r i n g   o n l y   i n s t i t u t i o n s   w i t h   a t   l e a s t   o n e   r e c o r d ,   o n e - t h i r d   o f   t h e   o t h e r   i t e m s   ( 1 0 . 6 %   f r o m   t h e   g l o b a l )   a r e   h o s t e d   b y   t h e   1 0 , 4 4 2   u n i v e r s i t i e s ,   w h i l e   3 , 9 0 1   r e s e a r c h   c e n t r e s   a m o u n t   f o r   a n   a d d i t i o n a l   7 . 9 %   f r o m   t h e   t o t a l .   T h e   i n d i v i d u a l   a n a l y s i s   s h o w   t h a t   u n i v e r s i t i e s   f r o m   C h i n a ,   B r a z i l ,   S p a i n ,   T a i w a n   o r   I n d o n e s i a   a r e   f a r   b e t t e r   r a n k e d   t h a n   e x p e c t e d .   I n   s o m e   c a s e s ,   l a r g e   i n t e r n a t i o n a l   o r   n a t i o n a l   d a t a b a s e s ,   o r   r e p o s i t o r i e s   a r e   r e s p o n s i b l e   f o r   t h e   h i g h   n u m b e r s   f o u n d .   H o w e v e r ,   i n   m a n y   o t h e r s ,   t h e   l o c a l   c o n t e n t s ,   i n c l u d i n g   p a p e r s   i n   l o w   i m p a c t   j o u r n a l s ,   p o p u l a r   s c i e n t i f i c   l i t e r a t u r e ,   a n d   u n p u b l i s h e d   r e p o r t s   o r   t e a c h i n g   s u p p o r t i n g   m a t e r i a l s   a r e   c l e a r l y   o v e r r e p r e s e n t e d .   G o o g l e   S c h o l a r   l a c k s   t h e   q u a l i t y   c o n t r o l   n e e d e d   f o r   i t s   u s e   a s   a   b i b l i o m e t r i c   t o o l ;   t h e   l a r g e r   c o v e r a g e   i t   p r o v i d e s   c o n s i s t s   i n   s o m e   c a s e s   o f   i t e m s   n o t   c o m p a r a b l e   w i t h   t h o s e   p r o v i d e d   b y   o t h e r   s i m i l a r   d a t a b a s e s . 	 C S I C ,   C y b e r m e t r   L a b ,   M a d r i d   2 8 0 3 7 ,   S p a i n 	 A g u i l l o ,   I F   ( r e p r i n t   a u t h o r ) ,   C S I C ,   C y b e r m e t r   L a b ,   A l b a s a n z   2 6 - 2 8 ,   M a d r i d   2 8 0 3 7 ,   S p a i n . 	 i s i d r o . a g u i l l o @ c c h s . c s i c . e s 	 	 A g u i l l o ,   I s i d r o / 0 0 0 0 - 0 0 0 1 - 8 9 2 7 - 4 8 7 3 	 	 	 A g u i l l o   I ,   2 0 0 9 ,   L I B R   H I   T E C H ,   V 2 7 ,   P 5 4 0 ,   D O I   1 0 . 1 1 0 8 / 0 7 3 7 8 8 3 0 9 ;   A g u i l l o   I F ,   2 0 1 1 ,   P R O   I N T   C O N F   S C I   I N F ,   P 1 9 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B a r - I l a n   J ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 8 5 - 9 ;   B a r - I l a n   J . ,   2 0 0 9 ,   C Y B E R M E T R I C S ,   V 1 3 ,   P 4 ;   B e e l   J o e r a n ,   2 0 1 0 ,   J o u r n a l   o f   E l e c t r o n i c   P u b l i s h i n g ,   V 1 3 ,   D O I   1 0 . 3 9 9 8 / 3 3 3 6 4 5 1 . 0 0 1 3 . 3 0 5 ;   B u t l e r   D ,   2 0 1 1 ,   N A T U R E ,   V 4 7 6 ,   P 1 8 ,   D O I   1 0 . 1 0 3 8 / 4 7 6 0 1 8 a ;   G a r c i a - P e r e z   M A ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 7 2 ;   H a r z i n g   A W ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 5 3 ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   J a c s o   P ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 1 0 2 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 6 6 0 1 0 ;   J a c s o   P ,   2 0 1 0 ,   O N L I N E   I N F O R M   R E V ,   V 3 4 ,   P 9 7 2 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 1 0 1 1 0 9 9 4 3 2 ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   L i   J . ,   2 0 1 0 ,   J   E L E C T   R E S O U R C E S   M E ,   V 7 ,   P 1 9 6 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 5 4 2 4 0 6 5 . 2 0 1 0 . 5 0 5 5 1 8 ;   M a y r   P ,   2 0 0 7 ,   O N L I N E   I N F O R M   R E V ,   V 3 1 ,   P 8 1 4 ,   D O I   [ 1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 7 1 0 8 4 1 7 8 4 ,   1 0 . 1 1 0 8 / 1 4 6 9 4 5 - 9 0 7 1 0 9 4 1 7 9 4 ] ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M i k k i   S ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 8 - 6 ;   T o r r e s - S a l i n a s   D . ,   2 0 0 8 ,   P R O F   I N F O R M ,   V 1 8 ,   P 5 0 1 ;   W h i t e   B . ,   2 0 0 6 ,   N Z   L I B   I N F O R M   M A N A G E ,   V 5 0 ,   P 1 1 	 1 9 	 3 6 	 3 6 	 9 	 9 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A Y 	 2 0 1 2 	 9 1 	 2 	 	 	 	 	 3 4 3 	 3 5 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 8 2 - 8 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 2 1 L D 	 W O S : 0 0 0 3 0 2 4 7 8 2 0 0 0 0 4 	 	 
 
 J 	 C o s t a s ,   R ;   B o r d o n s ,   M 	 	 	 	 C o s t a s ,   R o d r i g o ;   B o r d o n s ,   M a r i a 	 	 	 D o   a g e   a n d   p r o f e s s i o n a l   r a n k   i n f l u e n c e   t h e   o r d e r   o f   a u t h o r s h i p   i n   s c i e n t i f i c   p u b l i c a t i o n s ?   S o m e   e v i d e n c e   f r o m   a   m i c r o - l e v e l   p e r s p e c t i v e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 O r d e r   o f   a u t h o r s h i p ;   M i c r o - l e v e l   a n a l y s i s ;   C S I C ;   I n d i v i d u a l   l e v e l   a n a l y s i s ;   B i b l i o m e t r i c s ;   A u t h o r s h i p ;   A g e   a n a l y s i s 	 M U L T I P L E   A U T H O R S H I P ;   Y O U N G   S C I E N T I S T S ;   C O L L A B O R A T I O N ;   P R O D U C T I V I T Y ;   P A T T E R N S ;   S C I E N C E ;   G E N D E R ;   I M P A C T ;   B I O M E D I C I N E ;   R E S E A R C H E R S 	 S c i e n t i f i c   a u t h o r s h i p   h a s   i m p o r t a n t   i m p l i c a t i o n s   i n   s c i e n c e   s i n c e   i t   r e f l e c t s   t h e   c o n t r i b u t i o n   t o   r e s e a r c h   o f   t h e   d i f f e r e n t   i n d i v i d u a l   s c i e n t i s t s   a n d   i t   i s   c o n s i d e r e d   b y   e v a l u a t i o n   c o m m i t t e e s   i n   r e s e a r c h   a s s e s s m e n t   p r o c e s s e s .   T h i s   s t u d y   a n a l y s e s   t h e   o r d e r   o f   a u t h o r s h i p   i n   t h e   s c i e n t i f i c   o u t p u t   o f   1 , 0 6 4   p e r m a n e n t   s c i e n t i s t s   a t   t h e   S p a n i s h   C S I C   ( W o S ,   1 9 9 4 - 2 0 0 4 ) .   T h e   i n f l u e n c e   o f   a g e ,   p r o f e s s i o n a l   r a n k   a n d   b i b l i o m e t r i c   p r o f i l e   o f   s c i e n t i s t s   o v e r   t h e   p o s i t i o n   o f   t h e i r   n a m e s   i n   t h e   b y l i n e   o f   p u b l i c a t i o n s   i s   e x p l o r e d   i n   t h r e e   d i f f e r e n t   r e s e a r c h   a r e a s :   B i o l o g y   a n d   B i o m e d i c i n e ,   M a t e r i a l s   S c i e n c e   a n d   N a t u r a l   R e s o u r c e s .   T h e r e   i s   a   s t r o n g   t r e n d   f o r   s i g n a t u r e s   o f   y o u n g e r   r e s e a r c h e r s   a n d   t h o s e   i n   t h e   l o w e r   p r o f e s s i o n a l   r a n k s   t o   a p p e a r   i n   t h e   f i r s t   p o s i t i o n   ( j u n i o r   s i g n i n g   p a t t e r n ) ,   w h i l e   m o r e   v e t e r a n   o r   h i g h l y - r a n k e d   o n e s ,   w h o   t e n d   t o   p l a y   s u p e r v i s o r y   f u n c t i o n s   i n   r e s e a r c h ,   a r e   p r o p o r t i o n a l l y   m o r e   l i k e l y   t o   s i g n   i n   t h e   l a s t   p o s i t i o n   ( s e n i o r   s i g n i n g   p a t t e r n ) .   P r o f e s s i o n a l   r a n k   a n d   a g e   h a v e   a n   e f f e c t   o n   a u t h o r s h i p   o r d e r   i n   t h e   t h r e e   f i e l d s   a n a l y s e d ,   b u t   t h e r e   a r e   i n t e r - f i e l d   d i f f e r e n c e s .   A u t h o r s h i p   p a t t e r n s   a r e   e s p e c i a l l y   m a r k e d   i n   t h e   m o s t   c o l l a b o r a t i o n - i n t e n s i v e   f i e l d   ( i . e .   B i o l o g y   a n d   B i o m e d i c i n e ) ,   w h e r e   p r o f e s s i o n a l   r a n k   s e e m s   t o   b e   m o r e   s i g n i f i c a n t   t h a n   a g e   i n   d e t e r m i n i n g   t h e   r o l e   o f   s c i e n t i s t s   i n   r e s e a r c h   a s   s e e n   t h r o u g h   t h e i r   a u t h o r s h i p   p a t t e r n s ,   w h i l e   a g e   h a s   a   m o r e   s i g n i f i c a n t   e f f e c t   i n   t h e   l e a s t   c o l l a b o r a t i o n - i n t e n s i v e   f i e l d   ( N a t u r a l   R e s o u r c e s ) . 	 [ C o s t a s ,   R o d r i g o ]   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   N L - 2 3 0 0   A X   L e i d e n ,   N e t h e r l a n d s ;   [ B o r d o n s ,   M a r i a ]   C S I C ,   C t r   H u m a n   &   S o c i a l   S c i   C C H S ,   I n s t   E s t u d i o s   D o c u m e n t a l e s   C i e n c i a   &   T e c n o l   I E D C Y ,   M a d r i d   2 8 0 3 7 ,   S p a i n 	 C o s t a s ,   R   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   P O B   9 0 5 ,   N L - 2 3 0 0   A X   L e i d e n ,   N e t h e r l a n d s . 	 r c o s t a s @ c w t s . l e i d e n u n i v . n l 	 	 	 S p a n i s h   C S I C 	 T h i s   r e s e a r c h   w a s   s u p p o r t e d   b y   a n   I 3 P   g r a n t   b y   t h e   S p a n i s h   C S I C   d u r i n g   t h e   i n i t i a l   a n a l y s i s   o f   t h e   d a t a .   T h e   a u t h o r s   a r e   a l s o   g r a t e f u l   t o   L a u r a   B a r r i o s   f o r   s t a t i s t i c a l   a d v i c e   a n d   t o   t h e   t w o   a n o n y m o u s   r e v i e w e r s   f o r   t h e i r   v a l u a b l e   c o m m e n t s   a n d   s u g g e s t i o n s . 	 * A M S ,   2 0 0 4 ,   C U L T   R E S   S C H   M A T H   J O ;   B e l l i s   N .   D . ,   2 0 0 9 ,   B I B L I O M E T R I C S   C I T A T I ;   B e v e r i d g e   C h r i s t i n e ,   2 0 0 7 ,   N a t u r e ,   V 4 4 8 ,   P 5 0 8 ,   D O I   1 0 . 1 0 3 8 / n j 7 1 5 2 - 5 0 8 b ;   B i a g i o l i   M ,   1 9 9 8 ,   F A S E B   J ,   V 1 2 ,   P 3 ;   B i r n h o l t z   J P ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 7 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 8 0 ;   B O R D O N S   M ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 1 9 7 ;   C a r a y o l   N ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 1 0 8 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 3 . 0 0 4 ;   C o s t a s   R . ,   2 0 0 6 ,   I N V E S T I G   B I B L I O T E C O L ,   V 2 1 ,   P 1 3 ;   C o s t a s   R ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 5 8 9 - z ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 5 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 8 ;   C r o n e n w e t t   J L ,   2 0 0 5 ,   J   V A S C   S U R G ,   V 4 2 ,   P 5 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j v s . 2 0 0 5 . 0 8 . 0 2 9 ;   C r o n i n   B ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 6 2 8 3 2 0 0 5 6 ;   D a v i s   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 3 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 9 1 7 1 5 2 4 5 ;   D r e n t h   J P H ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 9 ;   E n g e r s   M ,   1 9 9 9 ,   J   P O L I T   E C O N ,   V 1 0 7 ,   P 8 5 9 ,   D O I   1 0 . 1 0 8 6 / 2 5 0 0 8 2 ;   F E I S T   G J ,   1 9 9 3 ,   P S Y C H O L   S C I ,   V 4 ,   P 3 6 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 2 8 0 . 1 9 9 3 . t b 0 0 5 8 3 . x ;   F o x   M F ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 1 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 5 0 4 6 6 3 0 ;   F o x   M F ,   2 0 0 1 ,   S O C   S T U D   S C I ,   V 3 1 ,   P 1 0 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 0 1 0 3 1 0 0 1 0 0 6 ;   F r a n d s e n   T F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 6 0 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 1 0 ;   G i n g r a s   Y ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 0 4 8 ;   H a r a   N ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 9 1 ;   H e m l i n   S ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 5 6 ;   H o e n   W P ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 7 ;   H u   X J ,   2 0 1 0 ,   J   I N F   S C I ,   V 3 6 ,   P 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 9 3 4 8 1 3 3 ;   H u   X J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 3 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 6 4 ;   * I C M J E ,   2 0 1 0 ,   U N   R E Q   M A U S C R   U N P U B ;   K A L Y A N E   V L ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 5 7 1 ;   L i a n g   L M ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 7 3 5 9 . 2 2 1 5 1 . 6 f ;   M a t t s s o n   P . ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 9 9 ;   M a u l e o n   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 1 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 1 4 - 3 ;   M A U L E O N   E ,   2 0 0 7 ,   1 1   I N T   C   I N T   S O C   S C I ,   P 5 5 2 ;   M e n d k i   P S ,   2 0 0 6 ,   C U R R   S C I   I N D I A ,   V 9 0 ,   P 1 4 5 7 ;   M o e d   H F ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 5 1 1 1 6 2 2 ;   O s b o r n e   J .   W . ,   2 0 0 9 ,   P R A C T I C A L   A S S E S S M E N T ,   V 1 4 ,   P 1 ,   D O I   D O I   1 0 . 1 0 1 6 / J . M R R E V . 2 0 0 4 . 0 7 . 0 0 2 ;   P O N T I L L E   D ,   2 0 0 4 ,   S I G N A T U R E   S C I ;   P r a k a s a n   E R ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 9 3 7 - 7 ;   P r p i c   K ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 4 5 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 1 7 0 7 8 7 8 ;   R e y - R o c h a   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 9 - 2 ;   S a v i t z   D A ,   1 9 9 9 ,   A M   J   E P I D E M I O L ,   V 1 4 9 ,   P 4 0 1 ;   S H A P I R O   D W ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 1 ,   P 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 1 . 6 . 4 3 8 ;   T s c h a r n t k e   T ,   2 0 0 7 ,   P L O S   B I O L ,   V 5 ,   P 1 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 5 0 0 1 8 ;   V i n k l e r   P ,   2 0 1 0 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 2 5 0 ;   W r e n   J D ,   2 0 0 7 ,   E M B O   R E P ,   V 8 ,   P 9 8 8 ,   D O I   1 0 . 1 0 3 8 / s j . e m b o r . 7 4 0 1 0 9 5 ;   Z U C K E R M A N   H A ,   1 9 6 8 ,   A M   J   S O C I O L ,   V 7 4 ,   P 2 7 6 ,   D O I   1 0 . 1 0 8 6 / 2 2 4 6 4 1 	 4 4 	 3 6 	 3 6 	 4 	 4 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 2 0 1 1 	 8 8 	 1 	 	 	 	 	 1 4 5 	 1 6 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 8 - z 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 5 E M 	 W O S : 0 0 0 2 9 2 2 1 0 2 0 0 0 0 9 	 	 
 
 J 	 S p e a r m a n ,   C M ;   Q u i g l e y ,   M J ;   Q u i g l e y ,   M R ;   W i l b e r g e r ,   J E 	 	 	 	 S p e a r m a n ,   C h r i s t o p h e r   M . ;   Q u i g l e y ,   M a d e l i n e   J . ;   Q u i g l e y ,   M a t t h e w   R . ;   W i l b e r g e r ,   J a c k   E . 	 	 	 S u r v e y   o f   t h e   h   i n d e x   f o r   a l l   o f   a c a d e m i c   n e u r o s u r g e r y :   a n o t h e r   p o w e r - l a w   p h e n o m e n o n ? 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 h   i n d e x ;   b i b l i o m e t r i c s ;   p o w e r   l a w ;   a c a d e m i c   n e u r o s u r g e r y 	 I M P A C T   F A C T O R ;   D I S T R I B U T I O N S ;   R A N K ;   U N I V E R S A L I T Y 	 O b j e c t .   T h e   h   i n d e x   i s   a   r e c e n t l y   d e v e l o p e d   b i b l i o m e t r i c   t h a t   a s s e s s e s   a n   i n v e s t i g a t o r ' s   s c i e n t i f i c   i m p a c t   w i t h   a   s i n g l e   n u m b e r .   I t   h a s   r a p i d l y   g a i n e d   p o p u l a r i t y   i n   t h e   p h y s i c a l   a n d ,   m o r e   r e c e n t l y ,   m e d i c a l   s c i e n c e s .   M e t h o d s .   T h e   h   i n d e x   f o r   a l l   1 1 2 0   a c a d e m i c   n e u r o s u r g e o n s   w o r k i n g   a t   a l l   E l e c t r o n i c   R e s i d e n c y   A p p l i c a t i o n   S e r v i c e   l i s t e d   t r a i n i n g   p r o g r a m s   w a s   d e t e r m i n e d   b y   r e f e r e n c e   t o   G o o g l e   S c h o l a r .   A   r a n d o m   s u b s e t   o f   1 0 0   i n d i v i d u a l s   w a s   i n v e s t i g a t e d   i n   P u b M e d   t o   d e t e r m i n e   t h e   t o t a l   n u m b e r   o f   p u b l i c a t i o n s   p r o d u c e d .   R e s u l t s .   T h e   m e d i a n   h   i n d e x   w a s   9   ( r a n g e   0 - 6 8 ) ,   w i t h   t h e   7 5 t h ,   9 0 t h ,   a n d   9 5 t h   p e r c e n t i l e s   b e i n g   1 7 ,   2 6 ,   a n d   3 6 ,   r e s p e c t i v e l y .   T h e   h   i n d i c e s   i n c r e a s e d   s i g n i f i c a n t l y   w i t h   i n c r e a s i n g   a c a d e m i c   r a n k ,   w i t h   t h e   m e d i a n   f o r   i n s t r u c t o r s ,   a s s i s t a n t   p r o f e s s o r s ,   a s s o c i a t e   p r o f e s s o r s ,   a n d   p r o f e s s o r s   b e i n g   2 ,   5 ,   1 0 ,   a n d   1 9 ,   r e s p e c t i v e l y   ( p   <   0 . 0 0 0 1 ,   K r u s k a l - W a l l i s ;   a l l   g r o u p s   s i g n i f i c a n t l y   d i f f e r e n t   f r o m   e a c h   o t h e r   e x c e p t   t h e   d i f f e r e n c e   b e t w e e n   i n s t r u c t o r   a n d   a s s i s t a n t   p r o f e s s o r   [ C o n o v e r ] ) .   D e p a r t m e n t a l   c h a i r s   h a d   a   m e d i a n   h   i n d e x   o f   2 2   ( r a n g e   3 - 5 5 )   a n d   p r o g r a m   d i r e c t o r s   a   m e d i a n   o f   1 7   ( r a n g e   0 - 6 2 ) .   P l o t   o f   t h e   l o g   o f   t h e   r a n k   v e r s u s   h   i n d e x   d e m o n s t r a t e d   a   r e m a r k a b l e   l i n e a r   p a t t e r n   ( R ( 2 )   =   0 . 9 9 5 ,   p   <   0 . 0 0 0 1 ) ,   s u g g e s t i n g   t h a t   t h i s   i s   a   p o w e r - l a w   r e l a t i o n s h i p .   C o n c l u s i o n s .   A   s u r v e y   o f   t h e   h   i n d e x   f o r   a l l   o f   a c a d e m i c   n e u r o s u r g e r y   i s   p r e s e n t e d .   R e s u l t s   c a n   b e   u s e d   f o r   b e n c h m a r k   p u r p o s e s .   T h e   d i s t r i b u t i o n   o f   t h e   h   i n d e x   w i t h i n   a n   a c a d e m i c   p o p u l a t i o n   i s   d e s c r i b e d   f o r   t h e   f i r s t   t i m e   a n d   a p p e a r s   r e l a t e d   t o   t h e   u b i q u i t o u s   p o w e r - l a w   d i s t r i b u t i o n .   ( D O I :   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ) 	 [ S p e a r m a n ,   C h r i s t o p h e r   M . ;   Q u i g l e y ,   M a d e l i n e   J . ;   Q u i g l e y ,   M a t t h e w   R . ;   W i l b e r g e r ,   J a c k   E . ]   A l l e g h e n y   G e n   H o s p ,   D e p t   N e u r o s u r g ,   P i t t s b u r g h ,   P A   1 5 2 1 2   U S A 	 Q u i g l e y ,   M R   ( r e p r i n t   a u t h o r ) ,   A l l e g h e n y   G e n   H o s p ,   D e p t   N e u r o s u r g ,   4 2 0   E   N   A v e , S u i t e   3 0 2 ,   P i t t s b u r g h ,   P A   1 5 2 1 2   U S A . 	 q @ m a t t q u i g l e y . c o m 	 	 	 	 	 B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B o r n m a n n   L ,   2 0 0 9 ,   E M B O   R E P ,   V 1 0 ,   P 2 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 0 8 . 2 3 3 ;   C h o i   M ,   2 0 0 9 ,   I N T   J   R A D I A T   O N C O L ,   V 7 4 ,   P 1 7 2 ,   D O I   1 0 . 1 0 1 6 / j . i j r o b p . 2 0 0 8 . 0 7 . 0 3 0 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   G u n t h e r   R ,   1 9 9 6 ,   I N T   J   T H E O R   P H Y S ,   V 3 5 ,   P 3 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 8 3 8 2 3 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J e a n g   K T ,   2 0 0 7 ,   R E T R O V I R O L O G Y ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 4 6 9 0 - 4 - 4 2 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M a n s i l l a   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 1 . 0 0 1 ;   M a r t i n e z - M e k l e r   G ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 7 9 1 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R e e d   W J ,   2 0 0 1 ,   E C O N   L E T T ,   V 7 4 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 1 7 6 5 ( 0 1 ) 0 0 5 2 4 - 9 ;   Z h a n g   C T ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 5 4 2 9 	 1 5 	 3 6 	 3 6 	 0 	 8 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 N O V 	 2 0 1 0 	 1 1 3 	 5 	 	 	 	 	 9 2 9 	 9 3 3 	 	 1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 	 	 5 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 6 7 1 A Z 	 W O S : 0 0 0 2 8 3 4 7 3 4 0 0 0 0 1 	 2 0 4 6 9 9 8 6 	 
 
 J 	 P o n c e ,   F A ;   L o z a n o ,   A M 	 	 	 	 P o n c e ,   F r a n c i s c o   A . ;   L o z a n o ,   A n d r e s   M . 	 	 	 A c a d e m i c   i m p a c t   a n d   r a n k i n g s   o f   A m e r i c a n   a n d   C a n a d i a n   n e u r o s u r g i c a l   d e p a r t m e n t s   a s   a s s e s s e d   u s i n g   t h e   h   i n d e x 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   n e u r o s u r g e r y   d e p a r t m e n t ;   b i b l i o m e t r i c s ;   h   i n d e x 	 S C I E N T I F I C - R E S E A R C H   O U T P U T ;   H I G H L Y   C I T E D   W O R K S 	 O b j e c t .   T h e   a u t h o r s   u n d e r t o o k   a   s t u d y   t o   e s t i m a t e   t h e   r e l a t i v e   a c a d e m i c   i m p a c t   o f   n e u r o s u r g i c a l   d e p a r t m e n t s   i n   C a n a d a   a n d   t h e   U S   u s i n g   t h e   h   i n d e x ,   a   m e a s u r e   o f   t h e   n u m b e r   o f   c i t a t i o n s   r e c e i v e d   b y   a   c o l l e c t i o n   o f   w o r k .   M e t h o d s .   T h e   s t u d y   i n c l u d e d   9 9   d e p a r t m e n t s   o f   n e u r o s u r g e r y   w i t h   r e s i d e n c y   p r o g r a m s   p a r t i c i p a t i n g   i n   t h e   U S   N a t i o n a l   R e s i d e n c y   M a t c h i n g   P r o g r a m ,   a n d   t h e   1 4   a n a l o g o u s   C a n a d i a n   p r o g r a m s .   T h r e e   t y p e s   o f   h   i n d i c e s   w e r e   d e t e r m i n e d   o n e   r e f l e c t i n g   t h e   c u m u l a t i v e   w o r k   a t t r i b u t e d   t o   a   n e u r o s u r g i c a l   d e p a r t m e n t ,   h ( c ) ;   o n e   r e s t r i c t e d   t o   t h e   c u m u l a t i v e   w o r k   p u b l i s h e d   o v e r   t h e   p a s t   1 0   y e a r s ,   1 1 ( 1 0 ) ;   a n d   o n e   l i m i t e d   t o   w o r k   p u b l i s h e d   i n   2   m a j o r   N o r t h   A m e r i c a n   n e u r o s u r g i c a l   j o u r n a l s ,   h ( N S ) ( 1 0 ) .   F o r   a n   a r t i c l e   t o   b e   i n c l u d e d ,   a t t r i b u t i o n   t o   a   n e u r o s u r g i c a l   d e p a r t m e n t   h a d   t o   a p p e a r   i n   t h e   a d d r e s s   f i e l d   i n   t h e   d a t a b a s e   T h o m s o n ' s   I S I   W e b   o f   S c i e n c e .   T h e   t h r e e   h   i n d i c e s   w e r e   c o m p a r e d   w i t h   e a c h   o t h e r ,   a n d   t h e i r   r e l a t i o n   t o   o t h e r   m e a s u r e s   s u c h   a s   s i z e   o f   t h e   d e p a r t m e n t ,   d e g r e e s   h e l d   b y   t h e   f a c u l t y ,   a n d   r e s e a r c h   f u n d i n g   w a s   e x a m i n e d .   R e s u l t s .   S i g n i f i c a n t   c o r r e l a t i o n s   w e r e   f o u n d   b e t w e e n   t h e   c i t a t i o n   i n d i c e s   a n d   f a c u l t y   s i z e ,   n u m b e r   o f   p u b l i c a t i o n s   a n d   t h e   t y p e s   o f   d e g r e e s   h e l d   b y   t h e   f a c u l t y ,   a n d   f u n d i n g   b y   t h e   U S   N I H .   T h r e e   t y p e s   o f   a u t h o r s h i p   w e r e   i d e n t i f i e d :   n e u r o s u r g e o n ,   n o n c l i n i c i a n   r e s e a r c h e r ,   a n d   n o n n e u r o s u r g e o n   c l i n i c a l   a f f i l i a t e .   T h e   d e g r e e   t o   w h i c h   t h e   l a t t e r   2   n o n n e u r o s u r g e o n   c a t e g o r i e s   c o n t r i b u t e d   t o   t h e   d e p a r t m e n t a l   h   i n d e x   v a r i e d   a m o n g   d e p a r t m e n t s   a n d   c a n   c o n f o u n d   i n t e r d e p a r t m e n t a l   c o m p a r i s o n .   L i m i t i n g   a r t i c l e s   t o   t h o s e   p u b l i s h e d   i n   n e u r o s u r g i c a l   j o u r n a l s   a p p e a r e d   t o   c o r r e c t   f o r   t h e   i n f l u e n c e   o f   n o n n e u r o s u r g e o n s   i n   d e p a r t m e n t a l   i m p a c t   a n d   r e f l e c t   n e u r o s u r g e o n - d r i v e n   s c h o l a r s h i p .   C o n c l u s i o n s .   T h e   h   i n d e x   m a y   b e   u s e f u l   i n   e v a l u a t i n g   o u t p u t   a c r o s s   n e u r o s u r g e r y   d e p a r t m e n t s .   ( D O I :   1 0 . 3 1 7 1 / 2 0 1 0 . 3 . J I N S 1 0 3 2 ) 	 [ L o z a n o ,   A n d r e s   M . ]   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a ;   [ P o n c e ,   F r a n c i s c o   A . ]   S t   J o s e p h s   H o s p ,   B a r r o w   N e u r o l   I n s t ,   D i v   N e u r o l   S u r g ,   P h o e n i x ,   A Z   U S A 	 L o z a n o ,   A M   ( r e p r i n t   a u t h o r ) ,   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   3 9 9   B a t h u r s t   S t , W W   4 - 4 4 7 ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a . 	 l o z a n o @ u h n r e s . u t o r o n t o . c a 	 	 	 	 	 B a l d o c k   C ,   2 0 0 9 ,   M E D   P H Y S ,   V 3 6 ,   P 1 0 4 3 ,   D O I   1 0 . 1 1 1 8 / 1 . 3 0 8 9 4 2 1 ;   B a r n e t t   H J M ,   1 9 9 8 ,   N E W   E N G L   J   M E D ,   V 3 3 9 ,   P 1 4 1 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 8 1 1 1 2 3 3 9 2 0 0 2 ;   C O M A R O W   A ,   2 0 0 9 ,   U S   N E W S   W O R L D   R   0 7 1 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 2 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 5 9 9 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 3 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 6 0 0 ;   P r a t h a p   G ,   2 0 0 6 ,   C U R R   S C I   I N D I A ,   V 9 1 ,   P 1 4 3 9 ;   S c h u b e r t   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 1 1 2 - x ;   W e a v e r   F M ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 1 ,   P 6 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 8 . 9 2 9 	 1 0 	 3 6 	 3 6 	 0 	 6 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 S E P 	 2 0 1 0 	 1 1 3 	 3 	 	 	 	 	 4 4 7 	 4 5 7 	 	 1 0 . 3 1 7 1 / 2 0 1 0 . 3 . J N S 1 0 3 2 	 	 1 1 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 6 4 1 F V 	 W O S : 0 0 0 2 8 1 1 1 1 1 0 0 0 0 1 	 2 0 3 8 0 5 3 1 	 
 
 J 	 P o n c e ,   F A ;   L o z a n o ,   A M 	 	 	 	 P o n c e ,   F r a n c i s c o   A . ;   L o z a n o ,   A n d r e s   M . 	 	 	 H i g h l y   c i t e d   w o r k s   i n   n e u r o s u r g e r y .   P a r t   I I :   t h e   c i t a t i o n   c l a s s i c s   A   r e v i e w 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   n e u r o s u r g e r y ;   b i b l i o m e t r i c s ;   l a n d m a r k   a r t i c l e s 	 A R T I C L E S ;   I N D E X 	 O b j e c t .   T h e   t e r m   " c i t a t i o n   c l a s s i c "   h a s   b e e n   u s e d   i n   r e f e r e n c e   t o   a n   a r t i c l e   t h a t   h a s   b e e n   c i t e d   m o r e   t h a n   4 0 0   t i m e s .   T h e   p u r p o s e   o f   t h i s   S t u d y   i s   t o   i d e n t i f y   s u c h   a r t i c l e s   t h a t   p e r t a i n   t o   c l i n i c a l   n e u r o s u r g e r y .   M e t h o d s .   A   l i s t   o f   s e a r c h   p h r a s e s   r e l a t i n g   t o   n e u r o s u r g e r y   w a s   c o m p i l e d .   A   t o p i c   s e a r c h   w a s   p e r f o r m e d   u s i n g   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   W e b   o f   S c i e n c e   f o r   p h r a s e s .   A r t i c l e s   w i t h   m o r e   t h a n   4 0 0   c i t a t i o n s   w e r e   i d e n t i f i e d ,   a n d   n o n c l i n i c a l   a r t i c l e s   w e r e   o m i t t e d .   T h e   j o u r n a l s ,   y e a r   o f   p u b l i c a t i o n ,   t o p i c s ,   a n d   s t u d y   t y p e s   w e r e   a n a l y z e d .   R e s u l t s .   T h e r e   w e r e   1 0 6   a r t i c l e s   w i t h   m o r e   t h a n   4 0 0   c i t a t i o n s   r e l a t i n g   t o   c l i n i c a l   n e u r o s u r g e r y .   T h e s e   a r t i c l e s   a p p e a r e d   i n   2 8   d i f f e r e n t   j o u r n a l s ,   w i t h   m o r e   t h a n   h a l f   a p p e a r i n g   i n   t h e   J o u r n a l   o f   N e u r o s u r g e r y   o r   t h e   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e .   F i f t y - t h r e e   a r t i c l e s   w e r e   p u b l i s h e d   s i n c e   1 9 9 0 .   T h e r e   w e r e   3 8   a r t i c l e s   o n   c e r e b r o v a s c u l a r   d i s e a s e ,   2 1   o i l   s t e r e o t a c t i c   a n d   f u n c t i o n a l   n e u r o s u r g e r y ,   2 1   o n   n e u r o o n c o l o g y ,   1 9   o n   t r a u m a ,   4   o n   n o n t r a u m a t i c   s p i n e ,   2   o i l   C S F   p a t h o l o g i e s ,   a n d   I   o i l   i n f e c t i o n .   T h e r e   w e r e   2 9   r a n d o m i z e d   t r i a l s ,   o f   w h i c h   8 6 %   a p p e a r e d   i n   t h e   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e ,   L a n c e t ,   o r   t h e   J o u r n a l   o f   t h e   A m e r i c a n   M e d i c a l   A s s o c i a t i o n ,   a n d   h a l f   c o n c e r n e d   t h e   p r e v e n t i o n   o r   t r e a t m e n t   o f   s t r o k e .   I n   a d d i t i o n ,   t h e r e   w e r e   1 6   p r o s p e c t i v e   s t u d i e s ,   1 5   c l a s s i f i c a t i o n   o r   g r a d i n g   s y s t e m s ,   a n d   7   r e v i e w s .   T h e   r e m a i n i n g   3 9   a r t i c l e s   w e r e   c a s e   s e r i e s ,   c a s e   r e p o r t s ,   o r   t e c h n i c a l   n o t e s .   C o n c l u s i o n s .   M o r e   t h a n   h a l f   o f   t h e   c i t a t i o n   c l a s s i c s   i d e n t i f i e d   i n   t h i s   s t u d y   h a v e   b e e n   p u b l i s h e d   i n   t h e   p a s t   2 0   y e a r s .   C a s e   s e r i e s ,   c l a s s i f i c a t i o n s ,   a n d   r e v i e w s   a p p e a r e d   m o r e   f r e q u e n t l y   i n   n e u r o s u r g i c a l   j o u r n a l s ,   w h i l e   r a n d o m i z e d   c o n t r o l l e d   t r i a l s   t e n d e d   t o   b e   p u b l i s h e d   i n   g e n e r a l   m e d i c a l   j o u r n a l s .   ( D O I :   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 6 0 0 ) 	 [ P o n c e ,   F r a n c i s c o   A . ;   L o z a n o ,   A n d r e s   M . ]   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a ;   [ P o n c e ,   F r a n c i s c o   A . ]   S t   J o s e p h s   H o s p ,   B a r r o w   N e u r o l   I n s t ,   D i v   N e u r o l   S u r g ,   P h o e n i x ,   A Z   8 5 0 1 3   U S A ;   [ P o n c e ,   F r a n c i s c o   A . ]   M e d   C t r ,   P h o e n i x ,   A Z   U S A 	 L o z a n o ,   A M   ( r e p r i n t   a u t h o r ) ,   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   3 9 9   B a t h u r s t   S t , W W   4 - 4 4 7 ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a . 	 l o z a n o @ u h n r e s . u t o r o n t o . c a 	 	 	 	 	 A L B E R T   D M ,   1 9 8 8 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 0 6 ,   P 4 6 5 ;   B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B a l d o c k   C ,   2 0 0 9 ,   M E D   P H Y S ,   V 3 6 ,   P 1 0 4 3 ,   D O I   1 0 . 1 1 1 8 / 1 . 3 0 8 9 4 2 1 ;   D a n d y   W E ,   1 9 1 4 ,   A M   J   D I S   C H I L D ,   V 8 ,   P 4 0 6 ;   D U B I N   D ,   1 9 9 3 ,   A R C H   D E R M A T O L ,   V 1 2 9 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 0 1 / a r c h d e r m . 1 2 9 . 9 . 1 1 2 1 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G a r f i e l d   E . ,   W H A T   I S   C I T A T I O N   C L A ;   H a l l   G M ,   1 9 9 8 ,   B R I T   J   A N A E S T H ,   V 8 0 ,   P 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K E R N O H A N   J W ,   1 9 4 9 ,   M A Y O   C L I N   P ,   V 2 4 ,   P 7 1 ;   K E Y   J D ,   1 9 8 7 ,   F E R T I L   S T E R I L ,   V 4 7 ,   P 9 1 0 ;   M A R T U Z A   R L ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 2 ,   P 8 5 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 5 1 3 3 2 ;   M I N E T A   T ,   1 9 9 5 ,   N A T   M E D ,   V 1 ,   P 9 3 8 ,   D O I   1 0 . 1 0 3 8 / n m 0 9 9 5 - 9 3 8 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 2 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 5 9 9 ;   Q i n   J ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 6 ,   P 9 5 4 ;   S E I Z I N G E R   B R ,   1 9 8 6 ,   N A T U R E ,   V 3 2 2 ,   P 6 4 4 ,   D O I   1 0 . 1 0 3 8 / 3 2 2 6 4 4 a 0 ;   W i l k i n s   R H ,   1 9 9 2 ,   N E U R O S U R G I C A L   C L A S S I ;   Y a s a r g i l   M ,   1 9 8 4 ,   M I C R O N E U R O S U R G E R Y 	 1 9 	 3 6 	 3 7 	 0 	 4 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 F E B 	 2 0 1 0 	 1 1 2 	 2 	 	 	 	 	 2 3 3 	 2 4 6 	 	 1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 6 0 0 	 	 1 4 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 5 5 0 C X 	 W O S : 0 0 0 2 7 4 1 0 7 0 0 0 0 0 5 	 2 0 0 7 8 1 9 3 	 
 
 J 	 P a l m e r ,   A L ;   S e s e ,   A ;   M o n t a n o ,   J J 	 	 	 	 P a l m e r ,   A L ;   S e s e ,   A ;   M o n t a n o ,   J J 	 	 	 T o u r i s m   a n d   s t a t i s t i c s   -   B i b l i o m e t r i c   s t u d y   1 9 9 8 - 2 0 0 2 	 A N N A L S   O F   T O U R I S M   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s t a t i s t i c a l   m e t h o d s ;   b i b l i o m e t r i c s 	 	 T h e   u s e   o f   s t a t i s t i c s   i n   a n y   s c i e n t i f i c   d i s c i p l i n e   c a n   b e   c o n s i d e r e d   a   k e y   e l e m e n t   i n   e v a l u a t i n g   i t s   d e g r e e   o f   m a t u r i t y   a n d   d e m o n s t r a t e s   t h e   g e n e r a t i o n   o f   n o n s p e c u l a t i v e   k n o w l e d g e .   T h e   a i m   o f   t h i s   s t u d y   i s   t o   c a r r y   o u t   a   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   r i s e   o f   s t a t i s t i c a l   m e t h o d s   i n   t o u r i s m   r e s e a r c h .   T o   a c c o m p l i s h   t h i s ,   a   g r o u p   o f   1 2   t o u r i s m   j o u r n a l s   p u b l i s h e d   w i t h i n   a   5 - y e a r   p e r i o d   ( 1 9 9 8 - 2 0 0 2 )   w e r e   c h o s e n   a n d   1 , 7 9 0   a r t i c l e s   w e r e   r e v i e w e d   b y   m e a n s   o f   a   t a x o n o m y   w i t h   2 4   s t a t i s t i c a l   c a t e g o r i e s .   T h e   m a i n   r e s u l t s   s h o w   t h e   p e r c e n t a g e   o f   a r t i c l e s   t h a t   a p p l y   s t a t i s t i c a l   t e c h n i q u e s   a s   c o m p a r e d   t o   t h o s e   t h a t   d o   n o t ,   a n d   a   r a n k i n g   o f   t h e   t e c h n i q u e s   m o s t   o f t e n   u s e d   a n d   t h e i r   d i s t r i b u t i o n   a c c o r d i n g   t o   j o u r n a l . 	 D e p t   P s y c h o l ,   P a h n a   0 7 1 2 2 ,   S p a i n ;   U n i v   B a l e a r i c   I s l ,   P a l m a   d e   M a l l o r c a ,   S p a i n 	 P a l m e r ,   A L   ( r e p r i n t   a u t h o r ) ,   D e p t   P s y c h o l ,   C t r a   V a l l d e m o s s a   K m   7 - 5 ,   P a h n a   0 7 1 2 2 ,   S p a i n . 	 a l f o n s o . p a l m e r @ u i b . e s 	 S e s e ,   A l b e r t / D - 3 1 2 4 - 2 0 1 1 	 S e s e ,   A l b e r t / 0 0 0 0 - 0 0 0 3 - 3 7 7 1 - 1 7 4 9 	 	 	 B a l o g l u   S . ,   1 9 9 9 ,   J   H O S P I T A L I T Y   T O U R I S ,   V 2 3 ,   P 5 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 6 3 4 8 0 9 9 0 2 3 0 0 1 0 5 ;   C r a w f o r d - W e l c h   S . ,   1 9 9 2 ,   I n t e r n a t i o n a l   J o u r n a l   o f   H o s p i t a l i t y   M a n a g e m e n t ,   V 1 1 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 8 - 4 3 1 9 ( 9 2 ) 9 0 0 0 8 - J ;   G A L L A R Z A   M ,   2 0 0 2 ,   A N N   T O U R I S M   R E S ,   V 2 0 ,   P 5 6 ;   G r a z e r   W .   F . ,   1 9 8 7 ,   J   A C A D   M A R K E T   S C I ,   V 1 5 ,   P 7 0 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 7 2 1 9 5 6 ;   L Y N N   M ,   2 0 0 2 ,   C O R N E L L   H O T E L   R E S T R A ,   V 4 3 ,   P 9 7 ;   R e i d   L .   J . ,   1 9 8 9 ,   J   T R A V E L   R E S ,   V 2 7 ,   P 2 1 ;   * T H O M S   I S I ,   2 0 0 2 ,   I S I   J   C I T   R E P   S O C   S C 	 7 	 3 6 	 3 7 	 3 	 3 4 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 1 6 0 - 7 3 8 3 	 	 	 A N N   T O U R I S M   R E S 	 A n n .   T o u r i s .   R e s . 	 J A N 	 2 0 0 5 	 3 2 	 1 	 	 	 	 	 1 6 7 	 1 7 8 	 	 1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 4 . 0 6 . 0 0 3 	 	 1 2 	 H o s p i t a l i t y ,   L e i s u r e ,   S p o r t   &   T o u r i s m ;   S o c i o l o g y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s ;   S o c i o l o g y 	 9 1 2 P Y 	 W O S : 0 0 0 2 2 8 0 9 2 9 0 0 0 0 9 	 	 
 
 J 	 F a h i m n i a ,   B ;   S a r k i s ,   J ;   D a v a r z a n i ,   H 	 	 	 	 F a h i m n i a ,   B e h n a m ;   S a r k i s ,   J o s e p h ;   D a v a r z a n i ,   H o d a 	 	 	 G r e e n   s u p p l y   c h a i n   m a n a g e m e n t :   A   r e v i e w   a n d   b i b l i o m e t r i c   a n a l y s i s 	 I N T E R N A T I O N A L   J O U R N A L   O F   P R O D U C T I O N   E C O N O M I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 G r e e n   s u p p l y   c h a i n ;   E n v i r o n m e n t a l   s u s t a i n a b i l i t y ;   B i b l i o m e t r i c s ;   L i t e r a t u r e   r e v i e w ;   N e t w o r k   a n a l y s i s 	 L I F E - C Y C L E   A S S E S S M E N T ;   E N V I R O N M E N T A L   I M P A C T S ;   E L E C T R O N I C   I N D U S T R Y ;   D E C I S I O N   F R A M E W O R K ;   P E R F O R M A N C E ;   S U S T A I N A B I L I T Y ;   L O G I S T I C S ;   P R E S S U R E S ;   S E L E C T I O N ;   M O D E L 	 T h e   e m e r g e n t   f i e l d   o f   g r e e n   s u p p l y   c h a i n   m a n a g e m e n t   h a s   b e e n   r a p i d l y   e v o l v i n g   w i t h   a   g e o m e t r i c   g r o w t h   i n   t h e   n u m b e r   o f   a c a d e m i c   p u b l i c a t i o n s   i n   t h i s   f i e l d .   A   n u m b e r   o f   l i t e r a t u r e   r e v i e w s   h a v e   b e e n   p u b l i s h e d   f o c u s i n g   o n   s p e c i f i c   a s p e c t s   o f   g r e e n   s u p p l y   c h a i n   m a n a g e m e n t   s u c h   a s   p e r f o r m a n c e   m e a s u r e m e n t ,   s u p p l i e r   s e l e c t i o n / e v a l u a t i o n ,   a n a l y t i c a l   m o d e l i n g   e f f o r t s ,   a n d   s o m e   o t h e r s   w i t h   b r o a d e r   a r e a s   o f   f o c u s .   T h i s   p a p e r   p r e s e n t s   a   t h o r o u g h   b i b l i o m e t r i c   a n d   n e t w o r k   a n a l y s i s   t h a t   p r o v i d e s   i n s i g h t s   n o t   p r e v i o u s l y   f u l l y   g r a s p e d   o r   e v a l u a t e d   b y   o t h e r   r e v i e w s   o n   t h i s   t o p i c .   T h e   a n a l y s i s   b e g i n s   b y   i d e n t i f y i n g   o v e r   1 0 0 0   p u b l i s h e d   s t u d i e s ,   w h i c h   a r e   t h e n   d i s t i l l e d   d o w n   t o   w o r k s   o f   p r o v e n   i n f l u e n c e   a n d   t h o s e   a u t h o r e d   b y   i n f l u e n t i a l   i n v e s t i g a t o r s .   U s i n g   r i g o r o u s   b i b l i o m e t r i c   t o o l s ,   e s t a b l i s h e d   a n d   e m e r g e n t   r e s e a r c h   c l u s t e r s   a r e   i d e n t i f i e d   f o r   t o p o l o g i c a l   a n a l y s i s ,   i d e n t i f i c a t i o n   o f   k e y   r e s e a r c h   t o p i c s ,   i n t e r r e l a t i o n s ,   a n d   c o l l a b o r a t i o n   p a t t e r n s .   T h i s   s y s t e m a t i c   m a p p i n g   o f   t h e   f i e l d   h e l p s   g r a p h i c a l l y   i l l u s t r a t e   t h e   p u b l i c a t i o n s   e v o l u t i o n   o v e r   t i m e   a n d   i d e n t i f y   a r e a s   o f   c u r r e n t   r e s e a r c h   i n t e r e s t s   a n d   p o t e n t i a l   d i r e c t i o n s   f o r   f u t u r e   r e s e a r c h .   T h e   f i n d i n g s   p r o v i d e   a   r o b u s t   r o a d m a p   f o r   f u r t h e r   i n v e s t i g a t i o n   i n   t h i s   f i e l d .   ( C )   2 0 1 5   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ F a h i m n i a ,   B e h n a m ]   U n i v   S y d n e y ,   S c h   B u s i n e s s ,   I n s t   T r a n s p o r t   &   L o g i s t   S t u d i e s ,   S y d n e y ,   N S W   2 0 0 6 ,   A u s t r a l i a ;   [ S a r k i s ,   J o s e p h ]   W o r c e s t e r   P o l y t e c h   I n s t ,   F o i s i e   S c h   B u s i n e s s ,   W o r c e s t e r ,   M A   0 1 6 0 9   U S A ;   [ D a v a r z a n i ,   H o d a ]   U n i v   S y d n e y ,   S c h   B u s i n e s s ,   D i s c i p l i n e   B u s i n e s s   A n a l y t ,   S y d n e y ,   N S W   2 0 0 6 ,   A u s t r a l i a 	 F a h i m n i a ,   B   ( r e p r i n t   a u t h o r ) ,   U n i v   S y d n e y ,   S c h   B u s i n e s s ,   I n s t   T r a n s p o r t   &   L o g i s t   S t u d i e s ,   S y d n e y ,   N S W   2 0 0 6 ,   A u s t r a l i a . 	 b e h n a m . f a h i m n i a @ s y d n e y . e d u . a u ;   j s a r k i s @ w p i . e d u ;   h o d a . d a v a r z a n i @ s y d n e y . e d u . a u 	 S a r k i s ,   J o s e p h / F - 4 5 0 8 - 2 0 1 4 	 S a r k i s ,   J o s e p h / 0 0 0 0 - 0 0 0 3 - 0 1 4 3 - 8 0 4 X 	 	 	 A b d a l l a h   T ,   2 0 1 2 ,   A P P L   M A T H   M O D E L ,   V 3 6 ,   P 4 2 7 1 ,   D O I   1 0 . 1 0 1 6 / j . a p m . 2 0 1 1 . 1 1 . 0 5 6 ;   A h i   P ,   2 0 1 3 ,   J   C L E A N   P R O D ,   V 5 2 ,   P 3 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 3 . 0 2 . 0 1 8 ;   A r i m u r a   T H ,   2 0 1 1 ,   J   E N V I R O N   E C O N   M A N A G ,   V 6 1 ,   P 1 7 0 ,   D O I   1 0 . 1 0 1 6 / j . j e e m . 2 0 1 0 . 1 1 . 0 0 3 ;   A z a p a g i c   A ,   1 9 9 9 ,   C O M P U T   C H E M   E N G ,   V 2 3 ,   P 1 5 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 8 - 1 3 5 4 ( 9 9 ) 0 0 3 0 8 - 7 ;   B a i   C G ,   2 0 1 0 ,   J   C L E A N   P R O D ,   V 1 8 ,   P 1 2 0 0 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 0 . 0 1 . 0 1 6 ;   B a r a r i   S ,   2 0 1 2 ,   E X P E R T   S Y S T   A P P L ,   V 3 9 ,   P 2 9 6 5 ,   D O I   1 0 . 1 0 1 6 / j . e s w a . 2 0 1 1 . 0 8 . 1 5 8 ;   B a s t i a n   M . ,   2 0 0 9 ,   P   3   I N T   A A A I   C   W E B L ;   B a t a g e l j   V . ,   2 0 1 1 ,   P A J E K   P R O G R A M   A N A L   V ;   B e n j a a f a r   S ,   2 0 1 3 ,   I E E E   T   A U T O M   S C I   E N G ,   V 1 0 ,   P 9 9 ,   D O I   1 0 . 1 1 0 9 / T A S E . 2 0 1 2 . 2 2 0 3 3 0 4 ;   B l o n d e l   V D ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 8 / 1 0 / P 1 0 0 0 8 ;   B r a n d e n b u r g   M ,   2 0 1 4 ,   E U R   J   O P E R   R E S ,   V 2 3 3 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 1 3 . 0 9 . 0 3 2 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   C h a a b a n e   A ,   2 0 1 2 ,   I N T   J   P R O D   E C O N ,   V 1 3 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 1 0 . 1 0 . 0 2 5 ;   C h e n   P ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 6 . 0 0 1 ;   C h i c k s a n d   D ,   2 0 1 2 ,   S U P P L Y   C H A I N   M A N A G ,   V 1 7 ,   P 4 5 4 ,   D O I   1 0 . 1 1 0 8 / 1 3 5 9 8 5 4 1 2 1 1 2 4 6 6 1 1 ;   C h i e n   M K ,   2 0 0 7 ,   I N T   J   E N V I R O N   S C I   T E ,   V 4 ,   P 3 8 3 ;   C i l i b e r t i   F ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 3 ,   P 8 8 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 7 . 0 2 . 0 4 9 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   C o r s a n o   G ,   2 0 1 1 ,   C O M P U T   C H E M   E N G ,   V 3 5 ,   P 1 3 8 4 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 1 1 . 0 1 . 0 0 8 ;   C r e a s e y   S . ,   2 0 0 7 ,   G O I N G   G R E E N   H E L P S   Y O ,   P 6 6 ;   C r o n i n   B . ,   2 0 1 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 7 ,   P 8 0 ;   C u r k o v i c   S ,   2 0 1 1 ,   B U S   S T R A T E G   E N V I R O N ,   V 2 0 ,   P 7 1 ,   D O I   1 0 . 1 0 0 2 / b s e . 6 7 1 ;   B o j a r s k i   A D ,   2 0 0 9 ,   C O M P U T   C H E M   E N G ,   V 3 3 ,   P 1 7 4 7 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 0 9 . 0 4 . 0 0 9 ;   D i a b a t   A ,   2 0 1 3 ,   I E E E   T   E N G   M A N A G E ,   V 6 0 ,   P 3 9 8 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 1 2 . 2 2 1 1 1 0 5 ;   D i n g   Y ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 2 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 7 1 ;   F a h i m n i a   B . ,   2 0 1 5 ,   O M E G A   I N   P R E S S ;   F a h i m n i a   B . ,   2 0 1 5 ,   I N T   J   P R O D   I N   P R E S S ;   F a h i m n i a   B ,   2 0 1 3 ,   J   C L E A N   P R O D ,   V 5 9 ,   P 2 1 0 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 3 . 0 6 . 0 5 6 ;   F a h i m n i a   B ,   2 0 1 3 ,   T R A N S P O R T   R E S   D - T R   E ,   V 1 8 ,   P 7 8 ,   D O I   1 0 . 1 0 1 6 / j . t r d . 2 0 1 2 . 0 8 . 0 0 6 ;   F i k s e l   J ,   2 0 1 0 ,   C H E M   E N G   P R O G ,   V 1 0 6 ,   P 2 8 ;   G e o r g i a d i s   P ,   2 0 0 8 ,   J   C L E A N   P R O D ,   V 1 6 ,   P 1 6 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 8 . 0 4 . 0 1 9 ;   G e o r g i a d i s   P ,   2 0 1 0 ,   I N T   J   A D V   M A N U F   T E C H ,   V 4 7 ,   P 4 7 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 7 0 - 0 0 9 - 2 3 6 2 - 7 ;   G e p h i ,   2 0 1 3 ,   G E P H   M A K   G R A P H S   H A N D ;   G i a r o l a   S ,   2 0 1 1 ,   C O M P U T   C H E M   E N G ,   V 3 5 ,   P 1 7 8 2 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 1 1 . 0 1 . 0 2 0 ;   G o v i n d a n   K . ,   2 0 1 5 ,   J   C L E A N   P R O   I N   P R E S S ;   G r e e n   K ,   1 9 9 8 ,   S U P P L Y   C H A I N   M A N A G ,   V 3 ,   P 8 9 ,   D O I   D O I   1 0 . 1 1 0 8 / 1 3 5 9 8 5 4 9 8 1 0 2 1 5 4 0 5 ;   G r e e n   K ,   1 9 9 6 ,   B U S I N E S S   S T R A T E G Y   E N ,   V 5 ,   P 1 8 8 ,   D O I   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 9 - 0 8 3 6 ( 1 9 9 6 0 9 ) 5 : 3 < 1 8 8 : : A I D - B S E 6 0 > 3 . 0 . C O ; 2 - P ;   G r o s s m a n n   I E ,   2 0 1 0 ,   C O M P U T   C H E M   E N G ,   V 3 4 ,   P 1 3 6 5 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 0 9 . 1 1 . 0 1 2 ;   G u i l l e n - G o s a l b e z   G ,   2 0 1 0 ,   C O M P U T   C H E M   E N G ,   V 3 4 ,   P 4 2 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 0 9 . 0 9 . 0 0 3 ;   G u i l l e n - G o s a l b e z   G ,   2 0 0 9 ,   A I C H E   J ,   V 5 5 ,   P 9 9 ,   D O I   1 0 . 1 0 0 2 / a i c . 1 1 6 6 2 ;   H e r v a n i   A .   A . ,   2 0 0 5 ,   B E N C H M A R K I N G   I N T   J ,   V 1 2 ,   P 3 3 0 ,   D O I   D O I   1 0 . 1 1 0 8 / 1 4 6 3 5 7 7 0 5 1 0 6 0 9 0 1 5 ;   H j o r l a n d   B ,   2 0 1 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 9 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 1 3 . 0 7 . 0 0 1 ;   H o l t   D i a n e ,   2 0 0 9 ,   J o u r n a l   o f   M a n u f a c t u r i n g   T e c h n o l o g y   M a n a g e m e n t ,   V 2 0 ,   P 9 3 3 ,   D O I   1 0 . 1 1 0 8 / 1 7 4 1 0 3 8 0 9 1 0 9 8 4 2 1 2 ;   H s u   C W ,   2 0 0 8 ,   I N T   J   E N V I R O N   S C I   T E ,   V 5 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 3 3 2 6 0 1 4 ;   I g a r a s h i   M ,   2 0 1 3 ,   J   P U R C H   S U P P L Y   M A N A G ,   V 1 9 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / j . p u r s u p . 2 0 1 3 . 0 6 . 0 0 1 ;   K a i n u m a   Y ,   2 0 0 6 ,   I N T   J   P R O D   E C O N ,   V 1 0 1 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 5 . 0 5 . 0 1 0 ;   K u o   R J ,   2 0 1 0 ,   J   C L E A N   P R O D ,   V 1 8 ,   P 1 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 0 . 0 3 . 0 2 0 ;   L a r s e n   P O ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 0 2 - z ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   E N C Y   S O C I A L   N E T W O R K S ;   L i n t o n   J D ,   2 0 0 7 ,   J   O P E R   M A N A G ,   V 2 5 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 7 . 0 1 . 0 1 2 ;   L u   L Y Y ,   2 0 0 7 ,   I N T   J   P R O D   R E S ,   V 4 5 ,   P 4 3 1 7 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 7 0 1 4 7 2 6 9 4 ;   M e l e   F D ,   2 0 1 1 ,   I N D   E N G   C H E M   R E S ,   V 5 0 ,   P 4 9 3 9 ,   D O I   1 0 . 1 0 2 1 / i e 1 0 1 4 0 0 g ;   O l u g u   E z u t a h   U d o n c y ,   2 0 1 0 ,   S u s t a i n a b i l i t y ,   V 2 ,   D O I   1 0 . 3 3 9 0 / s u 2 0 4 0 8 7 1 ;   O l u g u   E U ,   2 0 1 1 ,   R E S O U R   C O N S E R V   R E C Y ,   V 5 5 ,   P 5 6 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s c o n r e c . 2 0 1 0 . 0 6 . 0 0 3 ;   P a l o v i i t a   A r i ,   2 0 0 9 ,   W o r l d   R e v i e w   o f   E n t r e p r e n e u r s h i p ,   M a n a g e m e n t   a n d   S u s t a i n a b l e   D e v e l o p m e n t ,   V 5 ,   P 3 9 5 ,   D O I   1 0 . 1 5 0 4 / W R E M S D . 2 0 0 9 . 0 3 1 6 2 7 ;   P a m p e l   F .   C . ,   2 0 0 4 ,   E N C Y   S O C I A L   S C I   R E S ;   P e r s s o n   O ,   2 0 0 9 ,   C E L E B R A T I N G   S C H O L A R L ;   P i n t o - V a r e l a   T . ,   2 0 1 5 ,   C O M P U T   C H E M   I N   P R E S S ;   P r e u s s   L . ,   2 0 0 5 ,   B U S I N E S S   S T R A T E G Y   E N ,   V 1 4 ,   P 1 2 3 ,   D O I   D O I   1 0 . 1 0 0 2 / B S E . 4 3 5 ;   R a d i c c h i   F ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 2 6 5 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 0 0 5 4 1 0 1 ;   R a o   P ,   2 0 0 2 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 2 ,   P 6 3 2 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 2 1 0 4 2 7 6 6 8 ;   R o w l e y   J . ,   2 0 0 4 ,   M A N A G   R E S   N E W S ,   V 2 7 ,   P 3 1 ,   D O I   D O I   1 0 . 1 1 0 8 / 0 1 4 0 9 1 7 0 4 1 0 7 8 4 1 8 5 ;   S a r k i s   J ,   2 0 0 3 ,   J   C L E A N   P R O D ,   V 1 1 ,   P 3 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 6 5 2 6 ( 0 2 ) 0 0 0 6 2 - 8 ;   S a r k i s   J ,   2 0 1 2 ,   S U P P L Y   C H A I N   M A N A G ,   V 1 7 ,   P 2 0 2 ,   D O I   1 0 . 1 1 0 8 / 1 3 5 9 8 5 4 1 2 1 1 2 1 2 9 2 4 ;   S a r k i s   J ,   2 0 1 0 ,   C O R P   S O C   R E S P   E N V   M A ,   V 1 7 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 2 / c s r . 2 2 0 ;   S a r k i s   J ,   2 0 1 1 ,   I N T   J   P R O D   E C O N ,   V 1 3 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 1 0 . 1 1 . 0 1 0 ;   S a u n d e r s   M ,   2 0 0 9 ,   R E S   M E T H O D S   B U S I N E S S ;   S e u r i n g   S ,   2 0 0 4 ,   J   C L E A N   P R O D ,   V 1 2 ,   P 1 0 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 4 . 0 2 . 0 0 6 ;   S e u r i n g   S ,   2 0 0 8 ,   J   C L E A N   P R O D ,   V 1 6 ,   P 1 6 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 8 . 0 4 . 0 2 0 ;   S e u r i n g   S ,   2 0 1 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 5 4 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 1 6 / j . d s s . 2 0 1 2 . 0 5 . 0 5 3 ;   S i m p s o n   D ,   2 0 1 0 ,   I N T   J   P R O D   R E S ,   V 4 8 ,   P 2 2 7 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 8 0 2 4 1 5 5 8 4 ;   S r i v a s t a v a   S K ,   2 0 0 7 ,   I N T   J   M A N A G   R E V ,   V 9 ,   P 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 3 7 0 . 2 0 0 7 . 0 0 2 0 2 . x ;   S t o u g h t o n   M ,   2 0 0 3 ,   J   C L E A N   P R O D ,   V 1 1 ,   P 8 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 6 5 2 6 ( 0 2 ) 0 0 1 5 9 - 2 ;   T a n g   C S ,   2 0 1 2 ,   E U R   J   O P E R   R E S ,   V 2 2 3 ,   P 5 8 5 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 1 2 . 0 7 . 0 3 0 ;   T a t i c c h i   P a o l o ,   2 0 1 3 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P r o d u c t i v i t y   &   P e r f o r m a n c e   M a n a g e m e n t ,   V 6 2 ,   P 7 8 2 ,   D O I   1 0 . 1 1 0 8 / I J P P M - 0 3 - 2 0 1 3 - 0 0 3 7 ;   T e s t a   F ,   2 0 1 0 ,   J   C L E A N   P R O D ,   V 1 8 ,   P 9 5 3 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 0 . 0 3 . 0 0 5 ;   T r a n f i e l d   D ,   2 0 0 3 ,   B R I T   J   M A N A G E ,   V 1 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 5 1 . 0 0 3 7 5 ;   T s o u l f a s   G T ,   2 0 0 6 ,   J   C L E A N   P R O D ,   V 1 4 ,   P 1 5 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 5 . 0 5 . 0 2 1 ;   U n i t e d   N a t i o n s   G l o b a l   C o m p a c t ,   2 0 1 3 ,   G L O B   C O R P   S U S T   R E P ;   U n i t e d   N a t i o n s   S t a t i s t i c s   D i v i s i o n ,   2 0 1 3 ,   C O M P   M A C R   C O N T   R E G   G ;   U S   C e n s u s   B u r e a u ,   2 0 1 3 ,   C E N S   B U R   R E G   D I V   S T A ;   V a c h o n   S ,   2 0 0 8 ,   J   C L E A N   P R O D ,   V 1 6 ,   P 1 5 5 2 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 8 . 0 4 . 0 1 2 ;   V a c h o n   S ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 1 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 6 . 1 1 . 0 3 0 ;   V a c h o n   S ,   2 0 0 7 ,   I N T   J   P R O D   R E S ,   V 4 5 ,   P 4 3 5 7 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 7 0 1 4 4 0 3 0 3 ;   V a c h o n   S ,   2 0 0 6 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 6 ,   P 7 9 5 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 6 1 0 6 7 2 2 4 8 ;   v a n   E c k   N . J . ,   2 0 1 3 ,   M A N U A L   V O S V I E W E R   V E R ;   V a r s e i   M ,   2 0 1 4 ,   S U P P L Y   C H A I N   M A N A G ,   V 1 9 ,   P 2 4 2 ,   D O I   1 0 . 1 1 0 8 / S C M - 1 2 - 2 0 1 3 - 0 4 3 6 ;   V e l e v a   V . ,   2 0 0 3 ,   B E N C H M A R K I N G   I N T   J ,   V 1 0 ,   P 1 0 7 ,   D O I   D O I   1 0 . 1 1 0 8 / 1 4 6 3 5 7 7 0 3 1 0 4 6 9 6 4 4 ;   W a l k e r   H e l e n ,   2 0 0 8 ,   J o u r n a l   o f   P u r c h a s i n g   a n d   S u p p l y   M a n a g e m e n t ,   V 1 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / j . p u r s u p . 2 0 0 8 . 0 1 . 0 0 7 ;   W i e d m a n n   T ,   2 0 1 1 ,   E C O L   E C O N ,   V 7 0 ,   P 1 9 3 7 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 1 1 . 0 6 . 0 1 4 ;   W i e d m a n n   T ,   2 0 0 9 ,   E C O L   E C O N ,   V 6 8 ,   P 1 9 7 5 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 8 . 0 6 . 0 2 3 ;   W o l f   C ,   2 0 1 0 ,   I N T   J   P H Y S   D I S T R   L O G ,   V 4 0 ,   P 8 4 ,   D O I   1 0 . 1 1 0 8 / 0 9 6 0 0 0 3 1 0 1 1 0 2 0 3 7 7 ;   W u   Z H ,   2 0 1 1 ,   J   O P E R   M A N A G ,   V 2 9 ,   P 5 7 7 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 1 0 . 1 0 . 0 0 1 ;   Y a n   E J ,   2 0 1 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 7 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 1 0 . 0 5 . 0 0 2 ;   Y o n g - H a l t   J . ,   2 0 1 3 ,   W E B   S C I ;   Y u   Y ,   2 0 1 0 ,   E C O L   E C O N ,   V 6 9 ,   P 1 1 4 0 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 9 . 1 2 . 0 0 8 ;   Z h u   Q H ,   2 0 0 6 ,   J   C L E A N   P R O D ,   V 1 4 ,   P 4 7 2 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 5 . 0 1 . 0 0 3 ;   Z h u   Q H ,   2 0 0 4 ,   J   O P E R   M A N A G ,   V 2 2 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 4 . 0 1 . 0 0 5 ;   Z h u   Q H ,   2 0 0 5 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 5 ,   P 4 4 9 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 5 1 0 5 9 3 1 4 8 ;   Z h u   Q H ,   2 0 0 4 ,   J   C L E A N   P R O D ,   V 1 2 ,   P 1 0 2 5 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 4 . 0 2 . 0 3 0 ;   Z h u   Q H ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 1 ,   P 2 6 1 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 6 . 1 1 . 0 2 9 ;   Z h u   Q H ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 5 7 7 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 6 . 1 1 . 0 0 9 ;   Z h u   Q ,   2 0 0 7 ,   I N T   J   P R O D   R E S ,   V 4 5 ,   P 4 3 3 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 7 0 1 4 4 0 3 4 5 ;   Z h u   Q H ,   2 0 0 7 ,   J   C L E A N   P R O D ,   V 1 5 ,   P 1 0 4 1 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 6 . 0 5 . 0 2 1 ;   Z h u   Q H ,   2 0 1 1 ,   T R A N S P O R T   R E S   E - L O G ,   V 4 7 ,   P 8 0 8 ,   D O I   1 0 . 1 0 1 6 / j . t r e . 2 0 1 0 . 0 9 . 0 1 3 	 1 0 5 	 3 5 	 3 7 	 3 8 	 1 6 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 9 2 5 - 5 2 7 3 	 1 8 7 3 - 7 5 7 9 	 	 I N T   J   P R O D   E C O N 	 I n t .   J .   P r o d .   E c o n . 	 A P R 	 2 0 1 5 	 1 6 2 	 	 	 	 	 	 1 0 1 	 1 1 4 	 	 1 0 . 1 0 1 6 / j . i j p e . 2 0 1 5 . 0 1 . 0 0 3 	 	 1 4 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   E n g i n e e r i n g ,   M a n u f a c t u r i n g ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 C E 6 R K 	 W O S : 0 0 0 3 5 1 9 6 5 5 0 0 0 0 9 	 	 
 
 J 	 A r o r a ,   S K ;   P o r t e r ,   A L ;   Y o u t i e ,   J ;   S h a p i r a ,   P 	 	 	 	 A r o r a ,   S a n j a y   K . ;   P o r t e r ,   A l a n   L . ;   Y o u t i e ,   J a n ;   S h a p i r a ,   P h i l i p 	 	 	 C a p t u r i n g   n e w   d e v e l o p m e n t s   i n   a n   e m e r g i n g   t e c h n o l o g y :   a n   u p d a t e d   s e a r c h   s t r a t e g y   f o r   i d e n t i f y i n g   n a n o t e c h n o l o g y   r e s e a r c h   o u t p u t s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 N a n o t e c h n o l o g y ;   B i b l i o m e t r i c s ;   P u b l i c a t i o n s ;   S e a r c h   s t r a t e g y ;   C i t e d   s u b j e c t   c a t e g o r i e s 	 E I G E N V E C T O R - C E N T R A L I T Y ;   S C I E N C E ;   P U B L I C A T I O N S ;   N A N O S C I E N C E ;   E M E R G E N C E ;   F I E L D S ;   T E R M S 	 B i b l i o m e t r i c   a n a l y s i s   o f   p u b l i c a t i o n   m e t a d a t a   i s   a n   i m p o r t a n t   t o o l   f o r   i n v e s t i g a t i n g   e m e r g i n g   f i e l d s   o f   t e c h n o l o g y .   H o w e v e r ,   t h e   a p p l i c a t i o n   o f   f i e l d   d e f i n i t i o n s   t o   d e f i n e   a n   e m e r g i n g   t e c h n o l o g y   i s   c o m p l i c a t e d   b y   o n g o i n g   a n d   a t   t i m e s   r a p i d   c h a n g e   i n   t h e   u n d e r l y i n g   t e c h n o l o g y   i t s e l f .   T h e r e   i s   l i m i t e d   p r i o r   w o r k   o n   a d a p t i n g   t h e   b i b l i o m e t r i c   d e f i n i t i o n s   o f   e m e r g i n g   t e c h n o l o g i e s   a s   t h e s e   t e c h n o l o g i e s   c h a n g e   o v e r   t i m e .   T h e   p a p e r   a d d r e s s e s   t h i s   g a p .   W e   d r a w   o n   t h e   e x a m p l e   o f   t h e   m o d u l a r   k e y w o r d   n a n o t e c h n o l o g y   s e a r c h   s t r a t e g y   d e v e l o p e d   a t   G e o r g i a   I n s t i t u t e   o f   T e c h n o l o g y   i n   2 0 0 6 .   T h i s   s e a r c h   a p p r o a c h   h a s   s e e n   e x t e n s i v e   u s e   i n   a n a l y z i n g   e m e r g i n g   t r e n d s   i n   n a n o t e c h n o l o g y   r e s e a r c h   a n d   i n n o v a t i o n .   Y e t   w i t h   t h e   g r o w t h   o f   t h e   n a n o t e c h n o l o g y   f i e l d ,   n o v e l   m a t e r i a l s ,   p a r t i c l e s ,   t e c h n o l o g i e s ,   a n d   t o o l s   h a v e   a p p e a r e d .   W e   r e p o r t   o n   t h e   p r o c e s s   a n d   r e s u l t s   o f   r e v i e w i n g   a n d   u p d a t i n g   t h i s   n a n o t e c h n o l o g y   s e a r c h   s t r a t e g y .   B y   e m p l o y i n g   s t r u c t u r e d   t e x t - m i n i n g   s o f t w a r e   t o   p r o f i l e   k e y w o r d   t e r m s ,   a n d   b y   s o l i c i t i n g   i n p u t   f r o m   d o m a i n   e x p e r t s ,   w e   i d e n t i f y   n e w   n a n o t e c h n o l o g y - r e l a t e d   k e y w o r d s .   W e   r e t r o a c t i v e l y   a p p l y   t h e   r e v i s e d   e v o l u t i o n a r y   l e x i c a l   q u e r y   t o   2 0   y e a r s   o f   p u b l i c a t i o n   d a t a   a n d   a n a l y z e   t h e   r e s u l t s .   O u r   f i n d i n g s   i n d i c a t e   t h a t   t h e   u p d a t e d   s e a r c h   a p p r o a c h   o f f e r s   a n   i n c r e m e n t a l   i m p r o v e m e n t   o v e r   t h e   o r i g i n a l   s t r a t e g y   i n   t e r m s   o f   r e c a l l   a n d   p r e c i s i o n .   A d d i t i o n a l l y ,   t h e   u p d a t e d   s t r a t e g y   r e v e a l s   t h e   i m p o r t a n c e   f o r   n a n o t e c h n o l o g y   o f   s e v e r a l   e m e r g i n g   c i t e d - s u b j e c t   c a t e g o r i e s ,   p a r t i c u l a r l y   i n   t h e   b i o m e d i c a l   s c i e n c e s ,   s u g g e s t i n g   a   f u r t h e r   e x t e n s i o n   o f   t h e   n a n o t e c h n o l o g y   k n o w l e d g e   d o m a i n .   T h e   i m p l i c a t i o n s   o f   t h e   w o r k   f o r   a p p l y i n g   b i b l i o m e t r i c   d e f i n i t i o n s   t o   e m e r g i n g   t e c h n o l o g i e s   a r e   d i s c u s s e d . 	 [ A r o r a ,   S a n j a y   K . ;   P o r t e r ,   A l a n   L . ;   S h a p i r a ,   P h i l i p ]   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ Y o u t i e ,   J a n ]   G e o r g i a   I n s t   T e c h n o l ,   E n t e r p r i s e   I n n o v a t   I n s t ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ S h a p i r a ,   P h i l i p ]   U n i v   M a n c h e s t e r ,   M a n c h e s t e r   B u s i n e s s   S c h ,   M a n c h e s t e r   I n s t   I n n o v a t   R e s ,   M a n c h e s t e r   M 1 3   9 P L ,   L a n c s ,   E n g l a n d 	 S h a p i r a ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   M a n c h e s t e r ,   M a n c h e s t e r   B u s i n e s s   S c h ,   M a n c h e s t e r   I n s t   I n n o v a t   R e s ,   M a n c h e s t e r   M 1 3   9 P L ,   L a n c s ,   E n g l a n d . 	 p s h a p i r a @ m b s . a c . u k 	 Y o u t i e ,   J a n / Q - 4 1 8 0 - 2 0 1 6 ;   p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 ;   	 Y o u t i e ,   J a n / 0 0 0 0 - 0 0 0 2 - 9 7 5 9 - 5 2 5 2 ;   p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 ;   S h a p i r a ,   P h i l i p / 0 0 0 0 - 0 0 0 3 - 2 4 8 8 - 5 9 8 5 	 C e n t e r   f o r   N a n o t e c h n o l o g y   i n   S o c i e t y   a t   A r i z o n a   S t a t e   U n i v e r s i t y   ( N a t i o n a l   S c i e n c e   F o u n d a t i o n )   [ 0 5 3 1 1 9 4 ,   0 9 3 7 5 9 1 ] 	 T h i s   r e s e a r c h   i s   s u p p o r t e d   b y   t h e   C e n t e r   f o r   N a n o t e c h n o l o g y   i n   S o c i e t y   a t   A r i z o n a   S t a t e   U n i v e r s i t y   ( N a t i o n a l   S c i e n c e   F o u n d a t i o n   A w a r d s   0 5 3 1 1 9 4   a n d   0 9 3 7 5 9 1 ) .   T h e   f i n d i n g s   i n   t h i s   w o r k i n g   p a p e r   a r e   t h o s e   o f   t h e   a u t h o r s   a n d   d o   n o t   n e c e s s a r i l y   r e f l e c t   t h e   v i e w s   o f   t h e   N a t i o n a l   S c i e n c e   F o u n d a t i o n . 	 B o n a c i c h   P ,   2 0 0 7 ,   S O C   N E T W O R K S ,   V 2 9 ,   P 5 5 5 ,   D O I   1 0 . 1 0 1 6 / j . s o c n e t . 2 0 0 7 . 0 4 . 0 0 2 ;   B U C K L A N D   M ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - L ;   C u n n i n g h a m   S ,   2 0 1 1 ,   P   P O R T L   I N T   C   M A N   E N ;   D e   B e l l i s   N . ,   2 0 0 9 ,   B I B L I O M E T R I C S   C I T A T I ;   E v a n s   J A ,   2 0 1 1 ,   S C I E N C E ,   V 3 3 1 ,   P 7 2 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 0 1 7 6 5 ;   G r i e n e i s e n   M ,   2 0 1 0 ,   N A T U R E   N A N O T E C H N O L O G ,   V 7 ,   P 2 7 3 ;   G r i e n e i s e n   M L ,   2 0 1 1 ,   S M A L L ,   V 7 ,   P 2 8 3 6 ,   D O I   1 0 . 1 0 0 2 / s m l l . 2 0 1 1 0 0 3 8 7 ;   H u a n g   C . ,   2 0 1 0 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 3 6 ,   P 1 4 5 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 0 9 6 1 - 0 0 9 - 9 1 4 9 - 8 ;   L a k a t o s   I . ,   1 9 7 8 ,   P H I L O S   P A P E R S ;   L e y d e s d o r f f   L . ,   2 0 1 2 ,   G L O B A L   M A P S   S C I   B A S E ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 6 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 8 - 0 ;   L i n   M W ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 5 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 2 - 6 ;   M o g o u t o v   A ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 8 9 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 2 . 0 0 5 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 7 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 5 6 1 3 1 ;   N a t i o n a l   S c i e n c e   a n d   T e c h n o l o g y   C o u n c i l   ( N S T C ) ,   2 0 0 7 ,   N A T   N A N   I N   R E S   D E V   L ;   P R E S I D E N T ' S   C O U N C I L   O F   A D V I S O R S   O F   S C I E N C E   A N D   T E C H N O L O G Y .   ( P C A S T ) ,   2 0 1 0 ,   R E P   P R E S   C   3   A S S   N A T ;   P R E S I D E N T ' S   C O U N C I L   O F   A D V I S O R S   O F   S C I E N C E   A N D   T E C H N O L O G Y .   ( P C A S T ) ,   2 0 1 2 ,   R E P   P R E S   C   4   A S S   N A T ;   P o r t e r   A L ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 6 6 - y ;   P o r t e r   A L ,   2 0 0 9 ,   J   N A N O P A R T   R E S ,   V 1 1 ,   P 1 0 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 6 0 7 - 0 ;   R a f o l s   I ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 8 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 6 8 ;   R o c o   M C ,   2 0 0 4 ,   A I C H E   J ,   V 5 0 ,   P 8 9 0 ,   D O I   1 0 . 1 0 0 2 / a i c . 1 0 0 8 7 ;   R u h n a u   B ,   2 0 0 0 ,   S O C   N E T W O R K S ,   V 2 2 ,   P 3 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 8 7 3 3 ( 0 0 ) 0 0 0 3 1 - 9 ;   S h a p i r a   P ,   2 0 0 8 ,   E C O N   D E V   Q ,   V 2 2 ,   P 1 8 7 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 2 4 0 8 3 2 0 9 6 8 ;   S h a p i r a   P ,   2 0 1 0 ,   N A T U R E ,   V 4 6 8 ,   P 6 2 7 ,   D O I   1 0 . 1 0 3 8 / 4 6 8 6 2 7 a ;   S h a p i r a   P ,   2 0 0 9 ,   A S I A N   B U S   M A N A G ,   V 8 ,   P 4 6 1 ,   D O I   1 0 . 1 0 5 7 / a b m . 2 0 0 9 . 1 5 ;   S u b r a m a n i a n   V ,   2 0 1 0 ,   J   N A N O P A R T   R E S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 7 2 9 - 4 ;   T h o m a s   D .   G . ,   2 0 1 0 ,   J   B I O M E D I C A L   I N F O R M ,   V 4 4 ,   P 5 9 ;   Y o u t i e   J ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 8 - 9 3 6 0 - 9 ;   Z i t t   M ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 6 ;   Z i t t   M ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 4 0 	 3 0 	 3 5 	 3 7 	 1 1 	 1 1 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 1 3 	 9 5 	 1 	 	 	 	 	 3 5 1 	 3 7 0 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 9 0 3 - 6 	 	 2 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 0 5 D O 	 W O S : 0 0 0 3 1 6 0 4 6 0 0 0 0 2 3 	 	 
 
 J 	 Y a n ,   E J ;   D i n g ,   Y 	 	 	 	 Y a n ,   E r j i a ;   D i n g ,   Y i n g 	 	 	 D i s c o v e r i n g   a u t h o r   i m p a c t :   A   P a g e R a n k   p e r s p e c t i v e 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P a g e R a n k ;   I n f o r m e t r i c s ;   B i b l i o m e t r i c s ;   C o a u t h o r s h i p ;   N e t w o r k 	 N E T W O R K S ;   I N F O R M E T R I C S ;   P U B L I C A T I O N S ;   A L G O R I T H M 	 T h i s   a r t i c l e   p r o v i d e s   a n   a l t e r n a t i v e   p e r s p e c t i v e   f o r   m e a s u r i n g   a u t h o r   i m p a c t   b y   a p p l y i n g   P a g e R a n k   a l g o r i t h m   t o   a   c o a u t h o r s h i p   n e t w o r k .   A   w e i g h t e d   P a g e R a n k   a l g o r i t h m   c o n s i d e r i n g   c i t a t i o n   a n d   c o a u t h o r s h i p   n e t w o r k   t o p o l o g y   i s   p r o p o s e d .   W e   t e s t   t h i s   a l g o r i t h m   u n d e r   d i f f e r e n t   d a m p i n g   f a c t o r s   b y   e v a l u a t i n g   a u t h o r   i m p a c t   i n   t h e   i n f o r m e t r i c s   r e s e a r c h   c o m m u n i t y .   I n   a d d i t i o n ,   w e   a l s o   c o m p a r e   t h i s   w e i g h t e d   P a g e R a n k   w i t h   t h e   h - i n d e x ,   c i t a t i o n ,   a n d   p r o g r a m   c o m m i t t e e   ( P C )   m e m b e r s h i p   o f   t h e   I n t e r n a t i o n a l   S o c i e t y   f o r   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s   ( I S S I )   c o n f e r e n c e s .   F i n d i n g s   s h o w   t h a t   t h i s   w e i g h t e d   P a g e R a n k   a l g o r i t h m   p r o v i d e s   r e l i a b l e   r e s u l t s   i n   m e a s u r i n g   a u t h o r   i m p a c t .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ Y a n ,   E r j i a ;   D i n g ,   Y i n g ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 Y a n ,   E J   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   1 3 2 0   E   1 0 t h   S t ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 e y a n @ i n d i a n a . e d u ;   d i n g y i n g @ i n d i a n a . e d u 	 Y a n ,   E r j i a / E - 7 8 8 7 - 2 0 1 1 	 Y a n ,   E r j i a / 0 0 0 0 - 0 0 0 2 - 0 3 6 5 - 9 3 4 0 	 	 	 B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B O L D I   P ,   2 0 0 5 ,   P   1 4   I N T   W O R L D   W I D   W ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B U R T   R S ,   2 0 0 2 ,   N E W   D I R E C T I O N S   E C   S O ,   P 2 0 3 ;   C h e n   P ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 6 . 0 0 1 ;   D e l l a v a l l e   R P ,   2 0 0 7 ,   J   A M   A C A D   D E R M A T O L ,   V 5 7 ,   P 1 1 6 ,   D O I   1 0 . 1 0 1 6 / j . j a a d . 2 0 0 7 . 0 3 . 0 0 5 ;   D i n g   Y ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 2 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 7 1 ;   E g g h e   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 1 ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M   Q U A N T I T ;   F i a l a   D ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 0 8 - 4 ;   H a v e l i w a l a   T . ,   1 9 9 9 ,   E F F I C I E N T   C O M P U T A T I O ;   H a v e l i w a l a   T . ,   2 0 0 3 ,   A N A L   C O M P A R I S O N   A P P R ;   L a n g v i l l e   A . ,   2 0 0 6 ,   G O O G L E S   P A G E R A N K   S C I ;   L i u   X M ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 2 ;   M a   N ,   2 0 0 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 4 ,   P 8 0 0 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 7 . 0 6 . 0 0 6 ;   M a s l o v   S ,   2 0 0 8 ,   J   N E U R O S C I ,   V 2 8 ,   P 1 1 1 0 3 ,   D O I   1 0 . 1 5 2 3 / J N E U R O S C I . 0 0 0 2 - 0 8 . 2 0 0 8 ;   M i h a l c e a   R . ,   2 0 0 4 ,   P   2 0   I N T   C   C O M P   L I N G ;   M i h a l c e a   R . ,   2 0 0 4 ,   P   4 2   A N N   M   A S S   C O M P ;   M o o d y   J ,   2 0 0 4 ,   A M   S O C I O L   R E V ,   V 6 9 ,   P 2 1 3 ;   N o o y   W d ,   2 0 0 5 ,   E X P L O R A T O R Y   S O C I A L   N ;   P a g e   L . ,   1 9 9 9 ,   P A G E R A N K   C I T A T I O N   R A ;   P e r r a   N ,   2 0 0 8 ,   P H Y S   R E V   E ,   V 7 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 8 . 0 3 6 1 0 7 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P R E T T O   L . ,   2 0 0 2 ,   P   9   I N T   S   S T R I N G   P R O ,   P 1 3 1 ;   R e d n e r   S ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 3 5 9 ;   S i d i r o p o u l o s   A ,   2 0 0 6 ,   J   S Y S T   S O F T W A R E ,   V 7 9 ,   P 1 6 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j s s . 2 0 0 6 . 0 1 . 0 1 1 ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   V A Z Q U E Z   A ,   2 0 0 1 ,   S T A T   C I T A T I O N   N E T W O R ;   W a n g   J H ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 4 2 6 ,   P 8 5 7 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   Y a n   E J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 1 0 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 2 8 	 3 2 	 3 5 	 3 7 	 2 	 3 4 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 J A N 	 2 0 1 1 	 4 7 	 1 	 	 	 	 	 1 2 5 	 1 3 4 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 1 0 . 0 5 . 0 0 2 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 8 3 X G 	 W O S : 0 0 0 2 8 4 5 1 1 0 0 0 0 0 9 	 	 
 
 J 	 S h i b a t a ,   N ;   K a j i k a w a ,   Y ;   S a k a t a ,   I 	 	 	 	 S h i b a t a ,   N a o k i ;   K a j i k a w a ,   Y u y a ;   S a k a t a ,   I c h i r o 	 	 	 E x t r a c t i n g   t h e   c o m m e r c i a l i z a t i o n   g a p   b e t w e e n   s c i e n c e   a n d   t e c h n o l o g y   -   C a s e   s t u d y   o f   a   s o l a r   c e l l 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R & D   m a n a g e m e n t ;   T e c h n o l o g y   r o a d m a p ;   R e s e a r c h   f r o n t ;   B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   P a t e n t   a n a l y s i s 	 C I T A T I O N ;   M O D E L ;   P E R S O N N E L ;   P R O J E C T S 	 I n   t h i s   p a p e r ,   w e   c o m p a r e d   s t r u c t u r e s   o f   t h e   c i t a t i o n   n e t w o r k   o f   s c i e n t i f i c   p u b l i c a t i o n s   w i t h   t h o s e   o f   p a t e n t s ,   a n d   d i s c u s s e d   t h e   d i f f e r e n c e s   b e t w e e n   t h e m .   A   c a s e   s t u d y   w a s   p e r f o r m e d   i n   a   s o l a r   c e l l   t o   d e v e l o p   a   m e t h o d   o f   d e t e c t i n g   g a p s   b e t w e e n   s c i e n c e   a n d   t e c h n o l o g y .   S c i e n t i f i c   r e s e a r c h   h a s   t e n d e d   t o   b e   m o r e   b a s i c ,   e s p e c i a l l y   i n   t e r m s   o f   c e l l   d e s i g n ,   w h e r e a s   p a t e n t s   h a v e   f o c u s e d   o n   m o r e   a p p l i e d   t e c h n o l o g y   u s e d   i n   s o l a r   c e l l   m o d u l e s .   O f   t h e   m a j o r   c i t a t i o n   c l u s t e r s   o f   s c i e n t i f i c   p u b l i c a t i o n s ,   o n l y   t w o ,   n a m e l y   s i l i c o n   a n d   c o m p o u n d   s o l a r   c e l l s ,   c o r r e s p o n d e d   s e m a n t i c a l l y   w i t h   p a t e n t   c l u s t e r s .   C o n v e r s e l y ,   t h e r e   w e r e   n o   p a t e n t   c l u s t e r s   c o r r e s p o n d i n g   t o   t h e   o t h e r   t w o   s c i e n t i f i c   r e s e a r c h   f r o n t s ,   n a m e l y   d y e - s e n s i t i z e d   a n d   p o l y m e r   s o l a r   c e l l s .   T h e s e   r e s e a r c h   a r e a s   c o u l d   b e   r e g a r d e d   a s   o p p o r t u n i t i e s   f o r   i n d u s t r i a l   c o m m e r c i a l i z a t i o n   b e c a u s e   s c i e n t i f i c   a c t i v i t i e s   e x i s t   b u t   n o t   t e c h n o l o g i c a l   a p p l i c a t i o n s .   O u r   r e s u l t s   c o u l d   o f f e r   a n   i n t e l l e c t u a l   b a s i s   f o r   d i s c o v e r i n g   p o t e n t i a l   o p p o r t u n i t i e s   f o r   i n d u s t r i a l   c o m m e r c i a l i z a t i o n .   ( C )   2 0 1 0   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ S h i b a t a ,   N a o k i ;   K a j i k a w a ,   Y u y a ]   U n i v   T o k y o ,   S c h   E n g n ,   I n n o v a t   P o l i c y   R e s   C t r ,   B u n k y o   W a r d ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n ;   [ S a k a t a ,   I c h i r o ]   U n i v   T o k y o ,   T o d a i   P o l i c y   A l t e r n a t   R e s   I n s t ,   B u n k y o   W a r d ,   T o k y o   1 1 3 0 0 3 3 ,   J a p a n 	 S h i b a t a ,   N   ( r e p r i n t   a u t h o r ) ,   U n i v   T o k y o ,   S c h   E n g n ,   I n n o v a t   P o l i c y   R e s   C t r ,   B u n k y o   W a r d ,   9 - 2 0 1 , 2 - 1 1 - 1 6   Y a y o i ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n . 	 s h i b a t a @ i p r - c t r . t . u - t o k y o . a c . j p ;   k a j i @ i p r - c t r . t . u - t o k y o . a c . j p ;   i s a k a t a @ i p r - c t r . t . u - t o k y o . a c . j p 	 K a j i k a w a ,   Y u y a / C - 1 9 9 6 - 2 0 1 5 	 K a j i k a w a ,   Y u y a / 0 0 0 0 - 0 0 0 3 - 3 5 7 7 - 5 1 6 7 	 	 	 A d a i   A T ,   2 0 0 4 ,   J   M O L   B I O L ,   V 3 4 0 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j m b . 2 0 0 4 . 0 4 . 0 4 7 ;   A R A T A N I   F ,   2 0 0 5 ,   P R O G   P H O T O V O L T A I C S ,   V 1 3 ,   P 4 7 0 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   D a i m   T U ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 4 . 0 0 4 ;   F l e m i n g   L ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 0 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 8 4 ;   H a r h o f f   D ,   1 9 9 9 ,   R E V   E C O N   S T A T ,   V 8 1 ,   P 5 1 1 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 9 5 5 8 2 6 5 ;   H E N N I C K   P ,   2 0 0 6 ,   E N E R G   P O L I C Y ,   V 3 4 ,   P 1 2 7 0 ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 7 7 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 5 . 0 0 5 ;   K e s s l e r   E H ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 1 1 4 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 1 6 7 ;   K o s t o f f   R N ,   2 0 0 5 ,   E N E R G Y ,   V 3 0 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 5 8 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   M A N S F I E L D   E ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 8 0 - A ;   M e y e r   M ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 4 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 4 0 - 2 ;   M i c h e l   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 0 3 0 8 7 1 ;   M O E N A E R T   R K ,   2 0 0 3 ,   M A N A G E ,   V 1 1 ,   P 3 1 ;   M O E N A E R T   R K ,   2 0 0 3 ,   J   P R O D   I N N O V   M A N A G E ,   V 7 ,   P 9 1 ;   M o w e r y   D C ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 7 7 ;   N A R I N   F ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 2 ) 9 0 0 1 8 - Y ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   N i o s i   J ,   1 9 9 9 ,   J   B U S   R E S ,   V 4 5 ,   P 1 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 8 - 2 9 6 3 ( 9 7 ) 0 0 2 3 0 - 0 ;   S h i b a t a   N ,   2 0 0 8 ,   T E C H N O V A T I O N ,   V 2 8 ,   P 7 5 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 0 3 . 0 0 9 ;   S h i b a t a   N ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 5 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 9 4 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   S O U D E R   W E ,   1 9 9 2 ,   J   M A N A G E   S T U D ,   V 2 9 ,   P 4 8 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 1 9 9 2 . t b 0 0 6 7 5 . x ;   S O U D E R   W E ,   2 0 0 3 ,   M A N A G E ,   V 5 ,   P 6 ;   W a l s h   S T ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 3 . 1 0 . 0 0 3 ;   W a t t s   R J ,   1 9 9 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 6 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 ;   W i l l i a m s   R ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 8 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 8 8 5 - 2 	 2 8 	 3 5 	 3 5 	 3 	 5 4 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 S E P 	 2 0 1 0 	 7 7 	 7 	 	 	 	 	 1 1 4 7 	 1 1 5 5 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 3 . 0 0 8 	 	 9 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 6 4 1 B B 	 W O S : 0 0 0 2 8 1 0 9 7 7 0 0 0 1 1 	 	 
 
 J 	 S u b r a m a n i a n ,   V ;   Y o u t i e ,   J ;   P o r t e r ,   A L ;   S h a p i r a ,   P 	 	 	 	 S u b r a m a n i a n ,   V r i s h a l i ;   Y o u t i e ,   J a n ;   P o r t e r ,   A l a n   L . ;   S h a p i r a ,   P h i l i p 	 	 	 I s   t h e r e   a   s h i f t   t o   " a c t i v e   n a n o s t r u c t u r e s ' ' ? 	 J O U R N A L   O F   N A N O P A R T I C L E   R E S E A R C H 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 A c t i v e   n a n o s t r u c t u r e s ;   A c t i v e   n a n o t e c h n o l o g y ;   B i b l i o m e t r i c s ;   T r e n d s ;   P r o t o t y p e s ;   S c i e n c e   a n d   t e c h n o l o g y   t r e n d s 	 N A N O S C A L E   S C I E N C E ;   N A N O T E C H N O L O G Y 	 I t   h a s   b e e n   s u g g e s t e d   t h a t   a n   i m p o r t a n t   t r a n s i t i o n   i n   t h e   l o n g - r u n   t r a j e c t o r y   o f   n a n o t e c h n o l o g y   d e v e l o p m e n t   i s   a   s h i f t   f r o m   p a s s i v e   t o   a c t i v e   n a n o s t r u c t u r e s .   S u c h   a   s h i f t   c o u l d   p r e s e n t   d i f f e r e n t   o r   i n c r e a s e d   s o c i e t a l   i m p a c t s   a n d   r e q u i r e   n e w   a p p r o a c h e s   f o r   r i s k   a s s e s s m e n t .   A n   a c t i v e   n a n o s t r u c t u r e   " c h a n g e s   o r   e v o l v e s   i t s   s t a t e   d u r i n g   i t s   o p e r a t i o n , ' '   a c c o r d i n g   t o   t h e   N a t i o n a l   S c i e n c e   F o u n d a t i o n ' s   ( 2 0 0 6 )   A c t i v e   N a n o s t r u c t u r e s   a n d   N a n o s y s t e m s   g r a n t   s o l i c i t a t i o n .   A c t i v e   n a n o s t r u c t u r e   e x a m p l e s   i n c l u d e   n a n o e l e c t r o m e c h a n i c a l   s y s t e m s   ( N E M S ) ,   n a n o m a c h i n e s ,   s e l f - h e a l i n g   m a t e r i a l s ,   t a r g e t e d   d r u g s   a n d   c h e m i c a l s ,   e n e r g y   s t o r a g e   d e v i c e s ,   a n d   s e n s o r s .   T h i s   a r t i c l e   c o n s i d e r s   t w o   q u e s t i o n s :   ( a )   I s   t h e r e   a   " s h i f t ' '   t o   a c t i v e   n a n o s t r u c t u r e s ?   ( b )   H o w   c a n   w e   c h a r a c t e r i z e   t h e   p r o t o t y p i c a l   a r e a s   i n t o   w h i c h   a c t i v e   n a n o s t r u c t u r e s   m a y   e m e r g e ?   W e   b u i l d   u p o n   t h e   N S F   d e f i n i t i o n   o f   a c t i v e   n a n o s t r u c t u r e s   t o   d e v e l o p   a   r e s e a r c h   p u b l i c a t i o n   s e a r c h   s t r a t e g y ,   w i t h   a   p a r t i c u l a r   i n t e n t   t o   d i s t i n g u i s h   b e t w e e n   p a s s i v e   a n d   a c t i v e   n a n o t e c h n o l o g i e s .   W e   p e r f o r m   b i b l i o m e t r i c   a n a l y s e s   a n d   d e s c r i b e   t h e   m a i n   p u b l i c a t i o n   t r e n d s   f r o m   1 9 9 5   t o   2 0 0 8 .   W e   t h e n   d e s c r i b e   t h e   p r o t o t y p e s   o f   r e s e a r c h   t h a t   e m e r g e   b a s e d   o n   r e a d i n g   t h e   a b s t r a c t s   a n d   r e v i e w   p a p e r s   e n c o u n t e r e d   i n   o u r   s e a r c h .   P r e l i m i n a r y   r e s u l t s   s u g g e s t   t h a t   t h e r e   i s   a   s h a r p   r i s e   i n   a c t i v e   n a n o s t r u c t u r e s   p u b l i c a t i o n s   i n   2 0 0 6 ,   a n d   t h i s   r i s e   i s   m a i n t a i n e d   i n   2 0 0 7   a n d   t h r o u g h   t o   e a r l y   2 0 0 8 .   W e   p r e s e n t   a   t y p o l o g y   t h a t   c a n   b e   u s e d   t o   d e s c r i b e   t h e   k i n d   o f   a c t i v e   n a n o s t r u c t u r e s   t h a t   m a y   b e   c o m m e r c i a l i z e d   a n d   r e g u l a t e d   i n   t h e   f u t u r e . 	 [ S u b r a m a n i a n ,   V r i s h a l i ;   P o r t e r ,   A l a n   L . ]   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ Y o u t i e ,   J a n ]   G e o r g i a   I n s t   T e c h n o l ,   E n t e r p r i s e   I n n o v a t   I n s t ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ P o r t e r ,   A l a n   L . ]   S e a r c h   T e c h n o l   I n c ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ S h a p i r a ,   P h i l i p ]   U n i v   M a n c h e s t e r ,   M a n c h e s t e r   B u s i n e s s   S c h ,   M a n c h e s t e r   I n s t   I n n o v a t   R e s ,   M a n c h e s t e r   M 1 3   9 P L ,   L a n c s ,   E n g l a n d 	 S u b r a m a n i a n ,   V   ( r e p r i n t   a u t h o r ) ,   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A . 	 v s u b r a m a n i 6 @ g a t e c h . e d u ;   j a n . y o u t i e @ i n n o v a t e . g a t e c h . e d u ;   a p o r t e r @ i s y e . g a t e c h . e d u ;   p s h a p i r a @ m b s . a c . u k 	 S h a p i r a ,   P h i l i p / E - 4 6 3 8 - 2 0 1 1 ;   Y o u t i e ,   J a n / Q - 4 1 8 0 - 2 0 1 6 ;   p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 	 S h a p i r a ,   P h i l i p / 0 0 0 0 - 0 0 0 3 - 2 4 8 8 - 5 9 8 5 ;   Y o u t i e ,   J a n / 0 0 0 0 - 0 0 0 2 - 9 7 5 9 - 5 2 5 2 ;   p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 	 	 	 B a s s e c o u l a r d   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 8 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 1 5 - 1 ;   B e n n e t t   I ,   2 0 0 6 ,   S C I   C U L T U R E ,   V 1 5 ,   P 3 0 9 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 9 5 0 5 4 3 0 6 0 1 0 2 2 6 3 5 ;   B e s l e y   J C ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 5 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 3 2 3 - 6 ;   D a v i e s   J C ,   2 0 0 9 ,   O V E R S I G H T   N E X T   G E N E R ;   H u a n g   Z ,   2 0 0 3 ,   J   N A N O P A R T   R E S ,   V 5 ,   P 3 3 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 5 5 6 8 0 0 9 9 4 ;   I R G C ,   2 0 0 7 ,   N A N   R I S K   G O V   R E C   G L O ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 4 - 9 ;   K u k o w s k a - L a t a l l o   J F ,   2 0 0 5 ,   C A N C E R   R E S ,   V 6 5 ,   P 5 3 1 7 ,   D O I   1 0 . 1 1 5 8 / 0 0 0 8 - 5 4 7 2 . C A N - 0 4 - 3 9 2 1 ;   * L U X   R E S   I N C ,   2 0 0 7 ,   N A N   R E P   2 0 0 6   I N V   O V ;   [ A n o n y m o u s ] ,   2 0 0 6 ,   0 6 5 9 5   N S F ;   N S E T   ( N a n o s c a l e   S c i e n c e   E n g i n e e r i n g   a n d   T e c h n o l o g y   S u b c o m m i t t e e ) ,   2 0 0 7 ,   N A T   N A N   I N   R E S   D E V   L ;   P o r t e r   A L ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 6 6 - y ;   R o c o   M C ,   2 0 0 4 ,   A I C H E   J ,   V 5 0 ,   P 8 9 0 ,   D O I   1 0 . 1 0 0 2 / a i c . 1 0 0 8 7 ;   R o y a l   C o m m i s s i o n   o n   E n v i r o n m e n t a l   P o l l u t i o n ,   2 0 0 8 ,   N O V   M A T   E N V   C A S   N A N ;   R o y a l   S o c i e t y ,   2 0 0 4 ,   N A N   N A N   O P P   U N C ;   S U B R A M A N I A N   V ,   2 0 0 9 ,   A C T I V E   N A N O T E C H N O L O G ;   T O U R   J M ,   2 0 0 7 ,   N A N O T E C H N O L   L A W   B U S ,   V 4 ,   P 3 6 1 ;   W i l s d o n   J ,   2 0 0 4 ,   I E E E   T E C H N O L   S O C   M A G ,   V 2 3 ,   P 1 6 ,   D O I   1 0 . 1 1 0 9 / M T A S . 2 0 0 4 . 1 3 7 1 6 3 4 	 1 9 	 3 5 	 3 5 	 1 	 1 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 1 3 8 8 - 0 7 6 4 	 	 	 J   N A N O P A R T   R E S 	 J .   N a n o p a r t .   R e s . 	 J A N 	 2 0 1 0 	 1 2 	 1 	 	 	 S I 	 	 1 	 1 0 	 	 1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 7 2 9 - 4 	 	 1 0 	 C h e m i s t r y ,   M u l t i d i s c i p l i n a r y ;   N a n o s c i e n c e   &   N a n o t e c h n o l o g y ;   M a t e r i a l s   S c i e n c e ,   M u l t i d i s c i p l i n a r y 	 C h e m i s t r y ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   M a t e r i a l s   S c i e n c e 	 5 6 3 X K 	 W O S : 0 0 0 2 7 5 1 7 0 8 0 0 0 0 1 	 	 
 
 J 	 K o s t o f f ,   R N 	 	 	 	 K o s t o f f ,   R o n a l d   N . 	 	 	 S y s t e m a t i c   a c c e l e r a t i o n   o f   r a d i c a l   d i s c o v e r y   a n d   i n n o v a t i o n   i n   s c i e n c e   a n d   t e c h n o l o g y 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 d i s c o v e r y ;   i n n o v a t i o n ;   s c i e n c e   a n d   t e c h n o l o g y ;   t e x t   m i n i n g ;   l i t e r a t u r e - b a s e d   d i s c o v e r y ;   l i t e r a t u r e - a s s i s t e d   d i s c o v e r y ;   r a d i c a l   d i s c o v e r y ;   r a d i c a l   i n n o v a t i o n ;   i n f o r m a t i o n   r e t r i e v a l ;   u n c o n n e c t e d   d i s c i p l i n e s ;   d i s p a r a t e   d i s c i p l i n e s ;   i n t e r d i s c i p l i n a r y ;   m u l t i d i s c i p l i n a r y ;   s o l i c i t a t i o n s ;   s p e c i a l   i s s u e s ;   w o r k s h o p s ;   r o a d m a p s ;   a d v i s o r y   p a n e l s ;   r e v i e w   p a n e l s ;   w a r   g a m e s 	 D A T A B A S E   T O M O G R A P H Y ;   F I S H - O I L ;   B I B L I O M E T R I C S ;   M A G N E S I U M ;   L I T E R A T U R E S ;   C O N N E C T I O N S ;   I N F O R M A T I O N ;   M I G R A I N E ;   R A Y N A U D S ;   R O A D M A P S 	 A   s y s t e m a t i c   t w o - c o m p o n e n t   a p p r o a c h   ( f r o n t - e n d   c o m p o n e n t ,   b a c k - e n d   c o m p o n e n t )   t o   b r i d g i n g   u n c o n n e c t e d   d i s c i p l i n e s   a n d   a c c e l e r a t i n g   p o t e n t i a l l y   r a d i c a l   d i s c o v e r y   a n d   i n n o v a t i o n   ( b a s e d   w h o l l y   o r   p a r t i a l l y   o n   t e x t   m i n i n g   p r o c e d u r e s )   i s   p r e s e n t e d .   T h e   f r o n t - e n d   c o m p o n e n t   h a s   s i m i l a r   o b j e c t i v e s   t o   t h o s e   i n   t h e   c l a s s i c a l   l i t e r a t u r e - b a s e d   d i s c o v e r y   ( L B D )   a p p r o a c h ,   a l t h o u g h   i t   i s   d i f f e r e n t   m e c h a n i s t i c a l l y   a n d   o p e r a t i o n a l l y .   T h e   f r o n t - e n d   c o m p o n e n t   w i l l   s y s t e m a t i c a l l y   i d e n t i f y   t e c h n i c a l   d i s c i p l i n e s   ( a n d   t h e i r   a s s o c i a t e d   l e a d i n g   e x p e r t s )   t h a t   a r e   d i r e c t l y   o r   i n d i r e c t l y - r e l a t e d   t o   s o l v i n g   t e c h n i c a l   p r o b l e m s   o f   h i g h   i n t e r e s t .   T h e   b a c k - e n d   c o m p o n e n t   i s   a c t u a l l y   a   f a m i l y   o f   b a c k - e n d   t e c h n i q u e s ,   o n l y   o n e   o f   w h i c h   s h a r e s   t h e   s t r i c t l y   l i t e r a t u r e - b a s e d   a n a l y s i s   o f   t h e   c l a s s i c a l   L B D   a p p r o a c h .   T h e   n o n - L B D   b a c k - e n d   t e c h n i q u e s   ( l i t e r a t u r e - a s s i s t e d   d i s c o v e r y )   m a k e   u s e   o f   t h e   h u m a n   e x p e r t s   a s s o c i a t e d   w i t h   t h e   d i s p a r a t e   l i t e r a t u r e s   ( d i s c i p l i n e s )   u n c o v e r e d   i n   t h e   f r o n t - e n d   t o   g e n e r a t e   r a d i c a l   d i s c o v e r y   a n d   i n n o v a t i o n .   S p e c i f i c a l l y ,   i n   t h e   l i t e r a t u r e - a s s i s t e d   d i s c o v e r y   o p e r a t i o n a l   m o d e ,   t h e s e   d i s p a r a t e   d i s c i p l i n e   e x p e r t s   c o u l d   b e   u s e d   a s :   1 .   R e c i p i e n t s   o f   s o l i c i t a t i o n   a n n o u n c e m e n t s   ( B A A ,   S B I R ,   M U R I ,   j o u r n a l   S p e c i a l   I s s u e   c a l l s   f o r   p a p e r s ,   e t c . ) ,   2 .   P a r t i c i p a n t s   i n   W o r k s h o p s ,   A d v i s o r y   P a n e l s ,   R e v i e w   P a n e l s ,   R o a d m a p s ,   a n d   W a r   G a m e s ,   3 .   P o i n t s   o f   C o n t a c t   f o r   F i e l d   S c i e n c e   A d v i s o r s ,   F o r e i g n   F i e l d   O f f i c e s ,   P r o g r a m   O f f i c e r   s i t e   v i s i t s ,   a n d   p o t e n t i a l   t r a n s i t i o n s .   ( c )   2 0 0 5   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 B u r t   R .   S . ,   1 9 9 2 ,   S T R U C T U R A L   H O L E S   S O C ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   G o r d o n   M D ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 1 1 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 2 ) 4 7 : 2 < 1 1 6 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 1 ;   G o r d o n   M D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 7 4 ;   H E A R S T   M ,   1 9 9 9 ,   P   A C M   9 9   3 7   A N N   M   A S ;   K o s t o f f   R N ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 9 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 8 7 ;   K o s t o f f   R N ,   2 0 0 5 ,   J   A I R C R A F T ,   V 4 2 ,   P 6 6 1 ,   D O I   1 0 . 2 5 1 4 / 1 . 2 8 1 9 ;   K o s t o f f   R N ,   2 0 0 5 ,   E N E R G Y ,   V 3 0 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 5 8 ;   K o s t o f f   R N ,   2 0 0 4 ,   I N T   J   B I F U R C A T   C H A O S ,   V 1 4 ,   P 6 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 1 2 7 4 0 4 0 0 9 0 8 9 ;   K o s t o f f   R N ,   2 0 0 4 ,   F R A C T A L S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 ;   K o s t o f f   R N ,   2 0 0 2 ,   B I O S C I E N C E ,   V 5 2 ,   P 9 3 7 ,   D O I   1 0 . 1 6 4 1 / 0 0 0 6 - 3 5 6 8 ( 2 0 0 2 ) 0 5 2 [ 0 9 3 7 : O S ] 2 . 0 . C O ; 2 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K O S T O F F   R N ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 4 . x ;   K o s t o f f   R N ,   2 0 0 1 ,   A N A L   C H E M ,   V 7 3 ,   p 3 7 0 A ,   D O I   1 0 . 1 0 2 1 / a c 0 1 2 4 7 2 h ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K o s t o f f   R . N . ,   2 0 0 3 ,   I N T   H D B   I N N O V A T I O N ,   P 3 8 8 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 0 8 0 4 4 1 9 8 - 6 / 5 0 0 2 7 - 9 ;   K O S T O F F   R N ,   2 0 0 5 ,   A D A 4 3 7 2 0   D E F   T E C H N   I ;   K O S T O F F   R N ,   2 0 0 3 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 4 ,   P 2 7 8 9 ;   S M A L H E I S E R   N R ,   1 9 9 4 ,   N E U R O S C I   R E S   C O M M U N ,   V 1 5 ,   P 1 ;   S m a l h e i s e r   N R ,   1 9 9 8 ,   C O M P U T   M E T H   P R O G   B I O ,   V 5 7 ,   P 1 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 2 6 0 7 ( 9 8 ) 0 0 0 3 3 - 9 ;   S t e g m a n n   J ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 1 1 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 5 4 8 0 8 8 0 4 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S w a n s o n   D R ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 3 5 ;   S W A N S O N   D R ,   1 9 9 0 ,   P E R S P E C T   B I O L   M E D ,   V 3 3 ,   P 1 5 7 ;   S W A N S O N   D R ,   1 9 8 8 ,   P E R S P E C T   B I O L   M E D ,   V 3 1 ,   P 5 2 6 ;   S W A N S O N   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ;   W e e b e r   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 0 4 . a b s ;   K O S T O F F   R N ,   2 0 0 5 ,   P a t e n t   N o .   6 8 8 6 0 1 0 2 6 	 3 3 	 3 5 	 3 6 	 1 	 2 1 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 O C T 	 2 0 0 6 	 7 3 	 8 	 	 	 	 	 9 2 3 	 9 3 6 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 9 . 0 0 4 	 	 1 4 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 0 8 9 E S 	 W O S : 0 0 0 2 4 0 8 6 3 7 0 0 0 0 2 	 	 
 
 J 	 P E T E R S ,   H P F ;   V A N R A A N ,   A F J 	 	 	 	 P E T E R S ,   H P F ;   V A N R A A N ,   A F J 	 	 	 S T R U C T U R I N G   S C I E N T I F I C   A C T I V I T I E S   B Y   C O - A U T H O R   A N A L Y S I S   -   A N   E X E R C I S E   O N   A   U N I V E R S I T Y - F A C U L T Y   L E V E L 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 D I S C I P L I N A R Y ;   S C I E N C E 	 I n   t h i s   p a p e r   w e   a p p l y   ' c o - a u t h o r   a n a l y s i s '   t o   c r e a t e   f r o m   a   l a r g e   s e t   o f   p u b l i c a t i o n s   c l u s t e r s   o f   c o l l a b o r a t i n g   r e s e a r c h e r s   w i t h i n   a   f a c u l t y   o f   c h e m i c a l   e n g i n e e r i n g .   R e s u l t s   h a v e   b e e n   d i s c u s s e d   w i t h   a n   e x p e r t .   T h e   c o - a u t h o r   c l u s t e r s   a p p e a r e d   t o   b e   m e a n i n g f u l ,   w i t h   r e s p e c t   t o   t h e   i d e n t i f i c a t i o n   o f   r e s e a r c h   g r o u p s ,   t h e   r e l a t i o n s   w i t h i n   t h e s e   g r o u p s ,   a s   w e l l   a s   t o   r e l a t i o n s   b e t w e e n   t h e s e   g r o u p s   a n d   c h a n g e s   i n   t i m e .   A l s o   d i f f e r e n c e s   b e t w e e n   I S I - b a s e d   a n d   n o n - I S I   b a s e d   m a p s   p r o v e d   t o   b e   c o n s i s t e n t   w i t h   t h e   e x p e r t ' s   o p i n i o n .   M a n y   c l u s t e r s   r e p r e s e n t   c o l l a b o r a t i n g   a u t h o r s   g r o u p e d   a r o u n d   a   f u l l   p r o f e s s o r ,   m o s t l y   t h e   d e p a r t m e n t   c h a i r m a n .   C o - a u t h o r   a n a l y s i s   c a n   b e   u s e d ,   f o r   e x a m p l e ,   a s   a n   i m p o r t a n t   t o o l   i n   e v a l u a t i v e   b i b l i o m e t r i c s   i n   o r d e r   t o   m a k e   a   f i r s t   i d e n t i f i c a t i o n   o f   r e s e a r c h   g r o u p s   i n   ' u n k n o w n '   u n i v e r s i t i e s   o r   o r g a n i z a t i o n s . 	 	 P E T E R S ,   H P F   ( r e p r i n t   a u t h o r ) ,   U N I V   L E I D E N , C T R   S C I   &   T E C H N O L   S T U D I E S , W A S S E N A A R S E W E G   5 2 , P O B   9 5 5 5 , 2 3 0 0   R B   L E I D E N , N E T H E R L A N D S . 	 	 	 	 	 	 A J I F E R U K E   I ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 4 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 0 0 ;   B A L O G   C ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 4 4 ;   B R A A M   R R ,   I N   P R E S S   J   A M   S O C   I N ;   B R A A M   R R ,   1 9 8 9 ,   S C I   T E C H N O L O G Y   I N D I C ;   B R O A D   W J ,   1 9 8 1 ,   S C I E N C E ,   V 2 1 1 ,   P 1 1 3 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 0 0 8 1 9 9 ;   D I A M O N D   A M ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 1 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 6 ;   E d g e   D ,   1 9 7 9 ,   H i s t   S c i ,   V 1 7 ,   P 1 0 2 ;   L A W A N I   S M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 4 ;   L O G A N   E L ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 2 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 2 6 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - F ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M C C A I N   K W ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 4 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 1 1 ) 3 9 : 6 < 4 2 8 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - P ;   P E T E R S   H P F ,   1 9 8 7 ,   S S U 8 7 0 1   C T R   S C I   T E C H ;   P E T E R S   H P F ,   I N   P R E S S   U S E   P U B L I C A ;   P E T E R S   H P F ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 1 7 5 ;   P O R T E R   A L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 4 ;   P R I C E   D J D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 1 1 ;   S A L T O N   G ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M A ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   S m a l l   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 3 ;   S T O K E S   T D ,   1 9 8 9 ,   S O C   S T U D   S C I ,   V 1 9 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 9 0 1 9 0 0 1 0 0 3 ;   W E S T E R T E R P   K R ,   1 9 8 5 ,   C O M M U N I C A T I O N ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 ;   1 9 8 6 ,   S P S S   X   U S E R S   G U I D E 	 2 3 	 3 5 	 3 6 	 2 	 1 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 1 9 9 1 	 2 0 	 1 	 	 	 	 	 2 3 5 	 2 5 5 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 5 7 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 E Y 2 6 1 	 W O S : A 1 9 9 1 E Y 2 6 1 0 0 0 2 0 	 	 
 
 J 	 L a r i v i e r e ,   V ;   S u g i m o t o ,   C R ;   C r o n i n ,   B 	 	 	 	 L a r i v i e r e ,   V i n c e n t ;   S u g i m o t o ,   C a s s i d y   R . ;   C r o n i n ,   B l a i s e 	 	 	 A   b i b l i o m e t r i c   c h r o n i c l i n g   o f   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e ' s   f i r s t   h u n d r e d   y e a r s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i n f o r m a t i o n   s c i e n c e   h i s t o r y ;   b i b l i o m e t r i c s 	 C I T A T I O N   A N A L Y S I S ;   J O U R N A L   A R T I C L E S ;   L I S   J O U R N A L S ;   R E S E A R C H   P R O D U C T I V I T Y ;   C O - A U T H O R S H I P ;   I M P A C T ;   I N T E R D I S C I P L I N A R I T Y ;   C O L L A B O R A T I O N ;   F A C U L T Y ;   L I B R A R I A N S H I P 	 T h i s   p a p e r   p r e s e n t s   a   c o n d e n s e d   h i s t o r y   o f   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e   ( L I S )   o v e r   t h e   c o u r s e   o f   m o r e   t h a n   a   c e n t u r y   u s i n g   a   v a r i e t y   o f   b i b l i o m e t r i c   m e a s u r e s .   I t   e x a m i n e s   i n   d e t a i l   t h e   v a r i a b l e   r a t e   o f   k n o w l e d g e   p r o d u c t i o n   i n   t h e   f i e l d ,   s h i f t s   i n   s u b j e c t   c o v e r a g e ,   t h e   d o m i n a n c e   o f   p a r t i c u l a r   p u b l i c a t i o n   g e n r e s   a t   d i f f e r e n t   t i m e s ,   p r e v a i l i n g   m o d e s   o f   p r o d u c t i o n ,   i n t e r a c t i o n s   w i t h   o t h e r   d i s c i p l i n e s ,   a n d ,   m o r e   g e n e r a l l y ,   o b s e r v e s   h o w   t h e   f i e l d   h a s   e v o l v e d .   I t   s h o w s   t h a t ,   d e s p i t e   a   s t r i k i n g   g r o w t h   i n   t h e   n u m b e r   o f   j o u r n a l s ,   p a p e r s ,   a n d   c o n t r i b u t i n g   a u t h o r s ,   a   d e c r e a s e   w a s   o b s e r v e d   i n   t h e   f i e l d ' s   m a r k e t - s h a r e   o f   a l l   s o c i a l   s c i e n c e   a n d   h u m a n i t i e s   r e s e a r c h .   C o l l a b o r a t i v e   a u t h o r s h i p   i s   n o w   t h e   n o r m ,   a   p a t t e r n   s e e n   a c r o s s   t h e   s o c i a l   s c i e n c e s .   T h e   i d e a   o f   b o u n d a r y   c r o s s i n g   w a s   a l s o   e x a m i n e d :   i n   2 0 1 0 ,   n e a r l y   6 0 %   o f   a u t h o r s   w h o   p u b l i s h e d   i n   L I S   a l s o   p u b l i s h e d   i n   a n o t h e r   d i s c i p l i n e .   T h i s   h i g h   d e g r e e   o f   p e r m e a b i l i t y   i n   L I S   w a s   a l s o   d e m o n s t r a t e d   t h r o u g h   r e f e r e n c e   a n d   c i t a t i o n   p r a c t i c e s :   L I S   s c h o l a r s   n o w   c i t e   a n d   r e c e i v e   c i t a t i o n s   f r o m   o t h e r   f i e l d s   m o r e   t h a n   f r o m   L I S   i t s e l f .   T w o   m a j o r   s t r u c t u r a l   s h i f t s   a r e   r e v e a l e d   i n   t h e   d a t a :   i n   1 9 6 0 ,   L I S   c h a n g e d   f r o m   a   p r o f e s s i o n a l   f i e l d   f o c u s e d   o n   l i b r a r i a n s h i p   t o   a n   a c a d e m i c   f i e l d   f o c u s e d   o n   i n f o r m a t i o n   a n d   u s e ;   a n d   i n   1 9 9 0 ,   L I S   b e g a n   t o   r e c e i v e   a   g r o w i n g   n u m b e r   o f   c i t a t i o n s   f r o m   o u t s i d e   t h e   f i e l d ,   n o t a b l y   f r o m   C o m p u t e r   S c i e n c e   a n d   M a n a g e m e n t ,   a n d   s a w   a   d r a m a t i c   i n c r e a s e   i n   t h e   n u m b e r   o f   a u t h o r s   c o n t r i b u t i n g   t o   t h e   l i t e r a t u r e   o f   t h e   f i e l d . 	 [ L a r i v i e r e ,   V i n c e n t ]   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   M o n t r e a l ,   P Q ,   C a n a d a ;   [ L a r i v i e r e ,   V i n c e n t ]   U n i v   Q u e b e c ,   O S T ,   C I R S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a ;   [ S u g i m o t o ,   C a s s i d y   R . ;   C r o n i n ,   B l a i s e ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 1   U S A 	 L a r i v i e r e ,   V   ( r e p r i n t   a u t h o r ) ,   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   M o n t r e a l ,   P Q ,   C a n a d a . 	 v i n c e n t . l a r i v i e r e @ u m o n t r e a l . c a ;   s u g i m o t o @ i n d i a n a . e d u ;   b c r o n i n @ i n d i a n a . e d u 	 	 	 	 	 A j i f e r u k e   I ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 6 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 2 7 - 6 ;   A n e g o n   F D ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 2 2 9 ;   A r a k a k i   M ,   2 0 0 9 ,   J   I N F   S C I ,   V 3 5 ,   P 1 4 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 8 0 9 4 0 5 1 ;   A s t r o m   F ,   2 0 0 2 ,   E M E R G I N G   F R A M E W O R K S ,   P 1 8 5 ;   A s t r o m   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 9 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 6 7 ;   A s t r o m   F ,   2 0 1 0 ,   L I B R   Q U A R T ,   V 8 0 ,   P 1 4 3 ;   B a d k e   W ,   2 0 1 0 ,   O N L I N E ,   V 3 4 ,   P 4 8 ;   B a k r i   A ,   2 0 0 8 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 1 3 ,   P 1 0 3 ;   B a k r i   A ,   2 0 0 9 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 1 4 ,   P 3 9 ;   B a t e s   M J ,   1 9 9 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 0 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 9 8 ) 9 0 0 1 9 - 6 ;   B a t e s   M a r c i a   J . ,   2 0 1 0 ,   E N C Y   L I B   I N F O R M   S C I ;   B i a g i o l i   M . ,   2 0 0 3 ,   S C I   A U T H O R S H I P   C R E D I ,   P 2 5 3 ;   B i r n h o l t z   J P ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 7 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 8 0 ;   B l e s s i n g e r   K ,   2 0 1 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 9 . 1 2 . 0 0 7 ;   B o n n e v i e   E ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 1 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 3 2 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B u d d   J M ,   2 0 0 0 ,   L I B R   Q U A R T ,   V 7 0 ,   P 2 3 0 ;   B u t l e r   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 4 - 1 ;   B u t t l a r   L ,   1 9 9 9 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 1 ,   P 2 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 9 9 ) 0 0 0 0 5 - 5 ;   C a n o   V ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 6 7 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 8 < 6 7 5 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - B ;   C h a n g   Y W ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 4 9 ;   C o l e m a n   A ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 9 9 ;   C r o n i n   B ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 5 3 ;   C r o n i n   B ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 7 8 ;   C r o n i n   B ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 4 2 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 9 ;   C r o n i n   B ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 4 0 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 3 ;   C r o n i n   B ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 7 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 5 < 4 7 1 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - T ;   C r o n i n   B ,   2 0 0 8 ,   J   I N F   S C I ,   V 3 4 ,   P 4 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 8 0 8 8 9 4 4 ;   C r o n i n   B ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 4 ;   C r o n i n   B ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 9 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 6 7 ;   C r o n i n   B ,   2 0 0 9 ,   J   I N F   S C I ,   V 3 5 ,   P 3 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 8 1 0 0 8 3 1 ;   D i n g   Y ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 5 1 - 0 ;   D O N O H U E   J C ,   1 9 6 6 ,   A M   D O C ,   V 1 7 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 7 0 3 0 3 ;   E g g h e   L ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 5 7 - 3 ;   E N G E R   K B ,   1 9 8 9 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 1 ,   P 3 7 ;   E r f a n m a n e s h   M A ,   2 0 1 0 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 1 5 ,   P 8 5 ;   F a r k a s - C o n n   I . ,   1 9 9 0 ,   D O C U M E N T A T I O N   I N F O R M ;   F i d e l   R ,   2 0 0 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 3 0 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 8 . 0 4 . 0 0 1 ;   F u r n e r   J ,   2 0 0 9 ,   J   L I B R   I N F   S C I ,   V 4 1 ,   P 1 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 9 3 3 7 0 9 5 ;   G a o   S J ,   2 0 0 9 ,   L I B R   C O L L E C T   A C Q U I S ,   V 3 3 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / j . l c a t s . 2 0 0 9 . 0 3 . 0 0 1 ;   G i n g r a s   Y . ,   2 0 1 0 ,   1 1   I N T   C   S C I   T E C H N   I ,   P 1 0 0 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 4 - y ;   G r o t z i n g e r   L . ,   1 9 9 2 ,   I D E A L S   S T A N D A R D S   H I S ,   P 1 ;   H a k a n s o n   M ,   2 0 0 5 ,   C O L L   R E S   L I B R ,   V 6 6 ,   P 3 1 2 ;   H a r t   R L ,   2 0 0 0 ,   J   A C A D   L I B R ,   V 2 6 ,   P 3 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 9 - 1 3 3 3 ( 0 0 ) 0 0 1 4 0 - 3 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 5 8 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - O ;   H i d e r   P ,   2 0 0 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 3 0 ,   P 1 0 8 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 7 . 1 1 . 0 0 7 ;   H u   C P ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 6 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 1 3 - 6 ;   H u a n g   M H ,   2 0 1 1 ,   J   I N F   S C I ,   V 3 7 ,   P 3 6 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 1 4 0 7 1 4 1 ;   H u a n g   M H ,   2 0 1 1 ,   J   A C A D   L I B R ,   V 3 7 ,   P 3 4 ,   D O I   1 0 . 1 0 1 6 / j . a c a l i b . 2 0 1 0 . 1 0 . 0 0 5 ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   J A R V E L I N   K ,   1 9 9 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 2 ,   P 3 9 5 ;   J A R V E L I N   K ,   1 9 9 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 9 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 3 ) 9 0 0 2 8 - C ;   K e a t   Y C ,   2 0 0 8 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 1 3 ,   P 2 9 ;   K I M   M T ,   1 9 9 2 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 4 ,   P 7 5 ;   K o e h l e r   W . ,   2 0 0 0 ,   I N F O R M   R E S ,   V 6 ;   K U M P U L A I N E N   S ,   1 9 9 1 ,   L I B R I ,   V 4 1 ,   P 5 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 1 . 4 1 . 1 . 5 9 ;   L a r i v i e r e   V ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 4 ;   L a r i v i e r e   V ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 6 - 3 ;   L a r i v i e r e   V ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 8 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 1 1 ;   L e v i t t   J M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 3 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 0 0 ;   L i p e t z   B A ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 9 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 9 9 4 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - U ;   L i s e e   C ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 7 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 8 ;   M a b e   M . ,   2 0 0 3 ,   S E R I A L S ,   V 1 6 ,   P 1 9 1 ,   D O I   D O I   1 0 . 1 6 2 9 / 1 6 1 9 1 ;   M C D O N A L D   S ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 3 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 5 0 3 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   M e r t o n   R .   K . ,   1 9 6 8 ,   S O C I A L   T H E O R Y   S O C I A L ;   M i l o j e v i c   S ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 2 ;   M i n g u i l l o   D ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 7 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 8 2 ;   M o a h i   K H ,   2 0 0 8 ,   A F R   J   L I B R   A R C H   I N F O ,   V 1 8 ,   P 1 1 ;   M o y a - A n e g o n   F ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 5 9 2 2 6 ;   M u k h e r j e e   B ,   2 0 1 0 ,   J   A C A D   L I B R ,   V 3 6 ,   P 9 0 ;   M u k h e r j e e   B ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 5 5 - 2 ;   N e b e l o n g - B o n n e v i e   E ,   2 0 0 6 ,   J   D O C ,   V 6 2 ,   P 3 0 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 6 1 0 6 4 2 0 3 9 ;   N i   C . ,   2 0 1 0 ,   A S I S   T   2 0 1 0   P I T T S B   P ;   N i   C . ,   2 0 1 1 ,   P   2 0 1 1   A S I S   T   A N N   M ;   N i s o n g e r   T E ,   2 0 0 5 ,   C O L L   R E S   L I B R ,   V 6 6 ,   P 3 4 1 ;   N i s o n g e r   T E ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 1 0 0 4 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   O d e l l   J ,   2 0 0 8 ,   C O L L   R E S   L I B R ,   V 6 9 ,   P 5 4 6 ;   O n y a n c h a   O B ,   2 0 0 9 ,   A F R   J   L I B R   A R C H   I N F O ,   V 1 9 ,   P 1 0 1 ;   P e r i t z   B C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 1 8 0 1 3 0 9 6 ;   P E T T I G R E W   K E ,   1 9 9 4 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 6 ,   P 1 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 7 4 0 - 8 1 8 8 ( 9 4 ) 9 0 0 0 5 - 1 ;   P e t t i g r e w   K E ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 6 2 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 5 2 : 1 < 6 2 : : A I D - A S I 1 0 6 1 > 3 . 3 . C O ; 2 - A ;   F r a e n k e l   B ,   2 0 0 4 ,   S I G N A T U R E   S C I   S O C I O L ;   P O R T E R   A L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 4 ;   P r e b o r   G ,   2 0 1 0 ,   J   L I B R   I N F   S C I ,   V 4 2 ,   P 2 5 6 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 1 0 3 8 0 8 2 0 ;   P r i c e   D . J . D . ,   1 9 8 6 ,   C O M M U N I C A T I O N   S C I   E N ,   P 1 5 5 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R i c h a r d s o n   J r   J . R . ,   1 9 9 2 ,   G O S P E L   S C H O L A R S H I P   P ;   R i c h a r d s o n   J r   J . V . ,   1 9 8 2 ,   S P I R I T   I N Q U I R Y   G R A D U ;   R i n i a   E J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 5 6 6 2 5 6 2 3 ;   R i n i a   E J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 8 9 3 0 0 8 2 9 ;   S a p a   R ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 7 5 - 2 ;   S c h l o e g l   C ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 1 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 7 0 ;   S c h l o g l   C ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 6 4 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 9 9 6 9 1 ;   S i d d i q u i   M A ,   1 9 9 7 ,   I N T   F O R U M   I N F O R M   D O C ,   V 2 2 ,   P 3 ;   S i n   S C J ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 7 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 7 2 ;   S m e a t o n   A .   F . ,   2 0 0 3 ,   A C M   S I G I R   F O R U M ,   V 3 7 ,   P 4 9 ,   D O I   1 0 . 1 1 4 5 / 9 4 5 5 4 6 . 9 4 5 5 5 0 ;   S t e i n e r o v a   J ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 5 7 ;   S u g i m o t o   C R ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 8 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 6 8 ;   S u g i m o t o   C R ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 4 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 7 5 - 8 ;   S u g i m o t o   C R ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 3 5 ;   S u g i m o t o   C R ,   2 0 1 0 ,   J   I N F   S C I ,   V 3 6 ,   P 4 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 0 3 6 9 9 9 2 ;   S u g i m o t o   C . R . ,   2 0 1 2 ,   J   A M   S O C   I N   I N   P R E S S ;   S u g i m o t o   C .   R . ,   2 0 0 9 ,   J   E D   L I B   I N F O R M   S C I ,   V 5 0 ,   P 1 9 0 ;   T o m o v   D T ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 4 ;   T s a y   M Y ,   2 0 0 8 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 1 3 ,   P 1 2 1 ;   U z u n   A ,   2 0 0 2 ,   I N T   I N F   L I B R   R E V ,   V 3 4 ,   P 2 1 ,   D O I   1 0 . 1 0 0 6 / i i l r . 2 0 0 2 . 0 1 8 2 ;   V a k k a r i   P . ,   1 9 9 2 ,   C O N C E P T I O N S   L I B   I N F O ;   V a n   D e n   B e s s e l a a r   P ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 8 - 9 ;   V A N F L E E T   C ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 2 5 7 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   V i a   B J ,   2 0 0 7 ,   P O R T A L - L I B R   A C A D ,   V 7 ,   P 3 3 3 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 7 . 0 0 3 8 ;   W a l l a c e   M L ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 9 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 1 0 ;   W a l t m a n   L ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 4 9 - z ;   W h i t e   H D ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 4 2 > 3 . 3 . C O ; 2 - K ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W i e g a n d   W a y n e   A ,   1 9 9 6 ,   I R R E P R E S S I B L E   R E F O R M ;   W i g g i n s   A ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 1 9 ;   W o r m e l l   I ,   2 0 0 0 ,   L I B R I ,   V 5 0 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 0 . 7 5 ;   Y a n   E J ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 4 9 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 5 6 ;   Z h a o   D Z ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 9 1 - y 	 1 2 2 	 3 4 	 3 6 	 1 9 	 1 5 2 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A Y 	 2 0 1 2 	 6 3 	 5 	 	 	 	 	 9 9 7 	 1 0 1 6 	 	 1 0 . 1 0 0 2 / a s i . 2 2 6 4 5 	 	 2 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 3 5 D X 	 W O S : 0 0 0 3 0 3 5 0 0 3 0 0 0 1 0 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 N a t i o n a l - s c a l e   r e s e a r c h   p e r f o r m a n c e   a s s e s s m e n t   a t   t h e   i n d i v i d u a l   l e v e l 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   a s s e s s m e n t   e x e r c i s e s ;   R e s e a r c h   f u n d i n g ;   U n i v e r s i t y ;   B i b l i o m e t r i c s ;   I t a l y 	 B I B L I O M E T R I C   I N D I C A T O R S ;   O U T P U T 	 T h e r e   i s   a n   e v i d e n t   a n d   r a p i d   t r e n d   t o w a r d s   t h e   a d o p t i o n   o f   e v a l u a t i o n   e x e r c i s e s   f o r   n a t i o n a l   r e s e a r c h   s y s t e m s   f o r   p u r p o s e s ,   a m o n g   o t h e r s ,   o f   i m p r o v i n g   a l l o c a t i v e   e f f i c i e n c y   i n   p u b l i c   f u n d i n g   o f   i n d i v i d u a l   i n s t i t u t i o n s .   H o w e v e r   t h e   d e s i r e d   m a c r o e c o n o m i c   a i m s   c o u l d   b e   c o m p r o m i s e d   i f   i n t e r n a l   r e d i s t r i b u t i o n   o f   g o v e r n m e n t   r e s o u r c e s   w i t h i n   e a c h   r e s e a r c h   i n s t i t u t i o n   d o e s   n o t   f o l l o w   a   c o n s i s t e n t   l o g i c :   t h e   i n t e n d e d   e f f e c t s   o f   n a t i o n a l   e v a l u a t i o n   s y s t e m s   c a n   r e s u l t   o n l y   i f   a   " f u n d s   f o r   q u a l i t y "   r u l e   i s   f o l l o w e d   a t   a l l   l e v e l s   o f   d e c i s i o n - m a k i n g .   T h e   o b j e c t i v e   o f   t h i s   s t u d y   i s   t o   p r o p o s e   a   b i b l i o m e t r i c   m e t h o d o l o g y   f o r :   ( i )   l a r g e - s c a l e   c o m p a r a t i v e   e v a l u a t i o n   o f   r e s e a r c h   p e r f o r m a n c e   b y   i n d i v i d u a l   s c i e n t i s t s ,   r e s e a r c h   g r o u p s   a n d   d e p a r t m e n t s   w i t h i n   r e s e a r c h   i n s t i t u t i o n ,   t o   i n f o r m   s e l e c t i v e   f u n d i n g   a l l o c a t i o n s ;   a n d   ( i i )   a s s e s s m e n t   o f   s t r e n g t h s   a n d   w e a k n e s s e s   b y   f i e l d   o f   r e s e a r c h ,   t o   i n f o r m   s t r a t e g i c   p l a n n i n g   a n d   c o n t r o l .   T h e   p r o p o s e d   m e t h o d o l o g y   h a s   b e e n   a p p l i e d   t o   t h e   h a r d   s c i e n c e   d i s c i p l i n e s   o f   t h e   I t a l i a n   u n i v e r s i t y   r e s e a r c h   s y s t e m   f o r   t h e   p e r i o d   2 0 0 4 - 2 0 0 6 . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I - 0 0 1 8 5   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 a b r a r n o @ d i s p . u n i r o m a 2 . i t ;   d a n g e l o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 C a p r a s e c c a   A . ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V < I T > 7 9 < / I T > ,   P 5 1 7 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   B H A T T A C H A R Y A   A ,   2 0 0 8 ,   A L L O C A T I V E   E F F I C I E N C ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B u t l e r   L ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 5 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 8 ;   E R A ,   2 0 1 0 ,   E X C   R E S   A U S T R   E R A   I N ;   F r a n c e s c h e t   M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 9 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 5 2 ;   G e u n a   A ,   2 0 0 3 ,   M I N E R V A ,   V 4 1 ,   P 2 7 7 ,   D O I   1 0 . 1 0 2 3 / B : M I N E . 0 0 0 0 0 0 5 1 5 5 . 7 0 8 7 0 . b d ;   H i c k s   D ,   2 0 0 9 ,   H I G H   E D U C ,   V 5 7 ,   P 3 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 8 - 9 1 5 4 - 0 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   * O R P ,   2 0 0 9 ,   O B S   P U B L   R E S   I T ;   O r r   D . ,   2 0 0 7 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 2 9 ,   P 3 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 0 0 8 0 0 6 0 0 9 8 0 0 7 2 ;   * P B R F ,   2 0 0 8 ,   P E R F   B A S   R E S   F U N D   N Z ;   R o u s s e a u   R ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 7 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 5 1 4 2 9 3 6 8 ;   S a n d s t r o m   U . ,   2 0 0 9 ,   1 2   I N T   C   S C I E N T   I N F ;   S H A T T O C K   M ,   2 0 0 4 ,   P E R S P E C T I V E S   P O L I C Y ,   V 8 ,   P 1 1 9 ;   S t r e h l   F . ,   2 0 0 7 ,   O E C D   E D   W O R K I N G   P A P E ,   D O I   [ 1 0 . 1 7 8 7 / 2 2 0 2 4 4 8 0 1 4 1 7 ,   D O I   1 0 . 1 7 8 7 / 2 2 0 2 4 4 8 0 1 4 1 7 ] ;   V a n   d e n   B e r g h e   H ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 5 9 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - # ;   V a n   L e e u w e n   T N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 8 7 0 9 6 9 4 ;   V T R ,   2 0 0 6 ,   I T   T R I E N N   R E S   E V   V T R 	 2 2 	 3 4 	 3 4 	 1 	 4 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 1 	 8 6 	 2 	 	 	 	 	 3 4 7 	 3 6 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 1 0 F L 	 W O S : 0 0 0 2 8 6 4 9 6 2 0 0 0 1 0 	 	 
 
 J 	 K a j i k a w a ,   Y ;   T a k e d a ,   Y 	 	 	 	 K a j i k a w a ,   Y u y a ;   T a k e d a ,   Y o s h i y u k i 	 	 	 C i t a t i o n   n e t w o r k   a n a l y s i s   o f   o r g a n i c   L E D s 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C i t a t i o n   n e t w o r k ;   B i b l i o m e t r i c s ;   R e s e a r c h   f r o n t ;   R e s e a r c h   e v a l u a t i o n ;   O r g a n i c   l i g h t - e m i t t i n g   d i o d e s 	 L I G H T - E M I T T I N G - D I O D E S ;   S E M I C O N D U C T O R   L I T E R A T U R E ;   E L E C T R O L U M I N E S C E N T   D E V I C E S ;   C O C I T A T I O N   A N A L Y S I S ;   R E S E A R C H   A R E A ;   P O L Y M E R S ;   S C I E N C E ;   E M I S S I O N ;   T R A C K I N G ;   M A P 	 T h e   f i e l d   o f   o r g a n i c   l i g h t - e m i t t i n g   d i o d e s   ( O L E D s )   i s   a n   e m e r g e n t   r e s e a r c h   d o m a i n   b e c a u s e   o f   b o t h   s c i e n t i f i c   i n t e r e s t   i n   c h e m i s t r y   a n d   c o n d e n s e d   m a t t e r   p h y s i c s   a n d   i n d u s t r i a l   i m p o r t a n c e   a s   f l a t   p a n e l   d i s p l a y s .   I n   t h i s   p a p e r ,   w e   a n a l y z e d   a   c i t a t i o n   n e t w o r k   o f   O L E D   p a p e r s   a n d   u s e d   a   t o p o l o g i c a l   c l u s t e r i n g   m e t h o d   t o   i n v e s t i g a t e   t h e   s t r u c t u r e   o f   r e s e a r c h   a n d   t o   d e t e c t   e m e r g i n g   r e s e a r c h   d o m a i n s .   W e   f o u n d   t h a t   m o s t   p a p e r s   b e l o n g   t o   t w o   m a i n   c l u s t e r s :   o r g a n i c s   a n d   p o l y m e r s .   T h e s e   t w o   c l u s t e r s   h a v e   d i s t i n c t i v e   d i f f e r e n c e s   i n   s u b c l u s t e r   s t r u c t u r e s   a n d   j o u r n a l s   w h e r e   p a p e r s   a r e   p u b l i s h e d .   S u p p o s i n g   t h i s   d i s c r e p a n c y   t o   i n d i c a t e   r e s e a r c h   p r o g r e s s ,   o r g a n i c s   a r e   i n   t h e   a p p l i e d   r e s e a r c h   s t a g e ,   w h i l e   p o l y m e r s   a r e   i n   t h e   b a s i c   r e s e a r c h   s t a g e .   ( C )   2 0 0 9   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ K a j i k a w a ,   Y u y a ;   T a k e d a ,   Y o s h i y u k i ]   U n i v   T o k y o ,   I n n o v a t   P o l i c y   R e s   C t r ,   I n s t   E n g n   I n n o v a t ,   S c h   E n g n , B u n k y o   K u ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n 	 K a j i k a w a ,   Y   ( r e p r i n t   a u t h o r ) ,   U n i v   T o k y o ,   I n n o v a t   P o l i c y   R e s   C t r ,   I n s t   E n g n   I n n o v a t ,   S c h   E n g n , B u n k y o   K u ,   2 - 1 1 - 1 6   Y a y o i ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n . 	 k a j i @ b i z - m o d e l . t . u - t o k y o . a c . j p 	 K a j i k a w a ,   Y u y a / C - 1 9 9 6 - 2 0 1 5 	 K a j i k a w a ,   Y u y a / 0 0 0 0 - 0 0 0 3 - 3 5 7 7 - 5 1 6 7 	 	 	 A D A C H I   C ,   1 9 9 0 ,   A P P L   P H Y S   L E T T ,   V 5 6 ,   P 7 9 9 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 0 3 1 7 7 ;   A d a i   A T ,   2 0 0 4 ,   J   M O L   B I O L ,   V 3 4 0 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j m b . 2 0 0 4 . 0 4 . 0 4 7 ;   B a l d o   M A ,   1 9 9 9 ,   A P P L   P H Y S   L E T T ,   V 7 5 ,   P 4 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 2 4 2 5 8 ;   B a l d o   M A ,   1 9 9 8 ,   N A T U R E ,   V 3 9 5 ,   P 1 5 1 ;   B h a t t a c h a r y a   S ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 4 4 8 2 8 7 5 9 ;   B h a t t a c h a r y a   S ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 0 4 ;   B R A U N   D ,   1 9 9 1 ,   A P P L   P H Y S   L E T T ,   V 5 8 ,   P 1 9 8 2 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 0 5 0 3 9 ;   B U R R O U G H E S   J H ,   1 9 9 0 ,   N A T U R E ,   V 3 4 7 ,   P 5 3 9 ,   D O I   1 0 . 1 0 3 8 / 3 4 7 5 3 9 a 0 ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   G R E E N H A M   N C ,   1 9 9 3 ,   N A T U R E ,   V 3 6 5 ,   P 6 2 8 ,   D O I   1 0 . 1 0 3 8 / 3 6 5 6 2 8 a 0 ;   G R E M   G ,   1 9 9 2 ,   A D V   M A T E R ,   V 4 ,   P 3 6 ,   D O I   1 0 . 1 0 0 2 / a d m a . 1 9 9 2 0 0 4 0 1 0 7 ;   G u a n   J C ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 2 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 6 9 - 0 ;   G u a n   J C ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 1 0 7 - 7 ;   G u p t a   B M ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 1 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 1 4 - 9 ;   G U S T A F S S O N   G ,   1 9 9 2 ,   N A T U R E ,   V 3 5 7 ,   P 4 7 7 ,   D O I   1 0 . 1 0 3 8 / 3 5 7 4 7 7 a 0 ;   H u a n g   M H ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 8 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 6 . 2 9 0 5 2 . b f ;   H u n g   L S ,   1 9 9 7 ,   A P P L   P H Y S   L E T T ,   V 7 0 ,   P 1 5 2 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 1 8 3 4 4 ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 7 7 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 5 . 0 0 5 ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 1 3 4 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 4 . 0 0 7 ;   K I D O   J ,   1 9 9 5 ,   S C I E N C E ,   V 2 6 7 ,   P 1 3 3 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 6 7 . 5 2 0 2 . 1 3 3 2 ;   K l a v a n s   R ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 7 4 ;   R o j o   R ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 8 - 1 ;   S h i b a t a   N ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 5 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 9 4 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   S m a l l   H ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 3 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 2 4 - 0 ;   T a k e d a   Y ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 5 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 1 2 - 5 ;   T A N G   C W ,   1 9 8 7 ,   A P P L   P H Y S   L E T T ,   V 5 1 ,   P 9 1 3 ,   D O I   1 0 . 1 0 6 3 / 1 . 9 8 7 9 9 ;   T s a y   M Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 4 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 9 3 8 2 4 7 1 6 ;   T s a y   M Y ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 2 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 8 . 8 3 1 0 4 . 6 1 ;   T s a y   M Y ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 6 7 3 1 8 9 3 4 ;   T s a y   M Y ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 1 5 1 2 7 4 5 9 ;   V a n S l y k e   S A ,   1 9 9 6 ,   A P P L   P H Y S   L E T T ,   V 6 9 ,   P 2 1 6 0 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 1 7 1 5 1 	 3 2 	 3 4 	 3 5 	 1 	 2 9 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 O C T 	 2 0 0 9 	 7 6 	 8 	 	 	 	 	 1 1 1 5 	 1 1 2 3 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 4 . 0 0 4 	 	 9 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 5 0 0 Y W 	 W O S : 0 0 0 2 7 0 3 4 4 0 0 0 0 0 9 	 	 
 
 J 	 G a r f i e l d ,   E 	 	 	 	 G a r f i e l d ,   E u g e n e 	 	 	 F r o m   t h e   s c i e n c e   o f   s c i e n c e   t o   S c i e n t o m e t r i c s   v i s u a l i z i n g   t h e   h i s t o r y   o f   s c i e n c e   w i t h   H i s t C i t e   s o f t w a r e 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l - S o c i e t y - f o r - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s 	 J U N   2 5 - 2 7 ,   2 0 0 7 	 M a d r i d ,   S P A I N 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r ,   C S I C ,   M i n i s t   E d u c   &   C i e n c i a ,   F E C Y T ,   C o m u n i d a d   M a d r i d ,   E u g e n e   G a r f i e l d   F d n ,   T h o m s o n ,   E l s e v i e r ,   J o u r n a l   I n f o r m e t r ,   S c o p u s ,   A y u n t a m i e n t o   M a d r i d ,   S c i   M e t r i x ,   U n i v   C a r l o s   I I I   M a d r i d 	 	 H i s t o r y   o f   S c i e n t o m e t r i c s ;   E t y m o l o g y   o f   S c i e n t o m e t r i c s ;   D e r e k   J D   P r i c e ;   V V   N a l i m o v ;   J D   B e r n a l ;   S c i e n c e   o f   s c i e n c e ;   H i s t C i t e ;   A l g o r i t h m i c ;   H i s t o r i o g r a p h y ;   B i b l i o m e t r i c s 	 C I T A T I O N   I N D E X E S ;   D I M E N S I O N 	 W h i l e   I S S I   w a s   f o u n d e d   i n   1 9 9 3 ,   S c i e n t o m e t r i c s   a n d   B i b l i o m e t r i c s   a r e   n o w   a t   l e a s t   h a l f   a   c e n t u r y   o l d .   I n d e e d ,   t h e   f i e l d   c a n   b e   t r a c e d   t o   e a r l y   q u a n t i t a t i v e   s t u d i e s   i n   t h e   e a r l y   2 0 t h   c e n t u r y .   I n   t h e   1 9 3 0 s ,   i t   e v o l v e d   t o   t h e   " s c i e n c e   o f   s c i e n c e . "   T h e   p u b l i c a t i o n   o f   J . D .   B e r n a l ' s   S o c i a l   F u n c t i o n   o f   S c i e n c e   i n   1 9 3 9   w a s   a   k e y   t r a n s i t i o n   p o i n t   b u t   t h e   f i e l d   l a y   d o r m a n t   u n t i l   a f t e r   W o r l d   W a r   I I ,   w h e n   D . J . D .   P r i c e ' s   b o o k s   S c i e n c e   S i n c e   B a b y l o n   a n d   L i t t l e   S c i e n c e ,   B i g   S c i e n c e   w e r e   p u b l i s h e d   i n   1 9 6 1   a n d   1 9 6 3 .   H i s   r o l e   a s   t h e   " F a t h e r   o f   S c i e n t o m e t r i c s "   i s   c l e a r l y   e v i d e n t   b y   u s i n g   t h e   H i s t C i t e   s o f t w a r e   t o   v i s u a l i z e   h i s   i m p a c t   a s   w e l l   a s   t h e   s u b s e q u e n t   i m p a c t   o f   t h e   j o u r n a l   S c i e n t o m e t r i c s   o n   t h e   g r o w t h   o f   t h e   f i e l d .   S c i e n t o m e t r i c s   o w e s   i t s   n a m e   t o   V . V .   N a l i m o v ,   t h e   a u t h o r   o f   N a u k o m e t r i y a ,   a n d   t o   T i b o r   B r a u n   w h o   a d a p t e d   t h e   n e o l o g i s m   f o r   t h e   j o u r n a l .   T h e   p r i m o r d i a l   p a p e r   o n   c i t a t i o n   i n d e x i n g   b y   G a r f i e l d   w h i c h   a p p e a r e d   i n   S c i e n c e   1 9 5 5   b e c a m e   a   b r i d g e   b e t w e e n   B e r n a l   a n d   P r i c e .   T h e   t i m e l i n e   f o r   t h e   e v o l u t i o n   o f   S c i e n t o m e t r i c s   i s   d e m o n s t r a t e d   b y   a   H i s t C i t e   t a b u l a t i o n   o f   t h e   r a n k e d   c i t a t i o n   i n d e x   o f   t h e   1 0 0 , 0 0 0   r e f e r e n c e s   c i t e d   i n   t h e   3 0 0 0   p a p e r s   c i t i n g   P r i c e .   ( C )   2 0 0 9   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 T h o m s o n   I S I ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 G a r f i e l d ,   E   ( r e p r i n t   a u t h o r ) ,   T h o m s o n   I S I ,   3 5 0 1   M a r k e t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 g a r f i e l d @ c o d e x . c i s . u p e n n . e d u 	 G a r f i e l d ,   E u g e n e / A - 1 0 0 9 - 2 0 0 8 ;   p a r l a k ,   d i d e m / G - 6 5 9 8 - 2 0 1 6 	 p a r l a k ,   d i d e m / 0 0 0 0 - 0 0 0 1 - 6 0 8 6 - 9 4 2 7 	 	 	 B E N S M A N   S J ,   2 0 0 7 ,   M U L T I D I M E N S I O N A L   W   S ,   V 3 ;   B e r n a l   J o h n   D e s m o n d ,   1 9 3 9 ,   S O C I A L   F U N C T I O N   S C I ;   B U S H   V . ,   1 9 4 5 ,   A T L A N T I C   M O N T H L Y ,   V 1 7 6 ;   D E D I J E R   S ,   1 9 6 2 ,   S C I E N C E ,   V 1 3 8 ,   P 7 8 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 8 . 3 5 4 2 . 7 8 1 ;   G a r f i e l d   E ,   2 0 0 4 ,   J   I N F   S C I ,   V 3 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 2 8 0 2 ;   G A R F I E L D   E ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 9 . 6 4 9 ;   G a r f i e l d   E ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 6 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 7 ,   B R I T   A S S   C R Y S T   G R O W T ;   G o l d s m i t h   M a u r i c e ,   1 9 6 4 ,   S C I   S C I ;   M e r t o n   R .   K . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   N a l i m o v   V . ,   1 9 6 9 ,   N A U K O M E T R I Y A   I Z U C H E N ;   P R I C E   D ,   1 9 8 0 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 3 ,   p R 5 ;   P r i c e   D e r e k   J ,   1 9 7 5 ,   S C I   B A B Y L O N ;   P R I C E   D J D ,   1 9 8 3 ,   C C / S O C   B E H A V   S C I ,   P 1 8 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P r i c e   D .   J .   d .   S . ,   1 9 6 1 ,   S C I   B A B Y L O N ;   P r i c e   D .   J . ,   1 9 5 6 ,   D I S C O V E R Y ,   V 1 7 ,   P 2 4 0 ;   P r i c e   D e r e k - D e - S o l l a ,   1 9 5 1 ,   A R C H   I N T   H I S T   S C I ,   V 4 ,   P 8 5 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   T U K E Y   J W ,   1 9 6 2 ,   I E E E   T   P R O F   C O M M U N ,   V E W S 5 ,   P 7 8 ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M 	 2 2 	 3 4 	 3 8 	 9 	 1 5 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J U L 	 2 0 0 9 	 3 	 3 	 	 	 	 	 1 7 3 	 1 7 9 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 0 9 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 5 9 W T 	 W O S : 0 0 0 2 6 7 1 4 4 2 0 0 0 0 2 	 	 
 
 J 	 C h a r v e t ,   F F ;   C o o p e r ,   M C ;   G a r d n e r ,   J T 	 	 	 	 C h a r v e t ,   F r a n c o i s   F . ;   C o o p e r ,   M a r t h a   C . ;   G a r d n e r ,   J o h n   T . 	 	 	 T H E   I N T E L L E C T U A L   S T R U C T U R E   O F   S U P P L Y   C H A I N   M A N A G E M E N T :   A   B I B L I O M E T R I C   A P P R O A C H 	 J O U R N A L   O F   B U S I N E S S   L O G I S T I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C o - C i t a t i o n   a n a l y s i s ,   L o g i s t i c s ;   P r o d u c t i o n   a n d   o p e r a t i o n s   m a n a g e m e n t ;   P u r c h a s i n g ;   S u p p l y   c h a i n   m a n a g e m e n t 	 C I T A T I O N   A N A L Y S I S ;   C O C I T A T I O N   A N A L Y S I S ;   M A R K E T I N G   J O U R N A L S ;   A U T H O R   C O C I T A T I O N ;   C O N S U M E R   R E S E A R C H ;   I N F O R M A T I O N ;   C L A S S I F I C A T I O N ;   P E R S P E C T I V E ;   D I S C I P L I N E ;   I N C E N T I V E S 	 N o w   t h a t   s u p p l y   c h a i n   m a n a g e m e n t   h a s   a   t w o - d e c a d e   r e s e a r c h   h i s t o r y ,   i t   i s   p o s s i b l e   t o   e x a m i n e   t h e   l i t e r a t u r e   t o   i d e n t i f y   w h e t h e r   t h e r e   i s   a n y   l a t e n t   i n t e l l e c t u a l   s t r u c t u r e   u s i n g   b i b l i o m e t r i c   t o o l s .   T h e   s t u d y   a p p l i e s   a   c i t a t i o n   a n d   c o - c i t a t i o n   a p p r o a c h   t o   r e v e a l   f o u r   c l u s t e r s   o f   r e s e a r c h   t h a t   h a v e   e m e r g e d .   O n e   c l u s t e r   h a s   s t r o n g   t i e s   t o   t h e   l o g i s t i c s   f i e l d ,   w i t h   p r i m a r i l y   c o n c e p t u a l   a r t i c l e s .   A   s e c o n d   c l u s t e r   f i n d s   i t s   r o o t s   i n   o p e r a t i o n s   r e s e a r c h ,   a n d   c o n s i s t s   m a i n l y   o f   m o d e l i n g   a r t i c l e s .   T h e   a p p l i c a t i o n   o f   m u l t i d i m e n s i o n a l   s c a l i n g ,   c l u s t e r   a n a l y s i s ,   a n d   f a c t o r   a n a l y s i s   o n   c o - c i t a t i o n s   d e m o n s t r a t e d   a   c l e a r l y   i d e n t i f i a b l e   s t r u c t u r e .   T h e   s t r u c t u r e   i s   e x a m i n e d   a n d   i m p l i c a t i o n s   f o r   t h e   f u t u r e   d e v e l o p m e n t   o f   s u p p l y   c h a i n   r e s e a r c h   a r e   d i s c u s s e d . 	 [ C h a r v e t ,   F r a n c o i s   F . ;   C o o p e r ,   M a r t h a   C . ]   O h i o   S t a t e   U n i v ,   F i s h e r   C o l l   B u s i n e s s ,   C o l u m b u s ,   O H   4 3 2 1 0   U S A ;   [ C o o p e r ,   M a r t h a   C . ]   A F   I n s t   T e c h n o l ,   W r i g h t   P a t t e r s o n   A F B ,   O H   4 5 4 3 3   U S A ;   [ G a r d n e r ,   J o h n   T . ]   S U N Y   C o l l   B r o c k p o r t ,   B r o c k p o r t ,   N Y   1 4 4 2 0   U S A 	 C h a r v e t ,   F F   ( r e p r i n t   a u t h o r ) ,   O h i o   S t a t e   U n i v ,   F i s h e r   C o l l   B u s i n e s s ,   C o l u m b u s ,   O H   4 3 2 1 0   U S A . 	 	 K u m a r ,   A j i t / J - 1 6 1 7 - 2 0 1 5 	 K u m a r ,   A j i t / 0 0 0 0 - 0 0 0 3 - 3 2 5 5 - 5 0 5 4 	 	 	 A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A R N T Z E N   B C ,   1 9 9 5 ,   I N T E R F A C E S ,   V 2 5 ,   P 6 9 ,   D O I   1 0 . 1 2 8 7 / i n t e . 2 5 . 1 . 6 9 ;   A U T R Y   C W ,   2 0 0 4 ,   T R A N S P O R T   J ,   V 4 ,   P 2 7 ;   A v i v   Y ,   2 0 0 1 ,   M A N A G E   S C I ,   V 4 7 ,   P 1 3 2 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 7 . 1 0 . 1 3 2 6 . 1 0 2 6 0 ;   B a r m a n   S ,   2 0 0 1 ,   J   O P E R   M A N A G ,   V 1 9 ,   P 3 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 0 0 ) 0 0 0 6 0 - 7 ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B e c h t e l   C . ,   1 9 9 7 ,   I N T   J   L O G I S T   M A N A G ,   V 8 ,   P 1 5 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 7 4 0 9 9 7 1 0 8 0 5 5 6 5 ;   B h a s k a r a n   S ,   1 9 9 8 ,   D E C I S I O N   S C I ,   V 2 9 ,   P 6 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 8 . t b 0 1 3 5 7 . x ;   B r e w e r   P ,   2 0 0 0 ,   J   B U S I N E S S   L O G I S T I C S ,   V 2 1 ,   P 7 5 ;   B R O W N   L D ,   1 9 8 5 ,   J   A C C O U N T I N G   R E S ,   V 2 3 ,   P 8 4 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 0 9 0 8 ;   C a r l e y   K . ,   1 9 8 9 ,   C O M P U T E R   A N A L   Q U A L I T ;   C o o p e r   C L ,   1 9 9 7 ,   J   O R G A N   B E H A V ,   V 1 8 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 9 - 1 3 7 9 ( 1 9 9 7 0 1 ) 1 8 : 1 < 1 : : A I D - J O B 8 3 4 > 3 . 0 . C O ; 2 - J ;   C o o p e r   M a r t h a   C . ,   1 9 9 7 ,   I N T   J   L O G I S T   M A N A G ,   V 8 ,   P 1 ,   D O I   D O I   1 0 . 1 1 0 8 / 0 9 5 7 4 0 9 9 7 1 0 8 0 5 5 5 6 ;   C O O P E R   M C ,   2 0 0 6 ,   1 7   A N N   C   P R O D   O P   M A N ;   C O T E   J A ,   1 9 9 1 ,   J   C O N S U M   R E S ,   V 1 8 ,   P 4 0 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 2 6 9 ;   C O U R T I A L   J P ,   1 9 8 4 ,   J   I N F O R M   S C I ,   V 9 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 4 0 0 9 0 0 2 0 1 ;   C r o x t o n   K .   L . ,   2 0 0 1 ,   I N T   J   L O G I S T   M A N A G ,   V 1 2 ,   P 1 3 ,   D O I   D O I   1 0 . 1 1 0 8 / 0 9 5 7 4 0 9 0 1 1 0 8 0 6 2 7 1 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   C u l n a n   M .   J . ,   1 9 8 7 ,   M I S   Q ,   V 1 1 ,   P 3 4 0 ;   E o m   S .   B . ,   2 0 0 3 ,   A U T H O R   C O C I T A T I O N   A N ;   G o h   C .   H . ,   1 9 9 7 ,   J   O P E R A T I O N S   M A N A G E M ,   V 1 5 ,   P 1 2 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 9 6 ) 0 0 1 0 2 - 7 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   H o u l i h a n   J   B . ,   1 9 8 5 ,   I N T   J   P H Y S   D I S T R I B ,   V 1 5 ,   P 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 1 4 6 0 1 ;   H u l t   G .   T .   M . ,   1 9 9 7 ,   J   M A R K E T I N G   E D ,   V 1 9 ,   P 3 7 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 2 7 3 4 7 5 3 9 7 0 1 9 0 0 1 0 5 ;   H U N T   S D ,   1 9 9 0 ,   J   M A R K E T I N G ,   V 5 4 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 8 1 2 ;   K e r l i n g e r   F . N ,   1 9 7 3 ,   F D N   B E H A V   R E S ;   K r a u s e   D R ,   1 9 9 8 ,   J   O P E R   M A N A G ,   V 1 7 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 9 8 ) 0 0 0 3 0 - 8 ;   K r i p p e n d o r f   K l a u s ,   1 9 8 0 ,   C O N T E N T   A N A L   I N T R O   I ;   K r u s k a l   J . B ,   1 9 7 8 ,   M U L T I D I M E N S I O N A L   S C A ;   K u m a r   V . ,   2 0 0 4 ,   I n t e r n a t i o n a l   J o u r n a l   o f   P h y s i c a l   D i s t r i b u t i o n   &   L o g i s t i c s   M a n a g e m e n t ,   V 3 4 ,   P 8 1 1 ,   D O I   1 0 . 1 1 0 8 / 0 9 6 0 0 0 3 0 4 1 0 5 7 1 3 7 4 ;   L a m b e r t   D M ,   2 0 0 0 ,   I N D   M A R K E T   M A N A G ,   V 2 9 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 8 5 0 1 ( 9 9 ) 0 0 1 1 3 - 3 ;   L A M B E R T   D M ,   1 9 9 8 ,   I N T   J   L O G I S T   M A N A G ,   V 9 ,   P 1 9 ;   L a m b e r t   D .   M . ,   2 0 0 1 ,   I N T   J   L O G I S T   M A N A G ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 7 4 0 9 0 1 1 0 8 0 6 1 9 0 ;   L a m m i n g   R ,   1 9 9 6 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 6 1 0 1 0 9 9 1 0 ;   L a m m i n g   R ,   2 0 0 0 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 0 ,   P 6 7 5 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 0 1 0 3 2 1 6 6 7 ;   L a t t i n   J .   M . ,   2 0 0 3 ,   A N A L   M U L T I V A R I A T E   D A ;   L e e   H ,   1 9 9 9 ,   M A N A G E   S C I ,   V 4 5 ,   P 6 3 3 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 5 . 5 . 6 3 3 ;   L e e   H L ,   2 0 0 0 ,   M A N A G E   S C I ,   V 4 6 ,   P 6 2 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 6 . 5 . 6 2 6 . 1 2 0 4 7 ;   L e e   H L ,   1 9 9 7 ,   M A N A G E   S C I ,   V 4 3 ,   P 5 4 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 3 . 4 . 5 4 6 ;   L o w r y   P . ,   2 0 0 4 ,   J   A S S O C   I N F   S Y S T ,   V 5 ,   P 2 9 ;   L u m m u s   R .   R . ,   1 9 9 8 ,   P r o d u c t i o n   a n d   I n v e n t o r y   M a n a g e m e n t   J o u r n a l ,   V 3 9 ,   P 4 9 ;   M a b e r t   V A ,   1 9 9 8 ,   D E C I S I O N   S C I ,   V 2 9 ,   P 5 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 8 . t b 0 1 3 5 3 . x ;   M a l o n i   M J ,   1 9 9 7 ,   E U R   J   O P E R   R E S ,   V 1 0 1 ,   P 4 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 7 - 2 2 1 7 ( 9 7 ) 0 0 1 1 8 - 5 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M e n t z e r   J .   T . ,   2 0 0 1 ,   J   B U S I N E S S   L O G I S T I C S ,   V 2 2 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / J . 2 1 5 8 - 1 5 9 2 . 2 0 0 1 . T B 0 0 0 0 1 . X ;   M o n c z k a   R M ,   1 9 9 8 ,   D E C I S I O N   S C I ,   V 2 9 ,   P 5 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 8 . t b 0 1 3 5 4 . x ;   M y l o n o p o u l o s   N A ,   2 0 0 1 ,   C O M M U N   A C M ,   V 4 4 ,   P 2 9 ,   D O I   1 0 . 1 1 4 5 / 3 8 3 6 9 4 . 3 8 3 7 0 1 ;   N a r a s i m h a n   R ,   1 9 9 8 ,   D E C I S I O N   S C I ,   V 2 9 ,   P 5 7 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 8 . t b 0 1 3 5 5 . x ;   N o y o n s   E .   C .   M . ,   1 9 9 9 ,   B I B L I O M E T R I C   M A P P I N G ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R a g h u n a t h a n   S ,   1 9 9 9 ,   D E C I S I O N   S C I ,   V 3 0 ,   P 1 0 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 9 . t b 0 0 9 1 8 . x ;   R a g h u n a t h a n   S ,   2 0 0 1 ,   M A N A G E   S C I ,   V 4 7 ,   P 6 0 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 7 . 4 . 6 0 5 . 9 8 3 3 ;   R a i n e r   R K ,   2 0 0 5 ,   C O M M U N   A C M ,   V 4 8 ,   P 9 1 ,   D O I   1 0 . 1 1 4 5 / 1 0 4 2 0 9 1 . 1 0 4 2 0 9 6 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   S a h i n   F ,   2 0 0 2 ,   D E C I S I O N   S C I ,   V 3 3 ,   P 5 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 2 0 0 2 . t b 0 1 6 5 4 . x ;   D r o g e   C .   L . ,   2 0 0 0 ,   J   B U S I N E S S   L O G I S T I C S ,   V 2 1 ,   P 2 3 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M I R C I C H   L ,   1 9 8 3 ,   A D M I N   S C I   Q U A R T ,   V 2 8 ,   P 3 3 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 2 4 6 ;   S t a n k   T .   P . ,   2 0 0 1 ,   J   B U S I N E S S   L O G I S T I C S ,   V 2 2 ,   P 2 9 ,   D O I   D O I   1 0 . 1 0 0 2 / J . 2 1 5 8 - 1 5 9 2 . 2 0 0 1 . T B 0 0 1 5 8 . X ;   S W A M I N A T H A N   J M ,   1 9 9 8 ,   D E C I S I O N   S C I ,   V 2 9 ,   P 3 ;   T a n   K C ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 1 0 3 4 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 8 7 0 6 4 ;   T a r n   J M ,   2 0 0 2 ,   I N D   M A N A G E   D A T A   S Y S T ,   V 1 0 2 ,   P 2 6 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 3 5 5 7 0 2 1 0 4 1 4 6 3 1 ;   T h e o h a r a k i s   V ,   2 0 0 2 ,   M A R K E T   L E T T ,   V 1 3 ,   P 3 8 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 3 7 8 7 1 8 4 5 6 ;   T h o m a s   D J ,   1 9 9 6 ,   E U R   J   O P E R   R E S ,   V 9 4 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 9 6 ) 0 0 0 9 8 - 7 ;   T s a y   A A ,   1 9 9 9 ,   M A N A G E   S C I ,   V 4 5 ,   P 1 3 3 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 5 . 1 0 . 1 3 3 9 ;   V o k u r k a   R .   J . ,   1 9 9 6 ,   J   O P E R A T I O N S   M A N A G E M ,   V 1 4 ,   P 3 4 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 9 6 ) 0 0 0 9 2 - 7 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 	 6 9 	 3 4 	 3 5 	 7 	 3 3 	 C S C M P - C O U N C I L   S U P P L Y   C H A I N   M A N A G E M E N T   P R O F E S S I O N A L S 	 L O M B A R D 	 3 3 3   E   B U T T E R F I E L D   R D ,   S T E   1 4 0 ,   L O M B A R D ,   I L   6 0 1 4 8 - 5 6 1 7   U S A 	 0 7 3 5 - 3 7 6 6 	 	 	 J   B U S   L O G I S T 	 J .   B u s .   L o g i s t . 	 	 2 0 0 8 	 2 9 	 1 	 	 	 	 	 4 7 	 + 	 	 	 	 2 8 	 M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 5 4 4 C J 	 W O S : 0 0 0 2 7 3 6 2 9 3 0 0 0 0 3 	 	 
 
 J 	 L o p e z - I l l e s c a s ,   C ;   d e   M o y a - A n e g o n ,   F ;   M o e d ,   H F 	 	 	 	 L o p e z - I l l e s c a s ,   C a r m e n ;   d e   M o y a - A n e g o n ,   F e l i x ;   M o e d ,   H e n k   F . 	 	 	 T h e   a c t u a l   c i t a t i o n   i m p a c t   o f   E u r o p e a n   o n c o l o g i c a l   r e s e a r c h 	 E U R O P E A N   J O U R N A L   O F   C A N C E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   E u r o p e ;   n e o p l a s m s ;   m e d i c a l   o n c o l o g y ;   r e s e a r c h   s u p p o r t ;   b i o m e d i c a l   r e s e a r c h ;   b i b l i o g r a p h i c   d a t a b a s e s ;   i n f o r m a t i o n   s c i e n c e ;   p e r i o d i c a l s ;   s t a t i s t i c s   &   n u m e r i c a l   d a t a 	 C A N C E R - R E S E A R C H ;   P U B L I C A T I O N ;   I N D I C A T O R S ;   C O U N T R I E S ;   J O U R N A L S ;   Q U A L I T Y ;   U N I O N 	 T h i s   s t u d y   p r o v i d e s   a n   o v e r - v i e w   o f   t h e   r e s e a r c h   p e r f o r m a n c e   o f   m a j o r   E u r o p e a n   c o u n t r i e s   i n   t h e   f i e l d   O n c o l o g y ,   t h e   m o s t   i m p o r t a n t   j o u r n a l s   i n   w h i c h   t h e y   p u b l i s h e d   t h e i r   r e s e a r c h   a r t i c l e s ,   a n d   t h e   m o s t   i m p o r t a n t   a c a d e m i c   i n s t i t u t i o n s   p u b l i s h i n g   t h e m .   T h e   a n a l y s i s   w a s   b a s e d   o n   T h o m s o n   S c i e n t i f i c ' s   W e b   o f   S c i e n c e   ( W o S )   a n d   c a l c u l a t e d   b i b l i o m e t r i c   i n d i c a t o r s   o f   p u b l i c a t i o n   a c t i v i t y   a n d   a c t u a l   c i t a t i o n   i m p a c t .   S t u d y i n g   t h e   t i m e   p e r i o d   2 0 0 0 - 2 0 0 6 ,   i t   g i v e s   a n   u p d a t e   o f   e a r l i e r   s t u d i e s ,   b u t   a t   t h e   s a m e   t i m e   i t   e x p a n d s   t h e i r   m e t h o d o l o g i e s ,   u s i n g   a   b r o a d e r   d e f i n i t i o n   o f   t h e   f i e l d ,   c a l c u l a t i n g   i n d i c a t o r s   o f   a c t u a l   c i t a t i o n   i m p a c t ,   a n d   a n a l y s i n g   n e w   a n d   p o l i c y   r e l e v a n t   a s p e c t s .   F i n d i n g s   s u g g e s t   t h a t   t h e   e m e r g e n c e   o f   A s i a n   c o u n t r i e s   i n   t h e   f i e l d   O n c o l o g y   h a s   d i s p l a c e d   E u r o p e a n   a r t i c l e s   m o r e   s t r o n g l y   t h a n   a r t i c l e s   f r o m   t h e   U S A ;   t h a t   o n c o l o g i s t s   w h o   h a v e   p u b l i s h e d   t h e i r   a r t i c l e s   i n   i m p o r t a n t ,   m o r e   g e n e r a l   j o u r n a l s   o r   i n   j o u r n a l s   c o v e r i n g   o t h e r   s p e c i a l t i e s ,   r a t h e r   t h a n   i n   t h e i r   o w n   s p e c i a l i s t   j o u r n a l s ,   h a v e   g e n e r a t e d   a   r e l a t i v e l y   h i g h   a c t u a l   c i t a t i o n   i m p a c t ;   a n d   t h a t   u n i v e r s i t i e s   f r o m   G e r m a n y ,   a n d   -   t o   a   l e s s e r   e x t e n t   -   t h o s e   f r o m   I t a l y ,   t h e   N e t h e r l a n d s ,   U K ,   a n d   S w e d e n ,   d o m i n a t e   a   r a n k i n g   o f   E u r o p e a n   u n i v e r s i t i e s   b a s e d   o n   n u m b e r   o f   a r t i c l e s   i n   o n c o l o g y .   T h e   o u t c o m e s   i l l u s t r a t e   t h a t   d i f f e r e n t   b i b l i o m e t r i c   m e t h o d o l o g i e s   m a y   l e a d   t o   d i f f e r e n t   o u t c o m e s ,   a n d   t h a t   o u t c o m e s   s h o u l d   b e   i n t e r p r e t e d   w i t h   c a r e .   ( c )   2 0 0 7   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ M o e d ,   H e n k   F . ]   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s ;   [ L o p e z - I l l e s c a s ,   C a r m e n ;   d e   M o y a - A n e g o n ,   F e l i x ]   U n i v   G r a n a d a ,   D e p t   L i b   &   I n f o r m a t   S c i ,   S C I M A G O   G r p ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n 	 M o e d ,   H F   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   P O B   9 5 5 5 ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s . 	 c a r l o p z @ u g r . e s ;   f e l i x @ u g r . e s ;   m o e d @ c w t s . l e i d e n u n i v . n l 	 M o y a   A n e g o n ,   F e l i x / C - 4 0 0 4 - 2 0 0 9 	 M o y a   A n e g o n ,   F e l i x / 0 0 0 0 - 0 0 0 2 - 0 2 5 5 - 8 6 2 8 	 	 	 B R A U N   T ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 9 5 7 ;   C A L E R O M E D I N A   C ,   2 0 0 7 ,   I N   P R E S S   P   I R E G   3   C ;   C a m b r o s i o   A ,   2 0 0 6 ,   E U R   J   C A N C E R ,   V 4 2 ,   P 3 1 4 0 ,   D O I   1 0 . 1 0 1 6 / j . e j c a . 2 0 0 6 . 0 7 . 0 2 0 ;   * E U R   C O M M ,   2 0 0 7 ,   E U R   1   D E M   E S T   2 0 0 6 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G r o s s i   F ,   2 0 0 3 ,   E U R   J   C A N C E R ,   V 3 9 ,   P 1 0 6 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 2 3 9 - 3 ;   L e w i s o n   G ,   2 0 0 3 ,   A S L I B   P R O C ,   V 5 5 ,   P 3 7 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 3 1 0 4 9 8 9 5 0 ;   L e w i s o n   G ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 0 9 ;   M e l a   G S ,   1 9 9 9 ,   E U R   J   C A N C E R ,   V 3 5 ,   P 1 1 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 9 9 ) 0 0 1 0 7 - 0 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H   F ,   1 9 9 5 ,   N e d   T i j d s c h r   G e n e e s k d ,   V 1 3 9 ,   P 1 4 8 3 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M o e d   H F ,   2 0 0 6 ,   2 0 0 6 0 1   C W T S ;   M O E D   H F ,   I N   P R E S S   S C I E N T O M E T R ;   M O Y A A N E G O N   F ,   2 0 0 6 ,   I N D I C A D O R E S   C I E N T I F I ;   N A R I N   F ,   E V A L U A T I V E   B I B L I O M E T ;   P A R O D I   S ,   1 9 9 3 ,   T U M O R I ,   V 7 9 ,   P 9 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S M A L L   H ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 7 6 ;   U g o l i n i   D ,   2 0 0 3 ,   E U R   J   C A N C E R ,   V 3 9 ,   P 1 8 8 8 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 3 ) 0 0 4 3 1 - 3 ;   U g o l i n i   D ,   2 0 0 2 ,   E U R   J   C A N C E R ,   V 3 8 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 0 2 5 - 4 ;   U g o l i n i   D ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 3 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 1 9 ;   2 0 0 5 ,   T I M E S   H I G H E R   E D   0 2 2 4 ;   2 0 0 5 ,   T I M E S   H I G H E R   E D   0 4 2 9 	 2 8 	 3 4 	 3 4 	 0 	 1 2 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 9 5 9 - 8 0 4 9 	 	 	 E U R   J   C A N C E R 	 E u r .   J .   C a n c e r 	 J A N 	 2 0 0 8 	 4 4 	 2 	 	 	 	 	 2 2 8 	 2 3 6 	 	 1 0 . 1 0 1 6 / j . e j c a . 2 0 0 7 . 1 0 . 0 2 0 	 	 9 	 O n c o l o g y 	 O n c o l o g y 	 2 6 5 Z S 	 W O S : 0 0 0 2 5 3 4 0 1 2 0 0 0 1 3 	 1 8 0 3 9 5 6 5 	 
 
 J 	 G o d i n ,   B 	 	 	 	 G o d i n ,   B e n o i t 	 	 	 O n   t h e   o r i g i n s   o f   b i b l i o m e t r i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 A M E R I C A N - P S Y C H O L O G I C A L - A S S O C I A T I O N ;   S C I E N T I F I C   P R O D U C T I V I T Y ;   D I F F E R E N T   L A N G U A G E S ;   V I T A L - S T A T I S T I C S ;   U N I T E D - S T A T E S ;   S C I E N C E ;   A G E ;   P E R F O R M A N C E ;   A R T I C L E S ;   N U M B E R 	 A m o n g   t h e   m a n y   s t a t i s t i c s   o n   s c i e n c e ,   c a l l e d   s c i e n t o m e t r i c s ,   b i b l i o m e t r i c s   h o l d s   a   p r i v i l e g e d   p l a c e .   B i b l i o m e t r i c s   i s   o n e   o f   t h e   f e w   s u b f i e l d s   c o n c e r n e d   w i t h   m e a s u r i n g   t h e   o u t p u t   s i d e   o f   s c i e n c e .   A c c o r d i n g   t o   m o s t   " h i s t o r i e s " ,   b i b l i o m e t r i c s   o w e s   i t s   s y s t e m a t i c   d e v e l o p m e n t   m a i n l y   t o   D . J . D .   P r i c e   a n d   E u g e n e   G a r f i e l d ,   a s   f o u n d e r s .   T h e   f e w   w o r k s   c o n d u c t e d   b e f o r e   t h e   1 9 5 0 s   a r e   u s u a l l y   r e l e g a t e d   t o   p r e h i s t o r y .   T h i s   p a p e r   d o c u m e n t s   h o w   t h e   s y s t e m a t i c   c o u n t i n g   o f   p u b l i c a t i o n s   o r i g i n a t e d   w i t h   p s y c h o l o g i s t s .   I n   t h e   e a r l y   1 9 0 0 s ,   p s y c h o l o g i s t s   b e g a n   c o l l e c t i n g   s t a t i s t i c s   o n   t h e i r   d i s c i p l i n e .   P u b l i c a t i o n s   c a m e   t o   b e   c o u n t e d   i n   a d d r e s s e s ,   r e v i e w s   a n d   h i s t o r i e s   o f   p s y c h o l o g y   f o r   s e v e r a l   d e c a d e s .   T h e   a i m   w a s   t o   c o n t r i b u t e   t o   t h e   a d v a n c e m e n t   o f   p s y c h o l o g y .   F a r   f r o m   b e i n g   a   n e g l i g i b l e   o u t p u t   o f   a   p r e h i s t o r i c   t y p e ,   b o t h   t h e   v o l u m e   a n d   t h e   s y s t e m a t i c n e s s   o f   t h e s e   e f f o r t s   a r e   w i t n e s s e s   t o   w h a t   s h o u l d   b e   c o n s i d e r e d   a s   p i o n e e r i n g   w o r k ,   a n d   t h e i r   a u t h o r s   c o n s i d e r e d   a s   f o r e r u n n e r s   t o   b i b l i o m e t r i c s . 	 	 G o d i n ,   B   ( r e p r i n t   a u t h o r ) ,   3 4 6 5   D u r o c h e r   S t ,   M o n t r e a l ,   P Q   H 2 X   2 C 6 ,   C a n a d a . 	 b e n o i t . g o d i n @ u c s . i n r s . c a 	 	 	 	 	 A D A M S   C   W ,   1 9 4 6 ,   I s i s ,   V 3 6 ,   P 1 6 6 ,   D O I   1 0 . 1 0 8 6 / 3 4 7 9 4 1 ;   A L L I S O N   P D ,   1 9 8 2 ,   A M   S O C I O L   R E V ,   V 4 7 ,   P 6 1 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 1 6 2 ;   A L L I S O N   P D ,   1 9 7 4 ,   A M   S O C I O L   R E V ,   V 3 9 ,   P 5 9 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 4 2 4 ;   A L L I S O N   P D ,   1 9 9 0 ,   A M   S O C I O L   R E V ,   V 5 5 ,   P 4 6 9 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 8 0 1 ;   A l l p o r t   G W ,   1 9 4 0 ,   P S Y C H O L   B U L L ,   V 3 7 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 6 0 0 6 4 ;   A m s t e r d a m s k a   O ,   2 0 0 5 ,   S C I   T E C H N O L   H U M   V A L ,   V 3 0 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 0 4 2 7 0 7 1 9 ;   B E N D A V I D   J ,   1 9 6 0 ,   S C I   G R O W T H   E S S A Y S   S O ,   P 1 0 3 ;   B E N D A V I D   J ,   1 9 6 6 ,   S C I   G R O W T H   E S S A Y S   S O ,   P 7 1 ;   B E N D A V I D   J R ,   1 9 6 6 ,   S O C I A L   F A C T O R S   O R I G I ;   B o r i n g   E G ,   1 9 2 0 ,   P S Y C H O L   B U L L ,   V 1 7 ,   P 2 7 1 ;   B O R I N G   E G ,   1 9 2 8 ,   A M   J   P S Y C H O L ,   V 4 0 ,   P 6 7 4 ;   B o r i n g   E .   G . ,   1 9 2 9 ,   H I S T   E X P T   P S Y C H O L ;   B O R I N G   M D ,   1 9 4 8 ,   A M   J   P S Y C H O L ,   V 6 1 ,   P 5 2 7 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 8 3 1 7 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R A O D U S   R N ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 1 2 7 ;   B r u n e r   J S ,   1 9 4 0 ,   P S Y C H O L   B U L L ,   V 3 7 ,   P 7 5 7 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 4 4 9 5 ;   B r y a n   A I ,   1 9 4 4 ,   P S Y C H O L   B U L L ,   V 4 1 ,   P 4 4 7 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 7 6 1 5 ;   B r y a n   A I ,   1 9 4 6 ,   A M   P S Y C H O L ,   V 1 ,   P 7 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 6 8 6 7 ;   B u c h n e r   E   F ,   1 9 0 3 ,   S c i e n c e ,   V 1 8 ,   P 1 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 . 4 5 0 . 1 9 3 ;   B u c h n e r   E   F ,   1 9 0 3 ,   S c i e n c e ,   V 1 8 ,   P 2 3 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 . 4 5 1 . 2 3 3 ;   B u c h n e r   E F ,   1 9 0 6 ,   P S Y C H O L   B U L L ,   V 3 ,   P 1 2 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 0 5 4 1 ;   B u c h n e r   E F ,   1 9 1 3 ,   P S Y C H O L   B U L L ,   V 1 0 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 6 9 9 5 6 ;   B u c h n e r   E F ,   1 9 1 2 ,   P S Y C H O L   B U L L ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 2 7 7 8 ;   B u c h n e r   E F ,   1 9 1 1 ,   P S Y C H O L   B U L L ,   V 8 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 5 1 1 0 ;   B u c h n e r   E F ,   1 9 0 5 ,   P S Y C H O L   B U L L ,   V 2 ,   P 8 9 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 4 0 9 6 ;   B u c h n e r   E F ,   1 9 0 9 ,   P S Y C H O L   B U L L ,   V 6 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 2 6 4 3 ;   B u c h n e r   E F ,   1 9 0 7 ,   P S Y C H O L   B U L L ,   V 4 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 0 6 8 2 ;   B u c h n e r   E F ,   1 9 0 4 ,   P S Y C H O L   B U L L ,   V 1 ,   P 5 7 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 4 2 3 9 ;   B u c h n e r   E F ,   1 9 1 0 ,   P S Y C H O L   B U L L ,   V 7 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 5 5 9 3 ;   B u c h n e r   E F ,   1 9 0 8 ,   P S Y C H O L   B U L L ,   V 5 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 3 1 9 6 ;   C a s o n   H ,   1 9 3 6 ,   P S Y C H O L   B U L L ,   V 3 3 ,   P 9 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 8 6 3 5 ;   C a t t e l l   J   M ,   1 8 9 8 ,   S c i e n c e ,   V 8 ,   P 5 3 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 8 . 1 9 9 . 5 3 3 ;   C a t t e l l   J   M ,   1 9 2 9 ,   S c i e n c e ,   V 7 0 ,   P 3 3 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 0 . 1 8 1 5 . 3 3 5 ;   C a t t e l l   J   M ,   1 9 0 6 ,   S c i e n c e ,   V 2 4 ,   P 7 3 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 4 . 6 2 3 . 7 3 2 ;   C a t t e l l   J M ,   1 9 3 0 ,   S C I E N C E ,   V 7 2 ,   P 2 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 2 . 1 8 6 4 . 2 8 4 ;   C a t t e l l   J M ,   1 9 1 7 ,   S C I E N C E ,   V 4 5 ,   P 2 7 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 4 5 . 1 1 6 0 . 2 7 5 ;   C a t t e l l   J M ,   1 9 1 0 ,   S C I E N C E ,   V 3 2 ,   P 6 7 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 2 . 8 2 8 . 6 7 2 ;   C a t t e l l   J M ,   1 9 2 8 ,   S C I E N C E ,   V 6 7 ,   P 5 4 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 7 . 1 7 4 4 . 5 4 3 ;   C a t t e l l   J M ,   1 9 1 0 ,   S C I E N C E ,   V 3 2 ,   P 6 3 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 2 . 8 2 7 . 6 3 3 ;   C a t t e l l   J . M . K . ,   1 9 0 3 ,   A M   J   P S Y C H O L ,   V 1 4 ,   P 3 1 0 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 2 3 2 1 ;   C a t t e l l   J .   M c   K . ,   1 8 9 8 ,   P S Y C H O L   R E V ,   V 5 ,   P 6 5 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 6 5 0 6 0 ;   C A T T E L L   J M ,   1 9 2 2 ,   S C I E N C E ,   V 5 6 ,   P 5 4 7 ;   C a t t e l l   J .   M . ,   1 8 9 6 ,   P S Y C H O L   R E V ,   V 3 ,   P 1 3 4 ,   D O I   D O I   1 0 . 1 0 3 7 / H 0 0 7 1 5 2 0 ;   C l a r k   K .   E . ,   1 9 5 7 ,   A M   P S Y C H O L   S U R V E Y   G R ;   C o l e   J .   R . ,   1 9 7 3 ,   S O C I A L   S T R A T I F I C A T I O ;   C O L E   S ,   1 9 7 9 ,   A M   J   S O C I O L ,   V 8 4 ,   P 9 5 8 ,   D O I   1 0 . 1 0 8 6 / 2 2 6 8 6 8 ;   C O L E   S ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 5 ;   C R A N E   D ,   1 9 6 5 ,   A M   S O C I O L   R E V ,   V 3 0 ,   P 6 9 9 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 1 3 8 ;   C R O N I N   B . ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ;   D a n z i g e r   K u r t ,   1 9 9 0 ,   C O N S T R U C T I N G   S U B J E C T ;   D a v i s   R A ,   1 9 2 9 ,   P S Y C H O L   R E V ,   V 3 6 ,   P 3 2 0 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 4 0 2 8 ;   D E A N   B V ,   1 9 6 8 ,   E V A L U A T I N G   S E L E C T I N G ;   D E L A B A R R E   E B ,   1 8 9 4 ,   A N N   P S Y C H O L ,   V 1 ,   P 2 0 9 ;   D E N N I S   W ,   1 9 5 6 ,   S C I E N C E ,   V 1 2 3 ,   P 7 2 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 3 . 3 2 0 0 . 7 2 4 ;   D e n n i s   W ,   1 9 5 4 ,   S C I   M O N ,   V 7 9 ,   P 1 8 0 ;   F e r n b e r g e r   S W ,   1 9 3 8 ,   P S Y C H O L   B U L L ,   V 3 5 ,   P 2 6 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 8 0 5 0 ;   F e r n b e r g e r   S W ,   1 9 3 8 ,   P S Y C H O L   B U L L ,   V 3 5 ,   P 8 4 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 2 4 1 4 ;   F e r n b e r g e r   S W ,   1 9 2 1 ,   P S Y C H O L   B U L L ,   V 1 8 ,   P 5 6 9 ;   F e r n b e r g e r   S W ,   1 9 3 2 ,   P S Y C H O L   B U L L ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 5 7 3 3 ;   F e r n b e r g e r   S W ,   1 9 3 9 ,   P S Y C H O L   B U L L ,   V 3 6 ,   P 3 9 0 ,   D O I   1 0 . 1 0 3 7 / h 0 0 6 0 8 2 0 ;   F e r n b e r g e r   S W ,   1 9 4 3 ,   P S Y C H O L   R E V ,   V 5 0 ,   P 3 3 ,   D O I   1 0 . 1 0 3 7 / h 0 0 5 4 1 8 0 ;   F e r n b e r g e r   S W ,   1 9 2 8 ,   P S Y C H O L   R E V ,   V 3 5 ,   P 4 4 7 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 4 9 9 6 ;   F E R N B E R G E R   S W ,   1 9 5 4 ,   A M   J   P S Y C H O L ,   V 6 7 ,   P 2 8 8 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 8 6 3 0 ;   F E R N B E R G E R   S W ,   1 9 4 6 ,   S C I E N C E ,   V 1 0 4 ,   P 1 7 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 4 . 2 6 9 5 . 1 7 5 ;   F e r n b e r g e r   S W ,   1 9 3 6 ,   A M   J   P S Y C H O L ,   V 4 8 ,   P 6 8 0 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 6 5 2 3 ;   F e r n b e r g e r   S W ,   1 9 2 6 ,   A M   J   P S Y C H O L ,   V 3 7 ,   P 5 7 8 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 4 9 1 9 ;   F e r n b e r g e r   S W ,   1 9 3 0 ,   P S Y C H O L   R E V ,   V 3 7 ,   P 5 2 6 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 5 8 3 4 ;   F E R N B E R G E R   S W ,   1 9 4 6 ,   A M   J   P S Y C H O L ,   V 5 9 ,   P 2 8 4 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 6 8 9 2 ;   F e r n b e r g e r   S W ,   1 9 1 7 ,   A M   J   P S Y C H O L ,   V 2 8 ,   P 1 4 1 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 2 9 4 3 ;   F E R N B E R G E R   S W ,   1 9 4 0 ,   A M   J   P S Y C H O L ,   V 5 4 ,   P 2 9 6 ;   F E R N B E R G E R   S W ,   1 9 2 9 ,   A M   J   P S Y C H O L ,   V 4 1 2 ,   P 1 6 3 ;   F r a n z   S I ,   1 9 1 7 ,   P S Y C H O L   R E V ,   V 2 4 ,   P 1 9 7 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 0 7 3 9 ;   F u r n e r   J ,   2 0 0 3 ,   J   L I B R   I N F   S C I ,   V 3 5 ,   P 1 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 3 3 5 2 0 0 6 ;   G A R F I E L D   E ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 9 . 6 4 9 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 6 3 ,   S C I   C I T A T I O N   I N D E X ;   G a r v e y   C R ,   1 9 2 9 ,   P S Y C H O L   B U L L ,   V 2 6 ,   P 6 5 2 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 5 8 1 1 ;   G i s p e r t   H . ,   2 0 0 2 ,   S C I   P A T R I E   A S S   F R A N C ;   G O D I N   B ,   2 0 0 7 ,   I N   P R E S S   S O C I A L   S T U D ;   G o o d e n o u g h   F L ,   1 9 3 4 ,   P S Y C H O L   B U L L ,   V 3 1 ,   P 8 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 2 8 4 0 ;   G r i f f i t h   C R ,   1 9 2 2 ,   P S Y C H O L   B U L L ,   V 1 9 ,   P 4 1 1 ;   H E R N E R   S ,   1 9 5 6 ,   S C I   M O N T H L Y ,   V 8 3 ,   P 8 2 ;   H O G A N   R M ,   1 9 5 0 ,   S C I E N C E ,   V 1 1 2 ,   P 6 1 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 . 2 9 1 7 . 6 1 3 ;   H O L T O N   G ,   1 9 6 2 ,   D A E D A L U S ,   V 9 1 ,   P 3 6 2 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   H o r n s t e i n   G a i l   A . ,   1 9 8 8 ,   R I S E   E X P T   A M   P S Y C H O L ,   P 1 ;   H U N T E R   W S ,   1 9 4 1 ,   A M   J   P S Y C H O L ,   V 5 4 ,   P 6 0 6 ;   * I   C H E M   E N G ,   1 9 6 3 ,   P   S   H E L D   L O N D   1 1   1 2 ;   K A P L A N   N ,   1 9 6 0 ,   I E E E   T   E N G   M A N A G E ,   V 3 0 ,   P 2 4 ;   K i t s o n   H D ,   1 9 2 6 ,   P S Y C H O L   R E V ,   V 3 3 ,   P 3 1 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 0 4 6 9 ;   S o k a l   M i c h a e l   M . ,   1 9 9 9 ,   E S T A B L I S H M E N T   S C I   A M ;   K o h l s t e d t   S G ,   1 9 7 6 ,   F O R M A T I O N   A M   S C I   C O M ;   L a u e r   A R ,   1 9 3 1 ,   P S Y C H O L   R E V ,   V 3 8 ,   P 3 6 9 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 2 0 4 9 ;   L e h m a n   H C ,   1 9 4 4 ,   S C I   M O N ,   V 5 9 ,   P 3 8 4 ;   L e h m a n   H C ,   1 9 4 7 ,   S O C   F O R C E S ,   V 2 5 ,   P 2 8 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 5 6 6 5 ;   L e h m a n   H .   C . ,   1 9 5 3 ,   A G E   A C H I E V E M E N T ;   L I P E T Z   B A ,   1 9 6 5 ,   M E A S U R E M E N T   E F F I C I E N ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   L o u t t i t   C M ,   1 9 2 9 ,   P S Y C H O L   R E V ,   V 3 6 ,   P 3 4 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 5 9 6 8 ;   L o u t t i t   C M ,   1 9 3 1 ,   P S Y C H O L   R E V ,   V 3 8 ,   P 4 5 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 3 8 1 4 ;   C o l l i n s   P e t e r   M .   D . ,   1 9 8 1 ,   P A R L I A M E N T   S C I   B R I T ;   M a n i s   J G ,   1 9 5 1 ,   S O C   F O R C E S ,   V 2 9 ,   P 2 6 7 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 2 4 1 6 ;   M A N N I C H E   E ,   1 9 5 7 ,   B E H A V   S C I ,   V 2 ,   P 3 0 1 ;   M e e r   B ,   1 9 5 5 ,   J   P S Y C H O L ,   V 3 9 ,   P 1 1 7 ;   M E L T Z E R   B N ,   1 9 4 9 ,   A M   J   S O C I O L ,   V 4 0 ,   P 2 5 ;   M E L T Z E R   B N ,   1 9 5 6 ,   J   S O C   I S S U E S ,   V 1 2 ,   P 3 2 ;   M i n e r   B G ,   1 9 0 4 ,   S C I E N C E ,   V 2 0 ,   P 2 9 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 0 . 5 0 5 . 2 9 9 ;   N e l s o n   H ,   1 9 2 8 ,   A M   J   P S Y C H O L ,   V 4 0 ,   P 3 0 3 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 4 4 9 1 ;   P e a r l   R ,   1 9 2 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 2 ,   P 2 5 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 2 . 4 . 2 5 8 ;   P e a r l   R ,   1 9 2 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 1 ,   P 7 5 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 1 . 1 2 . 7 5 2 ;   P E L Z   D C ,   1 9 5 6 ,   A D M I N   S C I   Q U A R T ,   V 1 ,   P 3 1 0 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 0 9 2 6 ;   P e l z   D .   C ,   1 9 6 6 ,   S C I   O R G   P R O D U C T I V E   C ;   P r i c e   D .   J .   d .   S . ,   1 9 6 1 ,   S C I   B A B Y L O N ;   P R I T C H A R D   A G ,   1 9 8 1 ,   B I B L I O M E T R I C S   B I B L I O ;   R E S K I N   B F ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 4 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 7 5 3 ;   R O E   A ,   1 9 6 1 ,   S C I E N C E ,   V 1 3 4 ,   P 4 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 4 . 3 4 7 7 . 4 5 6 ;   R O E   A ,   1 9 6 5 ,   S C I E N C E ,   V 1 5 0 ,   P 3 1 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 0 . 3 6 9 4 . 3 1 3 ;   R O E   A ,   1 9 5 1 ,   G e n e t   P s y c h o l   M o n o g r ,   V 4 3 ,   P 1 2 1 ;   R O E   A ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 6 ,   P 9 4 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 6 . 4 0 3 7 . 9 4 0 ;   R O E   A ,   1 9 6 4 ,   M A N A G E   S C I ,   P 4 9 ;   R O E   A ,   1 9 6 5 ,   H A R V A R D   S T U D I E S   C A R E ;   R o e   A . ,   1 9 5 2 ,   S C I   A M ,   V 1 8 7 ,   P 2 1 ;   R O E   A ,   1 9 6 3 ,   S C I   C R E A T I V I T Y ;   R o e   A ,   1 9 5 2 ,   M A K I N G   S C I ;   R o e   A ,   1 9 5 3 ,   P S Y C H O L   M O N O G R - G E N   A ,   V 6 7 ,   P 1 ;   R o e   A ,   1 9 5 1 ,   P S Y C H O L   M O N O G R - G E N   A ,   V 6 5 ,   P 1 ;   R u c k m i c h   C A ,   1 9 1 2 ,   A M   J   P S Y C H O L ,   V 2 3 ,   P 5 1 7 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 3 0 6 0 ;   R u c k m i c h   C A ,   1 9 1 6 ,   P S Y C H O L   B U L L ,   V 1 3 ,   P 1 0 9 ,   D O I   1 0 . 1 0 3 7 / h 0 0 7 1 3 6 0 ;   R u c k m i c k   C A ,   1 9 2 6 ,   A M   J   P S Y C H O L ,   V 3 7 ,   P 5 8 2 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 4 9 2 0 ;   S c h u s t e r   A ,   1 9 2 5 ,   P   R   S O C   L O N D   A - C O N T A ,   V 1 0 7 ,   P 3 6 8 ,   D O I   1 0 . 1 0 9 8 / r s p a . 1 9 2 5 . 0 0 3 1 ;   S C O T T   J S ,   1 9 8 1 ,   A M   S O C I O L   R E V ,   V 4 6 ,   P 4 2 2 ;   S C O T T   J S ,   1 9 7 8 ,   A M   S O C I O L   R E V ,   V 4 3 ,   P 8 8 9 ;   S e i l e r   R ,   1 9 6 5 ,   I M P R O V I N G   E F F E C T I V E N ;   S t e i n   M .   I . ,   1 9 6 0 ,   C R E A T I V I T Y   I N D I V I D U A ;   S t e i n   M I ,   1 9 5 3 ,   J   P S Y C H O L ,   V 3 6 ,   P 3 1 1 ;   S T E N I   M I ,   1 9 6 2 ,   S O C I O L   S C I ,   P 3 2 9 ;   S t e p h a n   P .   E . ,   1 9 9 2 ,   S T R I K I N G   M O T H E R   L O D E ;   T A Y L O R   C W ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 5 ,   P 1 0 7 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 5 . 3 7 6 6 . 1 0 7 5 ;   T A Y L O R   W a l k e r   C a l v i n ,   1 9 6 4 ,   C R E A T I V I T Y   P R O G R   P O T ;   T a y l o r   C .   W . ,   1 9 6 3 ,   S C I   C R E A T I V I T Y   I T S   R ;   T i n k e r   M A ,   1 9 2 7 ,   A M   J   P S Y C H O L ,   V 3 8 ,   P 4 5 3 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 5 0 1 5 ;   T i t c h e n e r   E B ,   1 9 0 5 ,   A M   J   P S Y C H O L ,   V 1 6 ,   P 2 0 8 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 2 1 2 7 ;   V i s h e r   S S ,   1 9 3 9 ,   A M   J   P S Y C H O L ,   V 5 2 ,   P 2 7 8 ,   D O I   1 0 . 2 3 0 7 / 1 4 1 6 1 1 5 ;   W E I S S   P ,   1 9 6 0 ,   S C I E N C E ,   V 1 3 1 ,   P 1 7 1 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 1 . 3 4 1 5 . 1 7 1 6 ;   W o o d s   F   A ,   1 9 1 1 ,   S c i e n c e ,   V 3 3 ,   P 5 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 3 . 8 5 0 . 5 6 8 ;   W o o d s   F   A ,   1 9 0 9 ,   S c i e n c e ,   V 3 0 ,   P 7 0 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 0 . 7 7 7 . 7 0 3 ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ;   W O U T E R S   P ,   1 9 9 7 ,   P   6   C   I N T   S O C   S C I   I N ,   P 4 9 1 ;   W y m a n   W I ,   1 9 1 9 ,   J   P A T E N T   T R A D E M A R K ,   V 1 ,   P 4 3 9 ;   Y O V I T S   M C ,   1 9 6 6 ,   R E S   P R O G R A M   E F F E C T I V ;   Z u c k e r m a n   H . ,   1 9 7 2 ,   S O C I O L O G Y   A G E   S T R A T I ;   1 9 8 5 ,   S C I E N T O M E T R I C S ;   2 0 0 5 ,   C U R R E N T   S C I ,   V 8 9 ,   P 1 5 0 2 	 1 5 3 	 3 4 	 3 5 	 8 	 4 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 2 0 0 6 	 6 8 	 1 	 	 	 	 	 1 0 9 	 1 3 3 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 8 6 - 0 	 	 2 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 7 1 K P 	 W O S : 0 0 0 2 3 9 6 0 1 4 0 0 0 0 6 	 	 
 
 J 	 K o s t o f f ,   R N ;   T s h i t e y a ,   R ;   P f e i l ,   K M ;   H u m e n i k ,   J A 	 	 	 	 K o s t o f f ,   R N ;   T s h i t e y a ,   R ;   P f e i l ,   K M ;   H u m e n i k ,   J A 	 	 	 E l e c t r o c h e m i c a l   p o w e r   t e x t   m i n i n g   u s i n g   b i b l i o m e t r i c s   a n d   d a t a b a s e   t o m o g r a p h y 	 J O U R N A L   O F   P O W E R   S O U R C E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e l e c t r o c h e m i c a l   p o w e r ;   d a t a b a s e   t o m o g r a p h y ;   b i b l i o m e t r i c   a n a l y s i s ;   t e x t   m i n i n g ;   i n f o r m a t i o n   r e t r i e v a l ;   t e c h n i c a l   i n t e l l i g e n c e 	 C I T A T I O N 	 D a t a b a s e   t o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   ( 1 )   a l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i - w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i - w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   ( 2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   w a s   u s e d   t o   d e r i v e   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a n   e l e c t r o c h e m i c a l   p o w e r   d a t a b a s e   d e r i v e d   f r o m   t h e   s c i e n c e   c i t a t i o n   i n d e x   ( S C I ) .   P h r a s e   f r e q u e n c y   a n a l y s i s   b y   t h e   t e c h n i c a l   d o m a i n   e x p e r t s   p r o v i d e d   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s   o f   t h e   e l e c t r o c h e m i c a l   p o w e r   d a t a b a s e ,   a n d   t h e   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   B i b l i o m e t r i c   a n a l y s i s   o f   t h e   e l e c t r o c h e m i c a l   p o w e r   l i t e r a t u r e   s u p p l e m e n t e d   t h e   D T   r e s u l t s   w i t h   a u t h o r / j o u r n a l / i n s t i t u t i o n   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a .   ( C )   2 0 0 2   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   D D L   O m n i   E n g n   L L C ,   M c l e a n ,   V A   2 2 1 0 2   U S A ;   N o e s i s   I n c ,   M a n a s s a s ,   V A   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   * I   S C I   I N F ,   1 9 9 9 ,   S C I   C I T   I N D   S C I ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K O S T O F F   R N ,   1 9 9 7 ,   J   A M   C H E M   S O C   S C I E N T ,   V 4 0 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 3 ,   C O M P E T I T I V E   I N T E L L I G ,   V 4 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 1 ;   K o s t o f f   R . N . ,   1 9 9 7 ,   H D B   R E S   I M P A C T   A S S E S ;   M a c R o b e r t s   M .   H . ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 1 6 	 3 4 	 3 4 	 0 	 1 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 3 7 8 - 7 7 5 3 	 	 	 J   P O W E R   S O U R C E S 	 J .   P o w e r   S o u r c e s 	 J U L   2 0 	 2 0 0 2 	 1 1 0 	 1 	 	 	 	 	 1 6 3 	 1 7 6 	 P I I   S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 	 1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 	 	 1 4 	 C h e m i s t r y ,   P h y s i c a l ;   E l e c t r o c h e m i s t r y ;   E n e r g y   &   F u e l s ;   M a t e r i a l s   S c i e n c e ,   M u l t i d i s c i p l i n a r y 	 C h e m i s t r y ;   E l e c t r o c h e m i s t r y ;   E n e r g y   &   F u e l s ;   M a t e r i a l s   S c i e n c e 	 5 7 5 E W 	 W O S : 0 0 0 1 7 6 9 3 4 6 0 0 0 2 3 	 	 
 
 J 	 L e w i s o n ,   G ;   D e v e y ,   M E 	 	 	 	 L e w i s o n ,   G ;   D e v e y ,   M E 	 	 	 B i b l i o m e t r i c   m e t h o d s   f o r   t h e   e v a l u a t i o n   o f   a r t h r i t i s   r e s e a r c h 	 R H E U M A T O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 a r t h r i t i s ;   b i b l i o m e t r i c s ;   e v a l u a t i o n ;   f u n d i n g ;   i m p a c t ;   r e s e a r c h 	 P E R F O R M A N C E ;   I M P A C T ;   I N D I C A T O R S ;   C I T A T I O N S ;   C O U N T R I E S ;   J O U R N A L S ;   S C I E N C E 	 T h i s   s t u d y   u s e s   b i b l i o m e t r i c   m e t h o d s   t o   e v a l u a t e   t h e   m a g n i t u d e   a n d   q u a l i t y   o f   p u b l i c a t i o n s   i n   a r t h r i t i s   r e s e a r c h   i n   t h e   U K   a n d   c o m p a r e   t h i s   w i t h   t h a t   o f   o t h e r   c o u n t r i e s .   A r t h r i t i s   r e s e a r c h   w a s   d e f i n e d   b y   p u b l i c a t i o n   i n   a   s p e c i a l i s t   j o u r n a l   o r   b y   s p e c i f i c   t i t l e   k e y   w o r d s   o r   a d d r e s s .   O u t p u t s   f r o m   1 3   c o u n t r i e s   b e t w e e n   1 9 8 8   a n d   1 9 9 5   w e r e   a n a l y s e d   b y   n u m b e r ,   r e s e a r c h   l e v e l   ( f r o m   c l i n i c a l   t o   b a s i c )   a n d   p o t e n t i a l   i m p a c t   o n   o t h e r   r e s e a r c h e r s   ( f r o m   l o w   t o   h i g h ) .   T h e   U K   h a s   a   s t r o n g   p r e s e n c e   i n   a r t h r i t i s   r e s e a r c h   a n d   t h e   h i g h e s t   r e l a t i v e   c o m m i t m e n t   o f   a l l   t h e   c o u n t r i e s   s t u d i e d .   U K   o u t p u t   w a s   m o r e   c l i n i c a l   t h a n   t h a t   o f   o t h e r   c o u n t r i e s ,   e x c e p t   S p a i n ,   a n d   w a s   o f   r e l a t i v e l y   h i g h   i m p a c t .   A   s e c o n d   s t u d y   e x a m i n e d   U K   a r t h r i t i s   p a p e r s   s u p p o r t e d   b y   d i f f e r e n t   f u n d i n g   s o u r c e s ,   i n c l u d i n g   g o v e r n m e n t ,   p r i v a t e - n o n - p r o f i t   a n d   i n d u s t r y .   P a p e r s   w i t h   f u n d i n g   a c k n o w l e d g e m e n t s   w e r e   o f   s i g n i f i c a n t l y   h i g h e r   i m p a c t   a n d   l e s s   c l i n i c a l   t h a n   t h o s e   w i t h o u t .   T h e   A r t h r i t i s   R e s e a r c h   C a m p a i g n   w a s   t h e   l e a d i n g   f u n d e r   i n   t h e   U K   w i t h   h i g h - i m p a c t   p a p e r s   w h i c h ,   o v e r   t h e   8   y r   p e r i o d ,   h a v e   b e c o m e   m o r e   c l i n i c a l   t h a n   t h o s e   s u p p o r t e d   b y   o t h e r   f u n d i n g   s o u r c e s ,   e x c e p t   h o s p i t a l   t r u s t s . 	 W e l l c o m e   T r u s t   R e s   L a b s ,   U n i t   P o l i c y   R e s   S c i   &   M e d ,   L o n d o n   N W 1   2 B E ,   E n g l a n d ;   A r t h r i t   R e s   C a m p a i g n ,   C h e s t e r f i e l d   S 4 1   7 T D ,   D e r b y ,   E n g l a n d 	 L e w i s o n ,   G   ( r e p r i n t   a u t h o r ) ,   W e l l c o m e   T r u s t   R e s   L a b s ,   U n i t   P o l i c y   R e s   S c i   &   M e d ,   2 1 0   E u s t o n   R d ,   L o n d o n   N W 1   2 B E ,   E n g l a n d . 	 	 	 	 	 	 A g n e w   B ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 ;   A G N E W   B ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 4 ;   B E I L O C K   R ,   1 9 8 8 ,   A M   J   A G R   E C O N ,   V 7 0 ,   P 4 0 3 ,   D O I   1 0 . 2 3 0 7 / 1 2 4 2 0 8 2 ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 9 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   D A W S O N   G ,   1 9 9 8 ,   9   P R I S M   W E L L C   T R U S T ;   G A R F I E L D   E ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 9 . 6 4 9 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G E E   H H ,   1 9 8 6 ,   N I H   P U B L I C A T I O N ;   J E S C H I N   D ,   1 9 9 5 ,   P   5   I N T   C   I N T   S O C   S C ;   L e w i s o n   G ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 3 ;   L e w i s o n   G ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 2 ;   L e w i s o n   G ,   1 9 9 8 ,   G U T ,   V 4 3 ,   P 2 8 8 ;   L E W I S O N   G ,   1 9 9 5 ,   R E S   E V A L U A T ,   V 5 ,   P 2 2 5 ;   L e w i s o n   G ,   1 9 9 6 ,   R E S   E V A L U A T ,   V 6 ,   P 2 5 ;   L E Y D E S D O R F F   L ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 5 4 - X ;   L U U K K O N E N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 9 ;   M a c L e a n   M . ,   1 9 9 8 ,   R E S   E V A L U A T ,   V 7 ,   P 7 ;   M A C R O B E R T S   M H ,   1 9 8 6 ,   S O C   S T U D   S C I ,   V 1 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 6 0 1 6 0 0 1 0 0 8 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   N A R I N   F ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 5 ;   * N A T   S C I   F D N ,   1 9 9 6 ,   N S B 9 6 2 1   N A T   S C I   F D N ;   P E S T A N A   A ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 7 5 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 	 2 9 	 3 4 	 3 5 	 0 	 1 2 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 1 4 6 2 - 0 3 2 4 	 	 	 R H E U M A T O L O G Y 	 R H E U M A T O L O G Y 	 J A N 	 1 9 9 9 	 3 8 	 1 	 	 	 	 	 1 3 	 2 0 	 	 1 0 . 1 0 9 3 / r h e u m a t o l o g y / 3 8 . 1 . 1 3 	 	 8 	 R h e u m a t o l o g y 	 R h e u m a t o l o g y 	 1 9 3 C H 	 W O S : 0 0 0 0 8 0 1 1 7 9 0 0 0 0 4 	 1 0 3 3 4 6 7 7 	 
 
 J 	 F u n k h o u s e r ,   E T 	 	 	 	 F u n k h o u s e r ,   E T 	 	 	 T h e   e v a l u a t i v e   u s e   o f   c i t a t i o n   a n a l y s i s   f o r   c o m m u n i c a t i o n   j o u r n a l s 	 H U M A N   C O M M U N I C A T I O N   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C H O L A R L Y   C O M M U N I C A T I O N ;   B I B L I O M E T R I C S 	 T h i s   s t u d y   i n v e s t i g a t e d   t h e   i m p a c t   o f   t h e   o m i s s i o n   o f   s c h o l a r l y   c o m m u n i c a t i o n   j o u r n a l s   f r o m   S o c i a l   S c i e n c e s   C i t a t i o n   I n d e x   ( S S C I )   a n d   A r t s   a n d   H u m a n i t i e s   C i t a t i o n   I n d e x   ( A H C I )   o n   c i t a t i o n - b a s e d   a p p r a i s a l s   o f   c o m m u n i c a t i o n   l i t e r a t u r e .   C i t a t i o n   d a t a   w e r e   c o l l e c t e d   f r o m   r e f e r e n c e   l i s t s   i n   a r t i c l e s   a p p e a r i n g   i n   2 7   c o m m u n i c a t i o n   j o u r n a l s   p u b l i s h e d   d u r i n g   1 9 9 0 ,   i n c l u d i n g   1 4   n o t   i n d e x e d   b y   S S C I   o r   A H C I .   T h e   1 4   j o u r n a l s   n o t   i n c l u d e d   i n   S S C I   o r   A H C I   c o n t r i b u t e d   1 , 9 5 3 ,   o r   2 6 % ,   o f   t h e   7 , 6 4 0   c i t a t i o n s   t o   a u t h o r s   d u r i n g   1 9 9 0 ,   a n d   1 , 1 5 6 ,   o r   2 5 % ,   o f   t h e   4 , 5 8 7   c i t a t i o n s   t o   j o u r n a l s   i n   1 9 9 0 .   T w e n t y - s e v e n   o f   t h e   5 0   m o s t   f r e q u e n t l y   c i t e d   a u t h o r s   r e c e i v e d   2 5 %   o r   m o r e   o f   t h e i r   c i t a t i o n s   f r o m   j o u r n a l s   o m i t t e d   t r y   S S C I   a n d   A H C I .   T h i s   s t u d y   f o u n d   t h a t   a n   a c c u r a t e   e v a l u a t i o n   o f   a   s c h o l a r ' s   a r t i c l e s   b a s e d   o n   c i t a t i o n s   r e c e i v e d   w i l l   n o t   b e   p o s s i b l e   u n t i l   S S C I   a n d / o r   A H C I   c h o o s e   t o   i n c l u d e   t h e   o m i t t e d   j o u r n a l s ,   a n d   t h a t   c o m p u t e r   a p p l i c a t i o n s   c o u l d   b e   u s e d   t o   p r o v i d e   a   c o n v e n i e n t   a n d   i n e x p e n s i v e   o n - l i n e   c i t a t i o n   i n d e x   f o r   c o m m u n i c a t i o n   l i t e r a t u r e .   T h e   J o u r n a l   I m p a c t   R a t i n g ,   a   m e a s u r e   f o r   u s e   i n   c o m p a r i n g   j o u r n a l s '   i m p a c t   o n   t h e   b a s i s   o f   c i t a t i o n s   r e c e i v e d ,   w a s   i n t r o d u c e d . 	 	 F u n k h o u s e r ,   E T   ( r e p r i n t   a u t h o r ) ,   N   C A R O L I N A   S T A T E   U N I V , D E P T   C O M M U N , R A L E I G H , N C   2 7 6 9 5 ,   U S A . 	 	 	 	 	 	 B O R G M A N   C L ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 2 ;   F U N K H O U S E R   E ,   1 9 8 9 ,   A C A   B ,   V 6 9 ,   P 7 9 ;   G R E E N B E R G   B S ,   1 9 8 9 ,   J O U R N A L I S M   Q U A R T ,   V 6 6 ,   P 4 7 3 ;   * I   S C I   I N F ,   1 9 9 2 ,   J   C I T   R E P   B I B L   A N   S O ;   * I   S C I   I N F   I N C ,   1 9 9 4 ,   S O C   S C I   C I T   I N D ,   P 2 8 ;   K R E P S   G L ,   1 9 8 2 ,   A C A   B ,   V 4 2 ,   P 4 0 ;   * O X B R   C O M M ,   1 9 9 0 ,   S T A N D   P E R   D I R ;   P A I S L E Y   W ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 7 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 1 0 ;   R E A R D O N   K K ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 8 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 5 . x ;   R E E V E S   B ,   1 9 8 3 ,   H U M   C O M M U N   R E S ,   V 1 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 3 . t b 0 0 0 0 7 . x ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   R I C E   R E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 0 2 ;   S C H W E I T Z E R   J C ,   1 9 8 8 ,   J O U R N A L I S M   Q U A R T ,   V 6 5 ,   P 4 7 9 ;   S O   C Y K ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 3 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 3 . x ;   W I S P E   L ,   1 9 8 2 ,   A C A   B ,   V 4 2 ,   P 3 2 ;   1 9 9 0 ,   U L R I C H S   I N T   P E R I O D I C 	 1 6 	 3 4 	 3 4 	 1 	 6 	 S A G E   S C I E N C E   P R E S S 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0 	 0 3 6 0 - 3 9 8 9 	 	 	 H U M   C O M M U N   R E S 	 H u m .   C o m m u n .   R e s . 	 J U N 	 1 9 9 6 	 2 2 	 4 	 	 	 	 	 5 6 3 	 5 7 4 	 	 	 	 1 2 	 C o m m u n i c a t i o n 	 C o m m u n i c a t i o n 	 U P 2 0 4 	 W O S : A 1 9 9 6 U P 2 0 4 0 0 0 0 5 	 	 
 
 J 	 M o e d ,   H F 	 	 	 	 M o e d ,   H F 	 	 	 D i f f e r e n c e s   i n   t h e   c o n s t r u c t i o n   o f   S C I   b a s e d   b i b l i o m e t r i c   i n d i c a t o r s   a m o n g   v a r i o u s   p r o d u c e r s :   A   f i r s t   o v e r v i e w 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 B A S I C   R E S E A R C H ;   C I T A T I O N 	 T h i s   c o n t r i b u t i o n   d i s c u s s e s   b a s i c   t e c h n i c a l - m e t h o d o l o g i c a l   i s s u e s   w i t h   r e s p e c t   t o   d a t a   c o l l e c t i o n   a n d   t h e   c o n s t r u c t i o n   o f   b i b l i o m e t r i c   i n d i c a t o r s ,   p a r t i c u l a r l y   a t   t h e   m a c r o   o r   m e s o   l e v e l .   I t   f o c u s s e s   o n   t h e   u s e   o f   t h e   S c i e n c e   C i t a t i o n   I n d e x .   I t s   a i m   i s   t o   h i g h l i g h t   i m p o r t a n t   d e c i s i o n s   t h a t   h a v e   t o   b e   m a d e   i n   t h e   p r o c e s s   o f   d a t a   c o l l e c t i o n   a n d   t h e   c o n s t r u c t i o n   o f   b i b l i o m e t r i c   i n d i c a t o r s .   I t   i l l u s t r a t e s   d i f f e r e n c e s   i n   t h e   m e t h o d o l o g i e s   a p p l i e d   b y   s e v e r a l   i m p o r t a n t   p r o d u c e r s   o f   b i b l i o m e t r i c   i n d i c a t o r s :   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( I S I ) ;   C H I   R e s e a r c h ,   I n c . ;   t h e   I n f o r m a t i o n   S c i e n c e   a n d   S c i e n t o m e t r i c s   R e s e a r c h   U n i t   ( I S S R U )   a t   B u d a p e s t ;   a n d   t h e   C e n t r e   f o r   S c i e n c e   a n d   T e c h n o l o g y   S t u d i e s   a t   L e i d e n   U n i v e r s i t y   ( C W T S ) .   T h e   o b s e r v a t i o n s   m a d e   i n   t h i s   p a p e r   i l l u s t r a t e   t h e   c o m p l e x i t y   o f   t h e   p r o c e s s   o f   ' s t a n d a r d i s a t i o n '   o f   b i b l i o m e t r i c   i n d i c a t o r s .   M o r e o v e r ,   t h e y   p r o v i d e   p o s s i b l e   e x p l a n a t i o n s   f o r   d i v e r g e n c e   o f   r e s u l t s   o b t a i n e d   i n   d i f f e r e n t   s t u d i e s .   T h e   p a p e r   c o n c l u d e s   w i t h   a   f e w   g e n e r a l   c o m m e n t s   r e l a t e d   t o   t h e   n e e d   o f   ' s t a n d a r d i s a t i o n '   i n   t h e   f i e l d   o f   b i b l i o m e t r i c s . 	 	 M o e d ,   H F   ( r e p r i n t   a u t h o r ) ,   L E I D E N   U N I V , C T R   S C I   &   T E C H N O L   S T U D I E S , P O B   9 5 5 5 , 2 3 0 0   R B   L E I D E N , N E T H E R L A N D S . 	 	 	 	 	 	 B O R D O N S   M ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 7 9 ;   B R A U N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 7 ;   B R A U N   T ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 9 6 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   B r u i n   d e   R . E . ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 6 5 ;   D e S o l l a   D . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   E M R T O N   R K ,   1 9 7 2 ,   S O C I O L O G Y   S C I ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G L A N Z E L   W ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 1 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 2 0 8 ;   G U A R D I O L A   E ,   1 9 9 5 ,   P   5   B I E N N   C   S O C   S C I E ,   P 2 0 7 ;   K a t z   J S ,   1 9 9 5 ,   P   5   B I E N N   C   I N T   S O C ,   P 2 4 5 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M O E D   H F ,   1 9 9 2 ,   1 4 5 8 2   E U R   O F F   O F F   P U ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   S C H U B E R T   A ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 4 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S C H U B E R T   A ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ;   B r a u n   T . ,   1 9 8 3 ,   P   1   N A T   C   I N T   P A R T   S ,   P 8 0 ;   S M A L L   H ,   1 9 9 5 ,   P   5   B I E N N   C   S O C   S C I E ,   P 5 2 5 ;   V A N R A A N   A F J ,   1 9 9 3 ,   S O C I O L O G Y   S O C I O L O G I C ,   P 1 3 6 ;   S C I   W A T C H 	 2 3 	 3 4 	 3 4 	 0 	 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 1 9 9 6 	 3 5 	 2 	 	 	 	 	 1 7 7 	 1 9 1 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 7 6 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 U J 9 7 3 	 W O S : A 1 9 9 6 U J 9 7 3 0 0 0 0 4 	 	 
 
 J 	 C a r v a l h o ,   M M ;   F l e u r y ,   A ;   L o p e s ,   A P 	 	 	 	 C a r v a l h o ,   M .   M . ;   F l e u r y ,   A n d r e ;   L o p e s ,   A n a   P a u l a 	 	 	 A n   o v e r v i e w   o f   t h e   l i t e r a t u r e   o n   t e c h n o l o g y   r o a d m a p p i n g   ( T R M ) :   C o n t r i b u t i o n s   a n d   t r e n d s 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 T e c h n o l o g y   r o a d m a p p i n g ;   R o a d m a p ;   R o a d m a p p i n g ;   B i b l i o m e t r i c   s t u d y 	 R E S E A R C H - A N D - D E V E L O P M E N T ;   I N T E L L E C T U A L   S T R U C T U R E ;   C O C I T A T I O N   A N A L Y S I S ;   D I S R U P T I V E   T E C H N O L O G Y ;   I N T E G R A T E S   B U S I N E S S ;   P R O D U C T   D E V E L O P M E N T ;   P R A C T I C A L   A P P R O A C H ;   M A N A G E M E N T ;   I N F O R M A T I O N ;   I N N O V A T I O N 	 I n   r e c e n t   y e a r s ,   t e c h n o l o g i c a l   a d v a n c e s   h a v e   m o t i v a t e d   i n d u s t r i e s ,   c o m p a n i e s   a n d   e v e n   g o v e r n m e n t s   t o   l o o k   f o r   a n   i m p r o v e d   a l i g n m e n t   b e t w e e n   s t r a t e g i c   o b j e c t i v e s   a n d   t e c h n o l o g y   m a n a g e m e n t ,   p r e f e r a b l y   t h r o u g h   t h e   a p p l i c a t i o n   o f   s t r u c t u r e d   a n d   f l e x i b l e   a p p r o a c h e s   t h a t   u s e   t e c h n i q u e s   s u c h   a s   t e c h n o l o g y   r o a d m a p p i n g .   T h i s   p a p e r   p r e s e n t s   t h e   o u t c o m e s   o f   a   s y s t e m a t i c   r e v i e w   o f   t h e   l i t e r a t u r e   r e l a t i n g   t o   t e c h n o l o g y   r o a d m a p p i n g   t h a t   w a s   p u b l i s h e d   b e t w e e n   1 9 9 7   a n d   2 0 1 1 .   A   h y b r i d   m e t h o d o l o g i c a l   a p p r o a c h   t h a t   c o m b i n e s   b i b l i o m e t r i c s ,   c o n t e n t   a n a l y s i s   a n d   s e m a n t i c   a n a l y s i s   w a s   a p p l i e d .   T h e   r e s u l t s   s h o w   t h a t   t h e   m a i n   a c a d e m i c   j o u r n a l s   t h a t   d i s c u s s   t h i s   t h e m e   a r e   " T e c h n o l o g y   F o r e c a s t i n g   a n d   S o c i a l   C h a n g e "   a n d   " R e s e a r c h - T e c h n o l o g y   M a n a g e m e n t " .   A l t h o u g h   t h e   f i r s t   p a p e r   r e l a t i n g   t o   t h i s   t h e m e   w a s   p u b l i s h e d   i n   1 9 9 7 ,   t h e   n u m b e r   O f   p u b l i c a t i o n s   o n   t h e   s u b j e c t   o n l y   b e g a n   t o   i n c r e a s e   s u b s t a n t i a l l y   i n   2 0 0 4 .   M o s t   o f   t h e   s t u d i e s   r e v i e w e d   i n   t h i s   p a p e r   a p p l i e d   q u a l i t a t i v e   r e s e a r c h   m e t h o d s ,   i n d i c a t i n g   t h a t   m o s t   o f   t h e   r e s e a r c h   o n   t h e   t h e m e   i s   s t i l l   i n   a n   e x p l o r a t o r y   p h a s e .   T h e   i n t e r f a c e   b e t w e e n   r o a d m a p p i n g   a n d   o t h e r   i n i t i a t i v e s   c o n s i d e r e d   v i t a l   t o   i n n o v a t i o n ,   i n c l u d i n g   k n o w l e d g e   m a n a g e m e n t ,   c o m m u n i c a t i o n   s k i l l s   a n d   s t r a t e g i c   r e s o u r c e s   a n d   c o m p e t e n c i e s ,   a r e   a l s o   p o o r l y   a d d r e s s e d   i n   t h e   r e v i e w e d   l i t e r a t u r e .   ( C )   2 0 1 2   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ C a r v a l h o ,   M .   M . ;   F l e u r y ,   A n d r e ;   L o p e s ,   A n a   P a u l a ]   U n i v   S a o   P a u l o ,   D e p t   P r o d   E n g n ,   B R - 0 5 5 0 8 0 7 0   S a o   P a u l o ,   B r a z i l 	 L o p e s ,   A P   ( r e p r i n t   a u t h o r ) ,   U n i v   S a o   P a u l o ,   D e p t   P r o d   E n g n ,   A v   P r o f   A l m e i d a   P r a d o ,   B R - 0 5 5 0 8 0 7 0   S a o   P a u l o ,   B r a z i l . 	 a p l o p e s 1 0 @ h o t m a i l . c o m 	 F l e u r y ,   A n d r e / F - 5 3 4 0 - 2 0 1 4 ;   C a r v a l h o ,   M a r l y / D - 8 2 9 7 - 2 0 1 2 	 C a r v a l h o ,   M a r l y / 0 0 0 0 - 0 0 0 3 - 0 1 1 9 - 5 3 1 6 	 	 	 A b e   H ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 8 0 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 3 . 0 2 7 ;   A l b r i g h t   R E ,   2 0 0 3 ,   R E S   T E C H N O L   M A N A G E ,   V 4 6 ,   P 3 1 ;   A m a d i - E c h e n d u   J ,   2 0 1 1 ,   J   E N G   T E C H N O L   M A N A G E ,   V 2 8 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j e n g t e c m a n . 2 0 1 0 . 1 2 . 0 0 2 ;   A m e r   M ,   2 0 1 0 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 7 ,   P 1 3 5 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 5 . 0 0 2 ;   A n   Y ,   2 0 0 8 ,   I N T   J   S E R V   I N D   M A N A G ,   V 1 9 ,   P 6 2 1 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 6 4 2 3 0 8 1 0 9 0 3 4 9 7 ;   B A R K E R   D ,   1 9 9 5 ,   L O N G   R A N G E   P L A N N ,   V 2 8 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 4 - 6 3 0 1 ( 9 5 ) 9 8 5 8 6 - H ;   B e l l e g a r d a   J R ,   2 0 0 0 ,   P   I E E E ,   V 8 8 ,   P 1 2 7 9 ,   D O I   1 0 . 1 1 0 9 / 5 . 8 8 0 0 8 4 ;   F r e e m a n   L .   C . ,   2 0 0 2 ,   U C I N E T   W I N D O W S   S O F T W ;   B o s c h   S . J .   M . ,   2 0 0 5 ,   J   C L E A N   P R O D ,   V 1 3 ,   P 1 0 2 7 ;   B r a y   O . H . ,   1 9 9 7 ,   T E C H N O L O G Y   R O A D M A P P I ;   C a b e s t r e   F . J . R . ,   1 9 9 9 ,   P A P E L E S   E C   E S P A N O L A ,   V 7 8 - 7 9 ,   P 3 0 2 ;   C a e t a n o   M ,   2 0 1 1 ,   T E C H N O V A T I O N ,   V 3 1 ,   P 3 2 0 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 1 1 . 0 1 . 0 0 5 ;   C a r n e v a l l i   J A ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 4 ,   P 7 3 7 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 8 . 0 3 . 0 0 6 ;   C h r i s t e n s e n   H I ,   2 0 0 5 ,   I E E E   R O B O T   A U T O M   M A G ,   V 1 2 ,   P 1 0 ,   D O I   1 0 . 1 1 0 9 / M R A . 2 0 0 5 . 1 4 5 8 3 0 7 ;   C o a t e s   V ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 7 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 0 ) 0 0 1 2 2 - 0 ;   C o o p e r   R . G . ,   2 0 0 9 ,   P R O D U C T   I N N O V A T I O N   T ;   C o s n e r   R R ,   2 0 0 7 ,   R E S   T E C H N O L   M A N A G E ,   V 5 0 ,   P 3 1 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   D a i m   T U ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 6 8 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 4 . 0 0 6 ;   D i o d a t o   V .   P ,   1 9 9 4 ,   D I C T   B I B L I O M E T R I C S ;   D i s s e l   M C ,   2 0 0 9 ,   R E S   T E C H N O L   M A N A G E ,   V 5 2 ,   P 4 5 ;   D o n n e l l y   K ,   2 0 0 6 ,   J   C L E A N   P R O D ,   V 1 4 ,   P 1 3 5 7 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 5 . 1 1 . 0 2 9 ;   E l l i o t t   J ,   2 0 0 5 ,   B T   T E C H N O L   J ,   V 2 3 ,   P 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 0 - 0 0 6 - 0 0 0 5 - 1 ;   F e n w i c k   D ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 1 0 5 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 4 . 0 0 5 ;   F i n k   A . ,   1 9 9 5 ,   S U R V E Y   H D B ;   F i n k   A . ,   1 9 9 5 ,   S A M P L E   S U R V E Y S ;   F o d e n   J ,   2 0 1 0 ,   R E S   T E C H N O L   M A N A G E ,   V 5 3 ,   P 3 3 ;   F r o e s e   T ,   2 0 0 9 ,   C A N   J   C I V I L   E N G ,   V 3 6 ,   P 4 8 0 ,   D O I   1 0 . 1 1 3 9 / L 0 8 - 1 2 7 ;   G a l v i n   R ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 0 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 3 . 0 9 . 0 0 7 ;   G a l v i n   R ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 8 0 3 ;   G e r d s r i   N . ,   2 0 0 8 ,   P O R T L   I N T   C   M A N   E N G ;   G e r d s r i   N ,   2 0 1 0 ,   T E C H N O L   A N A L   S T R A T E G ,   V 2 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 9 0 3 4 9 8 5 5 3 ;   G e r d s r i   N ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 3 . 0 1 3 ;   G e u m   Y ,   2 0 1 1 ,   J   E N G   T E C H N O L   M A N A G E ,   V 2 8 ,   P 1 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j e n g t e c m a n . 2 0 1 1 . 0 3 . 0 0 2 ;   G i n d y   N ,   2 0 0 8 ,   I N T   J   C O M P U T   I N T E G   M ,   V 2 1 ,   P 9 5 7 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 1 1 9 2 0 8 0 1 9 2 7 1 4 8 ;   G r o e n v e l d   P ,   1 9 9 7 ,   R E S   T E C H N O L   M A N A G E ,   V 4 0 ,   P 4 8 ;   G r o e n v e l d   P ,   2 0 0 7 ,   R E S   T E C H N O L   M A N A G E ,   V 5 0 ,   P 4 9 ;   G r o s s m a n   D S ,   2 0 0 4 ,   R E S   T E C H N O L   M A N A G E ,   V 4 7 ,   P 4 1 ;   H a n s i s   E ,   2 0 0 8 ,   I E E E   T   M E D   I M A G I N G ,   V 2 7 ,   P 1 5 4 8 ,   D O I   1 0 . 1 1 0 9 / T M I . 2 0 0 8 . 2 0 0 6 5 1 4 ;   H i c k s   B ,   2 0 0 4 ,   I E E E   A E R O   E L   S Y S   M A G ,   V 1 9 ,   P 9 ,   D O I   1 0 . 1 1 0 9 / M A E S . 2 0 0 4 . 1 3 0 1 2 2 0 ;   H u n t e r   J . E . ,   1 9 8 2 ,   M E T A A N A L Y Z E S   C U M U L A T ;   I K P A A H I N D I   L ,   1 9 8 5 ,   L I B R I ,   V 3 5 ,   P 1 6 3 ;   K a p p e l   T A ,   2 0 0 1 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 8 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 7 3 7 - 6 7 8 2 ( 0 0 ) 0 0 0 6 6 - 7 ;   K o r o t k y   S K ,   2 0 0 4 ,   J   L I G H T W A V E   T E C H N O L ,   V 2 2 ,   P 7 0 3 ,   D O I   1 0 . 1 1 0 9 / J L T . 2 0 0 4 . 8 2 5 7 5 6 ;   K o s t o f f   R N ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 4 8 - 9 ;   K o s t o f f   R N ,   2 0 0 1 ,   I E E E   T   E N G   M A N A G E ,   V 4 8 ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 9 2 2 4 7 3 ;   L e e   J ,   2 0 0 9 ,   I N T   J   T E C H N O L   M A N A G E ,   V 4 7 ,   P 3 0 6 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 9 . 0 2 4 4 3 2 ;   L e e   S ,   2 0 0 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 2 ,   P 5 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 4 . 1 1 . 0 0 6 ;   L e e   S ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 1 6 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 8 . 0 0 5 0 9 . x ;   L e e   S ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 4 3 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 7 . 0 2 . 0 1 1 ;   L e e   S ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 7 6 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 1 . 0 0 3 ;   L e v i t t   M R ,   2 0 1 1 ,   J   N E U R O I M A G I N G ,   V 2 1 ,   P 2 5 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 5 2 - 6 5 6 9 . 2 0 1 0 . 0 0 5 0 7 . x ;   L i c h t e n t h a l e r   U ,   2 0 0 8 ,   R E S   T E C H N O L   M A N A G E ,   V 5 1 ,   P 4 5 ;   L i t t e l l   J . ,   2 0 0 8 ,   S Y S T E M A T I C   R E V   M E T A A ;   M a   T ,   2 0 0 7 ,   J   S Y S T   S C I   S Y S T   E N G ,   V 1 6 ,   P 4 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 5 1 8 - 0 0 7 - 5 0 4 7 - 5 ;   M a   T J ,   2 0 0 6 ,   S Y S T   R E S   B E H A V   S C I ,   V 2 3 ,   P 7 4 3 ,   D O I   1 0 . 1 0 0 2 / s r e s . 7 0 8 ;   G o e n a g o - L a r r a n a g a   J M ,   2 0 1 0 ,   D Y N A - B I L B A O ,   V 8 5 ,   P 3 3 1 ;   M c C a r t h y   R C ,   2 0 0 3 ,   R E S   T E C H N O L   M A N A G E ,   V 4 6 ,   P 4 7 ;   M c D o w a l l   W ,   2 0 0 6 ,   E N E R G   P O L I C Y ,   V 3 4 ,   P 1 2 3 6 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 5 . 1 2 . 0 0 6 ;   M c M i l l a n   A ,   2 0 0 3 ,   R E S   T E C H N O L   M A N A G E ,   V 4 6 ,   P 4 0 ;   N e e l y   A ,   2 0 0 5 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 5 ,   P 1 2 6 4 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 5 1 0 6 3 3 6 4 8 ;   N o n a k a   I . ,   2 0 0 3 ,   K n o w l e d g e   M a n a g e m e n t   R e s e a r c h   &   P r a c t i c e ,   V 1 ,   P 2 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . k m r p . 8 5 0 0 0 0 1 ;   N o n a k a   I . ,   1 9 9 5 ,   K N O W L E D G E   C R E A T I N G   C ;   O l i v e i r a   M G ,   2 0 1 0 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 7 ,   P 1 3 3 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 7 . 0 1 5 ;   P a g a n i   M ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 3 8 2 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 7 . 0 0 3 ;   P e t r i c k   I J ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 6 4 - 7 ;   P h a a l   R ,   2 0 0 7 ,   E M J - E N G   M A N A G   J ,   V 1 9 ,   P 3 ;   P h a a l   R ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 3 3 6 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 5 . 0 2 . 0 0 1 ;   P h a a l   R ,   2 0 0 4 ,   I N T   J   T E C H N O L   M A N A G E ,   V 2 7 ,   P 1 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 4 . 0 0 3 8 7 8 ;   P h a a l   R ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 7 2 - 6 ;   P h a a l   R ,   2 0 1 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 8 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 6 . 0 1 8 ;   P h a a l   R ,   2 0 0 3 ,   R E S   T E C H N O L   M A N A G E ,   V 4 6 ,   P 5 2 ;   P h a a l   R . ,   2 0 0 1 ,   C H A R A C T E R I Z A T I O N   T E C ;   P h a a l   R . ,   2 0 0 1 ,   F A S T   S T A R T   T E C H N O L O G ;   P h a a l   R ,   2 0 0 9 ,   I N T   J   T E C H N O L   M A N A G E ,   V 4 7 ,   P 2 8 6 ;   P h a a l   R ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 3 . 0 1 8 ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   P o r t e r   A L ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 2 8 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 3 . 1 1 . 0 0 4 ;   P r a s a d   S ,   2 0 0 5 ,   I N F O R M   M A N A G E - A M S T E R ,   V 4 2 ,   P 1 1 3 7 ,   D O I   1 0 . 1 0 1 6 / j . i m . 2 0 0 5 . 0 1 . 0 0 3 ;   P r i e t o   V C ,   2 0 1 1 ,   S E R V   I N D   J ,   V 3 1 ,   P 1 4 0 5 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 4 2 0 6 0 9 0 3 5 7 6 0 5 0 ;   P r o b e r t   D ,   2 0 0 3 ,   R E S   T E C H N O L   M A N A G E ,   V 4 6 ,   P 2 7 ;   P r o b e r t   D R ,   2 0 0 3 ,   P   I   M E C H   E N G   B - J   E N G ,   V 2 1 7 ,   P 1 1 8 3 ,   D O I   1 0 . 1 2 4 3 / 0 9 5 4 4 0 5 0 3 3 2 2 4 2 0 1 1 5 ;   R a d n o r   M ,   2 0 0 4 ,   R E S   T E C H N O L   M A N A G E ,   V 4 7 ,   P 2 4 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R i c h a r d s o n   C E ,   2 0 0 5 ,   I E E E   T   C O M P O N   P A C K   T ,   V 2 8 ,   P 3 7 2 ,   D O I   1 0 . 1 1 0 9 / T C A P T . 2 0 0 5 . 8 4 7 7 8 8 ;   R i c h e y   J M ,   2 0 0 4 ,   R E S   T E C H N O L   M A N A G E ,   V 4 7 ,   P 3 7 ;   V a r g a s   A D S ,   2 0 0 8 ,   I N G   I N V E S T ,   V 2 8 ,   P 1 5 0 ;   S a r i t a s   O ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 6 7 - 2 ;   S a r i t a s   O ,   2 0 1 0 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 7 ,   P 1 0 6 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 3 . 0 0 3 ;   S c h i l d t   H ,   2 0 0 2 ,   S I T K I S   S O F T W A R E   B I B L ;   S c h w e r y   A ,   2 0 0 4 ,   R & D   M A N A G E ,   V 3 4 ,   P 5 3 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 4 . 0 0 3 6 1 . x ;   S o r l i - P e n a   A . M . ,   2 0 1 0 ,   D Y N A ,   V 8 5 ,   P 6 8 7 ;   S t r a u s s   J D ,   2 0 0 4 ,   R E S   T E C H N O L   M A N A G E ,   V 4 7 ,   P 5 1 ;   S u o m a l a i n e n   T ,   2 0 1 1 ,   J   S Y S T   S O F T W A R E ,   V 8 4 ,   P 9 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j s s . 2 0 1 1 . 0 1 . 0 3 1 ;   T a l o n e n   T ,   2 0 0 8 ,   R E S   T E C H N O L   M A N A G E ,   V 5 1 ,   P 5 4 ;   T u o m i n e n   A ,   2 0 1 0 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 7 ,   P 1 2 0 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 6 . 0 0 1 ;   V a t a n a n a n   R . S . ,   2 0 1 0 ,   P O R T L   I N T   C   M A N   E N G ;   V o j a k   B A ,   2 0 0 4 ,   I E E E   T   E N G   M A N A G E ,   V 5 1 ,   P 2 8 8 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 4 . 8 3 0 8 4 6 ;   V o j a k   B A ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 4 7 - 7 ;   W a l l   B ,   2 0 0 5 ,   P R O D   P L A N   C O N T R O L ,   V 1 6 ,   P 7 0 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 2 8 0 5 0 0 2 9 0 1 3 6 ;   W a l s h   S T ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 3 . 1 0 . 0 0 3 ;   W a n g   T I ,   2 0 0 9 ,   E X P E R T   S Y S T   A P P L ,   V 3 6 ,   P 9 6 6 3 ,   D O I   1 0 . 1 0 1 6 / j . e s w a . 2 0 0 8 . 1 2 . 0 1 0 ;   W e l l s   R ,   2 0 0 4 ,   R E S   T E C H N O L   M A N A G E ,   V 4 7 ,   P 4 6 ;   W h a l e n   P J ,   2 0 0 7 ,   R E S   T E C H N O L   M A N A G E ,   V 5 0 ,   P 4 0 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W I L L Y A R D   C H ,   1 9 8 7 ,   R E S   M A N A G E ,   V 3 0 ,   P 1 3 ;   Y a m a s h i t a   Y ,   2 0 0 9 ,   J   S Y S T   S C I   S Y S T   E N G ,   V 1 8 ,   P 1 8 4 ,   D O I   1 0 . 1 0 0 7 / s 1 1 5 1 8 - 0 0 9 - 5 1 0 3 - 4 ;   Y a s u n a g a   Y ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 6 . 0 0 4 ;   Y o o n   B ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 5 1 	 1 1 0 	 3 3 	 3 6 	 1 3 	 1 8 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 S E P 	 2 0 1 3 	 8 0 	 7 	 	 	 	 	 1 4 1 8 	 1 4 3 7 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 2 . 1 1 . 0 0 8 	 	 2 0 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 0 0 S Y 	 W O S : 0 0 0 3 2 3 0 9 2 4 0 0 0 1 4 	 	 
 
 J 	 S t r o t m a n n ,   A ;   Z h a o ,   D Z 	 	 	 	 S t r o t m a n n ,   A n d r e a s ;   Z h a o ,   D a n g z h i 	 	 	 A u t h o r   n a m e   d i s a m b i g u a t i o n :   W h a t   d i f f e r e n c e   d o e s   i t   m a k e   i n   a u t h o r - b a s e d   c i t a t i o n   a n a l y s i s ? 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c o - c i t a t i o n   a n a l y s i s ;   c i t a t i o n   a n a l y s i s 	 I N F O R M A T I O N - S C I E N C E ;   C O C I T A T I O N ;   M E D L I N E 	 I n   t h i s   a r t i c l e ,   w e   e x p l o r e   h o w   s t r o n g l y   a u t h o r   n a m e   d i s a m b i g u a t i o n   ( A N D )   a f f e c t s   t h e   r e s u l t s   o f   a n   a u t h o r - b a s e d   c i t a t i o n   a n a l y s i s   s t u d y ,   a n d   i d e n t i f y   c o n d i t i o n s   u n d e r   w h i c h   t h e   t r a d i t i o n a l   s i m p l i f i e d   a p p r o a c h   o f   u s i n g   s u r n a m e s   a n d   f i r s t   i n i t i a l s   m a y   s u f f i c e   i n   p r a c t i c e .   W e   c o m p a r e   a u t h o r   c i t a t i o n   r a n k i n g   a n d   c o c i t a t i o n   m a p p i n g   r e s u l t s   i n   t h e   s t e m   c e l l   r e s e a r c h   f i e l d   f r o m   2 0 0 4   t o   2 0 0 9   u s i n g   t w o   A N D   a p p r o a c h e s :   t h e   t r a d i t i o n a l   s i m p l i f i e d   a p p r o a c h   o f   u s i n g   a u t h o r   s u r n a m e   a n d   f i r s t   i n i t i a l   a n d   a   s o p h i s t i c a t e d   a l g o r i t h m i c   a p p r o a c h .   W e   f i n d   t h a t   t h e   t r a d i t i o n a l   a p p r o a c h   l e a d s   t o   e x t r e m e l y   d i s t o r t e d   r a n k i n g s   a n d   s u b s t a n t i a l l y   d i s t o r t e d   m a p p i n g s   o f   a u t h o r s   i n   t h i s   f i e l d   w h e n   b a s e d   o n   f i r s t -   o r   a l l - a u t h o r   c i t a t i o n   c o u n t i n g ,   w h e r e a s   l a s t - a u t h o r - b a s e d   c i t a t i o n   r a n k i n g   a n d   c o c i t a t i o n   m a p p i n g   b o t h   a p p e a r   r e l a t i v e l y   i m m u n e   t o   t h e   a u t h o r   n a m e   a m b i g u i t y   p r o b l e m .   T h i s   i s   l a r g e l y   b e c a u s e   R o m a n i z e d   n a m e s   o f   C h i n e s e   a n d   K o r e a n   a u t h o r s ,   w h o   a r e   v e r y   a c t i v e   i n   t h i s   f i e l d ,   a r e   e x t r e m e l y   a m b i g u o u s ,   b u t   f e w   o f   t h e s e   r e s e a r c h e r s   c o n s i s t e n t l y   p u b l i s h   a s   l a s t   a u t h o r s   i n   b y l i n e s .   W e   c o n c l u d e   t h a t   a   m o r e   e a r n e s t   e f f o r t   i s   r e q u i r e d   t o   d e a l   w i t h   t h e   a u t h o r   n a m e   a m b i g u i t y   p r o b l e m   i n   b o t h   c i t a t i o n   a n a l y s i s   a n d   i n f o r m a t i o n   r e t r i e v a l ,   e s p e c i a l l y   g i v e n   t h e   c u r r e n t   t r e n d   t o w a r d   g l o b a l i z a t i o n .   I n   t h e   s t e m   c e l l   r e s e a r c h   f i e l d ,   i n   w h i c h   l a b o r a t o r y   h e a d s   a r e   t r a d i t i o n a l l y   l i s t e d   a s   l a s t   a u t h o r s   i n   b y l i n e s ,   l a s t - a u t h o r - b a s e d   c i t a t i o n   r a n k i n g   a n d   c o c i t a t i o n   m a p p i n g   u s i n g   t h e   t r a d i t i o n a l   a p p r o a c h   t o   a u t h o r   n a m e   d i s a m b i g u a t i o n   m a y   s e r v e   a s   a   s i m p l e   w o r k a r o u n d ,   b u t   l i k e l y   a t   t h e   p r i c e   o f   l a r g e l y   f i l t e r i n g   o u t   C h i n e s e   a n d   K o r e a n   c o n t r i b u t i o n s   t o   t h e   f i e l d   a s   w e l l   a s   i m p o r t a n t   c o n t r i b u t i o n s   b y   y o u n g   r e s e a r c h e r s . 	 [ S t r o t m a n n ,   A n d r e a s ]   G E S I S   L e i b n i z   I n s t   S o c i a l   S c i ,   D - 5 0 6 6 7   C o l o g n e ,   G e r m a n y ;   [ Z h a o ,   D a n g z h i ]   U n i v   A l b e r t a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   E d m o n t o n ,   A B   T 6 G   2 J 4 ,   C a n a d a 	 S t r o t m a n n ,   A   ( r e p r i n t   a u t h o r ) ,   G E S I S   L e i b n i z   I n s t   S o c i a l   S c i ,   U n t e r   S a c h s e n h a u s e n   6 - 8 ,   D - 5 0 6 6 7   C o l o g n e ,   G e r m a n y . 	 a n d r e a s . s t r o t m a n n @ g e s i s . o r g ;   d z h a o @ u a l b e r t a . c a 	 	 S t r o t m a n n ,   A n d r e a s / 0 0 0 0 - 0 0 0 2 - 0 6 7 9 - 6 4 9 8 	 S o c i a l   S c i e n c e s   a n d   H u m a n i t i e s   R e s e a r c h   C o u n c i l   ( S S H R C )   o f   C a n a d a 	 T h i s   s t u d y   w a s   f u n d e d   i n   p a r t   b y   a   s t a n d a r d   r e s e a r c h   g r a n t   f r o m   t h e   S o c i a l   S c i e n c e s   a n d   H u m a n i t i e s   R e s e a r c h   C o u n c i l   ( S S H R C )   o f   C a n a d a . 	 A n d r a d e   M . ,   2 0 0 6 ,   W O R K S H   S C H   D A T   D A T   I ;   B u b e l a   T ,   2 0 1 0 ,   C E L L   S T E M   C E L L ,   V 7 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / j . s t e m . 2 0 1 0 . 0 6 . 0 1 0 ;   C o t a   R G ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 8 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 6 3 ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   N A T U R E ,   V 4 6 2 ,   P 8 2 5 ,   D O I   1 0 . 1 0 3 8 / 4 6 2 8 2 5 a ;   H A N   J . ,   2 0 0 5 ,   P   5   A C M   I E E E   J O I N T   C ,   P 3 3 4 ;   H e r s k o v i c   J R ,   2 0 0 7 ,   J   A M   M E D   I N F O R M   A S S N ,   V 1 4 ,   P 2 1 2 ,   D O I   1 0 . 1 1 9 7 / j a m i a . M 2 1 9 1 ;   K a n g   I S ,   2 0 0 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 5 ,   P 8 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 8 . 0 6 . 0 0 6 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   Q i u   J ,   2 0 0 8 ,   N A T U R E ,   V 4 5 1 ,   P 7 6 6 ,   D O I   1 0 . 1 0 3 8 / 4 5 1 7 6 6 a ;   S c o p u s ,   2 0 0 9 ,   S C O P   A U T H   I D ;   S m a l h e i s e r   N .   R . ,   2 0 0 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 3 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / A R I S . 2 0 0 9 . 1 4 4 0 4 3 0 1 1 3 ;   S t r o t m a n n   A . ,   2 0 0 9 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / M E E T . 2 0 0 9 . 1 4 5 0 4 6 0 2 1 8 ;   S t r o t m a n n   A ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 9 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 2 . 0 0 1 ;   T o r v i k   V I ,   2 0 0 9 ,   A C M   T   K N O W L   D I S C O V   D ,   V 3 ,   D O I   1 0 . 1 1 4 5 / 1 5 5 2 3 0 3 . 1 5 5 2 3 0 4 ;   T o r v i k   V I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 4 0 ,   D O I   [ 1 0 . 1 0 0 2 / a s i . 2 0 1 0 5 ,   1 0 . 1 0 0 2 / a s i / 2 0 1 0 5 ] ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 ;   Z h a n g   J Y Y ,   2 0 1 0 ,   B I O S O C I E T I E S ,   V 5 ,   P 2 1 9 ,   D O I   1 0 . 1 0 5 7 / b i o s o c . 2 0 1 0 . 3 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 0 ;   Z h a o   D Z ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 6 5 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 9 5 ;   Z h a o   D Z ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 1 7 - 2 	 2 2 	 3 3 	 3 3 	 5 	 4 1 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 S E P 	 2 0 1 2 	 6 3 	 9 	 	 	 	 	 1 8 2 0 	 1 8 3 3 	 	 1 0 . 1 0 0 2 / a s i . 2 2 6 9 5 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 9 1 V E 	 W O S : 0 0 0 3 0 7 7 3 0 0 0 0 0 0 9 	 	 
 
 J 	 L A W A N I ,   S M 	 	 	 	 L A W A N I ,   S M 	 	 	 B I B L I O M E T R I C S   -   I T S   T H E O R E T I C A L   F O U N D A T I O N S ,   M E T H O D S   A N D   A P P L I C A T I O N S 	 L I B R I 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 L A W A N I ,   S M   ( r e p r i n t   a u t h o r ) ,   I N T   I N S T   T R O P   A G R , L I B   &   D O C U M E N T A T   S E R V , I B A D A N , N I G E R I A . 	 	 	 	 	 	 A I Y E P E K U   W O ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 1 0 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 7 ;   A L L I S O N   P D ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 2 6 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 2 0 5 ;   B A U G H M A N   J C ,   1 9 7 3 ,   L I B R   J ,   V 9 8 ,   P 2 9 7 7 ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B r a d f o r d   S .   C . ,   1 9 5 3 ,   D O C U M E N T A T I O N ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R E N N E N   P W ,   1 9 7 8 ,   B   M E D   L I B R   A S S O C ,   V 6 6 ,   P 2 4 ;   B R E N N E N   P W ,   1 9 7 4 ,   S P E C   L I B R ,   V 6 5 ,   P 2 6 3 ;   B r o a d u s   R .   N . ,   1 9 7 7 ,   A D V   L I B R A R I A N S H I P ,   V 7 ,   P 2 9 9 ;   B r o o k e s   B C ,   1 9 7 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 1 ,   P 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 1 0 5 0 3 ;   B R O O K E S   B C ,   1 9 7 0 ,   J   D O C ,   V 2 6 ,   P 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 4 ;   B R O O K E S   B C ,   1 9 6 9 ,   N A T U R E ,   V 2 2 4 ,   P 9 5 3 ,   D O I   1 0 . 1 0 3 8 / 2 2 4 9 5 3 a 0 ;   B R O O K E S   B C ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 1 8 ;   B R O O K E S   B C ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 1 8 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 4 1 ;   B U N T R O C K   H ,   1 9 7 2 ,   I N T   A S S   A G R   L I B R A R I A ,   V 1 6 ,   P 2 5 ;   C A W K E L L   A E ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 1 0 7 ;   C O I L E   R C ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 3 6 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 6 1 0 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   D O N O H U E   J C ,   1 9 7 3 ,   U N D E R S T A N D I N G   S C I   L I ;   D R O T T   M C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 3 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 6 ;   D u f r e n o y   J ,   1 9 3 8 ,   Q   R E V   B I O L ,   V 1 3 ,   P 2 0 7 ,   D O I   1 0 . 1 0 8 6 / 3 9 4 5 5 8 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F u s s l e r   H H ,   1 9 4 9 ,   L I B R   Q U A R T ,   V 1 9 ,   P 1 1 9 ;   F u s s l e r   H H ,   1 9 4 9 ,   L I B R   Q U A R T ,   V 1 9 ,   P 1 9 ;   G A R F I E L D   E ,   1 9 7 6 ,   N A T U R E ,   V 2 6 4 ,   P 6 0 9 ,   D O I   1 0 . 1 0 3 8 / 2 6 4 6 0 9 a 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 2 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 4 0 5 ;   G a r f i e l d   E . ,   1 9 7 3 ,   T H E O R Y   L I B R A R I A N S H I P ,   P 3 8 0 ;   G A R F I E L D   E ,   1 9 8 0 ,   E S S A Y S   I N F O R M A T I O N   S ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 2 ,   P 2 7 2 ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ;   G O F F M A N   W ,   1 9 6 6 ,   N A T U R E ,   V 2 1 2 ,   P 4 4 9 ,   D O I   1 0 . 1 0 3 8 / 2 1 2 4 4 9 a 0 ;   G R O S S   P L K ,   1 9 2 7 ,   S C I E N C E ,   V 6 6 ,   P 1 2 2 9 ;   H A F N E R   A W ,   1 9 7 7 ,   I N T   L I B R   R E V ,   V 9 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 7 8 3 7 ( 7 7 ) 9 0 0 4 8 - 6 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H E Y S E R   R G ,   1 9 7 7 ,   T H E S I S   F L O R I D A   S T A T E ,   V 1 1 ;   H U B E R T   J J ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 6 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 1 5 ;   H U B E R T   J J ,   1 9 7 5 ,   R A N K   F R E Q U E N C Y   M O D E L ;   H U L M E   E W ,   1 9 2 3 ,   S T A T I S T I C A L   B I B L I O   R ;   I N H A B E R   H ,   1 9 7 4 ,   R E S   P O L I C Y ,   V 3 ,   P 1 8 2 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 7 4 ) 9 0 0 0 4 - 3 ;   K O V A C H   E G ,   1 9 7 8 ,   I S I S   W H O   I S   P U B L I S H I ,   P 3 3 ;   L A W A N I   S M ,   1 9 7 3 ,   I N T   L I B R   R E V ,   V 5 ,   P 3 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 0 - 7 8 3 7 ( 7 3 ) 8 0 0 3 7 - 8 ;   L A W A N I   S M ,   1 9 7 2 ,   U N E S C O   B U L L   L I B R ,   V 2 6 ,   P 8 8 ;   L A W A N I   S M ,   1 9 7 7 ,   B I O S C I E N C E ,   V 2 7 ,   P 2 6 ,   D O I   1 0 . 2 3 0 7 / 1 2 9 7 7 9 0 ;   L A W A N I   S M ,   1 9 7 5 ,   J   L I B R ,   V 7 ,   P 1 2 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 7 5 0 0 7 0 0 1 0 2 ;   L a w a n i   S .   M . ,   1 9 7 7 ,   J   A G R O N O M I C   E D ,   V 6 ,   P 4 1 ;   L A W A N I   S M ,   1 9 7 4 ,   N I G E R I A N   L I B R A R I E S ,   V 1 0 ,   P 1 ;   L A W A N I   S M ,   1 9 8 0 ,   T H E S I S   F L O R I D A   S T A T E ,   V 1 7 ;   L a w a n i   S .   M . ,   1 9 7 4 ,   I N T   R I C E   C O M M I S S I O N ,   V 2 3 ,   P 1 ;   L A W A N I   S M ,   1 9 7 2 ,   S E R I A L S   R I C E   R E S ;   L e a v e n s   D H ,   1 9 5 3 ,   E C O N O M E T R I C A ,   V 2 1 ,   P 6 3 0 ;   L E I M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 3 0 ;   L I N E   M B ,   1 9 7 4 ,   J   D O C ,   V 3 0 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 8 3 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M A N T E L L   L H ,   1 9 6 6 ,   A M   D O C ,   V 1 7 ,   P 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 7 0 1 0 4 ;   M U R P H Y   L J ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 6 0 7 ;   N A R I N   F ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 5 ;   N i c h o l a s   D . ,   1 9 7 8 ,   L I T   B I B L I O M E T R I C S ;   P a r k e r   E .   B . ,   1 9 6 7 ,   B I B L I O G R A P H I C   C I T A T I ;   P E N E L O P E   E ,   1 9 6 9 ,   J   D O C U M E N T A T I O N ,   V 2 5 ,   P 1 2 3 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P R I C E   D J D ,   1 9 7 6 ,   I S I   W H O   P U B L I S H I N G   S ,   P 2 7 ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   P r i c e   D e   S o l l a ,   1 9 6 9 ,   P   I S R A E L   A C A D E M Y   S C I ,   V 4 ,   P 9 8 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P R I T C H A R D   A ,   1 9 6 9 ,   S T A T I S T I C A L   B I B L I O   I ;   R A I S I G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 5 0 ;   R E D D I N   M C ,   1 9 7 3 ,   B I O S C I E N C E ,   V 2 3 ,   P 3 5 4 ,   D O I   1 0 . 2 3 0 7 / 1 2 9 6 5 1 4 ;   S C H O R R   A E ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 6 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 6 0 3 0 8 ;   S E N G U P T A   I N ,   1 9 7 3 ,   J   D O C ,   V 2 9 ,   P 1 9 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 5 5 ;   W i l l i a m s   C .   B . ,   1 9 4 4 ,   A N N   E U G E N I C ,   V 1 2 ,   P 1 4 3 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O U R   P R I N ;   Z i p f   G .   K . ,   1 9 3 5 ,   P S Y C H O   B I O L   L A N G U A G E 	 7 4 	 3 3 	 3 3 	 1 	 5 	 M U N K S G A A R D   I N T   P U B L   L T D 	 C O P E N H A G E N 	 3 5   N O R R E   S O G A D E ,   P O   B O X   2 1 4 8 ,   D K - 1 0 1 6   C O P E N H A G E N ,   D E N M A R K 	 0 0 2 4 - 2 6 6 7 	 	 	 L I B R I 	 L i b r i 	 	 1 9 8 1 	 3 1 	 4 	 	 	 	 	 2 9 4 	 3 1 5 	 	 	 	 2 2 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 N G 7 0 3 	 W O S : A 1 9 8 1 N G 7 0 3 0 0 0 0 2 	 	 
 
 J 	 B o r n m a n n ,   L 	 	 	 	 B o r n m a n n ,   L u t z 	 	 	 D o   a l t m e t r i c s   p o i n t   t o   t h e   b r o a d e r   i m p a c t   o f   r e s e a r c h ?   A n   o v e r v i e w   o f   b e n e f i t s   a n d   d i s a d v a n t a g e s   o f   a l t m e t r i c s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S o c i e t a l   i m p a c t ;   B r o a d e r   i m p a c t ;   A l t m e t r i c s ;   S c i e n t o m e t r i c s 	 S O C I E T A L   I M P A C T ;   S O C I A L   M E D I A ;   C I T A T I O N S ;   S C I E N C E ;   M E T R I C S ;   B I B L I O M E T R I C S ;   T W I T T E R ;   T W E E T S ;   A G E 	 T o d a y ,   i t   i s   n o t   c l e a r   h o w   t h e   i m p a c t   o f   r e s e a r c h   o n   o t h e r   a r e a s   o f   s o c i e t y   t h a n   s c i e n c e   s h o u l d   b e   m e a s u r e d .   W h i l e   p e e r   r e v i e w   a n d   b i b l i o m e t r i c s   h a v e   b e c o m e   s t a n d a r d   m e t h o d s   f o r   m e a s u r i n g   t h e   i m p a c t   o f   r e s e a r c h   i n   s c i e n c e ,   t h e r e   i s   n o t   y e t   a n   a c c e p t e d   f r a m e w o r k   w i t h i n   w h i c h   t o   m e a s u r e   s o c i e t a l   i m p a c t .   A l t e r n a t i v e   m e t r i c s   ( c a l l e d   a l t m e t r i c s   t o   d i s t i n g u i s h   t h e m   f r o m   b i b l i o m e t r i c s )   a r e   c o n s i d e r e d   a n   i n t e r e s t i n g   o p t i o n   f o r   a s s e s s i n g   t h e   s o c i e t a l   i m p a c t   o f   r e s e a r c h ,   a s   t h e y   o f f e r   n e w   w a y s   t o   m e a s u r e   ( p u b l i c )   e n g a g e m e n t   w i t h   r e s e a r c h   o u t p u t .   A l t m e t r i c s   i s   a   t e r m   t o   d e s c r i b e   w e b - b a s e d   m e t r i c s   f o r   t h e   i m p a c t   o f   p u b l i c a t i o n s   a n d   o t h e r   s c h o l a r l y   m a t e r i a l   b y   u s i n g   d a t a   f r o m   s o c i a l   m e d i a   p l a t f o r m s   ( e .   g .   T w i t t e r   o r   M e n d e l e y ) .   T h i s   o v e r v i e w   o f   s t u d i e s   e x p l o r e s   t h e   p o t e n t i a l   o f   a l t m e t r i c s   f o r   m e a s u r i n g   s o c i e t a l   i m p a c t .   I t   d e a l s   w i t h   t h e   d e f i n i t i o n   a n d   c l a s s i f i c a t i o n   o f   a l t m e t r i c s .   F u r t h e r m o r e ,   t h e i r   b e n e f i t s   a n d   d i s a d v a n t a g e s   f o r   m e a s u r i n g   i m p a c t   a r e   d i s c u s s e d .   ( C )   2 0 1 4   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 	 	 	 A d i e   E ,   2 0 1 3 ,   L E A R N   P U B L ,   V 2 6 ,   P 1 1 ,   D O I   1 0 . 1 0 8 7 / 2 0 1 3 0 1 0 3 ;   A d i e   E . ,   2 0 1 4 ,   R E S   T R E N D S ,   P 2 3 ;   A m e r i c a n   P s y c h o l o g i c a l   A s s o c i a t i o n ,   2 0 1 0 ,   P U B L   M A N   A M   P S Y C H   A S ;   B a r - I l a n   J ,   2 0 1 4 ,   B E Y O N D   B I B L I O M E T R I C S :   H A R N E S S I N G   M U L T I D I M E N S I O N A L   I N D I C A T O R S   O F   S C H O L A R L Y   I M P A C T ,   P 3 0 7 ;   B a s t o w   S . ,   2 0 1 4 ,   I M P A C T   S O C I A L   S C I ;   B i k   H M ,   2 0 1 3 ,   P L O S   B I O L ,   V 1 1 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 1 0 0 1 5 3 5 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 6 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 7 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 8 0 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 6 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 2 . 0 0 5 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 1 ;   B o r n m a n n   L ,   2 0 1 2 ,   E M B O   R E P ,   V 1 3 ,   P 6 7 3 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 1 2 . 9 9 ;   B o r n m a n n   L ,   2 0 1 1 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 5 ,   P 1 9 9 ;   C h a m b e r l a i n   S c o t t ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 4 ,   D O I   D O I   1 0 . 3 7 8 9 / I S Q V 2 5 N O 2 . 2 0 1 3 . 0 2 ;   C l a u s s e n   J E ,   2 0 1 3 ,   F I S H E R I E S ,   V 3 8 ,   P 3 5 9 ,   D O I   1 0 . 1 0 8 0 / 0 3 6 3 2 4 1 5 . 2 0 1 3 . 8 1 6 2 8 9 ;   C r o n i n   B ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 1 5 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 4 1 ;   D a r l i n g   E .   S . ,   2 0 1 3 ,   P E E R J   P R E P R I N T S ,   V 1 ,   P 1 ,   D O I   [ 1 0 . 7 2 8 7 / p e e r j . p r e p r i n t s . 1 6 v 1 ,   D O I   1 0 . 7 2 8 7 / P E E R J . P R E P R I N T S . 1 6 V 1 ] ;   L o p e z - C o z a r   E D ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 4 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 5 6 ;   E y s e n b a c h   G ,   2 0 1 1 ,   J   M E D   I N T E R N E T   R E S ,   V 1 3 ,   D O I   1 0 . 2 1 9 6 / j m i r . 2 0 1 2 ;   F a u s t o   S ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 5 0 1 0 9 ;   F e n n e r   M . ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 3 ,   D O I   D O I   1 0 . 3 7 8 9 / I S Q V 2 5 N O 2 . 2 0 1 3 . 0 1 ;   F e n n e r   M ,   2 0 1 3 ,   P L O S   B I O L ,   V 1 1 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 1 0 0 1 6 8 7 ;   F r a n k   C ,   2 0 0 9 ,   C A N   M E D   A S S O C   J ,   V 1 8 0 ,   P 5 2 8 ,   D O I   1 0 . 1 5 0 3 / c m a j . 0 9 0 0 1 6 ;   G a l l o w a y   L i n d a   M . ,   2 0 1 3 ,   S c i e n c e   &   T e c h n o l o g y   L i b r a r i e s ,   V 3 2 ,   P 3 3 5 ,   D O I   1 0 . 1 0 8 0 / 0 1 9 4 2 6 2 X . 2 0 1 3 . 8 2 9 7 6 2 ;   G i b b o n s   M . ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G r e e n h o w   C ,   2 0 1 4 ,   B R I T   J   E D U C   T E C H N O L ,   V 4 5 ,   P 3 9 2 ,   D O I   1 0 . 1 1 1 1 / b j e t . 1 2 1 5 0 ;   G u n n   W . ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 3 3 ;   H a m m a r f e l t   B ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 1 0 1 ,   P 1 4 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 4 - 1 2 6 1 - 3 ;   H A U S T E I N   S . ,   2 0 1 2 ,   1   M O N D A Y ,   V 1 7 ;   H a u s t e i n   S ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 1 0 1 ,   P 1 1 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 2 2 1 - 3 ;   H a u s t e i n   S ,   2 0 1 4 ,   B E Y O N D   B I B L I O M E T R I C S :   H A R N E S S I N G   M U L T I D I M E N S I O N A L   I N D I C A T O R S   O F   S C H O L A R L Y   I M P A C T ,   P 3 2 7 ;   H a u s t e i n   S ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 6 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 1 0 1 ;   H o l m b e r g   K V ,   2 0 1 4 ,   M O N O G R   O R A L   S C I ,   V 2 4 ,   P 1 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 3 5 8 7 7 6 ;   K i n g   D ,   2 0 1 3 ,   H E A L T H   P O L I C Y ,   V 1 1 0 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / j . h e a l t h p o l . 2 0 1 3 . 0 2 . 0 0 5 ;   S c h e r e r   D . ,   2 0 1 3 ,   B   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 2 2 ,   D O I   1 0 . 1 0 0 2 / b u l t . 2 0 1 3 . 1 7 2 0 3 9 0 4 0 8 ;   K o u s h a   K ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 0 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 8 4 ;   K u r t z   M J ,   2 0 1 0 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 4 ,   P 3 ;   L i   X D ,   2 0 1 1 ,   S O I L   C O N T A M I N A T I O N ,   P 1 ,   D O I   1 0 . 1 0 9 7 / B R S . 0 b 0 1 3 e 3 1 8 2 0 5 6 2 0 a ;   L i n   J e n n i f e r ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 2 0 ,   D O I   D O I   1 0 . 3 7 8 9 / I S Q V 2 5 N O 2 . 2 0 1 3 . 0 4 ;   L i u   C L ,   2 0 1 3 ,   J   M E D   I N T E R N E T   R E S ,   V 1 5 ,   D O I   1 0 . 2 1 9 6 / j m i r . 2 7 0 7 ;   L i u   J . ,   2 0 1 3 ,   B   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 3 1 ,   D O I   [ 1 0 . 1 0 0 2 / b u l t . 2 0 1 3 . 1 7 2 0 3 9 0 4 1 0 ,   D O I   1 0 . 1 0 0 2 / B U L T . 2 0 1 3 . 1 7 2 0 3 9 0 4 1 0 ] ;   M a f l a h i   N . ,   J   A S S   I N F O R   I N   P R E S S ;   M o h a m m a d i   E . ,   2 0 1 4 ,   W H O   R E A D S   R E S   A R T I C L ;   M o h a m m a d i   E ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 1 6 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 7 1 ;   M o h a m m a d i   E ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 7 ,   P 3 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 0 9 9 3 - 9 ;   N a t i o n a l   I n f o r m a t i o n   S t a n d a r d s   O r g a n i z a t i o n ,   2 0 1 4 ,   A L T M   S T A N D   P R O J   W H I T ;   N e y l o n   C . ,   2 0 1 4 ,   R E T H I N K I N G   I M P A C T   A P ;   N e y l o n   C ,   2 0 0 9 ,   P L O S   B I O L ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 1 0 0 0 2 4 2 ;   P e t e r s   I . ,   2 0 1 2 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 ,   D O I   [ 1 0 . 1 0 0 2 / m e e t . 1 4 5 0 4 9 0 1 3 0 5 ,   D O I   1 0 . 1 0 0 2 / M E E T . 1 4 5 0 4 9 0 1 3 0 5 ] ;   P i w o w a r   H e a t h e r ,   2 0 1 3 ,   B u l l e t i n   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e   a n d   T e c h n o l o g y ,   V 3 9 ,   P 1 0 ;   P i w o w a r   H ,   2 0 1 3 ,   N A T U R E ,   V 4 9 3 ,   P 1 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 9 3 1 5 9 a ;   P r i e m   J . ,   2 0 1 0 ,   1   M O N D A Y ,   V 1 5 ;   P r i e m   J ,   2 0 1 2 ,   A L T M E T R I C S   W I L D   U S I N ;   P r i e m   J . ,   2 0 1 0 ,   A L T M E T R I C S   M A N I F E S T O ;   P r i e m   J . ,   2 0 1 1 ,   I C O N F E R E N C E   2 0 1 2 ;   P r i e m   J ,   2 0 1 4 ,   B E Y O N D   B I B L I O M E T R I C S :   H A R N E S S I N G   M U L T I D I M E N S I O N A L   I N D I C A T O R S   O F   S C H O L A R L Y   I M P A C T ,   P 2 6 3 ;   P u s c h m a n n   C . ,   2 0 1 4 ,   O P E N I N G   S C I ,   P 8 9 ,   D O I   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 3 1 9 - 0 0 0 2 6 - 8 ;   R o d g e r s   E . P . ,   2 0 1 3 ,   L O O K   A L T M E T R I C S   I T S ;   R o e m e r   R .   C . ,   2 0 1 2 ,   C O L L   R E S   L I B   N E W S ,   V 7 3 ,   P 5 9 6 ;   R o e m e r   R .   C . ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 1 4 ;   Y e   F .   Y . ,   2 0 1 3 ,   C H I N E S E   S C I   B U L L ,   P 5 8 ,   D O I   [ 1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 1 3 - 5 9 3 9 - 3 ,   D O I   1 0 . 1 0 0 7 / S 1 1 4 3 4 - 0 1 3 - 5 9 3 9 - 3 ] ;   S h e m a   H . ,   2 0 1 4 ,   J   A S S   I N F O R   I N   P R E S S ;   S h e m a   H ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 1 0 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 3 7 ;   S u d   P ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 9 8 ,   P 1 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 1 1 7 - 2 ;   T a y l o r   M . ,   2 0 1 3 ,   R E S   T R E N D S ,   P 1 9 ;   T a y l o r   M . ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 2 7 ;   T h e l w a l l   M . ,   2 0 1 4 ,   R E S   T R E N D S ,   P 3 ;   T h e l w a l l   M ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 6 4 8 4 1 ;   T o r r e s - S a l i n a s   D ,   2 0 1 3 ,   C O M U N I C A R ,   P 5 3 ,   D O I   1 0 . 3 9 1 6 / C 4 1 - 2 0 1 3 - 0 5 ;   V a u g h a n   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 9 9 ;   V a u g h a n   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 2 0 - 2 ;   V i n k l e r   P ,   2 0 1 0 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 2 5 0 ;   W a l t m a n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 4 0 ;   W a n g   J ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 8 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 7 5 - 9 ;   W e l l e r   K ,   2 0 1 1 ,   M A K   S E N S   M I C R   M S M 2 0 1 ,   V 7 1 8 ,   P 1 ;   W e l l e r   K . ,   2 0 1 2 ,   S C I   I N T E R N E T ,   P 2 0 9 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I S M   C O N ;   Z a h e d i   Z ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 1 0 1 ,   P 1 4 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 4 - 1 2 6 4 - 0 	 7 8 	 3 2 	 3 4 	 2 8 	 1 5 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 4 	 8 	 4 	 	 	 	 	 8 9 5 	 9 0 3 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 4 . 0 9 . 0 0 5 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A U 3 Q B 	 W O S : 0 0 0 3 4 5 5 2 7 4 0 0 0 1 0 	 	 
 
 J 	 G o r r a i z ,   J ;   P u r n e l l ,   P J ;   G l a n z e l ,   W 	 	 	 	 G o r r a i z ,   J u a n ;   P u r n e l l ,   P h i l i p   J . ;   G l a n z e l ,   W o l f g a n g 	 	 	 O p p o r t u n i t i e s   f o r   a n d   L i m i t a t i o n s   o f   t h e   B o o k   C i t a t i o n   I n d e x 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   b i b l i o m e t r i c s ;   d a t a b a s e s 	 S C H O L A R L Y   M O N O G R A P H ;   H U M A N I T I E S ;   S C I E N C E S 	 T h i s   a r t i c l e   o f f e r s   i m p o r t a n t   b a c k g r o u n d   i n f o r m a t i o n   a b o u t   a   n e w   p r o d u c t ,   t h e   B o o k   C i t a t i o n   I n d e x   ( B K C I ) ,   l a u n c h e d   i n   2 0 1 1   b y   T h o m s o n   R e u t e r s .   I n f o r m a t i o n   i s   i l l u s t r a t e d   b y   s o m e   n e w   f a c t s   c o n c e r n i n g   T h e   B K C I ' s   u s e   i n   b i b l i o m e t r i c s ,   c o v e r a g e   a n a l y s i s ,   a n d   a   s e r i e s   o f   i d i o s y n c r a s i e s   w o r t h y   o f   f u r t h e r   d i s c u s s i o n .   T h e   B K C I   w a s   l a u n c h e d   p r i m a r i l y   t o   a s s i s t   r e s e a r c h e r s   i d e n t i f y   u s e f u l   a n d   r e l e v a n t   r e s e a r c h   t h a t   w a s   p r e v i o u s l y   i n v i s i b l e   t o   t h e m ,   o w i n g   t o   t h e   l a c k   o f   s i g n i f i c a n t   b o o k   c o n t e n t   i n   c i t a t i o n   i n d e x e s   s u c h   a s   t h e   W e b   o f   S c i e n c e .   S o   f a r ,   t h e   c o n t e n t   o f   3 3 , 0 0 0   b o o k s   h a s   b e e n   a d d e d   t o   t h e   d e s k t o p s   o f   t h e   g l o b a l   r e s e a r c h   c o m m u n i t y ,   t h e   m a j o r i t y   i n   t h e   a r t s ,   h u m a n i t i e s ,   a n d   s o c i a l   s c i e n c e s   f i e l d s .   I n i t i a l   a n a l y s e s   o f   t h e   d a t a   f r o m   T h e   B K C I   h a v e   i n d i c a t e d   t h a t   T h e   B K C I ,   i n   i t s   c u r r e n t   v e r s i o n ,   s h o u l d   n o t   b e   u s e d   f o r   b i b l i o m e t r i c   o r   e v a l u a t i v e   p u r p o s e s .   T h e   m o s t   s i g n i f i c a n t   l i m i t a t i o n s   t o   t h i s   p o t e n t i a l   a p p l i c a t i o n   a r e   t h e   h i g h   s h a r e   o f   p u b l i c a t i o n s   w i t h o u t   a d d r e s s   i n f o r m a t i o n ,   t h e   i n f l a t i o n   o f   p u b l i c a t i o n   c o u n t s ,   t h e   l a c k   o f   c u m u l a t i v e   c i t a t i o n   c o u n t s   f r o m   d i f f e r e n t   h i e r a r c h i c a l   l e v e l s ,   a n d   i n c o n s i s t e n c y   i n   c i t a t i o n   c o u n t s   b e t w e e n   t h e   c i t e d   r e f e r e n c e   s e a r c h   a n d   t h e   b o o k   c i t a t i o n   i n d e x .   H o w e v e r ,   T h e   B K C I   i s   a   f i r s t   s t e p   t o w a r d   c r e a t i n g   a   r e l i a b l e   a n d   n e c e s s a r y   c i t a t i o n   d a t a   s o u r c e   f o r   m o n o g r a p h s -   a   v e r y   c h a l l e n g i n g   i s s u e ,   b e c a u s e ,   u n l i k e   j o u r n a l s   a n d   c o n f e r e n c e   p r o c e e d i n g s ,   b o o k s   h a v e   s p e c i f i c   r e q u i r e m e n t s ,   a n d   s e v e r a l   p r o b l e m s   e m e r g e   n o t   o n l y   i n   t h e   c o n t e x t   o f   s u b j e c t   c l a s s i f i c a t i o n ,   b u t   a l s o   i n   t h e i r   r o l e   a s   c i t e d   p u b l i c a t i o n s   a n d   i n   c i t i n g   p u b l i c a t i o n s . 	 [ G o r r a i z ,   J u a n ]   U n i v   V i e n n a   L i b   &   A r c h   S e r v ,   B i b l i o m e t r   D e p t ,   A - 1 0 1 0   V i e n n a ,   A u s t r i a ;   [ P u r n e l l ,   P h i l i p   J . ]   T h o m s o n   R e u t e r s ,   B a r c e l o n a   0 8 0 2 5 ,   S p a i n ;   [ G l a n z e l ,   W o l f g a n g ]   K a t h o l i e k e   U n i v   L e u v e n ,   C t r   R & D   M o n i t o r i n g   E C O O M ,   B - 9 0 0 0   L o u v a i n ,   B e l g i u m ;   [ G l a n z e l ,   W o l f g a n g ]   K a t h o l i e k e   U n i v   L e u v e n ,   D e p t   M S I ,   B - 9 0 0 0   L o u v a i n ,   B e l g i u m ;   [ G l a n z e l ,   W o l f g a n g ]   L H A S ,   D e p t   S c i   P o l i c y   &   S c i e n t o m e t r ,   H - 1 2 4 5   B u d a p e s t ,   H u n g a r y 	 G o r r a i z ,   J   ( r e p r i n t   a u t h o r ) ,   U n i v   V i e n n a   L i b   &   A r c h   S e r v ,   B i b l i o m e t r   D e p t ,   U n i v   R i n g   1 ,   A - 1 0 1 0   V i e n n a ,   A u s t r i a . 	 j u a n . g o r r a i z @ u n i v i e . a c . a t ;   p h i l i p . p u r n e l l @ t h o m s o n r e u t e r s . c o m ;   w e o l f g a n g . g l a n z e l @ e c o n . k u l e u v e n . b e 	 G o r r a i z ,   J u a n / B - 1 1 8 2 - 2 0 0 9 ;   G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 ;   P u r n e l l ,   P h i l i p / A - 3 0 8 0 - 2 0 0 9 	 G o r r a i z ,   J u a n / 0 0 0 0 - 0 0 0 2 - 2 4 1 4 - 3 2 1 2 ;   G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 ;   P u r n e l l ,   P h i l i p / 0 0 0 0 - 0 0 0 3 - 3 1 4 6 - 2 7 3 7 	 	 	 A d a m s   J ,   2 0 1 1 ,   P R O   I N T   C O N F   S C I   I N F ,   P 1 3 ;   C h o i   K . ,   2 0 0 5 ,   P A N   P A C I F I C   M A N A G E M E ,   V 8 ,   P 9 1 ;   C u l l a r s   J M ,   1 9 9 6 ,   L I B R   Q U A R T ,   V 6 6 ,   P 1 3 8 ;   D O R B A N   M ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 5 2 ;   G l a n z e l   W ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 4 5 - 6 ;   G l a n z e l   W . ,   2 0 1 1 ,   C O L L N E T   J   S C I   I N F O R M ,   V 5 ,   P 1 ;   G u m p e n b e r g e r   C . ,   2 0 1 2 ,   B O O K   C I T A T I O N   I N D E X ;   K o i z u m i   M ,   2 0 1 0 ,   L I B R   I N F O R M   S C ,   P 4 1 ;   F e l t   U . ,   2 0 1 2 ,   P R E P R I N T ;   M c B r i d e   D ,   2 0 0 6 ,   U R B A N   A F F   R E V ,   V 4 2 ,   P 1 3 2 ;   M o e d   H F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 2 ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   G i m e n e z   E ,   2 0 0 7 ,   P   I S S I   2 0 0 7   1 1   I N T   C ,   V I   a n d   I I ,   P 6 7 2 ;   T e s t a   J ,   2 0 1 1 ,   B O O K   S E L E C T I O N   P R O C E ;   T h o m p s o n   J W ,   2 0 0 2 ,   L I B R I ,   V 5 2 ,   P 1 2 1 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 2 . 1 2 1 ;   Y a t e s   S t e v e n   D . ,   2 0 0 7 ,   B e h a v i o r a l   &   S o c i a l   S c i e n c e s   L i b r a r i a n ,   V 2 6 ,   P 3 9 ,   D O I   1 0 . 1 3 0 0 / J 1 0 3 v 2 6 n 0 1 _ 0 3 ;   Z i t t   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 0 	 1 7 	 3 2 	 3 2 	 1 0 	 8 8 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U L 	 2 0 1 3 	 6 4 	 7 	 	 	 	 	 1 3 8 8 	 1 3 9 8 	 	 1 0 . 1 0 0 2 / a s i . 2 2 8 7 5 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 0 4 S L 	 W O S : 0 0 0 3 2 3 3 8 9 1 0 0 0 0 8 	 	 
 
 J 	 P r a t h a p ,   G 	 	 	 	 P r a t h a p ,   G a n g a n 	 	 	 T h e   E n e r g y - E x e r g y - E n t r o p y   ( o r   E E E )   s e q u e n c e s   i n   b i b l i o m e t r i c   a s s e s s m e n t 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   X   =   i C ;   E n e r g y ;   E x e r g y ;   E n t r o p y ;   S   =   E   -   X ;   p - i n d e x 	 I N D E X 	 B i b l i o m e t r i c   r e s e a r c h   a s s e s s m e n t   h a s   m a t u r e d   i n t o   a   q u a n t i t a t i v e   p h a s e   u s i n g   m o r e   m e a n i n g f u l   m e a s u r e s   a n d   a n a l o g i e s .   I n   t h i s   p a p e r ,   w e   p r o p o s e   a   t h e r m o d y n a m i c   a n a l o g y   a n d   i n t r o d u c e   w h a t   a r e   c a l l e d   t h e   e n e r g y ,   e x e r g y   a n d   e n t r o p y   t e r m s   a s s o c i a t e d   w i t h   a   b i b l i o m e t r i c   s e q u e n c e .   T h i s   c a n   b e   d i s p l a y e d   a s   t i m e   s e r i e s   ( v a r i a t i o n   o v e r   t i m e ) ,   o r   i n   e v e n t   t e r m s   ( v a r i a t i o n   a s   p a p e r s   a r e   p u b l i s h e d )   a n d   a l s o   i n   t h e   f o r m   o f   p h a s e   d i a g r a m s   ( e n e r g y - e x e r g y - e n t r o p y   r e p r e s e n t a t i o n s ) .   I t   i s   e x e r g y   w h i c h   i s   t h e   m o s t   m e a n i n g f u l   s i n g l e   n u m b e r   s c a l a r   i n d i c a t o r   o f   a   s c i e n t i s t ' s   p e r f o r m a n c e   w h i l e   e n t r o p y   t h e n   b e c o m e s   a   m e a s u r e   o f   t h e   u n e v e n n e s s   ( d i s o r d e r )   o f   t h e   p u b l i c a t i o n   p o r t f o l i o . 	 N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a 	 P r a t h a p ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a . 	 g p @ c m m a c s . e r n e t . i n 	 P r a t h a p ,   G a n g a n / C - 1 1 7 3 - 2 0 0 9 	 P r a t h a p ,   G a n g a n / 0 0 0 0 - 0 0 0 3 - 1 4 7 2 - 6 3 5 8 	 	 	 D i n c e r   I . ,   2 0 0 1 ,   E N T R O P Y ,   V 3 ,   P 1 1 6 ,   D O I   1 0 . 3 3 9 0 / e 3 0 3 0 1 1 6 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 6 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 5 ;   G L A N Z E L   W ,   2 0 0 8 ,   S O M E   N E W   B I B L I O M E T R I ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   P r a t h a p   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 6 6 - 2 ;   S c h u b e r t   A ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 2 ;   S c i u b b a   E . ,   2 0 0 7 ,   I N T   J   T H E R M O D Y N ,   V 1 0 ,   P 1 	 7 	 3 2 	 3 2 	 1 	 3 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 1 1 	 8 7 	 3 	 	 	 	 	 5 1 5 	 5 2 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 7 - 0 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 3 P S 	 W O S : 0 0 0 2 8 9 7 9 2 6 0 0 0 0 6 	 	 
 
 J 	 P r a t h a p ,   G 	 	 	 	 P r a t h a p ,   G a n g a n 	 	 	 I s   t h e r e   a   p l a c e   f o r   a   m o c k   h - i n d e x ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   h - i n d e x ;   M o c k   h - i n d e x ;   C o r r e c t e d   q u a l i t y   r a t i o 	 H I R S C H - T Y P E   I N D E X E S ;   S C I E N C E 	 T h e   h - i n d e x   h a s   c a p t u r e d   t h e   i m a g i n a t i o n   o f   s c i e n t o m e t r i c i a n s   a n d   b i b l i o m e t r i c i a n s   t o   s u c h   a n   e x t e n t   t h a t   o n e   c a n   n o w   d i v i d e   t h e   h i s t o r y   o f   t h e   s u b j e c t   v i r t u a l l y   i n t o   a   p r e - H i r s c h   a n d   a   p o s t - H i r s c h   p e r i o d .   B e y o n d   i t s   a c a d e m i c   v a l u e ,   i t   i s   n o w   u s e d   a s   a   t o o l   f o r   r e s e a r c h   a s s e s s m e n t   o f   i n d i v i d u a l s ,   r e s e a r c h   f a c u l t i e s   a n d   i n s t i t u t i o n s   a n d   e v e n   f o r   c o m p a r i n g   p e r f o r m a n c e   o f   j o u r n a l s   a n d   c o u n t r i e s .   S i n c e   i t s   i n t r o d u c t i o n ,   m a n y   H i r s c h - t y p e   v a r i a n t s   h a v e   b e e n   p r o p o s e d   t o   o v e r c o m e   p e r c e i v e d   l i m i t a t i o n s   o f   t h e   o r i g i n a l   i n d e x .   I n   t h i s   p a p e r ,   u s i n g   i d e a s   f r o m   m a t h e m a t i c a l   m o d e l i n g ,   a n o t h e r   m o c k   h - i n d e x   i s   p r o p o s e d   w h i c h   m a y   c o m p l e m e n t   t h e   h - i n d e x   a n d   g i v e   i t   b e t t e r   r e s o l v i n g   p o w e r . 	 [ P r a t h a p ,   G a n g a n ]   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a 	 P r a t h a p ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   D r   K S   K r i s h n a n   M a r g ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a . 	 g p @ c m m a c s . e r n e t . i n 	 P r a t h a p ,   G a n g a n / C - 1 1 7 3 - 2 0 0 9 	 P r a t h a p ,   G a n g a n / 0 0 0 0 - 0 0 0 3 - 1 4 7 2 - 6 3 5 8 	 	 	 B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   B O R N M A N N   L ,   2 0 0 8 ,   F O R S C H U N G   F O R S C H U N G ,   V 2 ,   P 3 8 ;   C s a j b o k   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 9 - 9 ;   G a r c i a - P e r e z   M A ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 7 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 2 2 9 0 - 1 ;   G L A N Z E L   W ,   2 0 0 8 ,   S O M E   N E W   B I B L I O M E T R I ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L i n d s e y   D . ,   1 9 7 8 ,   S C I   P U B L I C A T I O N   S Y S T ;   L i u   Y X ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 1 5 - 1 ;   P r a t h a p   G . ,   2 0 0 6 ,   C U R R E N T   S C I ,   V 9 1 ,   P 1 0 ;   S c h u b e r t   A ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 2 ;   S c h u b e r t   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 1 1 2 - x ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 	 1 3 	 3 2 	 3 3 	 1 	 2 4 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 2 0 1 0 	 8 4 	 1 	 	 	 	 	 1 5 3 	 1 6 5 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 6 6 - 2 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 0 4 G I 	 W O S : 0 0 0 2 7 8 2 6 7 1 0 0 0 1 4 	 	 
 
 J 	 L i ,   W T ;   Y a n g ,   Y N 	 	 	 	 L i ,   W T ;   Y a n g ,   Y N 	 	 	 Z i p f ' s   l a w   i n   i m p o r t a n c e   o f   g e n e s   f o r   c a n c e r   c l a s s i f i c a t i o n   u s i n g   m i c r o a r r a y   d a t a 	 J O U R N A L   O F   T H E O R E T I C A L   B I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 N O N C O D I N G   D N A ;   L I N G U I S T I C   F E A T U R E S ;   E X P R E S S I O N ;   M O D E L ;   B I B L I O M E T R I C S ;   S E Q U E N C E S ;   L A N G U A G E ;   A R R A Y S ;   G E N O M E 	 U s i n g   a   m e a s u r e   o f   h o w   d i f f e r e n t i a l l y   e x p r e s s e d   a   g e n e   i s   i n   t w o   b i o c h e m i c a l l y / p h e n o t y p i c a l l y   d i f f e r e n t   c o n d i t i o n s ,   w e   c a n   r a n k   a l l   g e n e s   i n   a   m i c r o a r r a y   d a t a s e t .   W e   h a v e   s h o w n   t h a t   t h e   f a l l i n g - o f f   o f   t h i s   m e a s u r e   ( n o r m a l i z e d   m a x i m u m   l i k e l i h o o d   i n   a   c l a s s i f i c a t i o n   m o d e l   s u c h   a s   l o g i s t i c   r e g r e s s i o n )   a s   a   f u n c t i o n   o f   t h e   r a n k   i s   t y p i c a l l y   a   p o w e r - l a w   f u n c t i o n .   T h i s   p o w e r - l a w   f u n c t i o n   i n   o t h e r   s i m i l a r   r a n k e d   p l o t s   a r e   k n o w n   a s   t h e   Z i p f ' s   l a w ,   o b s e r v e d   i n   m a n y   n a t u r a l   a n d   s o c i a l   p h e n o m e n a .   T h e   p r e s e n c e   o f   t h i s   p o w e r - l a w   f u n c t i o n   p r e v e n t s   a n   i n t r i n s i c   c u t o f f   p o i n t   b e t w e e n   t h e   " i m p o r t a n t "   g e n e s   a n d   " i r r e l e v a n t "   g e n e s .   W e   h a v e   s h o w n   t h a t   s i m i l a r   p o w e r - l a w   f u n c t i o n s   a r e   a l s o   p r e s e n t   i n   p e r m u t e d   d a t a s e t ,   a n d   p r o v i d e   a n   e x p l a n a t i o n   f r o m   t h e   w e l l - k n o w n   c h i ( 2 )   d i s t r i b u t i o n   o f   l i k e l i h o o d   r a t i o s .   W e   d i s c u s s   t h e   i m p l i c a t i o n   o f   t h i s   Z i p f ' s   l a w   o n   g e n e   s e l e c t i o n   i n   a   m i c r o a r r a y   d a t a   a n a l y s i s ,   a s   w e l l   a s   o t h e r   c h a r a c t e r i z a t i o n s   o f   t h e   r a n k e d   l i k e l i h o o d   p l o t s   s u c h   a s   t h e   r a t e   o f   f a l l - o f f   o f   t h e   l i k e l i h o o d .   ( C )   2 0 0 2   E l s e v i e r   S c i e n c e   L t d .   A l l   r i g h t s   r e s e r v e d . 	 R o c k e f e l l e r   U n i v ,   L a b   S t a t   G e n e t ,   N e w   Y o r k ,   N Y   1 0 0 2 1   U S A ;   C t r   G e n o m   &   H u m a n   G e n e t ,   N   S h o r e   L I J   R e s   I n s t ,   M a n h a s s e t ,   N Y   1 1 0 3 0   U S A 	 L i ,   W T   ( r e p r i n t   a u t h o r ) ,   R o c k e f e l l e r   U n i v ,   L a b   S t a t   G e n e t ,   1 2 3 0   Y o r k   A v e , B o x   1 9 2 ,   N e w   Y o r k ,   N Y   1 0 0 2 1   U S A . 	 w l i @ n l i j - g e n e t i c s . o r g 	 	 L i ,   W e n t i a n / 0 0 0 0 - 0 0 0 3 - 1 1 5 5 - 1 1 0 X 	 N H G R I   N I H   H H S   [ H G 0 0 0 0 8 ,   K 0 1 H G 0 0 0 2 4 ] ;   N I A M S   N I H   H H S   [ N 0 1 - A R 1 2 2 5 6 ] 	 	 A g r e s t i   A . ,   1 9 9 6 ,   I N T R O   C A T E G O R I C A L   D A ;   A K A I K E   H ,   1 9 7 4 ,   I E E E   T   A U T O M A T   C O N T R ,   V A C 1 9 ,   P 7 1 6 ,   D O I   1 0 . 1 1 0 9 / T A C . 1 9 7 4 . 1 1 0 0 7 0 5 ;   A l i z a d e h   A A ,   2 0 0 0 ,   N A T U R E ,   V 4 0 3 ,   P 5 0 3 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 0 0 5 0 1 ;   A l o n   U ,   1 9 9 9 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 6 ,   P 6 7 4 5 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 6 . 1 2 . 6 7 4 5 ;   A x t e l l   R L ,   2 0 0 1 ,   S C I E N C E ,   V 2 9 3 ,   P 1 8 1 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 6 2 0 8 1 ;   B a l d i   P ,   2 0 0 1 ,   B I O I N F O R M A T I C S ,   V 1 7 ,   P 5 0 9 ,   D O I   1 0 . 1 0 9 3 / b i o i n f o r m a t i c s / 1 7 . 6 . 5 0 9 ;   B o n h o e f f e r   S ,   1 9 9 6 ,   S C I E N C E ,   V 2 7 1 ,   P 1 4 ;   B o n h o e f f e r   S ,   1 9 9 6 ,   P H Y S   R E V   L E T T ,   V 7 6 ,   P 1 9 7 7 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 7 6 . 1 9 7 7 ;   B r e s l o w   N ,   1 9 8 0 ,   S T A T   M E T H O D S   C A N C   R E ;   B u r g o s   J D ,   1 9 9 6 ,   B I O S Y S T E M S ,   V 3 9 ,   P 2 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 3 - 2 6 4 7 ( 9 6 ) 0 1 6 1 8 - 8 ;   B u r n h a m   K .   P . ,   1 9 9 8 ,   M O D E L   S E L E C T I O N   I N F E ;   C h a m p e r n o w n e   D G ,   1 9 5 3 ,   E C O N   J ,   V 6 3 ,   P 3 1 8 ,   D O I   1 0 . 2 3 0 7 / 2 2 2 7 1 2 7 ;   C o n d o n   E U ,   1 9 2 8 ,   S C I E N C E ,   V 6 7 ,   P 3 0 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 7 . 1 7 3 3 . 3 0 0 ;   C o x   D .   R . ,   1 9 7 4 ,   T H E O R E T I C A L   S T A T ;   C U N H A   C ,   1 9 9 5 ,   9 5 0 1 0   B O S T   U   C O M P   S C ;   E d w a r d s   A . W . F . ,   1 9 7 2 ,   L I K E L I H O O D ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   E k i n s   R ,   1 9 9 9 ,   T R E N D S   B I O T E C H N O L ,   V 1 7 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 7 7 9 9 ( 9 9 ) 0 1 3 2 9 - 3 ;   G a b a i x   X ,   1 9 9 9 ,   Q   J   E C O N ,   V 1 1 4 ,   P 7 3 9 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 3 5 5 3 9 9 5 5 6 1 3 3 ;   G A M O W   G ,   1 9 5 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 4 1 ,   P 1 0 1 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 4 1 . 1 2 . 1 0 1 1 ;   G o l u b   T R ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 3 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 3 1 ;   G R A N T   G ,   2 0 0 2 ,   M E T H O D S   M I C R O A R R A Y   D ,   P 3 7 ;   H a i n e s   J L ,   1 9 9 8 ,   A P P R O A C H E S   G E N E   M A P P ;   H o y l e   D C ,   2 0 0 2 ,   B I O I N F O R M A T I C S ,   V 1 8 ,   P 5 7 6 ,   D O I   1 0 . 1 0 9 3 / b i o i n f o r m a t i c s / 1 8 . 4 . 5 7 6 ;   I K P A A H I N D I   L ,   1 9 8 5 ,   L I B R I ,   V 3 5 ,   P 1 6 3 ;   I s r a e l o f f   N E ,   1 9 9 6 ,   P H Y S   R E V   L E T T ,   V 7 6 ,   P 1 9 7 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 7 6 . 1 9 7 6 ;   K u c e r a   H . ,   1 9 6 7 ,   C O M P U T A T I O N A L   A N A L   P ;   L a n d e r   E S ,   2 0 0 1 ,   N A T U R E ,   V 4 0 9 ,   P 8 6 0 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 5 7 0 6 2 ;   L i   W ,   2 0 0 2 ,   M E T H O D S   M I C R O A R R A Y   D ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 1 - 4 6 1 5 - 0 8 7 3 - 1 _ 1 1 ;   L i   W T ,   1 9 9 9 ,   C O M P U T   C H E M ,   V 2 3 ,   P 2 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 7 - 8 4 8 5 ( 9 9 ) 0 0 0 1 4 - 5 ;   L i n   S M ,   2 0 0 2 ,   M E T H O D S   M I C R O A R R A Y   D ;   L o c k h a r t   D J ,   2 0 0 0 ,   N A T U R E ,   V 4 0 5 ,   P 8 2 7 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 1 5 7 0 1 ;   L o s e e   R M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 0 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 5 5 ;   L U H N   H P ,   1 9 5 7 ,   I B M   J   R E S   D E V ,   V 1 ,   P 3 0 9 ;   L U H N   H P ,   1 9 5 8 ,   I B M   J   R E S   D E V ,   V 2 ,   P 1 5 9 ;   M a r t i n d a l e   C ,   1 9 9 6 ,   C O M P U T   C H E M ,   V 2 0 ,   P 3 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 7 - 8 4 8 5 ( 9 5 ) 0 0 0 9 1 - 7 ;   P e r o u   C M ,   2 0 0 0 ,   N A T U R E ,   V 4 0 6 ,   P 7 4 7 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 2 1 0 9 3 ;   P i q u e i r a   J R C ,   1 9 9 9 ,   J   T H E O R   B I O L ,   V 1 9 8 ,   P 4 3 9 ,   D O I   1 0 . 1 0 0 6 / j t b i . 1 9 9 9 . 0 9 2 3 ;   R e d n e r   S ,   1 9 9 8 ,   E U R   P H Y S   J   B ,   V 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 5 1 0 0 5 0 3 5 9 ;   S a l t o n   G . ,   1 9 8 8 ,   A U T O M A T I C   T E X T   P R O C E ;   S A N C H E Z C A R B A Y O   M ,   2 0 0 2 ,   U N P U B   M O L   C L A S S I F I C A ;   S C H U S T E R   P ,   1 9 9 5 ,   J   B I O T E C H N O L ,   V 4 1 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 8 - 1 6 5 6 ( 9 4 ) 0 0 0 8 5 - Q ;   S C H W A R Z   G ,   1 9 7 8 ,   A N N   S T A T ,   V 6 ,   P 4 6 1 ,   D O I   1 0 . 1 2 1 4 / a o s / 1 1 7 6 3 4 4 1 3 6 ;   S H A N N O N   C E ,   1 9 4 8 ,   A T & T   T E C H   J ,   V 2 7 ,   P 3 7 9 ;   S o u t h e r n   E M ,   1 9 9 6 ,   T R E N D S   G E N E T ,   V 1 2 ,   P 1 1 0 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 8 - 9 5 2 5 ( 9 6 ) 8 1 4 2 2 - 3 ;   V A N R I J S B E R G E N   C J ,   1 9 7 5 ,   I N F O R M A T I O N   R E T R I E V A ;   V e n t e r   J C ,   2 0 0 1 ,   S C I E N C E ,   V 2 9 1 ,   P 1 3 0 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 5 8 0 4 0 ;   V o s s   R F ,   1 9 9 6 ,   P H Y S   R E V   L E T T ,   V 7 6 ,   P 1 9 7 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 7 6 . 1 9 7 8 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L ;   Z i p f   G e o r g e   K i n g s l e y ,   1 9 3 5 ,   P S Y C H O B I O L O G Y   L A N G U A 	 5 1 	 3 2 	 3 2 	 0 	 4 	 A C A D E M I C   P R E S S   L T D -   E L S E V I E R   S C I E N C E   L T D 	 L O N D O N 	 2 4 - 2 8   O V A L   R D ,   L O N D O N   N W 1   7 D X ,   E N G L A N D 	 0 0 2 2 - 5 1 9 3 	 	 	 J   T H E O R   B I O L 	 J .   T h e o r .   B i o l . 	 D E C   2 1 	 2 0 0 2 	 2 1 9 	 4 	 	 	 	 	 5 3 9 	 5 5 1 	 	 1 0 . 1 0 0 6 / y j t b i . 3 1 4 5 	 	 1 3 	 B i o l o g y ;   M a t h e m a t i c a l   &   C o m p u t a t i o n a l   B i o l o g y 	 L i f e   S c i e n c e s   &   B i o m e d i c i n e   -   O t h e r   T o p i c s ;   M a t h e m a t i c a l   &   C o m p u t a t i o n a l   B i o l o g y 	 6 3 3 Y Q 	 W O S : 0 0 0 1 8 0 3 1 2 9 0 0 0 0 8 	 1 2 4 2 5 9 8 4 	 
 
 J 	 B O R G M A N ,   C L 	 	 	 	 B O R G M A N ,   C L 	 	 	 B I B L I O M E T R I C S   A N D   S C H O L A R L Y   C O M M U N I C A T I O N   -   E D I T O R S   I N T R O D U C T I O N 	 C O M M U N I C A T I O N   R E S E A R C H 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 	 	 	 	 B O R G M A N ,   C L   ( r e p r i n t   a u t h o r ) ,   U N I V   C A L I F   L O S   A N G E L E S , L O S   A N G E L E S , C A   9 0 0 2 4 ,   U S A . 	 	 	 B o r g m a n ,   C h r i s t i n e / 0 0 0 0 - 0 0 0 2 - 9 3 4 4 - 1 0 2 9 	 	 	 B a z e r m a n   C h a r l e s ,   1 9 8 8 ,   S H A P I N G   W R I T T E N   K N O W ;   B E L K I N   N J ,   1 9 8 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 2 ,   P 1 0 9 ;   B E N I G E R   J R ,   1 9 8 8 ,   C O M M U N   R E S ,   V 1 5 ,   P 1 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 8 0 1 5 0 0 2 0 0 5 ;   C a l l o n   M . ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ;   C H U B I N   D E ,   1 9 8 7 ,   K N O W L E D G E ,   V 9 ,   P 2 5 4 ;   C H U B I N   D E ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 2 2 1 ;   C O L E   J R ,   1 9 7 0 ,   S O C I O L   E D U C ,   V 4 3 ,   P 3 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 1 8 3 9 ;   C O M P T O N   B ,   1 9 7 3 ,   H D B   C O M M U N I C A T I O N ,   P 7 5 5 ;   C R A N E   D ,   1 9 6 7 ,   A M   S O C I O L ,   V 2 ,   P 1 9 5 ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   C R A N E   D ,   1 9 7 1 ,   A N N   R E V   I N F O R M A T I O N ,   V 6 ,   P 1 ;   D A H L I N G   R L ,   1 9 6 2 ,   S T U D I E S   I N N O V A T I O N   C ,   P 1 1 8 ;   D A V I S   J M ,   1 9 7 0 ,   P   A N N   M   A M   S O C   I N F O R ,   V 7 ,   P 5 3 ;   D e l i a   J .   G . ,   1 9 8 7 ,   H D B   C O M M U N I C A T I O N   S C ,   P 2 0 ;   E d g e   D ,   1 9 7 9 ,   H i s t   S c i ,   V 1 7 ,   P 1 0 2 ;   G A R F I E L D   E ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 4 8 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 6 3 ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G a r f i e l d   E . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ,   P 1 7 9 ;   G A R V E Y   W D ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 6 ,   P 1 6 5 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 6 . 3 6 5 2 . 1 6 5 5 ;   G A R V E Y   W .   D . ,   1 9 7 9 ,   C O M M U N I C A T I O N   E S S E N C ;   G R I F F I T H   B C ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 7 ,   P 9 5 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 7 . 4 0 5 3 . 9 5 9 ;   H A G S T R O M   W O ,   1 9 6 5 ,   S C I E N T I F I C   C O M M U N I T Y ;   K E S S L E R   M M ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 9 ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   K u h n   T .   S . ,   1 9 7 7 ,   S T R U C T U R E   S C I   T H E O R I ,   P 4 5 9 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   L A T O U R   B ,   1 9 7 9 ,   L A B O R A T O R Y   L I F E   S O C I ;   L I E V R O U W   L A ,   1 9 8 8 ,   K N O W L E D G E   S O C ,   V 1 ,   P 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 8 7 2 1 0 ;   L I E V R O U W   L A ,   1 9 8 7 ,   S O C   N E T W O R K S ,   V 9 ,   P 2 2 1 7 ;   M A C R O B E R T S   M ,   I N   P R E S S   J   A M   S O C   I N ;   M A C R O B E R T S   M H ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 5 ;   M e a d o w s   A .   J . ,   1 9 7 4 ,   C O M M U N I C A T I O N   S C I ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   M U L L I N S   N C ,   1 9 6 6 ,   T H E S I S   H A R V A R D   U ;   N A R I N   F ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 5 ;   O C O N N O R   D O ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 9 ;   P a i s l e y   W .   J . ,   1 9 8 4 ,   P R O G R   C O M M U N I C A T I O N ,   V 5 ,   P 1 ;   P A I S L E Y   W J ,   1 9 6 8 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 ,   P 1 ;   P A R K E R   E B ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 6 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 4 0 5 7 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P R I C E   D J D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 1 1 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P R I T C H A R D   A ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 2 6 8 ;   P R I T C H A R D   A ,   1 9 6 8 ,   U N P U B   C O M P U T E R S   S T A T ;   P r i t c h a r d   A . ,   1 9 8 1 ,   B I B L I O M E T R I C S   B I B L I O ,   V 1 ;   R A I S I G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 5 0 ;   R E A R D O N   K K ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 8 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 5 . x ;   R E E V E S   B ,   1 9 8 3 ,   H U M   C O M M U N   R E S ,   V 1 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 3 . t b 0 0 0 0 7 . x ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   R I C E   R E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 0 2 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 ;   S M A L L   H ,   1 9 8 8 ,   1 9 8 8   S   S C I   C O M M   E N V ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S O   C Y K ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 3 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 3 . x ;   T O D O R O V   R ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 1 0 6 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 8 ,   U N P U B   A U T H O R   C O C I T A T ;   W I E M A N N   J M ,   1 9 8 8 ,   H U M A N   C O M M U N I C A T I O N ,   V 1 5 ,   P 2 3 6 ;   W I N S T A N L E Y   M ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 5 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 3 1 2 ;   1 9 8 3 ,   J   C O M M U N I C A T I O N ,   V 3 3 	 6 4 	 3 2 	 3 2 	 2 	 1 3 	 S A G E   S C I E N C E   P R E S S 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0 	 0 0 9 3 - 6 5 0 2 	 	 	 C O M M U N   R E S 	 C o m m u n .   R e s . 	 O C T 	 1 9 8 9 	 1 6 	 5 	 	 	 	 	 5 8 3 	 5 9 9 	 	 1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 2 	 	 1 7 	 C o m m u n i c a t i o n 	 C o m m u n i c a t i o n 	 A U 9 7 8 	 W O S : A 1 9 8 9 A U 9 7 8 0 0 0 0 2 	 	 
 
 J 	 B o r n m a n n ,   L ;   M u t z ,   R 	 	 	 	 B o r n m a n n ,   L u t z ;   M u t z ,   R u e d i g e r 	 	 	 G r o w t h   r a t e s   o f   m o d e r n   s c i e n c e :   A   b i b l i o m e t r i c   a n a l y s i s   b a s e d   o n   t h e   n u m b e r   o f   p u b l i c a t i o n s   a n d   c i t e d   r e f e r e n c e s 	 J O U R N A L   O F   T H E   A S S O C I A T I O N   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s 	 M A T U R E   W O O D   T R A N S I T I O N ;   S O C I E T A L   I M P A C T ;   R E G R E S S I O N ;   N E T W O R K S 	 M a n y   s t u d i e s   ( i n   i n f o r m a t i o n   s c i e n c e )   h a v e   l o o k e d   a t   t h e   g r o w t h   o f   s c i e n c e .   I n   t h i s   s t u d y ,   w e   r e e x a m i n e   t h e   q u e s t i o n   o f   t h e   g r o w t h   o f   s c i e n c e .   T o   d o   t h i s   w e   ( a )   u s e   c u r r e n t   d a t a   u p   t o   p u b l i c a t i o n   y e a r   2 0 1 2   a n d   ( b )   a n a l y z e   t h e   d a t a   a c r o s s   a l l   d i s c i p l i n e s   a n d   a l s o   s e p a r a t e l y   f o r   t h e   n a t u r a l   s c i e n c e s   a n d   f o r   t h e   m e d i c a l   a n d   h e a l t h   s c i e n c e s .   F u r t h e r m o r e ,   t h e   d a t a   w e r e   a n a l y z e d   w i t h   a n   a d v a n c e d   s t a t i s t i c a l   t e c h n i q u e s e g m e n t e d   r e g r e s s i o n   a n a l y s i s w h i c h   c a n   i d e n t i f y   s p e c i f i c   s e g m e n t s   w i t h   s i m i l a r   g r o w t h   r a t e s   i n   t h e   h i s t o r y   o f   s c i e n c e .   T h e   s t u d y   i s   b a s e d   o n   t w o   d i f f e r e n t   s e t s   o f   b i b l i o m e t r i c   d a t a :   ( a )   t h e   n u m b e r   o f   p u b l i c a t i o n s   h e l d   a s   s o u r c e   i t e m s   i n   t h e   W e b   o f   S c i e n c e   ( W o S ,   T h o m s o n   R e u t e r s )   p e r   p u b l i c a t i o n   y e a r   a n d   ( b )   t h e   n u m b e r   o f   c i t e d   r e f e r e n c e s   i n   t h e   p u b l i c a t i o n s   o f   t h e   s o u r c e   i t e m s   p e r   c i t e d   r e f e r e n c e   y e a r .   W e   l o o k e d   a t   t h e   r a t e   a t   w h i c h   s c i e n c e   h a s   g r o w n   s i n c e   t h e   m i d - 1 6 0 0 s .   I n   o u r   a n a l y s i s   o f   c i t e d   r e f e r e n c e s   w e   i d e n t i f i e d   t h r e e   e s s e n t i a l   g r o w t h   p h a s e s   i n   t h e   d e v e l o p m e n t   o f   s c i e n c e ,   w h i c h   e a c h   l e d   t o   g r o w t h   r a t e s   t r i p l i n g   i n   c o m p a r i s o n   w i t h   t h e   p r e v i o u s   p h a s e :   f r o m   l e s s   t h a n   1 %   u p   t o   t h e   m i d d l e   o f   t h e   1 8 t h   c e n t u r y ,   t o   2   t o   3 %   u p   t o   t h e   p e r i o d   b e t w e e n   t h e   t w o   w o r l d   w a r s ,   a n d   8   t o   9 %   t o   2 0 1 0 . 	 [ B o r n m a n n ,   L u t z ]   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   M u n i c h ,   G e r m a n y ;   [ M u t z ,   R u e d i g e r ]   S w i s s   F e d   I n s t   T e c h n o l ,   S o c i a l   P s y c h o l   &   R e s   H i g h e r   E d u c ,   C H - 8 0 0 1   Z u r i c h ,   S w i t z e r l a n d 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e ;   r u e d i g e r . m u t z @ g e s s . e t h z . c h 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   M u t z ,   R u e d i g e r / A - 2 2 2 6 - 2 0 0 9 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   	 	 	 B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 1 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 3 1 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 8 0 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 8 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 9 . 0 0 3 ;   B o r n m a n n   L ,   2 0 1 2 ,   E M B O   R E P ,   V 1 3 ,   P 6 7 3 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 1 2 . 9 9 ;   B o r n m a n n   L ,   2 0 1 1 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 5 ,   P 1 9 9 ;   B o r n m a n n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 5 ;   B r u s i l o v s k i y   E . ,   2 0 0 4 ,   S A S   C   P ;   C o u n c i l   o f   C a n a d i a n   A c a d e m i e s ,   2 0 1 2 ,   I N F   R E S   C H O I C   I N D   J U ;   d e s B e l l i s   N . ,   2 0 0 9 ,   B I B L I O M E T R I C S   C I T A T I ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 0 3 > 3 . 0 . C O ; 2 - 8 ;   E v a n s   J A ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 2 ,   P 4 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 4 5 2 1 8 ;   F r a z z e t t o   G ,   2 0 0 4 ,   E M B O   R E P ,   V 5 ,   P 1 8 ,   D O I   1 0 . 1 0 3 8 / s j . e m b o r . 7 4 0 0 0 6 1 ;   G a t t e i   S . ,   2 0 0 9 ,   K   P O P P E R S   P H I L O S   S C I ;   G o u l d   T .   H .   P . ,   2 0 1 3 ,   D O   W E   S T I L L   N E E D   P E E ;   H e n d e r s o n   A . ,   2 0 0 5 ,   S C H O L A R L Y   P U B L ,   P 1 ;   H e n d e r s o n   A . ,   2 0 0 2 ,   S C H O L A R L Y   P U B L ,   P 1 3 3 ;   K o s t o f f   R N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 1 4 - 8 ;   L a r i v i e r e   V ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 7 - 8 ;   L a r s e n   P O ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 0 2 - z ;   L e r m a n   P M ,   1 9 8 0 ,   J   R O Y A L   S T A T   S O C   C ,   V 2 9 ,   P 7 7 ,   D O I   [ 1 0 . 2 3 0 7 / 2 3 4 6 4 1 3 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 6 4 1 3 ] ;   M a r x   W . ,   2 0 1 4 ,   J   A M   S O C   I N   I N   P R E S S ;   M a r x   W ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 7 9 ;   M C G E E   V E ,   1 9 7 0 ,   J   A M   S T A T   A S S O C ,   V 6 5 ,   P 1 1 0 9 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 4 2 7 8 ;   M i c h e l s   C ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 3 ,   P 8 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 3 2 - 7 ;   M o l c y r   J . ,   2 0 0 5 ,   H D B   E C   G R O W T H   B ,   V 1 B ,   P 1 1 1 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 1 5 7 4 - 0 6 8 4 ( 0 5 ) 0 1 0 1 7 - 8 ;   M u t z   R ,   2 0 0 4 ,   A N N   F O R E S T   S C I ,   V 6 1 ,   P 8 3 1 ,   D O I   1 0 . 1 0 5 1 / f o r e s t : 2 0 0 4 0 8 4 ;   O r g a n i s a t i o n   f o r   E c o n o m i c   C o - o p e r a t i o n   a n d   D e v e l o p m e n t ,   2 0 0 7 ,   R E V   F I E L D   S C I   T E C H N ;   P a u t a s s o   M ,   2 0 1 2 ,   S U S T A I N A B I L I T Y - B A S E L ,   V 4 ,   P 3 2 3 4 ,   D O I   1 0 . 3 3 9 0 / s u 4 1 2 3 2 3 4 ;   P o p p e r   K .   R . ,   1 9 8 8 ,   A U F   S U C H E   N A C H   B E S S E ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P r i c e   D .   J .   d .   S . ,   1 9 6 1 ,   S C I   B A B Y L O N ;   P r i c e   D e r e k - D e - S o l l a ,   1 9 5 1 ,   A R C H   I N T   H I S T   S C I ,   V 4 ,   P 8 5 ;   R i v i e r a   E ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 1 4 4 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 8 2 6 ;   S A S   I n s t i t u t e ,   2 0 1 1 ,   S A S   S T A T   9   3   U S   G U I D ;   S a u t e r   U H ,   1 9 9 9 ,   W O O D   F I B E R   S C I ,   V 3 1 ,   P 4 1 6 ;   S e n s e   A b o u t   S c i e n c e ,   2 0 0 5 ,   I   D O N T   K N O W   W H A T   B E L ;   S h u a i   X F ,   2 0 0 3 ,   J   A G R I C   B I O L   E N V I R   S ,   V 8 ,   P 2 4 0 ,   D O I   1 0 . 1 1 9 8 / 1 0 8 5 7 1 1 0 3 1 5 8 0 ;   T a b a h   A N ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 2 4 9 ;   v a n s R a a n   A .   F .   J . ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 4 7 	 3 9 	 3 1 	 3 2 	 1 8 	 7 9 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 2 3 3 0 - 1 6 3 5 	 2 3 3 0 - 1 6 4 3 	 	 J   A S S O C   I N F   S C I   T E C H 	 	 N O V 	 2 0 1 5 	 6 6 	 1 1 	 	 	 	 	 2 2 1 5 	 2 2 2 2 	 	 1 0 . 1 0 0 2 / a s i . 2 3 3 2 9 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C U 0 N C 	 W O S : 0 0 0 3 6 3 2 1 3 0 0 0 0 0 4 	 	 
 
 J 	 B e n c k e n d o r f f ,   P ;   Z e h r e r ,   A 	 	 	 	 B e n c k e n d o r f f ,   P i e r r e ;   Z e h r e r ,   A n i t a 	 	 	 A   N E T W O R K   A N A L Y S I S   O F   T O U R I S M   R E S E A R C H 	 A N N A L S   O F   T O U R I S M   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t o u r i s m ;   e p i s t e m o l o g y ;   k n o w l e d g e   d o m a i n ;   b i b l i o m e t r i c s ;   c o - c i t a t i o n   a n a l y s i s ;   n e t w o r k   a n a l y s i s 	 C O C I T A T I O N   A N A L Y S I S ;   I N S T I T U T I O N A L   C O N T R I B U T O R S ;   D O C T O R A L   D I S S E R T A T I O N S ;   A U T H O R S H I P   A N A L Y S I S ;   C I T A T I O N   A N A L Y S I S ;   J O U R N A L   R A N K I N G S ;   S E R V I C E   Q U A L I T Y ;   M A N A G E M E N T ;   S C I E N C E ;   I M P A C T 	 T h i s   p a p e r   u s e s   n e t w o r k   a n a l y s i s   t o   i d e n t i f y   t h e   p i o n e e r i n g   s c h o l a r s   a n d   s e m i n a l   w o r k s   w h i c h   h a v e   i n f l u e n c e d   r e c e n t   p a p e r s   i n   l e a d i n g   j o u r n a l s .   T h e   a n a l y s i s   e x t e n d s   b e y o n d   r a n k i n g s   o f   s c h o l a r s   b y   u s i n g   c o - c i t a t i o n   n e t w o r k s   t o   v i s u a l i z e   t h e   r e l a t i o n s h i p s   b e t w e e n   t h e   m o s t   i n f l u e n t i a l   s c h o l a r s   a n d   w o r k s   a n d   t o   u n c o v e r   t h e   d i s c i p l i n a r y   c o n t r i b u t i o n s   w h i c h   h a v e   s u p p o r t e d   t h e   e m e r g e n c e   o f   t o u r i s m   a s   a   f i e l d   o f   a c a d e m i c   s t u d y .   T h e   n e t w o r k s   o f   s c h o l a r s   a n d   w o r k s   i l l u m i n a t e   i n v i s i b l e   c o l l e g e s ,   t r i b e s   a n d   t e r r i t o r i e s   i n   t o u r i s m   r e s e a r c h   a n d   i n d i c a t e   t h a t   w h i l e   t h e   s o c i a l   s c i e n c e s   h a v e   b e e n   m o s t   i n f l u e n t i a l ,   b u s i n e s s - r e l a t e d   c i t a t i o n s   a r e   i n c r e a s i n g .   T h e   f i n d i n g s   c o n t r i b u t e   t o   t h e   d i s c o u r s e   a b o u t   t h e   e p i s t e m o l o g y   o f   t o u r i s m   r e s e a r c h   b y   u s i n g   b i b l i o m e t r i c   t e c h n i q u e s   t o   o f f e r   i n s i g h t s   i n t o   t h e   i n t e r d i s c i p l i n a r y   s t r u c t u r e   o f   t o u r i s m   r e s e a r c h . 	 [ B e n c k e n d o r f f ,   P i e r r e ]   U n i v   Q u e e n s l a n d ,   S c h   T o u r i s m ,   S t   L u c i a ,   Q l d   4 0 7 2 ,   A u s t r a l i a 	 B e n c k e n d o r f f ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   Q u e e n s l a n d ,   S c h   T o u r i s m ,   S t   L u c i a ,   Q l d   4 0 7 2 ,   A u s t r a l i a . 	 p . b e n c k e n d o r f f @ u q . e d u . a u 	 B e n c k e n d o r f f ,   P i e r r e / E - 6 2 0 7 - 2 0 1 3 	 B e n c k e n d o r f f ,   P i e r r e / 0 0 0 0 - 0 0 0 2 - 2 7 9 4 - 8 5 3 4 	 	 	 A c e d o   F J ,   2 0 0 6 ,   J   M A N A G E   S T U D ,   V 4 3 ,   P 9 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 2 0 0 6 . 0 0 6 2 5 . x ;   A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A N D E R S O N   J C ,   1 9 8 8 ,   P S Y C H O L   B U L L ,   V 1 0 3 ,   P 4 1 1 ,   D O I   1 0 . 1 0 3 7 / 0 0 3 3 - 2 9 0 9 . 1 0 3 . 3 . 4 1 1 ;   A P   J ,   1 9 9 2 ,   A N N   T O U R I S M   R E S ,   V 1 9 ,   P 6 6 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 2 ) 9 0 0 6 0 - 3 ;   A p   J . ,   2 0 1 1 ,   2 0 1 1   C A U T H E   C   T O U R   C ;   A y i k o r u   M ,   2 0 0 9 ,   A S P E C   T O U R ,   P 6 2 ;   B a l l a n t y n e   R ,   2 0 0 9 ,   A N N   T O U R I S M   R E S ,   V 3 6 ,   P 1 4 9 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 8 . 0 7 . 0 0 1 ;   B a l o g l u   S ,   1 9 9 9 ,   A N N   T O U R I S M   R E S ,   V 2 6 ,   P 8 6 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 0 - 7 3 8 3 ( 9 9 ) 0 0 0 3 0 - 4 ;   B a l o g l u   S . ,   1 9 9 9 ,   J   H O S P I T A L I T Y   T O U R I S ,   V 2 3 ,   P 5 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 6 3 4 8 0 9 9 0 2 3 0 0 1 0 5 ;   B a r n e s   T J ,   2 0 0 1 ,   P R O G   H U M   G E O G ,   V 2 5 ,   P 5 2 1 ,   D O I   1 0 . 1 1 9 1 / 0 3 0 9 1 3 2 0 1 6 8 2 6 8 8 9 2 2 ;   B a r r i o s   M ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 5 2 - 0 ;   B e c h e r   T ,   2 0 0 1 ,   A C A D   T R I B E S   T E R R I T O R ;   B e l h a s s e n   Y ,   2 0 0 9 ,   A N N   T O U R I S M   R E S ,   V 3 6 ,   P 3 3 5 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 9 . 0 1 . 0 0 6 ;   B e n c k e n d o r f f   P . ,   2 0 0 9 ,   J   H O S P I T A L I T Y   T O U R I S ,   V 1 6 ,   P 1 ,   D O I   D O I   1 0 . 1 3 7 5 / J H T M . 1 6 . 1 . 1 ;   B e n c k e n d o r f f   P . ,   2 0 1 0 ,   C A U T H E   2 0 1 0   T O U R   H O S ;   B o r g a t t i   S . ,   2 0 0 9 ,   U C I N E T   6   W I N D O W S ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o t t e r i l l   D . ,   2 0 0 1 ,   L e i s u r e   S t u d i e s ,   V 2 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 1 4 3 6 0 1 2 7 0 8 4 ;   B U T L E R   R W ,   1 9 8 0 ,   C A N   G E O G R - G E O G R   C A N ,   V 2 4 ,   P 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 1 - 0 0 6 4 . 1 9 8 0 . t b 0 0 9 7 0 . x ;   C a s i l l a s   J ,   2 0 0 7 ,   F A M   B U S   R E V ,   V 2 0 ,   P 1 4 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 2 0 0 7 . 0 0 0 9 2 . x ;   C h a n g   C .   L . ,   2 0 1 2 ,   T O U R I S M   M A N A G E M E N T   P ,   V 1 ,   P 2 ,   D O I   D O I   1 0 . 1 3 3 2 / 0 3 0 5 5 7 3 1 2 X 6 5 5 9 5 4 ;   C h e n g   C .   K . ,   2 0 0 9 ,   T O U R I S M   M A N A G E ,   V 3 2 ,   P 5 3 ;   C O H E N   E ,   1 9 7 2 ,   S O C   R E S ,   V 3 9 ,   P 1 6 4 ;   C O H E N   E ,   1 9 8 8 ,   A N N   T O U R I S M   R E S ,   V 1 5 ,   P 3 7 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 8 8 ) 9 0 0 2 8 - X ;   C O H E N   E ,   1 9 7 9 ,   S O C I O L O G Y ,   V 1 3 ,   P 1 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 3 8 0 3 8 5 7 9 0 1 3 0 0 2 0 3 ;   C o l e s   T . ,   2 0 0 6 ,   C u r r e n t   I s s u e s   i n   T o u r i s m ,   V 9 ,   P 2 9 3 ;   C o l e s   T ,   2 0 0 9 ,   A S P E C   T O U R ,   P 8 0 ;   C o o p e r   C . ,   1 9 9 8 ,   T O U R I S M   P R I N C I P L E S   P ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C r a w f o r d - W e l c h   S . ,   1 9 9 2 ,   I n t e r n a t i o n a l   J o u r n a l   o f   H o s p i t a l i t y   M a n a g e m e n t ,   V 1 1 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 8 - 4 3 1 9 ( 9 2 ) 9 0 0 0 8 - J ;   C r o m p t o n   J .   L . ,   1 9 7 9 ,   A n n a l s   o f   T o u r i s m   R e s e a r c h ,   V 6 ,   P 4 0 8 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 7 9 ) 9 0 0 0 4 - 5 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   D A N N   G ,   1 9 9 1 ,   A N N   T O U R I S M   R E S ,   V 1 8 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 1 ) 9 0 0 4 5 - D ;   D a n n   G . ,   2 0 0 1 ,   I N T   H D B   S O C I O L O G Y ,   P 3 6 7 ;   D a n n   G .   M .   S . ,   1 9 9 9 ,   C o n t e m p o r a r y   i s s u e s   i n   t o u r i s m   d e v e l o p m e n t . ,   P 1 3 ;   D a n n   G .   M .   S . ,   2 0 0 5 ,   T o u r i s m   A n a l y s i s ,   V 1 0 ,   P 3 ,   D O I   1 0 . 3 7 2 7 / 1 0 8 3 5 4 2 0 5 4 5 4 7 9 0 3 ;   D a n n   G .   M .   S . ,   1 9 8 1 ,   A n n a l s   o f   T o u r i s m   R e s e a r c h ,   V 8 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 8 1 ) 9 0 0 8 2 - 7 ;   D a r b e l l a y   F . ,   2 0 1 1 ,   A N N   T O U R I S M   R E S ,   V 3 9 ,   P 4 4 1 ;   D i l l m a n   D . ,   1 9 7 8 ,   M A I L   T E L E P H O N E   S U R V E ;   D w y e r   L ,   2 0 1 1 ,   T O U R   S O C   S C I   S E R ,   V 1 6 ,   P 1 ;   E c h t n e r   C .   M . ,   1 9 9 3 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 3 1 ,   P 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 9 3 0 3 1 0 0 4 0 2 ;   E c h t n e r   C M ,   1 9 9 7 ,   A N N   T O U R I S M   R E S ,   V 2 4 ,   P 8 6 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 0 - 7 3 8 3 ( 9 7 ) 0 0 0 6 0 - 1 ;   E t o   H ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 2 1 0 1 2 4 2 0 ;   F a k e y e   P .   C . ,   1 9 9 1 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 3 0 ,   P 1 0 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 9 1 0 3 0 0 0 2 0 2 ;   F a u l k n e r   B ,   1 9 9 9 ,   T O U R I S M   M A N A G E ,   V 2 0 ,   P 3 ;   F O R N E L L   C ,   1 9 8 1 ,   J   M A R K E T I N G   R E S ,   V 1 8 ,   P 3 9 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 1 3 1 2 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r t n e r   W .   C . ,   1 9 9 4 ,   J   T R A V E L   T O U R I S M   M A R ,   V 2 ;   G o e l d n e r   C .   R . ,   1 9 8 8 ,   I N T   C   T O U R   E D   U N P U B ;   M c I n t o s h   R .   W . ,   2 0 0 0 ,   T O U R I S M   P R I N C I P L E S   P ;   G R A B U R N   N H H ,   1 9 9 1 ,   A N N   T O U R I S M   R E S ,   V 1 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 1 ) 9 0 0 3 5 - A ;   G u n n   C .   A . ,   1 9 7 2 ,   V A C A T I O N S C A P E   D E S I G N ;   G u n n   C .   A . ,   1 9 7 9 ,   T O U R I S M   P L A N N I N G ;   H a i r   J ,   1 9 9 2 ,   M U L T I V A R I A T E   D A T A   A N ;   H a l l   C M ,   2 0 1 1 ,   T O U R I S M   M A N A G E ,   V 3 2 ,   P 1 6 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 1 0 . 0 7 . 0 0 1 ;   H a l l   C M ,   2 0 0 5 ,   T O U R I S M   M A N A G E ,   V 2 6 ,   P 6 5 3 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 4 . 0 5 . 0 0 2 ;   H a l l   C .   M . ,   2 0 0 4 ,   Q U A L I T A T I V E   R E S   T O U R ,   P 1 3 7 ;   H A L L   C .   M . ,   1 9 9 4 ,   T O U R I S M   P O L I T I C S   P O L ;   H a n n e m a n   R . ,   2 0 0 5 ,   I N T R O   S O C I A L   N E T W O R K ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H o f s t e d e   G ,   1 9 8 0 ,   C U L T U R E S   C O N S E Q U E N C E ;   H o w e y   R M ,   1 9 9 9 ,   T O U R I S M   M A N A G E ,   V 2 0 ,   P 1 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 2 6 1 - 5 1 7 7 ( 9 8 ) 0 0 0 9 9 - 5 ;   H u a n g   S S ,   2 0 1 1 ,   A N N   T O U R I S M   R E S ,   V 3 8 ,   P 3 1 6 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 1 0 . 0 8 . 0 0 5 ;   I n s k e e p   E . ,   1 9 9 1 ,   T O U R I S M   P L A N N I N G   I N T ;   J A F A R I   J ,   1 9 8 8 ,   A N N   T O U R I S M   R E S ,   V 1 5 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 8 8 ) 9 0 0 3 0 - 8 ;   J a f a r i   J . ,   1 9 9 0 ,   J o u r n a l   o f   T o u r i s m   S t u d i e s ,   V 1 ,   P 3 3 ;   J a f a r i   J . ,   2 0 0 1 ,   G E M A C H T E R   O D E R   G E L E B ,   V 3 ,   P 1 6 7 ;   J a m a l   T ,   2 0 0 8 ,   T O U R I S M   M A N A G E ,   V 2 9 ,   P 6 6 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 7 . 0 4 . 0 0 1 ;   J o b b e r   D a v i d ,   1 9 8 8 ,   I N T   J   R E S   M A R K ,   V 5 ,   P 1 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 8 1 1 6 ( 8 8 ) 9 0 0 6 5 - 1 ;   J o g a r a t n a m   G ,   2 0 0 5 ,   T O U R I S M   M A N A G E ,   V 2 6 ,   P 6 4 1 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 4 . 0 4 . 0 0 2 ;   J o g a r a t n a m   G . ,   2 0 0 5 ,   J   H O S P I T A L I T Y   T O U R I S ,   V 2 9 ,   P 3 5 6 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 0 9 6 3 4 8 0 0 5 2 7 6 9 2 9 ;   K i m   J ,   2 0 0 8 ,   J   A D V E R T I S I N G ,   V 3 7 ,   P 9 9 ,   D O I   1 0 . 2 7 5 3 / J O A 0 0 9 1 - 3 3 6 7 3 7 0 1 0 8 ;   K r i p p e n d o r f   J . ,   1 9 8 7 ,   H O L I D A Y   M A K E R S   U N D E R ;   L A N K F O R D   S V ,   1 9 9 4 ,   A N N   T O U R I S M   R E S ,   V 2 1 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 4 ) 9 0 0 0 8 - 6 ;   L e i p e r   N . ,   2 0 0 0 ,   C u r r e n t   I s s u e s   i n   T o u r i s m ,   V 3 ,   P 3 6 4 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   L i n   C .   H . ,   1 9 9 5 ,   J   M A N A G E ,   V 1 2 ,   P 4 6 5 ;   L o n g   P .   T . ,   1 9 9 0 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 2 8 ,   P 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 9 0 0 2 8 0 0 3 0 1 ;   L u k k o n e n   T .   R .   J . ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 5 ;   M A C C A N N E L L   D ,   1 9 7 3 ,   A M   J   S O C I O L ,   V 7 9 ,   P 5 8 9 ,   D O I   1 0 . 1 0 8 6 / 2 2 5 5 8 5 ;   M a c C a n n e l l   D e a n ,   1 9 7 6 ,   T O U R I S T   N E W   T H E O R Y   L ;   M a c h a r z i n a   K . ,   2 0 0 4 ,   M A N A G E   I N T   R E V ,   V 4 4 ,   P 3 3 5 ;   W a l l   G . ,   1 9 8 2 ,   T O U R I S M   E C   P H Y S   S O C I ;   M a y o   E . ,   1 9 8 1 ,   P S Y C H O L   L E I S U R E   T R A V ;   M c I n t o s h   R . ,   1 9 7 7 ,   T O U R I S M   P R I N C I P L E S   P ;   M c K e r c h e r   B . ,   2 0 0 7 ,   J o u r n a l   o f   H o s p i t a l i t y   &   T o u r i s m   E d u c a t i o n ,   V 1 9 ,   P 2 3 ;   M c K e r c h e r   B ,   2 0 0 8 ,   T O U R I S M   M A N A G E ,   V 2 9 ,   P 1 2 2 6 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 8 . 0 3 . 0 0 3 ;   M c K e r c h e r   B ,   2 0 0 6 ,   T O U R I S M   M A N A G E ,   V 2 7 ,   P 1 2 3 5 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 5 . 0 6 . 0 0 8 ;   M e y e r - A r e n d t   K J ,   2 0 0 2 ,   A N N   T O U R I S M   R E S ,   V 2 9 ,   P 1 1 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 0 - 7 3 8 3 ( 0 2 ) 0 0 0 3 8 - 5 ;   M i l l   R . ,   1 9 8 5 ,   T O U R I S M   S Y S T E M   I N T R O ;   M i l m a n   A . ,   1 9 9 5 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 3 3 ,   P 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 9 5 0 3 3 0 0 3 0 4 ;   M o u t i n h o   L . ,   1 9 8 7 ,   E U R   J   M A R K E T I N G ,   V 2 1 ,   P 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 4 7 1 8 ;   M u r p h y   P .   E . ,   1 9 8 5 ,   T O U R I S M   C O M M U N I T Y   A P ;   N a s h   D ,   2 0 0 7 ,   T O U R   S O C   S C I   S E R ,   P 1 ;   N A S H   D ,   1 9 9 1 ,   A N N   T O U R I S M   R E S ,   V 1 8 ,   P 1 2 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 1 ) 9 0 0 3 6 - B ;   N e e l y   A ,   2 0 0 5 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 5 ,   P 1 2 2 8 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 5 1 0 6 3 3 6 3 9 ;   N i s o n g e r   T E ,   2 0 0 0 ,   C O L L   R E S   L I B R ,   V 6 1 ,   P 2 6 3 ;   N u n n a l l y   J . C . ,   1 9 6 7 ,   P S Y C H O M E T R I C   T H E O R Y ;   P a g e   S J ,   2 0 0 5 ,   T O U R I S M   M A N A G E ,   V 2 6 ,   P 6 6 3 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 4 . 0 5 . 0 0 7 ;   P A R A S U R A M A N   A ,   1 9 8 8 ,   J   R E T A I L I N G ,   V 6 4 ,   P 1 2 ;   P A R A S U R A M A N   A ,   1 9 8 5 ,   J   M A R K E T I N G ,   V 4 9 ,   P 4 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 4 3 0 ;   P a r k   K ,   2 0 1 1 ,   J   H O S P   T O U R   R E S ,   V 3 5 ,   P 3 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 6 3 4 8 0 1 1 4 0 0 7 4 3 ;   P a s a d e o s   Y ,   1 9 9 8 ,   J   A D V E R T I S I N G ,   V 2 7 ,   P 5 3 ;   P E A R C E   D G ,   1 9 9 2 ,   A N N   T O U R I S M   R E S ,   V 1 9 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 2 ) 9 0 0 8 6 - 5 ;   P e a r c e   D .   G . ,   1 9 8 1 ,   T O U R I S T   D E V ;   P c a r c c   P . ,   2 0 1 1 ,   S T U D Y   T O U R I S M   F D N   P S ;   P e a r c e   P .   L . ,   1 9 9 1 ,   N E W   H O R   T O U R   H O S P   E D ;   P e a r c e   P .   L . ,   1 9 8 2 ,   S O C I A L   P S Y C H O L   T O U R I ,   V 3 ;   P e a r c e   P .   L . ,   1 9 9 3 ,   T E O R O S   I N T ,   V 1 ,   P 2 5 ;   P e c h l a n e r   H . ,   2 0 0 2 ,   T o u r i s m   ( Z a g r e b ) ,   V 5 0 ,   P 3 9 5 ;   P e c h l a n e r   H . ,   2 0 0 4 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 4 2 ,   P 3 2 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 0 4 2 6 3 0 2 6 ;   P i l k i n g t o n   A ,   2 0 0 8 ,   I N T   J   S E R V   I N D   M A N A G ,   V 1 9 ,   P 8 3 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 6 4 2 3 0 8 1 0 8 5 5 7 2 5 ;   P i l k i n g t o n   A ,   2 0 0 6 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 6 ,   P 1 2 5 5 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 6 1 0 7 0 5 8 5 4 ;   P i z a m   A . ,   1 9 7 8 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 1 6 ,   P 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 7 8 0 1 6 0 0 4 0 2 ;   P l o g   S .   C . ,   1 9 7 4 ,   C O R N E L L   H O T E L   R E S T   A ,   V 1 4 ,   P 5 5 ,   D O I   [ 1 0 . 1 1 7 7 / 0 0 1 0 8 8 0 4 7 4 0 1 4 0 0 4 0 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 0 8 8 0 4 7 4 0 1 4 0 0 4 0 9 ] ;   P o o n   A . ,   1 9 9 3 ,   T O U R I S M   T E C H N O L O G Y   C ;   P r i c e   D . ,   1 9 6 9 ,   L I T T L E   S C I   B I G   S C I ;   P r i t c h a r d   A ,   2 0 0 6 ,   L E I S U R E   S T U D ,   V 2 5 ,   P 3 7 3 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 1 4 3 6 0 6 0 0 9 1 8 5 1 2 ;   P r i t c h a r d   A . ,   2 0 0 7 ,   C R I T I C A L   T U R N   T O U R I S ,   P 1 1 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 - 0 8 - 0 4 5 0 9 8 - 8 . 5 0 0 0 6 - 4 ;   R a c h e r l a   P ,   2 0 1 0 ,   A N N   T O U R I S M   R E S ,   V 3 7 ,   P 1 0 1 2 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 1 0 . 0 3 . 0 0 8 ;   A n d e r e c k   K ,   1 9 8 9 ,   J   T R A V E L   R E S ,   V 2 7 ;   R e n   C ,   2 0 1 0 ,   A N N   T O U R I S M   R E S ,   V 3 7 ,   P 8 8 5 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 9 . 1 1 . 0 0 6 ;   R i l e y   R W ,   2 0 0 0 ,   A N N   T O U R I S M   R E S ,   V 2 7 ,   P 1 6 4 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 0 - 7 3 8 3 ( 9 9 ) 0 0 0 6 8 - 7 ;   R y a n   C ,   2 0 0 5 ,   T O U R I S M   M A N A G E ,   V 2 6 ,   P 6 5 7 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 4 . 0 5 . 0 0 1 ;   R y a n   C . ,   1 9 9 7 ,   P A C I F I C   T O U R I S M   R E V ,   V 1 ,   P 3 ;   S c h i l d t   H A ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 1 4 3 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 9 ;   S c h m i d g a l l   R . ,   2 0 0 7 ,   J o u r n a l   o f   H o s p i t a l i t y   &   T o u r i s m   E d u c a t i o n ,   V 1 9 ,   P 3 2 ;   S h e l d o n   P .   J . ,   1 9 9 0 ,   J o u r n a l   o f   T o u r i s m   S t u d i e s ,   V 1 ,   P 4 2 ;   S H E L D O N   P J ,   1 9 9 1 ,   A N N   T O U R I S M   R E S ,   V 1 8 ,   P 4 7 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 1 ) 9 0 0 5 3 - E ;   S m i t h   S L J ,   2 0 1 0 ,   T O U R   S O C   S C I   S E R ,   V 1 3 ,   P 1 ;   S m i t h   V . L . ,   1 9 7 7 ,   H O S T S   G U E S T S   A N T H R   T ;   S w a i n   M .   B . ,   1 9 9 8 ,   A n n a l s   o f   T o u r i s m   R e s e a r c h ,   V 2 5 ,   P 9 9 1 ;   T r i b e   J . ,   2 0 0 4 ,   Q u a l i t a t i v e   r e s e a r c h   i n   t o u r i s m :   o n t o l o g i e s ,   e p i s t e m o l o g i e s   a n d   m e t h o d o l o g i e s ,   P 4 6 ;   T r i b e   J ,   2 0 0 6 ,   A N N   T O U R I S M   R E S ,   V 3 3 ,   P 3 6 0 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 5 . 1 1 . 0 0 1 ;   T r i b e   J ,   2 0 0 0 ,   A N N   T O U R I S M   R E S ,   V 2 7 ,   P 8 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 0 - 7 3 8 3 ( 9 9 ) 0 0 1 2 2 - X ;   T r i b e   J ,   1 9 9 7 ,   A N N   T O U R I S M   R E S ,   V 2 4 ,   P 6 3 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 0 - 7 3 8 3 ( 9 7 ) 0 0 0 2 0 - 0 ;   T r i b e   J ,   2 0 1 0 ,   A N N   T O U R I S M   R E S ,   V 3 7 ,   P 7 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 9 . 0 5 . 0 0 1 ;   U M   S ,   1 9 9 0 ,   A N N   T O U R I S M   R E S ,   V 1 7 ,   P 4 3 2 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 0 - 7 3 8 3 ( 9 0 ) 9 0 0 0 8 - F ;   U r r y   J . ,   1 9 9 0 ,   T O U R I S T   G A Z E   L E I S U R E ;   W o o d s i d e   A .   G . ,   1 9 8 9 ,   J o u r n a l   o f   T r a v e l   R e s e a r c h ,   V 2 7 ,   P 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 7 2 8 7 5 8 9 0 2 7 0 0 4 0 2 ;   W r a y   K B ,   2 0 0 2 ,   P H I L O S   S C I ,   V 6 9 ,   P 1 5 0 ,   D O I   1 0 . 1 0 8 6 / 3 3 8 9 4 6 ;   X i a o   H . ,   2 0 0 6 ,   T O U R I S M   A N A L ,   V 1 0 ,   P 3 3 5 ,   D O I   1 0 . 3 7 2 7 / 1 0 8 3 5 4 2 0 6 7 7 6 1 6 2 7 9 6 ;   X i a o   H G ,   2 0 0 6 ,   A N N   T O U R I S M   R E S ,   V 3 3 ,   P 4 9 0 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 6 . 0 1 . 0 0 4 ;   X i a o   H G ,   2 0 0 5 ,   A N N   T O U R I S M   R E S ,   V 3 2 ,   P 2 7 2 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 4 . 0 6 . 0 0 4 ;   X i a o   H ,   2 0 0 8 ,   A N N   T O U R I S M   R E S ,   V 3 5 ,   P 6 2 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 7 . 0 6 . 0 0 8 ;   X i a o   H ,   2 0 0 7 ,   A N N   T O U R I S M   R E S ,   V 3 4 ,   P 3 1 0 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 6 . 0 9 . 0 0 1 ;   Y e   Q ,   2 0 1 3 ,   J   H O S P   T O U R   R E S ,   V 3 7 ,   P 5 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 6 3 4 8 0 1 1 4 2 5 5 0 0 ;   Z e h r e r   A . ,   2 0 0 7 ,   T o u r i s m   A n a l y s i s ,   V 1 2 ,   P 2 3 1 ,   D O I   1 0 . 3 7 2 7 / 1 0 8 3 5 4 2 0 7 7 8 2 2 1 2 3 9 6 ;   Z e h r e r   A . ,   2 0 1 0 ,   E u r o p e a n   J o u r n a l   o f   T o u r i s m   R e s e a r c h ,   V 3 ,   P 2 3 ;   Z e h r e r   A ,   2 0 0 7 ,   S C A N D   J   H O S P   T O U R ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 0 8 0 / 1 5 0 2 2 2 5 0 7 0 1 3 3 9 7 7 5 ;   Z h a o   W B ,   2 0 0 7 ,   T O U R I S M   M A N A G E ,   V 2 8 ,   P 4 7 6 ,   D O I   1 0 . 1 0 1 6 / j . t o u r m a n . 2 0 0 6 . 0 3 . 0 0 7 	 1 5 1 	 3 1 	 3 2 	 1 4 	 6 5 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 1 6 0 - 7 3 8 3 	 	 	 A N N   T O U R I S M   R E S 	 A n n .   T o u r i s .   R e s . 	 O C T 	 2 0 1 3 	 4 3 	 	 	 	 	 	 1 2 1 	 1 4 9 	 	 1 0 . 1 0 1 6 / j . a n n a l s . 2 0 1 3 . 0 4 . 0 0 5 	 	 2 9 	 H o s p i t a l i t y ,   L e i s u r e ,   S p o r t   &   T o u r i s m ;   S o c i o l o g y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s ;   S o c i o l o g y 	 2 5 6 C F 	 W O S : 0 0 0 3 2 7 2 8 6 6 0 0 0 0 7 	 	 
 
 J 	 C o b o ,   M J ;   L o p e z - H e r r e r a ,   A G ;   H e r r e r a - V i e d m a ,   E ;   H e r r e r a ,   F 	 	 	 	 C o b o ,   M .   J . ;   L o p e z - H e r r e r a ,   A .   G . ;   H e r r e r a - V i e d m a ,   E . ;   H e r r e r a ,   F . 	 	 	 S c i M A T :   A   n e w   s c i e n c e   m a p p i n g   a n a l y s i s   s o f t w a r e   t o o l 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c o m p u t e r   s o f t w a r e   a p p l i c a t i o n s ;   b i b l i o g r a p h i c   s o f t w a r e ;   b i b l i o m e t r i c s 	 C O - W O R D   A N A L Y S I S ;   S C I E N T I F I C   L I T E R A T U R E ;   C O C I T A T I O N   A N A L Y S I S ;   F U Z Z Y - S E T S ;   N E T W O R K S ;   C I T A T I O N ;   V I S U A L I Z A T I O N ;   G E O G R A P H Y ;   P A T T E R N S ;   I N D E X 	 T h i s   a r t i c l e   p r e s e n t s   a   n e w   o p e n - s o u r c e   s o f t w a r e   t o o l ,   S c i M A T ,   w h i c h   p e r f o r m s   s c i e n c e   m a p p i n g   a n a l y s i s   w i t h i n   a   l o n g i t u d i n a l   f r a m e w o r k .   I t   p r o v i d e s   d i f f e r e n t   m o d u l e s   t h a t   h e l p   t h e   a n a l y s t   t o   c a r r y   o u t   a l l   t h e   s t e p s   o f   t h e   s c i e n c e   m a p p i n g   w o r k f l o w .   I n   a d d i t i o n ,   S c i M A T   p r e s e n t s   t h r e e   k e y   f e a t u r e s   t h a t   a r e   r e m a r k a b l e   i n   r e s p e c t   t o   o t h e r   s c i e n c e   m a p p i n g   s o f t w a r e   t o o l s :   ( a )   a   p o w e r f u l   p r e p r o c e s s i n g   m o d u l e   t o   c l e a n   t h e   r a w   b i b l i o g r a p h i c a l   d a t a ,   ( b )   t h e   u s e   o f   b i b l i o m e t r i c   m e a s u r e s   t o   s t u d y   t h e   i m p a c t   o f   e a c h   s t u d i e d   e l e m e n t ,   a n d   ( c )   a   w i z a r d   t o   c o n f i g u r e   t h e   a n a l y s i s . 	 [ C o b o ,   M .   J . ;   L o p e z - H e r r e r a ,   A .   G . ;   H e r r e r a - V i e d m a ,   E . ;   H e r r e r a ,   F . ]   U n i v   G r a n a d a ,   D e p t   C o m p   S c i   &   A r t i f i c i a l   I n t e l l i g e n c e ,   C I T I C   U G R   R e s   C t r   I n f o r m a t   &   C o m m u n   T e c h n o l ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n 	 C o b o ,   M J   ( r e p r i n t   a u t h o r ) ,   U n i v   G r a n a d a ,   D e p t   C o m p   S c i   &   A r t i f i c i a l   I n t e l l i g e n c e ,   C I T I C   U G R   R e s   C t r   I n f o r m a t   &   C o m m u n   T e c h n o l ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n . 	 m j c o b o @ d e c s a i . u g r . e s ;   l o p e z - h e r r e r a @ d e c s a i . u g r . e s ;   v i e d m a @ d e c s a i . u g r . e s ;   h e r r e r a @ d e c s a i . u g r . e s 	 H e r r e r a ,   F r a n c i s c o / C - 6 8 5 6 - 2 0 0 8 ;   C o b o ,   M a n u e l   J e s u s / C - 5 5 8 1 - 2 0 1 1 ;   L o p e z - H e r r e r a ,   A n t o n i o / B - 7 9 3 2 - 2 0 1 1 ;   H E R R E R A - V I E D M A ,   E N R I Q U E / C - 2 7 0 4 - 2 0 0 8 	 H e r r e r a ,   F r a n c i s c o / 0 0 0 0 - 0 0 0 2 - 7 2 8 3 - 3 1 2 X ;   C o b o ,   M a n u e l   J e s u s / 0 0 0 0 - 0 0 0 1 - 6 5 7 5 - 8 0 3 X ;   L o p e z - H e r r e r a ,   A n t o n i o / 0 0 0 0 - 0 0 0 1 - 8 4 2 4 - 2 7 5 X ;   H E R R E R A - V I E D M A ,   E N R I Q U E / 0 0 0 0 - 0 0 0 2 - 7 9 2 2 - 4 9 8 4 	 A n d a l u s i a n   E x c e l l e n c e   P r o j e c t s   [ T I C 5 2 9 9 ,   T I C 0 5 9 9 1 ] ;     [ T I N 2 0 1 0 - 1 7 8 7 6 ] 	 W e   t h a n k   a l l   w h o   h e l p e d   t o   i m p r o v e   S c i M A T   b y   g i v i n g   u s   v e r y   v a l u a b l e   s u g g e s t i o n s   a n d   c o m m e n t s .   T h i s   w o r k   h a s   b e e n   d e v e l o p e d   w i t h   t h e   s u p p o r t   o f   P r o j e c t   T I N 2 0 1 0 - 1 7 8 7 6   a n d   t h e   A n d a l u s i a n   E x c e l l e n c e   P r o j e c t s   T I C 5 2 9 9   a n d   T I C 0 5 9 9 1 . 	 A l o n s o   S ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 7 - 5 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B a i l o n - M o r e n o   R ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 6 2 ;   B a i l o n - M o r e n o   R ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 2 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 2 - 4 ;   B a s t i a n   M ,   2 0 0 9 ,   P   3   I N T   I C W S M   C ,   P 3 6 1 ;   B a t a g e l j   V ,   1 9 9 8 ,   C O N N E C T I O N S ,   V 2 1 ,   P 4 7 ;   B a t t y   M ,   2 0 0 3 ,   E N V I R O N   P L A N N   A ,   V 3 5 ,   P 7 6 1 ,   D O I   1 0 . 1 0 6 8 / a 3 5 0 5 c o m ;   B o r n e r   K ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 8 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 4 9 - 0 ;   F r e e m a n   L .   C . ,   2 0 0 2 ,   U C I N E T   W I N D O W S   S O F T W ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   C a b r e r i z o   F J ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 6 . 0 0 5 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C A L L O N   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 8 0 ;   C a r r i n g t o n   P .   J . ,   2 0 0 5 ,   S T R U C T U R A L   A N A L   S O C I ;   C h e n   C M ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 3 8 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 0 9 ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h e n   P ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 7 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 1 ;   C h i n   J P ,   1 9 8 8 ,   P   S I G C H I   C   H U M   F A C T ,   P 2 1 3 ,   D O I   D O I   1 0 . 1 1 4 5 / 5 7 1 6 7 . 5 7 2 0 3 ;   C o b o   M J ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 8 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 2 5 ;   C o b o   M J ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 1 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 2 ;   C o b o   M J ,   2 0 1 2 ,   I E E E   T   I N T E L L   T R A N S P ,   V 1 3 ,   P 4 1 3 ,   D O I   1 0 . 1 1 0 9 / T I T S . 2 0 1 1 . 2 1 6 7 9 6 8 ;   C o o k   D .   J . ,   2 0 0 6 ,   M I N I N G   G R A P H   D A T A ;   C o u l t e r   N ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 2 0 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 3 < 1 2 0 6 : : A I D - A S I 7 > 3 . 3 . C O ; 2 - 6 ;   D a v i d s o n   G S ,   1 9 9 8 ,   J   I N T E L L   I N F   S Y S T ,   V 1 1 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 6 9 0 0 0 8 8 5 6 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F a b r i k a n t   S I ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 2 7 ;   G a n z e l   W . ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ;   G a r f i e l d   E ,   1 9 9 4 ,   C U R R E N T   C O N T E N T S   S O C ,   V 7 ,   P 5 ;   H a v r e   S ,   2 0 0 2 ,   I E E E   T   V I S   C O M P U T   G R ,   V 8 ,   P 9 ,   D O I   1 0 . 1 1 0 9 / 2 9 4 5 . 9 8 1 8 4 8 ;   H e r r   B . ,   2 0 0 7 ,   P R O G R   C O N V E R G E N C E   T E ,   V 1 0 9 3 ,   P 1 6 1 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K a n d y l a s   V . ,   2 0 1 0 ,   A C M   T   K N O W L   D I S C O V   D ,   V 4 ,   P 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 7 5 4 4 2 8 . 1 7 5 4 4 3 0 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K r e i b i c h   J .   A . ,   2 0 1 0 ,   U S I N G   S Q L I T E ;   L e y d e s d o r f f   L ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 6 2 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 7 ;   L o p e z - H e r r e r a   A G ,   2 0 0 9 ,   I N F O R M   R E S ,   V 1 4 ;   L O P E Z H E R R E R A   A G ,   2 0 1 0 ,   I N T   J   H Y B R I D   I N T E L L I ,   V 1 7 ,   P 1 7 ;   M C C A I N   K W ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 9 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   M o r r i s   S A ,   2 0 0 8 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 2 ,   P 2 1 3 ;   M o y a - A n e g o n   F . ,   2 0 0 5 ,   I N F O R M   P R O C E S S I N G   M A ,   V 4 1 ,   P 1 5 2 0 ;   N o y o n s   E C M ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 2 < 1 1 5 : : A I D - A S I 3 > 3 . 3 . C O ; 2 - A ;   N o y o n s   E C M ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 4 ;   P e r s s o n   O ,   2 0 0 9 ,   C E L E B R A T I N G   S C H O L A R L ,   V 0 5 ,   P 9 ;   P E T E R S   H P F ,   1 9 9 3 ,   R E S   P O L I C Y ,   V 2 2 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 3 ) 9 0 0 3 1 - C ;   P E T E R S   H P F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 5 7 ;   P o l a n c o   X ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 2 6 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 7 3 1 6 7 5 8 ;   P o r t e r   A . ,   2 0 0 4 ,   T E C H   M I N I N G   E X P L O I T I ;   P o r t e r   A L ,   2 0 0 9 ,   N A T   N A N O T E C H N O L ,   V 4 ,   P 5 3 4 ,   D O I   1 0 . 1 0 3 8 / n n a n o . 2 0 0 9 . 2 0 7 ;   P r i c e   D . ,   1 9 7 5 ,   I N F O R M   R I O   D E   J A N E I R ,   V 4 ,   P 2 7 ;   Q u i r i n   A ,   2 0 0 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 4 ,   P 1 6 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 7 . 0 9 . 0 0 5 ;   R o s v a l l   M ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 8 6 9 4 ;   S a l t o n   G . ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M ;   S c h v a n e v e l d t   R .   W . ,   1 9 8 9 ,   A D V   R E S   T H E O R ,   V 2 4 ,   P 2 4 9 ;   S c i 2 T e a m ,   2 0 0 9 ,   S C I   S C I   S C I 2   T O O L ;   S h a n n o n   P ,   2 0 0 3 ,   G E N O M E   R E S ,   V 1 3 ,   P 2 4 9 8 ,   D O I   1 0 . 1 1 0 1 / g r . 1 2 3 9 3 0 3 ;   P l a i s a n t   C . ,   2 0 0 9 ,   D E S I G N I N G   U S E R   I N T E R ;   S k i l l i c o r n   D . ,   2 0 0 7 ,   D A T A   M I N I N G   K N O W L E D G ;   S k u p i n   A ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 0 2 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   S m a l l   H ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 3 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 2 4 - 0 ;   S M A L L   H G ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 2 ;   S M A L L   H G ,   1 9 7 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 3 ,   P 2 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 7 ) 9 0 0 1 7 - 6 ;   U p h a m   S P ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 5 1 - 9 ;   V a n   E c k   N J ,   2 0 0 7 ,   I N T   J   U N C E R T A I N   F U Z Z ,   V 1 5 ,   P 6 2 5 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 4 8 8 5 0 7 0 0 4 9 1 1 ;   v a n   E c k   N J ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 5 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 4 6 - 3 ;   v a n   E c k   N J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 6 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 7 5 ;   V i l a r   P ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 0 7 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 1 5 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W i s e   J A ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 2 2 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 3 < 1 2 2 4 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 4 ;   Z A D E H   L A ,   1 9 6 5 ,   I N F O R M   C O N T R O L ,   V 8 ,   P 3 3 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 6 5 ) 9 0 2 4 1 - X ;   Z a d e h   L A ,   2 0 0 8 ,   I N F O R M   S C I E N C E S ,   V 1 7 8 ,   P 2 7 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i n s . 2 0 0 8 . 0 2 . 0 1 2 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 0 	 7 8 	 3 1 	 3 1 	 1 1 	 1 0 5 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 A U G 	 2 0 1 2 	 6 3 	 8 	 	 	 	 	 1 6 0 9 	 1 6 3 0 	 	 1 0 . 1 0 0 2 / a s i . 2 2 6 8 8 	 	 2 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 7 8 P X 	 W O S : 0 0 0 3 0 6 7 5 8 6 0 0 0 1 0 	 	 
 
 J 	 v a n   D a l e n ,   H P ;   H e n k e n s ,   K 	 	 	 	 v a n   D a l e n ,   H e n d r i k   P . ;   H e n k e n s ,   K e n e 	 	 	 I n t e n d e d   a n d   U n i n t e n d e d   C o n s e q u e n c e s   o f   a   P u b l i s h - o r - P e r i s h   C u l t u r e :   A   W o r l d w i d e   S u r v e y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   s c i e n t i s t s ;   s u r v e y s 	 S C I E N C E ;   C O M P E T I T I O N ;   D E M O G R A P H Y ;   P O P U L A T I O N ;   I N C E N T I V E S ;   S C I E N T I S T S ;   J O U R N A L S 	 H o w   d o e s   p u b l i c a t i o n   p r e s s u r e   i n   m o d e r n - d a y   u n i v e r s i t i e s   a f f e c t   t h e   i n t r i n s i c   a n d   e x t r i n s i c   r e w a r d s   i n   s c i e n c e ?   B y   u s i n g   a   w o r l d w i d e   s u r v e y   a m o n g   d e m o g r a p h e r s   i n   d e v e l o p e d   a n d   d e v e l o p i n g   c o u n t r i e s ,   t h e   a u t h o r s   s h o w   t h a t   t h e   l a r g e   m a j o r i t y   p e r c e i v e   t h e   p u b l i c a t i o n   p r e s s u r e   a s   h i g h ,   b u t   m o r e   s o   i n   A n g l o - S a x o n   c o u n t r i e s   a n d   t o   a   l e s s e r   e x t e n t   i n   W e s t e r n   E u r o p e .   H o w e v e r ,   s c h o l a r s   s e e   b o t h   t h e   p r o s   ( u p w a r d   m o b i l i t y )   a n d   c o n s   ( e x c e s s i v e   p u b l i c a t i o n   a n d   u n c i t e d n e s s ,   n e g l e c t   o f   p o l i c y   i s s u e s ,   e t c . )   o f   t h e   s o - c a l l e d   p u b l i s h - o r - p e r i s h   c u l t u r e .   B y   m e a s u r i n g   b e h a v i o r   i n   t e r m s   o f   r e a d i n g   a n d   p u b l i s h i n g ,   a n d   p e r c e i v e d   e x t r i n s i c   r e w a r d s   a n d   s t a t e d   i n t r i n s i c   r e w a r d s   o f   p r a c t i c i n g   s c i e n c e ,   i t   t u r n s   o u t   t h a t   p u b l i c a t i o n   p r e s s u r e   n e g a t i v e l y   a f f e c t s   t h e   o r i e n t a t i o n   o f   d e m o g r a p h e r s   t o w a r d s   p o l i c y   a n d   k n o w l e d g e   s h a r i n g .   T h e r e   a r e   n o   s i g n s   t h a t   t h e   p r e s s u r e   a f f e c t s   r e a d i n g   a n d   p u b l i s h i n g   o u t s i d e   t h e   c o r e   d i s c i p l i n e . 	 [ v a n   D a l e n ,   H e n d r i k   P . ;   H e n k e n s ,   K e n e ]   N I D I ,   N L - 2 5 0 2   A R   T h e   H a g u e ,   N e t h e r l a n d s ;   [ v a n   D a l e n ,   H e n d r i k   P . ]   T i l b u r g   U n i v ,   T i l b u r g   S c h   E c o n   &   M a n a g e m e n t   T I S E M ,   N L - 5 0 0 0   L E   T i l b u r g ,   N e t h e r l a n d s ;   [ H e n k e n s ,   K e n e ]   T i l b u r g   U n i v ,   D e p t   S o c i o l ,   N L - 5 0 0 0   L E   T i l b u r g ,   N e t h e r l a n d s ;   [ v a n   D a l e n ,   H e n d r i k   P . ]   T i l b u r g   U n i v ,   C e n t E R ,   N L - 5 0 0 0   L E   T i l b u r g ,   N e t h e r l a n d s 	 v a n   D a l e n ,   H P   ( r e p r i n t   a u t h o r ) ,   N I D I ,   P O B   1 1 6 5 0 ,   N L - 2 5 0 2   A R   T h e   H a g u e ,   N e t h e r l a n d s . 	 d a l e n @ n i d i . n l ;   h e n k e n s @ n i d i . n l 	 H e n k e n s ,   K e n e / F - 6 0 1 0 - 2 0 1 3 ;   v a n   D a l e n ,   H e n d r i k / A - 1 7 3 6 - 2 0 0 8 	 v a n   D a l e n ,   H e n d r i k / 0 0 0 0 - 0 0 0 2 - 1 6 2 8 - 9 7 6 4 	 	 	 A d l e r   N J ,   2 0 0 9 ,   A C A D   M A N A G   L E A R N   E D U ,   V 8 ,   P 7 2 ;   A n d e r s o n   M S ,   2 0 0 7 ,   S C I   E N G   E T H I C S ,   V 1 3 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 9 4 8 - 0 0 7 - 9 0 4 2 - 5 ;   A r i e l y   D ,   2 0 0 9 ,   R E V   E C O N   S T U D ,   V 7 6 ,   P 4 5 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 7 X . 2 0 0 9 . 0 0 5 3 4 . x ;   B e d e i a n   A G ,   2 0 1 0 ,   A C A D   M A N A G   L E A R N   E D U ,   V 9 ,   P 7 1 5 ;   B o r g h a n s   L e x ,   2 0 1 0 ,   A M   U   G L O B A L   M A R K E T ,   P 2 3 1 ;   B o r n m a n n   L ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 1 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 2 2 - 8 ;   C o a t s   A . W . B . ,   2 0 0 0 ,   D E V   E C   W   E U R O P E   1 9 4 5 ;   C o l a n d e r   D ,   2 0 0 7 ,   M A K I N G   O F   A N   E C O N O M I S T ,   R E D U X ,   P 1 ;   C o l e m a n   D ,   2 0 0 0 ,   P O S I T I O N   D E M O G R A P H Y ,   P 2 7 ;   D A S G U P T A   P ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 4 8 7 ;   D i x i t   A ,   2 0 0 2 ,   J   H U M   R E S O U R ,   V 3 7 ,   P 6 9 6 ,   D O I   1 0 . 2 3 0 7 / 3 0 6 9 6 1 4 ;   F a n e l l i   D ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 0 ,   P 8 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 9 4 - 7 ;   F a n e l l i   D ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 0 2 7 1 ;   F e l l e r   I ,   2 0 0 2 ,   A M   J   E V A L ,   V 2 3 ,   P 4 3 5 ;   F i s h e   R P H ,   1 9 9 8 ,   J   F I N A N C ,   V 5 3 ,   P 1 0 5 3 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 0 4 3 ;   F r a n z o n i   C ,   2 0 1 1 ,   S C I E N C E ,   V 3 3 3 ,   P 7 0 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 9 7 2 8 6 ;   F r e y   B .   S . ,   2 0 1 0 ,   3 2 0 9   C E S I F O   G R O U P ;   F r e y   B .   S . ,   1 9 9 7 ,   E C   S C I   P R A C T I C E ,   P 1 5 ;   F U L T O N   O ,   1 9 7 4 ,   S O C I O L   E D U C ,   V 4 7 ,   P 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 1 6 6 ;   G a r f i e l d   E ,   1 9 9 6 ,   S C I E N T I S T ,   V 1 0 ,   P 1 1 ;   G u e s t   A .   M . ,   1 9 9 4 ,   E D I T O R S   G A T E K E E P E R S ,   P 8 5 ;   I S I   ( I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ) ,   2 0 1 1 ,   W E B   S C I ;   K E R R   S ,   1 9 7 5 ,   A C A D   M A N A G E   J ,   V 1 8 ,   P 7 6 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 3 7 8 ;   K l a m e r   A . ,   1 9 9 0 ,   M A K I N G   E C ;   K l a m e r   A . ,   2 0 0 2 ,   J   E C   M E T H O D O L O G Y ,   V 9 ,   P 2 8 9 ,   D O I   [ 1 0 . 1 0 8 0 / 1 3 5 0 1 7 8 0 2 2 0 0 0 0 1 5 1 0 4 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 0 1 7 8 0 2 2 0 0 0 0 1 5 1 0 4 ] ;   K l e i n   D B ,   2 0 0 5 ,   C R I T   R E V ,   V 1 7 ,   P 2 5 7 ;   L e a h e y   E ,   2 0 0 7 ,   A M   S O C I O L   R E V ,   V 7 2 ,   P 5 3 3 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 8 3 0 - 4 ;   M C N I C O L L   G ,   1 9 9 2 ,   P O P U L   D E V   R E V ,   V 1 8 ,   P 3 9 9 ,   D O I   1 0 . 2 3 0 7 / 1 9 7 3 6 5 2 ;   M c N i c o l l   G ,   2 0 0 7 ,   P O P U L   D E V   R E V ,   V 3 3 ,   P 6 0 7 ;   M E R T O N   R K ,   1 9 5 7 ,   A M   S O C I O L   R E V ,   V 2 2 ,   P 6 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 8 9 1 9 3 ;   M i l l e r   A N ,   2 0 1 1 ,   C A R E E R   D E V   I N T ,   V 1 6 ,   P 4 2 2 ,   D O I   1 0 . 1 1 0 8 / 1 3 6 2 0 4 3 1 1 1 1 1 6 7 7 5 1 ;   M o r g a n   S P ,   2 0 0 1 ,   A N N   N Y   A C A D   S C I ,   V 9 5 4 ,   P 3 5 ;   N I D I ,   2 0 0 9 ,   S U R V   D E M   W O R L D ;   S t e p h a n   P E ,   2 0 0 1 ,   I N T   J   T E C H N O L   M A N A G E ,   V 2 2 ,   P 6 7 6 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 1 . 0 0 2 9 8 5 ;   T a b u t i n   D ,   2 0 0 7 ,   P O P U L A T I O N ,   V 6 2 ,   P 1 5 ;   U n i v e r s i t y   C o l l e g e   L o n d o n ,   2 0 1 1 ,   P R O M   A N N   B   C U R R   V I T ;   v a n   D a l e n   H P ,   1 9 9 9 ,   P O P U L   D E V   R E V ,   V 2 5 ,   P 2 2 9 ;   v a n   D a l e n   H P ,   2 0 0 5 ,   K Y K L O S ,   V 5 8 ,   P 3 9 5 ,   D O I   1 0 . 1 1 1 1 / j . 0 0 2 3 - 5 9 6 2 . 2 0 0 5 . 0 0 2 9 4 . x ;   v a n   D a l e n   H P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 8 - 5 ;   V a n   D a l e n   H P ,   2 0 0 4 ,   P O P U L   D E V   R E V ,   V 3 0 ,   P 4 8 9 ;   v a n   D a l e n   H P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 0 8 3 1 7 1 8 ;   V a n   D a l e n   H .   P . ,   2 0 1 1 ,   W H A T S   D E M O G R A P H E R S   M ;   V e u g e l e r s   R ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 4 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 5 - 7 ;   W a l k e r   R L ,   2 0 1 0 ,   B M C   M E D   E D U C ,   V 1 0 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 2 0 - 1 0 - 2 1 ;   W i l s o n   L . ,   1 9 4 2 ,   A C A D   M A N   S T U D Y   S O C I O ;   Z I V N E Y   T L ,   1 9 9 2 ,   J   F I N A N C ,   V 4 7 ,   P 2 9 5 ,   D O I   1 0 . 2 3 0 7 / 2 3 2 9 0 9 9 	 4 7 	 3 1 	 3 3 	 7 	 6 6 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U L 	 2 0 1 2 	 6 3 	 7 	 	 	 	 	 1 2 8 2 	 1 2 9 3 	 	 1 0 . 1 0 0 2 / a s i . 2 2 6 3 6 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 5 8 J X 	 W O S : 0 0 0 3 0 5 2 3 3 9 0 0 0 0 2 	 	 
 
 J 	 C h o i ,   M ;   F u l l e r ,   C D ;   T h o m a s ,   C R 	 	 	 	 C h o i ,   M e h e e ;   F u l l e r ,   C l i f t o n   D . ;   T h o m a s ,   C h a r l e s   R . ,   J r . 	 	 	 E S T I M A T I O N   O F   C I T A T I O N - B A S E D   S C H O L A R L Y   A C T I V I T Y   A M O N G   R A D I A T I O N   O N C O L O G Y   F A C U L T Y   A T   D O M E S T I C   R E S I D E N C Y - T R A I N I N G   I N S T I T U T I O N S :   1 9 9 6 - 2 0 0 7 	 I N T E R N A T I O N A L   J O U R N A L   O F   R A D I A T I O N   O N C O L O G Y   B I O L O G Y   P H Y S I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A c a d e m i c   p r o d u c t i v i t y ;   B i b l i o m e t r i c s ;   C i t a t i o n s ;   H i r s c h   i n d e x ;   H - i n d e x 	 M E D I C A L   J O U R N A L S ;   A U T H O R S H I P ;   P R E V A L E N C E ;   H O N O R A R Y ;   T R E N D S ;   I N D E X 	 P u r p o s e :   A d v a n c e m e n t   i n   a c a d e m i c   r a d i a t i o n   o n c o l o g y   i s   l a r g e l y   c o n t i n g e n t   o n   r e s e a r c h   p r o d u c t i v i t y   a n d   t h e   p e r c e i v e d   e x t e r n a l   i n f l u e n c e   o f   a n   i n d i v i d u a l ' s   s c h o l a r l y   w o r k .   T h e   p u r p o s e   o f   t h i s   s t u d y   w a s   t o   u s e   t h e   H i r s c h   i n d e x   ( h - i n d e x )   t o   e s t i m a t e   t h e   r e s e a r c h   p r o d u c t i v i t y   o f   c u r r e n t   r a d i a t i o n   o n c o l o g y   f a c u l t y   a t   U . S .   a c a d e m i c   i n s t i t u t i o n s   b e t w e e n   1 9 9 6   a n d   2 0 0 7 .   M e t h o d s   a n d   M a t e r i a l s :   W e   p e r f o r m e d   b i b l i o m e t r i c   c i t a t i o n   d a t a b a s e   s e a r c h e s   f o r   a v a i l a b l e   r a d i a t i o n   o n c o l o g y   f a c u l t y   a t   d o m e s t i c   r e s i d e n c y - t r a i n i n g   i n s t i t u t i o n s   ( n   =   8 2 6 ) .   T h e   o u t c o m e s   a n a l y z e d   i n c l u d e d   t h e   t o t a l   n u m b e r   o f   m a n u s c r i p t s ,   t o t a l   n u m b e r   o f   c i t a t i o n s ,   a n d   t h e   h - i n d e x   b e t w e e n   1 9 9 6   a n d   2 0 0 7 .   A n a l y s i s   o f   o v e r a l l   h - i n d e x   r a n k i n g s   w i t h   s t r a t i f i c a t i o n   b y   a c a d e m i c   r a n k i n g ,   j u n i o r   v s .   s e n i o r   f a c u l t y   s t a t u s ,   a n d   g e n d e r   w a s   p e r f o r m e d .   R e s u l t s :   O f   t h e   8 2 6   r a d i a t i o n   o n c o l o g i s t s ,   t h e   m e a n   h - i n d e x   w a s   8 . 5 .   O f   t h e   i n d i v i d u a l s   i n   t h e   t o p   1 0 %   b y   t h e   h - i n d e x ,   3 4 %   w e r e   c h a i r p e r s o n s ,   8 8 %   w e r e   s e n i o r   f a c u l t y ,   a n d   1 3 %   w e r e   w o m e n .   A   g r e a t e r   h - i n d e x   w a s   a s s o c i a t e d   w i t h   a   h i g h e r   a c a d e m i c   r a n k i n g   a n d   s e n i o r   f a c u l t y   s t a t u s .   R e c u r s i v e   p a r t i t i o n i n g   a n a l y s i s   r e v e a l e d   a n   h - i n d e x   t h r e s h o l d   o f   1 5   ( p   < 0 . 0 0 0 1 )   a s   a n   i d e n t i f i e d   b r e a k p o i n t   b e t w e e n   t h e   s e n i o r   a n d   j u n i o r   f a c u l t y .   O v e r a l l ,   w o m e n   h a d   l o w e r   h - i n d e x e s   c o m p a r e d   w i t h   m e n   ( m e a n ,   6 . 4   v s .   9 . 4 ) ;   h o w e v e r ,   w h e n   s t r a t i f i e d   b y   a c a d e m i c   r a n k i n g ,   t h e   g e n d e r   d i f f e r e n t i a l   a l l   b u t   d i s a p p e a r e d .   C o n c l u s i o n :   U s i n g   t h e   h - i n d e x   a s   a   p a r t i a l   s u r r o g a t e   f o r   r e s e a r c h   p r o d u c t i v i t y ,   i t   a p p e a r s   t h a t   r a d i a t i o n   o n c o l o g i s t s   i n   a c a d e m i a   t o d a y   c o m p r i s e   a   p r o l i f i c   g r o u p ,   h o w e v e r ,   w i t h   a   h i g h l y   s k e w e d   d i s t r i b u t i o n .   A c c o r d i n g   t o   t h e   p r e s e n t   a n a l y s i s ,   t h e   h - i n d e x   c o r r e l a t e d   w i t h   a c a d e m i c   r a n k i n g .   T h u s ,   i t   p o t e n t i a l l y   h a s   u t i l i t y   i n   t h e   p r o c e s s   o f   p r o m o t i o n   d e c i s i o n s .   O v e r a l l ,   w o m e n   i n   r a d i a t i o n   o n c o l o g y   w e r e   l e s s   a c a d e m i c a l l y   p r o d u c t i v e   t h a n   m e n ;   t h e   p o s s i b l e   r e a s o n s   f o r   t h e   g e n d e r   d i f f e r e n t i a l   a r e   d i s c u s s e d .   ( C )   2 0 0 9   E l s e v i e r   I n c . 	 [ C h o i ,   M e h e e ;   F u l l e r ,   C l i f t o n   D . ;   T h o m a s ,   C h a r l e s   R . ,   J r . ]   O r e g o n   H l t h   &   S c i   U n i v ,   D e p t   R a d i a t   M e d ,   P o r t l a n d ,   O R   9 7 2 3 9   U S A ;   [ F u l l e r ,   C l i f t o n   D . ]   U n i v   T e x a s   H l t h   S c i   C t r   S a n   A n t o n i o ,   D e p t   R a d i a t   O n c o l ,   D i v   R a d i o l   S c i ,   S a n   A n t o n i o ,   T X   7 8 2 2 9   U S A ;   [ F u l l e r ,   C l i f t o n   D . ]   U n i v   T e x a s   H l t h   S c i   C t r   S a n   A n t o n i o ,   D e p t   R a d i o l ,   D i v   R a d i o l   S c i ,   S a n   A n t o n i o ,   T X   7 8 2 2 9   U S A 	 T h o m a s ,   C R   ( r e p r i n t   a u t h o r ) ,   O r e g o n   H l t h   &   S c i   U n i v ,   D e p t   R a d i a t   M e d ,   3 1 8 1   S W   S a m   J a c k s o n   P k   R d , K P V 4 ,   P o r t l a n d ,   O R   9 7 2 3 9   U S A . 	 t h o m a s c h @ o h s u . e d u 	 	 F u l l e r ,   C l i f t o n / 0 0 0 0 - 0 0 0 2 - 5 2 6 4 - 3 9 9 4 	 	 	 B o r r y   P ,   2 0 0 6 ,   B I O E T H I C S ,   V 2 0 ,   P 2 1 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 5 1 9 . 2 0 0 6 . 0 0 4 9 6 . x ;   C O L E   J R ,   1 9 8 7 ,   S C I   A M ,   V 2 5 6 ,   P 1 1 9 ;   F l a n a g i n   A ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 2 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 2 2 ;   F L Y N N   D F ,   2 0 0 7 ,   A S S   R E S I D E N T S   R A D   O N ;   H A L P E R I N   E C ,   1 9 9 2 ,   A C A D   M E D ,   V 6 7 ,   P 8 5 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 8 8 8 - 1 9 9 2 1 2 0 0 0 - 0 0 0 1 2 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J A G S I   R ,   2 0 0 6 ,   J   A M   C O L L   R A D I O L ,   V 1 2 ,   P 9 0 1 ;   J a g s i   R e s h m a ,   2 0 0 6 ,   J   A m   C o l l   R a d i o l ,   V 3 ,   P 9 0 1 ,   D O I   1 0 . 1 0 1 6 / j . j a c r . 2 0 0 6 . 0 8 . 0 0 4 ;   J a g s i   R ,   2 0 0 6 ,   N E W   E N G L   J   M E D ,   V 3 5 5 ,   P 2 8 1 ,   D O I   1 0 . 1 0 5 6 / N E J M s a 0 5 3 9 1 0 ;   K u r i c h i   J E ,   2 0 0 5 ,   A R C H   S U R G - C H I C A G O ,   V 1 4 0 ,   P 1 0 7 4 ,   D O I   1 0 . 1 0 0 1 / a r c h s u r g . 1 4 0 . 1 1 . 1 0 7 4 ;   L e h m a n n   S ,   2 0 0 6 ,   N A T U R E ,   V 4 4 4 ,   P 1 0 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 4 1 0 0 3 a ;   L e v s k y   M E ,   2 0 0 7 ,   S O U T H   M E D   J ,   V 1 0 0 ,   P 3 7 1 ;   L e w i s   R S ,   2 0 0 7 ,   I N T   J   R A D I A T   O N C O L ,   V 6 9 ,   P 5 1 8 ,   D O I   1 0 . 1 0 1 6 / j . i j r o b p . 2 0 0 7 . 0 2 . 0 5 3 ;   L i   S F ,   2 0 0 7 ,   A C A D   E M E R G   M E D ,   V 1 4 ,   P 1 1 9 4 ,   D O I   1 0 . 1 1 9 7 / j . a e m . 2 0 0 7 . 0 8 - 0 0 9 ;   L O N G   J S ,   1 9 9 2 ,   S O C   F O R C E S ,   V 7 1 ,   P 1 5 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 9 9 7 1 ;   M o r t o n   M J ,   2 0 0 8 ,   J   A M   C O L L   S U R G E O N S ,   V 2 0 6 ,   P 1 2 1 0 ,   D O I   1 0 . 1 0 1 6 / j . j a m c o l l s u r g . 2 0 0 7 . 1 2 . 0 5 1 ;   M o w a t t   G ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 7 6 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 7 6 9 ;   S H A P I R O   D W ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 1 ,   P 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 1 . 6 . 4 3 8 ;   S l o n e   R M ,   1 9 9 6 ,   A M   J   R O E N T G E N O L ,   V 1 6 7 ,   P 5 7 1 ;   W I L L I A M S O N   D F ,   1 9 8 9 ,   A N N   I N T E R N   M E D ,   V 1 1 0 ,   P 9 1 6 ;   W i t t e n b e r g - C o x   A . ,   2 0 0 8 ,   W H Y   W O M E N   M E A N   B U S I N ;   2 0 0 8 ,   S C O P U S 	 2 3 	 3 1 	 3 1 	 0 	 1 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 3 6 0 - 3 0 1 6 	 	 	 I N T   J   R A D I A T   O N C O L 	 I n t .   J .   R a d i a t .   O n c o l .   B i o l .   P h y s . 	 M A Y   1 	 2 0 0 9 	 7 4 	 1 	 	 	 	 	 1 7 2 	 1 7 8 	 	 1 0 . 1 0 1 6 / j . i j r o b p . 2 0 0 8 . 0 7 . 0 3 0 	 	 7 	 O n c o l o g y ;   R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 O n c o l o g y ;   R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 4 3 6 G W 	 W O S : 0 0 0 2 6 5 4 0 1 7 0 0 0 2 6 	 1 8 9 9 0 5 0 6 	 
 
 J 	 U g o l i n i ,   D ;   M e l a ,   G S 	 	 	 	 U g o l i n i ,   D ;   M e l a ,   G S 	 	 	 O n c o l o g i c a l   r e s e a r c h   o v e r v i e w   i n   t h e   E u r o p e a n   U n i o n .   A   5 - y e a r   s u r v e y 	 E U R O P E A N   J O U R N A L   O F   C A N C E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n e o p l a s m s ;   b i b l i o m e t r i c s ;   E u r o p e 	 R E S E A R C H   P E R F O R M A N C E ;   C I T A T I O N   A N A L Y S I S ;   I M P A C T ;   P U B L I C A T I O N S ;   I N D I C A T O R S 	 T h i s   s t u d y   e v a l u a t e s   t h e   d i s t r i b u t i o n   o f   p a p e r s   p u b l i s h e d   b y   E u r o p e a n   U n i o n   ( E U )   a u t h o r s   i n   o n c o l o g i c a l   j o u r n a l s   f r o m   1 9 9 6   t o   2 0 0 0 ,   a n d   c o m p a r e s   t h e   r e s u l t s   w i t h   t h o s e   o f   a   p r e v i o u s   s t u d y   c a r r i e d   o u t   i n   1 9 9 5 .   T h e   i m p a c t   o f   o n c o l o g i c a l   r e s e a r c h   i n   t h e   E U   i s   c o m p a r e d   w i t h   t h a t   o f   t h e   U n i t e d   S t a t e s   ( U S )   a n d   t h e   w o r l d ,   a n d   r e s e a r c h   t r e n d s   a r e   h i g h l i g h t e d   t h r o u g h   a n   a n a l y s i s   o f   k e y w o r d s .   D a t a   o n   a r t i c l e s   p u b l i s h e d   i n   o n c o l o g i c a l   j o u r n a l s   ( I S I   S u b j e c t   C a t e g o r y   =   O N C O L O G Y )   s e l e c t e d   f r o m   C u r r e n t   C o n t e n t s / L i f e   S c i e n c e   a n d   C u r r e n t   C o n t e n t s / C l i n i c a l   M e d i c i n e   ( 1 9 9 6 - 2 0 0 0 )   o n   t h e   w e e k l y   d i s k e t t e   v e r s i o n   w e r e   d o w n l o a d e d .   M e a n   I m p a c t   F a c t o r   ( I F ) ,   s o u r c e   c o u n t r y   p o p u l a t i o n   a n d   g r o s s   d o m e s t i c   p r o d u c t   ( G D P )   w e r e   a n a l y s e d .   A   s p e c i a l - p u r p o s e   s o f t w a r e   t o   d e t e r m i n e   t h e   m o s t   c o m m o n l y   u s e d   k e y w o r d s   w a s   u t i l i s e d .   F r o m   1 9 9 6   t o   2 0 0 0 ,   6 6   0 2 1   p a p e r s   w e r e   p u b l i s h e d   i n   t h e   w o r l d   i n   o n c o l o g i c a l   j o u r n a l s :   3 5 . 5 %   c a m e   f r o m   t h e   E U   ( U K ,   I t a l y ,   G e r m a n y ,   F r a n c e   a n d   T h e   N e t h e r l a n d s   r a n k i n g   t h e   h i g h e s t )   a n d   3 8 . 8 %   f r o m   t h e   U S .   T h e   t o t a l   n u m b e r   o f   E U   p a p e r s   i n c r e a s e d   f r o m   4 0 6 3   i n   1 9 9 5   t o   4 8 4 3   i n   2 0 0 0 .   C o m p a r e d   w i t h   t h e   p r e v i o u s   s t u d y ,   n o   i m p o r t a n t   c h a n g e s   w e r e   s e e n ,   w i t h   t h e   t o p   f i v e   c o u n t r i e s   i n   1 9 9 5   m a i n t a i n i n g   t h e i r   r a n k i n g   i n   2 0 0 0 .   H o w e v e r ,   s o m e   s m a l l   c o u n t r i e s   ( D e n m a r k ,   N o r w a y   a n d   I r e l a n d )   f a r e d   w o r s e   i n   2 0 0 0 ,   w h i l e   o t h e r s   ( F r a n c e ,   G e r m a n y   a n d   G r e e c e )   i m p r o v e d   t h e i r   p o s i t i o n .   T h e   m e a n   I F   f o r   t h e   E U   p a p e r s   w a s   2 . 9   c o m p a r e d   w i t h   4 . 0   i n   t h e   U S .   T h e   m e a n   I F   i n c r e a s e d   f o r   a l l   o f   t h e   n a t i o n s .   I n   p a r t i c u l a r ,   w h i l e   F r a n c e   a n d   G e r m a n y   s h o w e d   a   v e r y   p o s i t i v e   p e r f o r m a n c e   t r e n d   i n   t h e i r   r e s p e c t i v e   I F s ,   c o u n t r i e s   s u c h   a s   N o r w a y ,   D e n m a r k   a n d   I t a l y   s h o w e d   l e s s   i m p r o v e m e n t .   T h e   a n a l y s i s   o f   k e y w o r d s   a p p e a r i n g   i n   a r t i c l e s   w r i t t e n   i n   2 0 0 0   s h o w e d   t h a t   t h e   l e a d i n g   f i e l d s   o f   r e s e a r c h   w e r e   b r e a s t   c a n c e r   i n   t h e   d i s e a s e s   c a t e g o r y   o f   k e y w o r d s ,   c i s p l a t i n   a n d   p l a t i n u m   c o m p o u n d s   i n   t h e   d r u g s   c a t e g o r y ,   r a d i o t h e r a p y   i n   t h e   t r e a t m e n t   c a t e g o r y   a n d   a p o p t o s i s   i n   t h e   e x p e r i m e n t a l   s t u d i e s   c a t e g o r y .   V a r i e t y   i n   t h e   u s e   o f   k e y w o r d s   s h o u l d   b e   a v o i d e d ,   a n d   j o u r n a l   e d i t o r s   s h o u l d   e n c o u r a g e   t h e i r   s t a n d a r d i s a t i o n .   ( C )   2 0 0 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 C t r   D o c u m e n t a z   C l i n   O n c o l ,   D i p a r t i m e n t o   O n c o l ,   I - 1 6 1 3 2   G e n o a ,   I t a l y ;   I s t   N a z l   R i c   C a n c ,   I - 1 6 1 3 2   G e n o a ,   I t a l y ;   U n i v   G e n o a ,   D i p a r t i m e n t o   M e d   I n t e r n a   &   S p e c i a l i t a   M e d ,   G e n o a ,   I t a l y 	 	 	 M e l a ,   G i u s e p p e / F - 6 0 7 2 - 2 0 1 0 	 	 	 	 A N D E R S O N   A ,   1 9 9 2 ,   S C I E N C E ,   V 2 5 6 ,   P 4 7 2 ;   B E N Z E R   A ,   1 9 9 3 ,   L A N C E T ,   V 3 4 1 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 3 ) 9 0 1 1 6 - X ;   D A V I S   R A ,   1 9 9 0 ,   N E U R O S U R G E R Y ,   V 2 6 ,   P 3 4 5 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 4 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 9 ;   * E U R ,   2 0 0 0 ,   R E S   D E V   A N N   S T A T ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   * I   S C I   I N F ,   2 0 0 0 ,   S C I   S C I   C I T   I N D   J   C I ;   L U U K K O N E N   T ,   1 9 9 0 ,   A N N   M E D ,   V 2 2 ,   P 1 4 5 ,   D O I   1 0 . 3 1 0 9 / 0 7 8 5 3 8 9 9 0 0 9 1 4 7 2 5 9 ;   M e l a   G S ,   1 9 9 8 ,   A N N   R H E U M   D I S ,   V 5 7 ,   P 6 4 3 ,   D O I   1 0 . 1 1 3 6 / a r d . 5 7 . 1 1 . 6 4 3 ;   M e l a   G S ,   1 9 9 9 ,   E U R   J   C A N C E R ,   V 3 5 ,   P 1 1 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 9 9 ) 0 0 1 0 7 - 0 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   P a r k i n   D M ,   2 0 0 1 ,   E U R   J   C A N C E R ,   V 3 7 ,   p S 4 ;   U g o l i n i   D ,   2 0 0 2 ,   E U R   J   C A N C E R ,   V 3 8 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 0 2 5 - 4 ;   U g o l i n i   D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 4 6 9 2 7 7 2 1 ;   v a n   d e r   S c h u e r e n   E ,   2 0 0 0 ,   E U R   J   C A N C E R ,   V 3 6 ,   P 1 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 9 9 ) 0 0 2 4 2 - 7 ;   V i n k l e r   P ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 6 ;   1 9 9 7 ,   S C I   W A T C H ,   V 8 ,   P 1 	 1 7 	 3 1 	 3 1 	 0 	 3 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 9 5 9 - 8 0 4 9 	 	 	 E U R   J   C A N C E R 	 E u r .   J .   C a n c e r 	 S E P 	 2 0 0 3 	 3 9 	 1 3 	 	 	 	 	 1 8 8 8 	 1 8 9 4 	 	 1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 3 ) 0 0 4 3 1 - 3 	 	 7 	 O n c o l o g y 	 O n c o l o g y 	 7 2 1 Q Q 	 W O S : 0 0 0 1 8 5 3 2 7 4 0 0 0 1 1 	 1 2 9 3 2 6 6 7 	 
 
 J 	 T e r a j i m a ,   K ;   A n e m a n ,   A 	 	 	 	 T e r a j i m a ,   K ;   A n e m a n ,   A 	 	 	 C i t a t i o n   c l a s s i c s   i n   a n a e s t h e s i a   a n d   p a i n   j o u r n a l s :   a   l i t e r a t u r e   r e v i e w   i n   t h e   e r a   o f   t h e   i n t e r n e t 	 A C T A   A N A E S T H E S I O L O G I C A   S C A N D I N A V I C A 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 a n a e s t h e s i o l o g y ;   b i b l i o m e t r i c s ;   p a i n ;   p u b l i c a t i o n s 	 I N H A L E D   N I T R I C - O X I D E ;   N M D A - R E C E P T O R   A N T A G O N I S T ;   D - A S P A R T I C   A C I D ;   R E S P I R A T O R Y - D I S T R E S S - S Y N D R O M E ;   C L O S E D   C L A I M S   A N A L Y S I S ;   S C I A T I C - N E R V E   I N J U R Y ;   P O S T O P E R A T I V E   P A I N ;   D O R S A L   H O R N ;   E P I D U R A L - A N E S T H E S I A ;   F O R M A L I N   T E S T 	 B a c k g r o u n d :   T h e   n u m b e r   o f   c i t a t i o n s   a n   a r t i c l e   r e c e i v e s   r e f l e c t s   i t s   s c i e n t i f i c   i m p a c t .   T h e   i n t r o d u c t i o n   o f   i n t e r n e t - b a s e d   r e s o u r c e s   t o   s e a r c h   a n d   a c c e s s   a r t i c l e s   h a s   m a d e   i t   p o s s i b l e   t o   r e v i e w   e v e n   w h o l e   s c i e n t i f i c   a r e a s .   T h i s   s t u d y   i d e n t i f i e s   t h e   t o p   5 0   m o s t - c i t e d   a r t i c l e s   o v e r   t h e   l a s t   2 5   y e a r s   i n   s p e c i a l i t y   j o u r n a l s   d e d i c a t e d   t o   a n a e s t h e s i a   a n d   p a i n ,   r e s p e c t i v e l y .   M e t h o d s :   T w e n t y - t w o   j o u r n a l s   l i s t e d   i n   T h e   S c i e n c e   C i t a t i o n   I n d e x   E x p a n d e d ( T M )   i n   t h e   f i e l d   o f   a n a e s t h e s i o l o g y   a n d   n i n e   m a j o r   m e d i c a l   j o u r n a l s   w e r e   s c r e e n e d   u s i n g   t h e   c i t e d   r e f e r e n c e   o p t i o n   t o   i d e n t i f y   a r t i c l e s   c i t e d   m o r e   t h a n   1 0 0   t i m e s   b e t w e e n   1 9 8 6   a n d   2 0 0 2 .   T h e   t o p   5 0   a r t i c l e s   i n   s p e c i a l i t y   j o u r n a l s   a n d   t h e   t o p   1 0   a r t i c l e s   i n   m a j o r   m e d i c a l   j o u r n a l s   c o n c e r n i n g   a n a e s t h e s i a   a n d   p a i n   w e r e   r e t r i e v e d   f o r   f u r t h e r   a n a l y s i s .   R e s u l t s :   T h e   m o s t - c i t e d   a r t i c l e s   i n   s p e c i a l i t y   j o u r n a l s   w e r e   p u b l i s h e d   f r o m   1 9 8 6   t o   1 9 9 7   a n d   r e c e i v e d   a   m e a n   o f   2 2 2   ( a n a e s t h e s i a )   a n d   2 7 9   ( p a i n )   c i t a t i o n s .   S i x t y - s e v e n   i n s t i t u t i o n s   p r o d u c e d   t h e   m o s t - c i t e d   a r t i c l e s   a n d   o f   t h o s e   2 8   w e r e   l o c a t e d   o u t s i d e   N o r t h   A m e r i c a .   T h e   a r t i c l e s   w e r e   p u b l i s h e d   i n   s i x   j o u r n a l s   l e d   b y   t h e   J o u r n a l   o f   P a i n   ( 5 0   a r t i c l e s )   a n d   J o u r n a l   o f   A n a e s t h e s i o l o g y   ( 3 9   a r t i c l e s ) .   F o r t y - s e v e n   a r t i c l e s   w e r e   c l a s s i f i e d   a s   r e l a t e d   t o   c l i n i c a l   e x p e r i e n c e ,   3 3   w e r e   r e v i e w   a r t i c l e s ,   a n d   2 0   d i s c u s s e d   b a s i c   s c i e n c e .   C o n c l u s i o n :   T o   m a k e   a n   a r t i c l e   a   p o s s i b l e   ' c i t a t i o n   c l a s s i c '   i n   a n a e s t h e s i o l o g y ,   i t   s h o u l d   b e   p u b l i s h e d   i n   o n e   o f   s i x   l e a d i n g   j o u r n a l s   a n d   o r i g i n a t e   f r o m   a n   e s t a b l i s h e d   i n s t i t u t e   i n   N o r t h   A m e r i c a .   I n t e r n e t   r e s o u r c e s   t o   p u b l i s h   a n d   c i t e   t h e   l i t e r a t u r e   h a v e   t o   d a t e   n o t   a d v a n c e d   a n y   a r t i c l e   p u b l i s h e d   i n   t h e   l a s t   5   y e a r s   t o   t h e   t o p   1 0 0   l i s t . 	 S a h l g r e n s   U n i v   H o s p ,   D e p t   A n a e s t h e s i o l   &   I n t e n s   C a r e ,   S E - 4 1 3 4 5   G o t h e n b u r g ,   S w e d e n 	 A n e m a n ,   A   ( r e p r i n t   a u t h o r ) ,   S a h l g r e n s   U n i v   H o s p ,   D e p t   A n a e s t h e s i o l   &   I n t e n s   C a r e ,   S E - 4 1 3 4 5   G o t h e n b u r g ,   S w e d e n . 	 	 	 	 	 	 A m e r   S ,   1 9 8 8 ,   P A I N ,   V 3 3 ,   P 1 1 ;   A N A N D   K J S ,   1 9 8 7 ,   N E W   E N G L   J   M E D ,   V 3 1 7 ,   P 1 3 2 1 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 8 7 1 1 1 9 3 1 7 2 1 0 5 ;   A T T A L   N ,   1 9 9 0 ,   P A I N ,   V 4 1 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 0 ) 9 0 0 2 2 - 6 ;   A U S E M S   M E ,   1 9 8 6 ,   A N E S T H E S I O L O G Y ,   V 6 5 ,   P 3 6 2 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 6 1 0 0 0 0 - 0 0 0 0 4 ;   B A B E R   N S ,   1 9 8 9 ,   P A I N ,   V 3 9 ,   P 3 0 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 9 ) 9 0 0 4 5 - 6 ;   B A C H   S ,   1 9 8 8 ,   P A I N ,   V 3 3 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 2 8 8 - 6 ;   B E N N E T T   G J ,   1 9 8 8 ,   P A I N ,   V 3 3 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 2 0 9 - 6 ;   B E N U M O F   J L ,   1 9 9 1 ,   A N E S T H E S I O L O G Y ,   V 7 5 ,   P 1 0 8 7 ;   B I G A T E L L O   L M ,   1 9 9 4 ,   A N E S T H E S I O L O G Y ,   V 8 0 ,   P 7 6 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 4 0 4 0 0 0 - 0 0 0 0 7 ;   B o l d t   J ,   1 9 9 9 ,   A N E S T H   A N A L G ,   V 8 8 ,   P 1 1 7 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 3 9 - 1 9 9 9 0 5 0 0 0 - 0 0 0 3 8 ;   B r a m b r i n k   A M ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 5 ,   P 5 5 6 ,   D O I   1 0 . 1 0 9 3 / b j a / 8 5 . 4 . 5 5 6 ;   B R O W N   G K ,   1 9 8 7 ,   P A I N ,   V 3 1 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 7 ) 9 0 0 0 6 - 6 ;   B U T T E R W O R T H   J F ,   1 9 9 0 ,   A N E S T H E S I O L O G Y ,   V 7 2 ,   P 7 1 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 0 0 4 0 0 0 - 0 0 0 2 2 ;   C A M P B E L L   J N ,   1 9 8 8 ,   P A I N ,   V 3 2 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 0 2 7 - 9 ;   C A P L A N   R A ,   1 9 9 0 ,   A N E S T H E S I O L O G Y ,   V 7 2 ,   P 8 2 8 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 0 0 5 0 0 0 - 0 0 0 1 0 ;   C A P L A N   R A ,   1 9 8 8 ,   A N E S T H E S I O L O G Y ,   V 6 8 ,   P 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 8 0 1 0 0 0 - 0 0 0 0 3 ;   C a t e r i n a   M J ,   1 9 9 7 ,   N A T U R E ,   V 3 8 9 ,   P 8 1 6 ;   C H E N   L ,   1 9 9 2 ,   N A T U R E ,   V 3 5 6 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 6 5 2 1 a 0 ;   C H R I S T O P H E R S O N   R ,   1 9 9 3 ,   A N E S T H E S I O L O G Y ,   V 7 9 ,   P 4 2 2 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 3 0 9 0 0 0 - 0 0 0 0 4 ;   C L A E Y S   M A ,   1 9 8 8 ,   B R I T   J   A N A E S T H ,   V 6 0 ,   P 3 ,   D O I   1 0 . 1 0 9 3 / b j a / 6 0 . 1 . 3 ;   C L E E L A N D   C S ,   1 9 9 4 ,   N E W   E N G L   J   M E D ,   V 3 3 0 ,   P 5 9 2 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 4 0 3 0 3 3 3 0 0 9 0 2 ;   C O D E R R E   T J ,   1 9 9 3 ,   P A I N ,   V 5 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 3 ) 9 0 1 6 1 - H ;   D A H L   J B ,   1 9 9 1 ,   B R I T   J   A N A E S T H ,   V 6 6 ,   P 7 0 3 ,   D O I   1 0 . 1 0 9 3 / b j a / 6 6 . 6 . 7 0 3 ;   D E V O R   M ,   1 9 9 2 ,   P A I N ,   V 4 8 ,   P 2 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 0 6 7 - L ;   D I C K E N S O N   A H ,   1 9 8 7 ,   P A I N ,   V 3 0 ,   P 3 4 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 7 ) 9 0 0 2 3 - 6 ;   D I C K E N S O N   A H ,   1 9 8 6 ,   P A I N ,   V 2 4 ,   P 2 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 6 ) 9 0 0 4 4 - 8 ;   D O N O V A N   M ,   1 9 8 7 ,   P A I N ,   V 3 0 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 7 ) 9 0 0 8 4 - 4 ;   D O U G H E R T Y   P M ,   1 9 9 1 ,   P A I N ,   V 4 7 ,   P 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 1 ) 9 0 0 1 5 - P ;   E G A N   T D ,   1 9 9 3 ,   A N E S T H E S I O L O G Y ,   V 7 9 ,   P 8 8 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 3 1 1 0 0 0 - 0 0 0 0 4 ;   E I D E   P K ,   1 9 9 4 ,   P A I N ,   V 5 8 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 4 ) 9 0 1 2 9 - 5 ;   E V A N S   C J ,   1 9 9 2 ,   S C I E N C E ,   V 2 5 8 ,   P 1 9 5 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 3 5 1 6 7 ;   F a s s o u l a k i   A ,   2 0 0 2 ,   A C T A   A N A E S T H   S C A N D ,   V 4 6 ,   P 9 0 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 2 . 4 6 0 7 2 3 . x ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   F a s s o u l a k i   A ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 5 3 ;   F L A C K E   J W ,   1 9 8 7 ,   A N E S T H E S I O L O G Y ,   V 6 7 ,   P 1 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 7 0 7 0 0 0 - 0 0 0 0 3 ;   F L O R   H ,   1 9 9 2 ,   P A I N ,   V 4 9 ,   P 2 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 1 4 5 - 2 ;   F R A N K   S M ,   1 9 9 3 ,   A N E S T H E S I O L O G Y ,   V 7 8 ,   P 4 6 8 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 3 0 3 0 0 0 - 0 0 0 1 0 ;   F R A N K S   N P ,   1 9 9 4 ,   N A T U R E ,   V 3 6 7 ,   P 6 0 7 ,   D O I   1 0 . 1 0 3 8 / 3 6 7 6 0 7 a 0 ;   F R A T A C C I   M D ,   1 9 9 1 ,   A N E S T H E S I O L O G Y ,   V 7 5 ,   P 9 9 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 1 1 2 0 0 0 - 0 0 0 1 1 ;   F R O S T E L L   C G ,   1 9 9 3 ,   A N E S T H E S I O L O G Y ,   V 7 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 3 0 3 0 0 0 - 0 0 0 0 5 ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A T T I N O N I   L ,   1 9 9 5 ,   N E W   E N G L   J   M E D ,   V 3 3 3 ,   P 1 0 2 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 5 1 0 1 9 3 3 3 1 6 0 1 ;   G A T T I N O N I   L ,   1 9 8 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 6 ,   P 8 8 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 6 . 7 . 8 8 1 ;   G A T T I N O N I   L ,   1 9 8 8 ,   A N E S T H E S I O L O G Y ,   V 6 9 ,   P 8 2 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 8 1 2 0 0 0 - 0 0 0 0 5 ;   G A T T I N O N I   L ,   1 9 9 1 ,   A N E S T H E S I O L O G Y ,   V 7 4 ,   P 1 5 2 ;   G H I G N O N E   M ,   1 9 8 6 ,   A N E S T H E S I O L O G Y ,   V 6 4 ,   P 3 6 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 6 0 1 0 0 0 - 0 0 0 0 7 ;   G H I G N O N E   M ,   1 9 8 7 ,   A N E S T H E S I O L O G Y ,   V 6 7 ,   P 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 7 0 7 0 0 0 - 0 0 0 0 2 ;   G H O N E I M   M M ,   1 9 9 0 ,   A N E S T H E S I O L O G Y ,   V 7 2 ,   P 9 2 6 ;   G i s v o l d   S E ,   1 9 9 9 ,   A C T A   A N A E S T H   S C A N D ,   V 4 3 ,   P 9 7 1 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 1 9 9 9 . 4 3 1 0 0 1 . x ;   G l a s s   P S ,   1 9 9 7 ,   A N E S T H E S I O L O G Y ,   V 8 6 ,   P 8 3 6 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 7 0 4 0 0 0 - 0 0 0 1 4 ;   G R A C E L Y   R H ,   1 9 9 2 ,   P A I N ,   V 5 1 ,   P 1 7 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 2 5 9 - E ;   G R E E N E   N M ,   1 9 9 2 ,   A N E S T H   A N A L G ,   V 7 4 ,   P 1 1 6 ;   G R U N A U   R V E ,   1 9 8 7 ,   P A I N ,   V 2 8 ,   P 3 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 7 ) 9 0 0 7 3 - X ;   H A N S S O N   S ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 1 3 0 1 ;   H A R G R E A V E S   K ,   1 9 8 8 ,   P A I N ,   V 3 2 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 0 2 6 - 7 ;   H U G H E S   M A ,   1 9 9 2 ,   A N E S T H E S I O L O G Y ,   V 7 6 ,   P 3 3 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 2 0 3 0 0 0 - 0 0 0 0 3 ;   H U N S K A A R   S ,   1 9 8 7 ,   P A I N ,   V 3 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 7 ) 9 0 0 8 8 - 1 ;   H Y L D E N   J L K ,   1 9 8 9 ,   P A I N ,   V 3 7 ,   P 2 2 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 9 ) 9 0 1 3 5 - 8 ;   I A D A R O L A   M J ,   1 9 8 8 ,   P A I N ,   V 3 5 ,   P 3 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 1 4 1 - 8 ;   [ A n o n y m o u s ] ,   J   C I T   R E P ;   J E N S E N   M P ,   1 9 8 6 ,   P A I N ,   V 2 7 ,   P 1 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 6 ) 9 0 2 2 8 - 9 ;   J E N S E N   M P ,   1 9 9 1 ,   P A I N ,   V 4 7 ,   P 2 4 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 1 ) 9 0 2 1 6 - K ;   K A T Z   J ,   1 9 9 2 ,   A N E S T H E S I O L O G Y ,   V 7 7 ,   P 4 3 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 2 0 9 0 0 0 - 0 0 0 0 6 ;   K I M   S H ,   1 9 9 2 ,   P A I N ,   V 5 0 ,   P 3 5 5 ;   K R I S T E N S E N   J D ,   1 9 9 2 ,   P A I N ,   V 5 1 ,   P 2 4 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 2 6 6 - E ;   K u r z   A ,   1 9 9 6 ,   N E W   E N G L   J   M E D ,   V 3 3 4 ,   P 1 2 0 9 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 6 0 5 0 9 3 3 4 1 9 0 1 ;   L i n k   A M ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 4 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 4 6 ;   L I U   S ,   1 9 9 5 ,   A N E S T H E S I O L O G Y ,   V 8 2 ,   P 1 4 7 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 5 0 6 0 0 0 - 0 0 0 1 9 ;   M A L M B E R G   A B ,   1 9 9 3 ,   P A I N ,   V 5 4 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 3 ) 9 0 0 2 8 - N ;   M A N G A N O   D T ,   1 9 9 0 ,   N E W   E N G L   J   M E D ,   V 3 2 3 ,   P 1 7 8 1 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 0 1 2 2 7 3 2 3 2 6 0 1 ;   M A N G A N O   D T ,   1 9 9 0 ,   A N E S T H E S I O L O G Y ,   V 7 2 ,   P 1 5 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 0 0 1 0 0 0 - 0 0 0 2 5 ;   M a n g a n o   D T ,   1 9 9 6 ,   N E W   E N G L   J   M E D ,   V 3 3 5 ,   P 1 7 1 3 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 6 1 2 0 5 3 3 5 2 3 0 1 ;   M A O   J R ,   1 9 9 5 ,   P A I N ,   V 6 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 5 ) 0 0 0 7 3 - 2 ;   M A Z E   M ,   1 9 9 1 ,   A N E S T H E S I O L O G Y ,   V 7 4 ,   P 5 8 5 1 ;   M C Q U A Y   H J ,   1 9 8 8 ,   P A I N ,   V 3 3 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 2 8 7 - 4 ;   M E L L E R   S T ,   1 9 9 3 ,   P A I N ,   V 5 2 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 3 ) 9 0 1 2 4 - 8 ;   M E L Z A C K   R ,   1 9 8 7 ,   P A I N ,   V 3 0 ,   P 1 9 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 7 ) 9 1 0 7 4 - 8 ;   M E N S E   S ,   1 9 9 3 ,   P A I N ,   V 5 4 ,   P 2 4 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 3 ) 9 0 0 2 7 - M ;   M i h i c   S J ,   1 9 9 7 ,   N A T U R E ,   V 3 8 9 ,   P 3 8 5 ;   M I L L A N   M J ,   1 9 8 6 ,   P A I N ,   V 2 7 ,   P 3 0 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 6 ) 9 0 1 5 8 - 2 ;   M U N R O   S ,   1 9 9 3 ,   N A T U R E ,   V 3 6 5 ,   P 6 1 ,   D O I   1 0 . 1 0 3 8 / 3 6 5 0 6 1 a 0 ;   N E S S   T J ,   1 9 9 0 ,   P A I N ,   V 4 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 0 ) 9 0 0 2 1 - 5 ;   N U S S M E I E R   N A ,   1 9 8 6 ,   A N E S T H E S I O L O G Y ,   V 6 4 ,   P 1 6 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 6 0 2 0 0 0 - 0 0 0 0 6 ;   O N G H E N A   P ,   1 9 9 2 ,   P A I N ,   V 4 9 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 1 4 4 - Z ;   P a l a d u g u   R ,   2 0 0 2 ,   W O R L D   J   S U R G ,   V 2 6 ,   P 1 0 9 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 6 8 - 0 0 2 - 6 3 7 6 - 7 ;   P i c k n e t t   T ,   1 9 9 9 ,   J   M o l   B i o l ,   V 2 9 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 6 / j m b i . 1 9 9 9 . 3 1 4 8 ;   P O M A R O L I   A ,   1 9 9 4 ,   B R I T   J   A N A E S T H ,   V 7 2 ,   P 7 2 3 ,   D O I   1 0 . 1 0 9 3 / b j a / 7 2 . 6 . 7 2 3 ;   P O R T E N O Y   R K ,   1 9 9 0 ,   P A I N ,   V 4 1 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 0 ) 9 0 0 0 4 - W ;   P O R T E N O Y   R K ,   1 9 8 6 ,   P A I N ,   V 2 5 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 6 ) 9 0 0 9 1 - 6 ;   R A J A   S N ,   1 9 9 1 ,   A N E S T H E S I O L O G Y ,   V 7 4 ,   P 6 9 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 1 0 4 0 0 0 - 0 0 0 1 2 ;   R A M P I L   I J ,   1 9 9 3 ,   A N E S T H E S I O L O G Y ,   V 7 8 ,   P 7 0 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 3 0 4 0 0 0 - 0 0 0 1 4 ;   R E A D Y   L B ,   1 9 8 8 ,   A N E S T H E S I O L O G Y ,   V 6 8 ,   P 1 0 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 8 0 1 0 0 0 - 0 0 0 1 6 ;   R E I C H   D L ,   1 9 8 9 ,   C A N   J   A N A E S T H ,   V 3 6 ,   P 1 8 6 ;   R E N   K ,   1 9 9 2 ,   P A I N ,   V 5 0 ,   P 3 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 0 3 9 - E ;   R I G L E R   M L ,   1 9 9 1 ,   A N E S T H   A N A L G ,   V 7 2 ,   P 2 7 5 ;   R O B E R T S   J D ,   1 9 9 2 ,   L A N C E T ,   V 3 4 0 ,   P 8 1 8 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 2 ) 9 2 6 8 6 - A ;   R O B E R T S   W J ,   1 9 8 6 ,   P A I N ,   V 2 4 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 6 ) 9 0 1 1 6 - 8 ;   R O S S A I N T   R ,   1 9 9 3 ,   N E W   E N G L   J   M E D ,   V 3 2 8 ,   P 3 9 9 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 3 0 2 1 1 3 2 8 0 6 0 5 ;   S A M S O O N   G L T ,   1 9 8 7 ,   A N A E S T H E S I A ,   V 4 2 ,   P 4 8 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 1 9 8 7 . t b 0 4 0 3 9 . x ;   S A V A R E S E   J J ,   1 9 8 8 ,   A N E S T H E S I O L O G Y ,   V 6 8 ,   P 7 2 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 8 0 5 0 0 0 - 0 0 0 1 0 ;   S C H A I B L E   H G ,   1 9 9 3 ,   P A I N ,   V 5 5 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 3 ) 9 0 1 8 3 - P ;   S E B E L   P S ,   1 9 8 9 ,   A N E S T H E S I O L O G Y ,   V 7 1 ,   P 2 6 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 9 0 8 0 0 0 - 0 0 0 1 5 ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 ;   S E L T Z E R   Z ,   1 9 9 0 ,   P A I N ,   V 4 3 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 0 ) 9 1 0 7 4 - S ;   S E V E R I N G H A U S   J W ,   1 9 8 7 ,   A N E S T H E S I O L O G Y ,   V 6 7 ,   P 5 5 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 7 1 0 0 0 0 - 0 0 0 1 7 ;   S H A F E R   A ,   1 9 8 8 ,   A N E S T H E S I O L O G Y ,   V 6 9 ,   P 3 1 4 8 ;   S H A F E R   S L ,   1 9 9 1 ,   A N E S T H E S I O L O G Y ,   V 7 4 ,   P 5 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 1 0 1 0 0 0 - 0 0 0 1 0 ;   S I M O N E   D A ,   1 9 8 9 ,   P A I N ,   V 3 8 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 9 ) 9 0 0 7 9 - 1 ;   S m i t h   G ,   1 9 9 6 ,   B R I T   J   A N A E S T H ,   V 7 6 ,   P 7 5 3 ;   S M I T H   I ,   1 9 9 4 ,   A N E S T H E S I O L O G Y ,   V 8 1 ,   P 1 0 0 5 2 ;   S T A N T O N H I C K S   M ,   1 9 9 5 ,   P A I N ,   V 6 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 5 ) 0 0 1 1 0 - E ;   S T E I N   C ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 5 ,   P 1 1 2 3 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 1 0 1 7 3 2 5 1 6 0 2 ;   S T E I N   C ,   1 9 9 3 ,   A N E S T H   A N A L G ,   V 7 6 ,   P 1 8 2 ;   S T O S S E L   T P ,   1 9 9 0 ,   N E W   E N G L   J   M E D ,   V 3 2 2 ,   P 7 3 9 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 0 0 3 1 5 3 2 2 1 1 0 6 ;   S U G I M O T O   T ,   1 9 9 0 ,   P A I N ,   V 4 2 ,   P 2 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 0 ) 9 1 1 6 4 - E ;   T A L B O T   J D ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 1 3 5 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 0 0 3 2 2 0 ;   T A N E L I A N   D L ,   1 9 9 3 ,   A N E S T H E S I O L O G Y ,   V 7 8 ,   P 7 5 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 3 0 4 0 0 0 - 0 0 0 2 0 ;   T J O L S E N   A ,   1 9 9 2 ,   P A I N ,   V 5 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 0 0 3 - T ;   T R E M P E R   K K ,   1 9 8 9 ,   A N E S T H E S I O L O G Y ,   V 7 0 ,   P 9 8 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 9 0 1 0 0 0 - 0 0 0 1 9 ;   T R U J I L L O   K A ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 2 4 7 2 8 ;   T U M A N   K J ,   1 9 9 1 ,   A N E S T H   A N A L G ,   V 7 3 ,   P 6 9 6 ;   T V E R S K O Y   M ,   1 9 9 0 ,   A N E S T H   A N A L G ,   V 7 0 ,   P 2 9 ,   D O I   1 0 . 1 2 1 3 / 0 0 0 0 0 5 3 9 - 1 9 9 0 0 1 0 0 0 - 0 0 0 0 6 ;   V A E R O Y   H ,   1 9 8 8 ,   P A I N ,   V 3 2 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 8 ) 9 0 0 1 9 - X ;   V A N D E R M E U L E N   E P ,   1 9 9 4 ,   A N E S T H   A N A L G ,   V 7 9 ,   P 1 1 6 5 ;   V O N K O R F F   M ,   1 9 9 2 ,   P A I N ,   V 5 0 ,   P 1 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 1 5 4 - 4 ;   W A D D E L L   G ,   1 9 9 3 ,   P A I N ,   V 5 2 ,   P 1 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 3 ) 9 0 1 2 7 - B ;   W A T C H A   M F ,   1 9 9 2 ,   A N E S T H E S I O L O G Y ,   V 7 7 ,   P 1 6 2 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 2 0 7 0 0 0 - 0 0 0 2 3 ;   W E I S S M A N   C ,   1 9 9 0 ,   A N E S T H E S I O L O G Y ,   V 7 3 ,   P 3 0 8 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 0 0 8 0 0 0 - 0 0 0 2 0 ;   W O O L F   C J ,   1 9 9 2 ,   N A T U R E ,   V 3 5 5 ,   P 7 5 ,   D O I   1 0 . 1 0 3 8 / 3 5 5 0 7 5 a 0 ;   W O O L F   C J ,   1 9 8 9 ,   B R I T   J   A N A E S T H ,   V 6 3 ,   P 1 3 9 ,   D O I   1 0 . 1 0 9 3 / b j a / 6 3 . 2 . 1 3 9 ;   W O O L F   C J ,   1 9 9 1 ,   P A I N ,   V 4 4 ,   P 2 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 1 ) 9 0 1 0 0 - C ;   W O O L F   C J ,   1 9 9 3 ,   A N E S T H   A N A L G ,   V 7 7 ,   P 3 6 2 ,   D O I   1 0 . 1 2 1 3 / 0 0 0 0 0 5 3 9 - 1 9 9 3 7 7 0 2 0 - 0 0 0 2 6 ;   Y A K S H   T L ,   1 9 8 9 ,   P A I N ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 8 9 ) 9 0 1 6 0 - 7 ;   Y A M A M O T O   T ,   1 9 9 2 ,   P A I N ,   V 4 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 3 9 5 9 ( 9 2 ) 9 0 1 9 8 - K ;   Y A M A M O T O   T ,   1 9 9 2 ,   A N E S T H E S I O L O G Y ,   V 7 7 ,   P 7 5 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 2 1 0 0 0 0 - 0 0 0 2 1 ;   Y E A G E R   M P ,   1 9 8 7 ,   A N E S T H E S I O L O G Y ,   V 6 6 ,   P 7 2 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 8 7 0 6 0 0 0 - 0 0 0 0 4 ;   Z a d i n a   J E ,   1 9 9 7 ,   N A T U R E ,   V 3 8 6 ,   P 4 9 9 ,   D O I   1 0 . 1 0 3 8 / 3 8 6 4 9 9 a 0 	 1 3 9 	 3 1 	 3 1 	 2 	 4 	 B L A C K W E L L   M U N K S G A A R D 	 C O P E N H A G E N 	 3 5   N O R R E   S O G A D E ,   P O   B O X   2 1 4 8 ,   D K - 1 0 1 6   C O P E N H A G E N ,   D E N M A R K 	 0 0 0 1 - 5 1 7 2 	 	 	 A C T A   A N A E S T H   S C A N D 	 A c t a   A n a e s t h e s i o l .   S c a n d . 	 J U L 	 2 0 0 3 	 4 7 	 6 	 	 	 	 	 6 5 5 	 6 6 3 	 	 1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 3 7 . x 	 	 9 	 A n e s t h e s i o l o g y 	 A n e s t h e s i o l o g y 	 6 8 9 W T 	 W O S : 0 0 0 1 8 3 5 1 6 5 0 0 0 0 3 	 1 2 8 0 3 5 8 1 	 
 
 J 	 L e w i s o n ,   G ;   G r a n t ,   J ;   J a n s e n ,   P 	 	 	 	 L e w i s o n ,   G ;   G r a n t ,   J ;   J a n s e n ,   P 	 	 	 I n t e r n a t i o n a l   g a s t r o e n t e r o l o g y   r e s e a r c h :   s u b j e c t   a r e a s ,   i m p a c t ,   a n d   f u n d i n g 	 G U T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   f u n d i n g ;   i m p a c t ;   m o r t a l i t y ;   r e s e a r c h 	 	 A i m s   -   T o   e x a m i n e   t h e   v o l u m e   a n d   p o t e n t i a l   i m p a c t   o f   g a s t r o e n t e r o l o g y   r e s e a r c h   o u t p u t s   f r o m   1 9 8 5   t o   1 9 9 8   f r o m   1 4   d e v e l o p e d   c o u n t r i e s ;   t h e   o v e r l a p   w i t h   r e s e a r c h   i n   c a n c e r ,   i n f e c t i o u s   d i s e a s e s ,   a n d   g e n e t i c s ;   a n d   t h e   f u n d i n g   s o u r c e s   f o r   t h i s   r e s e a r c h .   T o   d e t e r m i n e   i f   c o u n t r i e s '   r e s e a r c h   o u t p u t s   c o r r e l a t e d   w i t h   t h e i r   b u r d e n   o f   c o r r e s p o n d i n g   d i s e a s e s   a n d   i n p u t s   t o   t h e i r   r e s e a r c h .   M e t h o d s   -   S e l e c t i v e   r e t r i e v a l   o f   p a p e r s   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   a n d   m a n u a l   l o o k   u p   o f   a   s a m p l e   t o   d e t e r m i n e   f u n d i n g   s o u r c e s .   C l a s s i f i c a t i o n   o f   j o u r n a l s   b y   f o u r   c a t e g o r i e s   o f   r e s e a r c h   l e v e l   ( c l i n i c a l / b a s i c )   a n d   p o t e n t i a l   i m p a c t   ( l o w / h i g h ) .   R e s u l t s   -   G a s t r o e n t e r o l o g y   r e p r e s e n t s   a b o u t   8 %   o f   w o r l d   b i o m e d i c a l   r e s e a r c h   b u t   o v e r   1 1 %   i n   I t a l y ,   J a p a n ,   a n d   S p a i n .   I t s   p o t e n t i a l   i m p a c t   i s   h i g h e s t   ( b u t   d e c l i n i n g )   f o r   t h e   U S A .   I t   h a s   i n c r e a s e d   n o t i c e a b l y   i n   m o s t   E u r o p e a n   c o u n t r i e s ,   p a r t i c u l a r l y   i n   F i n l a n d .   G a s t r o e n t e r o l o g y   r e s e a r c h   h a s   b e c o m e   m o r e   c l i n i c a l   i n   J a p a n ,   S p a i n ,   A u s t r a l i a ,   a n d   t h e   N e t h e r l a n d s   b u t   m o r e   b a s i c   i n   C a n a d a ,   G e r m a n y ,   F i n l a n d ,   I s r a e l ,   a n d   S o u t h   A f r i c a .   F u n d i n g   c o m e s   p r i m a r i l y   f r o m   n a t i o n a l   g o v e r n m e n t s ,   f o l l o w e d   b y   n a t i o n a l   p r i v a t e   n o n - p r o f i t   s o u r c e s   a n d   i n d u s t r y   b u t   l i t t l e   i n d u s t r i a l   f u n d i n g   o c c u r s   i n   s o m e   c o u n t r i e s .   T h e r e   i s   a   s t r o n g   a n d   p o s i t i v e   c o r r e l a t i o n   b e t w e e n   r e p o r t e d   d e a t h s   f r o m   g a s t r o i n t e s t i n a l   n e o p l a s m s   a n d   c o u n t r i e s '   o u t p u t s   o f   r e s e a r c h   i n   g a s t r o i n t e s t i n a l   o n c o l o g y .   C o n c l u s i o n s   -   B i b l i o m e t r i c   a n a l y s i s   c a n   r e v e a l   d i f f e r e n c e s   b e t w e e n   c o u n t r i e s   i n   t h e i r   r e s e a r c h   i n   a   s u b j e c t   w h e n   a   c o m m o n   m e t h o d o l o g y   i s   a p p l i e d   t o   a n   i n t e r n a t i o n a l   d a t a b a s e .   V a r i a t i o n s   i n   r e s e a r c h   m e t h o d s   i n   d i f f e r e n t   c o u n t r i e s   c a n   p l a u s i b l y   e x p l a i n   s o m e   o f   t h e   v a r i a t i o n   i n   t h e   p o t e n t i a l   i m p a c t   o f   t h e   w o r k . 	 W e l l c o m e   T r u s t   R e s   L a b s ,   P o l i c y   U n i t ,   L o n d o n   N W 1   2 B E ,   E n g l a n d ;   U n i v   G r o n i n g e n ,   A c a d   H o s p   G r o n i n g e n ,   D e p t   G a s t r o e n t e r o l   &   H e p a t o l ,   N L - 9 7 0 0   R B   G r o n i n g e n ,   N e t h e r l a n d s 	 L e w i s o n ,   G   ( r e p r i n t   a u t h o r ) ,   C i t y   U n i v   L o n d o n ,   D e p t   I n f o r m a t   S c i ,   B i b l i o m e t r   R e s   G r p ,   N o r t h a m p t o n   S q ,   L o n d o n   E C 1 V   0 H B ,   E n g l a n d . 	 g . l e w i s o n @ s o i . c i t y . a c . u k 	 G r a n t ,   J o n a t h a n / K - 4 2 8 2 - 2 0 1 2 	 G r a n t ,   J o n a t h a n / 0 0 0 0 - 0 0 0 2 - 1 6 4 6 - 3 4 8 6 	 	 	 B U T L E R   L ,   1 9 9 5 ,   9 8 1 2 3 3 5   A U S T R   N A T   H L ;   D a w s o n   G ,   1 9 9 8 ,   M A P P I N G   L A N D S C A P E   N A ;   J e s c h i n   D . ,   1 9 9 5 ,   P   5   I N T   C   I N T   S O C   S C ,   P 2 3 5 ;   L e w i s o n   G ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 3 ;   L e w i s o n   G ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 5 0 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 6 0 7 ;   L e w i s o n   G ,   1 9 9 8 ,   G U T ,   V 4 3 ,   P 2 8 8 ;   L e w i s o n   G ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 0 9 ;   L e w i s o n   G ,   1 9 9 6 ,   R E S   E V A L U A T ,   V 6 ,   P 2 5 ;   M A R S H A L L   B ,   1 9 8 3 ,   L A N C E T ,   V 1 ,   P 1 2 7 3 ;   N A R I N   F ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 5 ;   W A R R E N   J R ,   1 9 8 3 ,   L A N C E T ,   V 1 ,   P 1 2 7 3 	 1 1 	 3 1 	 3 3 	 1 	 1 2 	 B M J   P U B L I S H I N G   G R O U P 	 L O N D O N 	 B R I T I S H   M E D   A S S O C   H O U S E ,   T A V I S T O C K   S Q U A R E ,   L O N D O N   W C 1 H   9 J R ,   E N G L A N D 	 0 0 1 7 - 5 7 4 9 	 1 4 6 8 - 3 2 8 8 	 	 G U T 	 G u t 	 A U G 	 2 0 0 1 	 4 9 	 2 	 	 	 	 	 2 9 5 	 3 0 2 	 	 1 0 . 1 1 3 6 / g u t . 4 9 . 2 . 2 9 5 	 	 8 	 G a s t r o e n t e r o l o g y   &   H e p a t o l o g y 	 G a s t r o e n t e r o l o g y   &   H e p a t o l o g y 	 4 5 4 G N 	 W O S : 0 0 0 1 6 9 9 6 5 0 0 0 0 2 5 	 1 1 4 5 4 8 0 9 	 
 
 J 	 K o s t o f f ,   R N ;   E b e r h a r t ,   H J ;   T o o t h m a n ,   D R 	 	 	 	 K o s t o f f ,   R N ;   E b e r h a r t ,   H J ;   T o o t h m a n ,   D R 	 	 	 H y p e r s o n i c   a n d   s u p e r s o n i c   f l o w   r o a d m a p s   u s i n g   b i b l i o m e t r i c s   a n d   d a t a b a s e   t o m o g r a p h y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 T E C H N O L O G Y ;   S C I E N C E 	 D a t a b a s e   T o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   1 )   A l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   w a s   u s e d   t o   d e r i v e   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a   h y p e r s o n i c / s u p e r s o n i c   f l o w   ( H S F )   d a t a b a s e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   a n d   t h e   E n g i n e e r i n g   C o m p e n d e x .   P h r a s e   f r e q u e n c y   a n a l y s i s   b y   t h e   t e c h n i c a l   d o m a i n   e x p e r t   p r o v i d e d   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s   o f   t h e   H S F   d a t a b a s e ,   a n d   t h e   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   B i b l i o m e t r i c   a n a l y s i s   o f   t h e   H S F   l i t e r a t u r e   s u p p l e m e n t e d   t h e   D T   r e s u l t s   w i t h   a u t h o r / j o u r n a l / i n s t i t u t i o n   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a .   C o m p a r i s o n s   o f   H S F   r e s u l t s   w i t h   p a s t   a n a l y s e s   o f   s i m i l a r l y   s t r u c t u r e d   n e a r - e a r t h   s p a c e   a n d   C h e m i s t r y   d a t a b a s e s   a r e   m a d e .   O n e   i m p o r t a n t   f i n d i n g   i s   t h a t   m a n y   o f   t h e   n o r m a l i z e d   b i b l i o m e t r i c   d i s t r i b u t i o n   f u n c t i o n s   a r e   e x t r e m e l y   c o n s i s t e n t   a c r o s s   t h e s e   d i v e r s e   t e c h n i c a l   d o m a i n s . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   U S N ,   A i r   W a r f a r e   C t r ,   C h i n a   L a k e ,   C A   9 3 5 5 5   U S A ;   R S I S   I n c ,   M c l e a n ,   V A   2 2 1 0 2   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l ;   a 1 r e a l t y @ r i d g e c r e s t . c a . u s ;   t o o t h m d @ o n r . n a v y . m i l 	 	 	 	 	 A n w a r   M A ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 0 ;   * A R P A ,   1 9 9 4 ,   W I N G S H   I N V ,   V 3 ;   A R S H A M   H ,   1 9 9 3 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 3 ) 9 0 0 4 3 - K ;   A T T A R   R ,   1 9 7 7 ,   J   A C M ,   V 2 4 ;   B A R K E R   D ,   1 9 9 5 ,   L O N G   R A N G E   P L A N N ,   V 2 8 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 4 - 6 3 0 1 ( 9 5 ) 9 8 5 8 6 - H ;   B A T E S   M J ,   1 9 8 6 ,   J   A M   S O C   I N F O R M A T I O N ,   V 3 7 ;   B A U I N   S ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ;   B L A U   J R ,   1 9 7 8 ,   R E S   S O C I O L O G Y   K N O W L E ,   V 1 ;   B R A A M   R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M A T I O N ,   V 4 2 ;   B R A D F O R D   S C ,   1 9 3 4 ,   E N G I N E E R I N G ,   P 1 3 7 ;   C A L L A N   J ,   1 9 9 5 ,   I N F O R M A T I O N   P R O C E S S I ,   V 3 1 ;   C A L L O N   M ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 8 0 ;   C A L L O N   M ,   1 9 8 3 ,   S O C I A L   S C I   I N F O R M A T I ,   V 2 2 ;   C a l l o n   M . ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ;   C a l l o n   M . ,   1 9 7 9 ,   2   W O R K S H   M E A S   R   D   O U ;   C H E N   H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M A T I O N ,   V 4 8 ;   C R O F T   W B ,   1 9 7 9 ,   J   D O C U M E N T A T I O N ,   V 3 5 ;   C R O U C H   C J ,   1 9 9 0 ,   I N F O R M A T I O N   P R O C E S S I ,   V 2 6 ;   D E S A U S S A U R E   F ,   1 9 4 9 ,   C O U R S   L I N G U I S T I Q U E   G ;   D O N D I N   B M ,   1 9 8 5 ,   A R O 1 6 3 5 2 1 8 M A   N   C A R   S ;   D O Y L E   L B ,   1 9 6 2 ,   A M   D O C U M E N T A T I O N ,   V 1 3 ;   E N G E L S M A N   E C ,   1 9 9 1 ,   C W T S 9 1 0 2   C T R   S C I   T E C ;   F U R N A S   C W ,   1 9 8 7 ,   C O M M U N I C A T I O N S   A C M ,   V 3 0 ;   G E O R G H I O U   L ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   G I L L   S P ,   1 9 9 4 ,   N A S A 1 2 6 1 9 5 3 2 0   R O C K W ;   G O M E Z   L M ,   1 9 9 0 ,   J   A M   S O C   I N F O R M A T I O N ,   V 4 1 ;   G R O E N V E L D   P ,   1 9 9 7 ,   R E S   T E C H N O L O G Y   M   S E P ;   H E A L E Y   P ,   1 9 8 6 ,   R E S   P O L I C Y ,   V 1 5 ;   H O R B Y   A S ,   1 9 4 2 ,   I D I O M A T I C   S Y N T A C T I C ;   J I N G   Y ,   1 9 9 4 ,   P   R I A O   9 4 ;   K O S T O F F   R N ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 4 . x ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K O S T O F F   R N ,   1 9 9 1 ,   P   P O R T L   I N T   C   M A N   E N ;   K O S T O F F   R N ,   1 9 9 8 ,   S C I   T E C H N O L O G Y   I N N O V ;   K O S T O F F   R N ,   1 9 9 3 ,   C O M P E T I T I V E   I N T E L L I G ,   V 4 ;   K O S T O F F   R N ,   1 9 9 7 ,   S C I   E N G   E T H I C S ,   V 3 ;   K O S T O F F   R N ,   1 9 9 2 ,   P   3   I N T   C   M A N   T E C H N ;   K o s t o f f   R .   N . ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ;   K O S T O F F   R N ,   1 9 9 8 ,   S C I   T E C H N O L O G Y   M E T R I ;   K O S T O F F   R N ,   1 9 9 3 ,   A S S E S S I N G   R   D   I M P A C T ;   K W O K   K ,   1 9 9 5 ,   A C M   T   I N F O R M A T I O N   S Y ,   V 1 3 ;   L E S K   M ,   1 9 6 9 ,   A M   D O C U M E N T A T I O N ,   V 2 0 ;   L E Y D E S D O R F F   L ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ;   L i b b e y   M . ,   1 9 6 7 ,   R O L E   D I S T R I B U T I O N   W R ;   L O O T S M A   F A ,   1 9 8 8 ,   R E P T 8 8 2 6   D E P   M A T H   I N ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ;   M A C R O B E R T S   M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   M A R O N   G ,   1 9 6 0 ,   S C I E N T O M E T R I C S ,   V 7 ;   N A R I N   F ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   P E R K O   J S ,   1 9 9 7 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 2 ;   P E T E R S   H ,   1 9 9 1 ,   C W T S 9 1 0 3   N E T H   F D N   T E ;   R A S M U S S E N   E ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ;   R I P   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ;   R O B E R T S O N   S E ,   1 9 7 6 ,   J   A M   S O C   I N F O R M A T I O N ,   V 2 7 ;   R o c c h i o   J .   J . ,   1 9 7 1 ,   R E L E V A N C E   F E E D B A C K   I ;   S A L T O N   G ,   1 9 7 1 ,   R E L E V A N C E   F E E D B A C K   O ;   S A L T O N   G ,   1 9 8 5 ,   J   A M   S O C   I N F O R M A T I O N ,   V 3 6 ;   S A L T O N   G ,   1 9 9 0 ,   J   A M   S O C   I N F O R M A T I O N ,   V 4 1 ;   S E M A T O N   A ,   1 9 8 3 ,   C O M P U T E R   J ,   V 2 6 ;   S E Y E D G H A S E M I P O U . S J ,   1 9 8 7 ,   D O E B C 1 0 8 2 8 2   E   C A R   U ;   S H R U M   W ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   S m a l l   H ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 7 3 ;   S P I N K   A ,   1 9 9 5 ,   I N F O R M A T I O N   P R O C E S S I ,   V 3 1 ;   S T I L E S   H E ,   1 9 6 1 ,   J   A C M ,   V 8 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T I V E S   B I O L   M E ,   V 3 0 ;   T I J S S E N   R J W ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 9 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 1 0 ;   T u r n e r   W .   A . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   V A N R A A N   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ;   V A N R A A N   A ,   1 9 9 1 ,   N E U R A L   N E T   N E U R A L   N E ;   V A N R A A N   A F J ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   X U   J ,   1 9 9 6 ,   P   1 9   I N T   C   R E S   D E V   I ;   Z U R C H E R   R J ,   1 9 9 7 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 2 ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 7 5 	 3 1 	 3 1 	 2 	 7 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 A P R   1 5 	 1 9 9 9 	 5 0 	 5 	 	 	 	 	 4 2 7 	 4 4 7 	 	 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 8 1 T F 	 W O S : 0 0 0 0 7 9 4 5 7 9 0 0 0 0 5 	 	 
 
 J 	 C o z z e n s ,   S ;   G a t c h a i r ,   S ;   K a n g ,   J ;   K i m ,   K S ;   L e e ,   H J ;   O r d o n e z ,   G ;   P o r t e r ,   A 	 	 	 	 C o z z e n s ,   S u s a n ;   G a t c h a i r ,   S o n i a ;   K a n g ,   J o n g s e o k ;   K i m ,   K y u n g - S u p ;   L e e ,   H y u c k   J a i ;   O r d o n e z ,   G o n z a l o ;   P o r t e r ,   A l a n 	 	 	 E m e r g i n g   t e c h n o l o g i e s :   q u a n t i t a t i v e   i d e n t i f i c a t i o n   a n d   m e a s u r e m e n t 	 T E C H N O L O G Y   A N A L Y S I S   &   S T R A T E G I C   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e m e r g i n g   t e c h n o l o g i e s ;   q u a n t i t a t i v e   a n a l y s i s ;   b i b l i o m e t r i c s 	 I N N O V A T I O N ;   S C I E N C E ;   C H A L L E N G E S 	 E m e r g i n g   t e c h n o l o g i e s   p r e s e n t   b o t h   c h a l l e n g e s   a n d   o p p o r t u n i t i e s   f o r   n a t i o n a l   t e c h n o l o g y   s t r a t e g i e s .   N a t i o n a l   g o v e r n m e n t s   m a y   t h e r e f o r e   w a n t   t o   m o n i t o r   t h e   t e c h n o l o g i c a l   h o r i z o n   o n   a   s y s t e m a t i c   b a s i s .   T h i s   a r t i c l e   o u t l i n e s   t h e   q u a n t i t a t i v e   a p p r o a c h e s   a v a i l a b l e   f o r   s u c h   m o n i t o r i n g .   A m o n g   t h e   s t a n d a r d   t y p e s   o f   b i b l i o m e t r i c   d a t a ,   p r o p o s a l s   a n d   p u b l i c a t i o n s   a r e   m o s t   l i k e l y   t o   b e   u s e f u l   f o r   t h i s   p u r p o s e   s i n c e   t h e y   c a p t u r e   i n f o r m a t i o n   e a r l i e r   i n   t h e   c y c l e   o f   t e c h n o l o g y   d e v e l o p m e n t .   P a t e n t s ,   i n   c o n t r a s t ,   t r a i l   b e h i n d .   A n a l y s i s   c a n   p r o c e e d   w i t h   k e y w o r d s   o r   c i t a t i o n s ,   a n d   a l g o r i t h m s   a r e   a v a i l a b l e   t o   u s e   t h e   i n f o r m a t i o n   s t r u c t u r e   i n h e r e n t   i n   t h e s e   k i n d s   o f   d a t a   t o   i d e n t i f y   a n d   m e a s u r e   e m e r g i n g   a r e a s .   T h e r e   a r e   l i m i t a t i o n s ,   h o w e v e r ,   i n   a l l   t h e   a v a i l a b l e   a p p r o a c h e s   a n d   t h e   a u t h o r s   t h e r e f o r e   r e c o m m e n d   u s i n g   t h e m   i n   c o n j u n c t i o n   w i t h   e x p e r t   m e t h o d s   b y   f o c u s i n g   t h e   q u a l i t a t i v e   a s s e s s m e n t   i n   p a r t i c u l a r   a r e a s . 	 [ C o z z e n s ,   S u s a n ;   G a t c h a i r ,   S o n i a ;   K i m ,   K y u n g - S u p ;   O r d o n e z ,   G o n z a l o ;   P o r t e r ,   A l a n ]   G e o r g i a   I n s t   T e c h n o l ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ K a n g ,   J o n g s e o k ;   L e e ,   H y u c k   J a i ]   K o r e a   I n s t   S c i   &   T e c h n o l   I n f o r m a t ,   S e o u l   1 3 0 7 4 2 ,   S o u t h   K o r e a 	 C o z z e n s ,   S   ( r e p r i n t   a u t h o r ) ,   G e o r g i a   I n s t   T e c h n o l ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A . 	 s c o z z e n s @ g a t e c h . e d u 	 O r d o n e z - M a t a m o r o s ,   H e c t o r   G o n z a l o / A - 2 4 6 1 - 2 0 1 2 ;   p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 	 O r d o n e z - M a t a m o r o s ,   H e c t o r   G o n z a l o / 0 0 0 0 - 0 0 0 2 - 8 2 9 7 - 6 5 5 4 ;   p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 	 	 	 A B E R N A T H Y   W J ,   1 9 7 8 ,   T E C H N O L   R E V ,   V 8 0 ,   P 4 0 ;   C A R R O C H E R   N ,   2 0 0 3 ,   W O R K I N G   P A P E R S   F A C U L ;   C h r i s t e n s e n   C l a y t o n ,   2 0 0 3 ,   I N N O V A T O R S   S O L U T I O N ;   C h r i s t e n s e n   C l a y t o n   M . ,   1 9 9 7 ,   I N N O V A T O R S   D I L E M M A ;   D a y   G .   S . ,   2 0 0 0 ,   W H A R T O N   M A N A G I N G   E M E ,   P 1 ;   F o s t e r   R . ,   2 0 0 1 ,   C R E A T I V E   D E S T R U C T I O N ;   F r e e m a n   C . ,   1 9 9 7 ,   E C   I N D   I N N O V A T I O N ;   H u n g   S C ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 1 0 4 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 0 7 . 0 1 8 ;   I s l a s   J ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 2 - 2 ;   K o h   W T H ,   2 0 0 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 2 ,   P 2 4 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 4 . 0 8 . 0 0 5 ;   L e y d e s d o r f f   L ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 2 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 6 3 - 3 ;   M A R T I N   B R ,   1 9 9 5 ,   T E C H N O L   A N A L   S T R A T E G ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 9 5 0 8 5 2 4 2 0 2 ;   N E L S O N   R R ,   1 9 7 7 ,   R E S   P O L I C Y ,   V 6 ,   P 3 6 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 7 7 ) 9 0 0 2 9 - 4 ;   O E C D ,   1 9 9 5 ,   M E A S   S C I   T E C H N   A C T   P ;   P o r t e r   A . L . ,   2 0 0 2 ,   S C I   P U B L   P O L I C Y ,   V 2 9 ,   P 1 8 9 ,   D O I   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 2 7 8 1 7 8 1 0 0 1 ;   R o g e r s   E . ,   2 0 0 3 ,   D I F F U S I O N   I N N O V A T I O N ;   S c h u m p e t e r   J . A . ,   1 9 4 2 ,   C A P I T A L I S M   S O C I A L I S M ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S m a l l   H ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 3 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 5 ;   T e c h n o l o g y   F u t u r e s   A n a l y s i s   M e t h o d s   W o r k i n g   G r o u p ,   2 0 0 4 ,   T E C H N O L O G I C A L   F O R E C A ,   V 7 1 ,   P 2 8 7 ;   T e e c e   D .   J . ,   2 0 0 2 ,   M A N A G I N G   I N T E L L E C T U A 	 2 1 	 3 0 	 3 0 	 3 	 2 8 	 R O U T L E D G E   J O U R N A L S ,   T A Y L O R   &   F R A N C I S   L T D 	 A B I N G D O N 	 4   P A R K   S Q U A R E ,   M I L T O N   P A R K ,   A B I N G D O N   O X 1 4   4 R N ,   O X F O R D S H I R E ,   E N G L A N D 	 0 9 5 3 - 7 3 2 5 	 	 	 T E C H N O L   A N A L   S T R A T E G 	 T e c h n o l .   A n a l .   S t r a t e g .   M a n a g e . 	 	 2 0 1 0 	 2 2 	 3 	 	 	 	 	 3 6 1 	 3 7 6 	 	 1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 1 0 0 3 6 4 7 3 9 6 	 	 1 6 	 M a n a g e m e n t ;   M u l t i d i s c i p l i n a r y   S c i e n c e s 	 B u s i n e s s   &   E c o n o m i c s ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 5 7 1 I Y 	 W O S : 0 0 0 2 7 5 7 4 6 7 0 0 0 0 5 	 	 
 
 J 	 D u r i s i n ,   B ;   P u z o n e ,   F 	 	 	 	 D u r i s i n ,   B o r i s ;   P u z o n e ,   F u l v i o 	 	 	 M a t u r a t i o n   o f   C o r p o r a t e   G o v e r n a n c e   R e s e a r c h ,   1 9 9 3 - 2 0 0 7 :   A n   A s s e s s m e n t 	 C O R P O R A T E   G O V E R N A N C E - A N   I N T E R N A T I O N A L   R E V I E W 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 C o r p o r a t e   G o v e r n a n c e ;   J o u r n a l   I n f l u e n c e ;   C o - c i t a t i o n   A n a l y s i s ;   B i b l i o m e t r i c s 	 A S I A N   F I N A N C I A L   C R I S I S ;   I N T E L L E C T U A L   S T R U C T U R E ;   O W N E R S H I P   S T R U C T U R E ;   F I R M   P E R F O R M A N C E ;   B O A R D   C O M P O S I T I O N ;   E X E C U T I V E - C O M P E N S A T I O N ;   S T R A T E G I C - M A N A G E M E N T ;   E A R N I N G S   M A N A G E M E N T ;   C O C I T A T I O N   A N A L Y S I S ;   C O N S U M E R   R E S E A R C H 	 R e v i e w   T h i s   s t u d y   s e e k s   t o   i n v e s t i g a t e   w h e t h e r   g o v e r n a n c e   r e s e a r c h   i n   f a c t   i s   a   d i s c i p l i n e   o r   w h e t h e r   i t   i s   r a t h e r   t h e   s u b j e c t   o f   m u l t i - d i s c i p l i n a r y   r e s e a r c h .   W e   m a p   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   c o r p o r a t e   g o v e r n a n c e   r e s e a r c h   a n d   i t s   e v o l u t i o n   f r o m   1 9 9 3 - 2 0 0 7 .   B a s e d   o n   t h e   a n a l y s i s   o f   m o r e   t h a n   1 , 0 0 0   p u b l i c a t i o n s   a n d   4 8 , 0 0 0   c i t a t i o n s   i n   C o r p o r a t e   G o v e r a n c e :   A n   I n t e r n a t i o n a l   R e v i e w   ( C G I R )   a n d   o t h e r   a c a d e m i c   j o u r n a l s ,   o u r   s t u d y   i d e n t i f i e s   t h e   m o s t   i n f l u e n t i a l   w o r k s ,   t h e   d o m i n a n t   s u b f i e l d s ,   a n d   t h e i r   e v o l u t i o n .   O u r   s t u d y   a s s e s s e s   t h e   m a t u r a t i o n   o f   c o r p o r a t e   g o v e r n a n c e   r e s e a r c h   a s   a   d i s c i p l i n e ;   i t   f i n d s   i n c r e a s i n g   s o p h i s t i c a t i o n ,   d e p t h   a n d   r i g o r ,   a n d   c o n s i s t e n c y   i n   i t s   i n t e l l e c t u a l   s t r u c t u r e .   T h e r e   i s   a   l a r g e   b o d y   o f   a c c u m u l a t e d   c o r p o r a t e   g o v e r n a n c e   r e s e a r c h   i n   t h e   U S ,   y e t   t h e r e   i s   a n   e m p i r i c a l   g a p   o n   c r o s s - n a t i o n a l   s t u d i e s   i n   t h e   l i t e r a t u r e .   F u r t h e r m o r e ,   h a r d l y   a n y   o f   t h e   t o p   c i t e d   w o r k s   u n d e r t a k e   t h e i r   s t u d y   i n   a   c r o s s - n a t i o n a l   s e t t i n g .   T h u s ,   c o r p o r a t e   g o v e r n a n c e   r e s e a r c h   a n d   C G I R   i n   i t s   q u e s t   t o   c o n t r i b u t e   t o   a   g l o b a l   t h e o r y   o f   c o r p o r a t e   g o v e r n a n c e   m i g h t   b e n e f i t   i f   a r t i c l e s   h a v e   a   c r o s s - n a t i o n a l   m e t h o d o l o g i c a l   a p p r o a c h   a n d   e m p i r i c a l   g r o u n d i n g   i n   t h e i r   r e s e a r c h   d e s i g n   a n d   i f   a r t i c l e s   e x p l i c i t l y   a i m   a t   s t a t i n g   t h e   t h e o r e t i c a l   u n d e r p i n n i n g s   t h e y   d r a w   o n .   G l o b a l i s t s   f i n d   i n   C G I R   a n   o u t l e t   a d d r e s s i n g   e c o n o m i c s   a n d   f i n a n c e   ( e . g . ,   w h e t h e r   a n d   h o w   c o m p e n s a t i o n   o r   d i s m i s s a l   o f   C E O s   i s   r e l a t e d   t o   b o a r d   c h a r a c t e r i s t i c s ) ,   m a n a g e m e n t   ( e . g . ,   w h e t h e r   a n d   h o w   b e s t   p r a c t i c e   c o d e s   a d o p t i o n   i s   r e l a t e d   t o   b o a r d   c h a r a c t e r i s t i c s   a n d   p e r f o r m a n c e ) ,   a n d   a c c o u n t i n g   ( e . g . ,   w h e t h e r   a n d   h o w   e a r n i n g s   m a n i p u l a t i o n s   i s   r e l a t e d   t o   b o a r d   c h a r a c t e r i s t i c s )   i s s u e s   g l o b a l l y . 	 [ D u r i s i n ,   B o r i s ;   P u z o n e ,   F u l v i o ]   B o c c o n i   U n i v ,   D e p t   M a n a g e m e n t ,   I - 2 0 1 3 6   M i l a n ,   I t a l y 	 D u r i s i n ,   B   ( r e p r i n t   a u t h o r ) ,   B o c c o n i   U n i v ,   D e p t   M a n a g e m e n t ,   V i a   G u g l i e l m o   R o e n t g e n   1 ,   I - 2 0 1 3 6   M i l a n ,   I t a l y . 	 b o r i s . d u r i s i n @ s d a b o c c o n i . i t 	 a l r e f a e i ,   h e s s a / F - 1 4 4 3 - 2 0 1 5 	 	 	 	 A g u i l e r a   R V ,   2 0 0 3 ,   A C A D   M A N A G E   R E V ,   V 2 8 ,   P 4 4 7 ;   A L C H I A N   A A ,   1 9 7 2 ,   A M   E C O N   R E V ,   V 6 2 ,   P 1 1 1 ;   A L E X A N D E R   J C ,   1 9 9 4 ,   J   F I N A N C ,   V 4 9 ,   P 6 9 7 ,   D O I   1 0 . 2 3 0 7 / 2 3 2 9 1 6 9 ;   A l i   A ,   2 0 0 0 ,   J   A C C O U N T I N G   R E S ,   V 3 8 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 6 7 2 9 2 0 ;   * A M   L A W   I ,   1 9 9 2 ,   P R I N C   C O R P   G O V   A N   R E ;   A M I H U D   Y ,   1 9 8 1 ,   B E L L   J   E C O N ,   V 1 2 ,   P 6 0 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 3 5 7 5 ;   A r m s t r o n g   J . ,   1 9 7 7 ,   J   M A R K E T I N G   R E S ,   V 4 ,   P 3 9 6 ;   B a l d r i d g e   D C ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 1 0 6 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 0 6 ;   B A L K I N   D B ,   1 9 9 0 ,   S T R A T E G I C   M A N A G E M E N T ,   V 1 3 ,   P 3 8 1 ;   B a l l   R ,   2 0 0 0 ,   J   A C C O U N T   E C O N ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 1 0 1 ( 0 0 ) 0 0 0 1 2 - 4 ;   B a l l   R ,   2 0 0 3 ,   J   A C C O U N T   E C O N ,   V 3 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 6 / j . j a c c e c o . 2 0 0 3 . 1 0 . 0 0 3 ;   B A R C L A Y   M J ,   1 9 8 9 ,   J   F I N A N C   E C O N ,   V 2 5 ,   P 3 7 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 9 ) 9 0 0 8 8 - 3 ;   B a r l e y   S R ,   2 0 0 6 ,   A C A D   M A N A G E   J ,   V 4 9 ,   P 1 6 ;   B a r t u n e k   J M ,   2 0 0 6 ,   A C A D   M A N A G E   J ,   V 4 9 ,   P 9 ;   B A Y S I N G E R   B ,   1 9 9 0 ,   A C A D   M A N A G E   R E V ,   V 1 5 ,   P 7 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 1 0 6 ;   B a y s i n g e r   B .   D . ,   1 9 8 5 ,   J   L A W   E C O N   O R G A N ,   V 1 ,   P 1 0 1 ;   B e a s l e y   M S ,   1 9 9 6 ,   A C C O U N T   R E V ,   V 7 1 ,   P 4 4 3 ;   B E A T T Y   R P ,   1 9 9 4 ,   A D M I N   S C I   Q U A R T ,   V 3 9 ,   P 3 1 3 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 2 3 8 ;   B E R G S T R O M   C ,   1 9 9 0 ,   J   B A N K   F I N A N C ,   V 1 4 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 4 2 6 6 ( 9 0 ) 9 0 0 4 8 - 7 ;   B e r l e   A . A . ,   1 9 3 2 ,   M O D E M   C O R P O R A T I O N   P R ;   B E T H E L   J E ,   1 9 9 3 ,   S T R A T E G I C   M A N A G E   J ,   V 1 4 ,   P 1 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 4 0 9 0 4 ;   B E T T I S   R A ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E   J ,   V 1 6 ,   P 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 6 0 9 1 5 ;   B i e m a n s   W ,   2 0 0 7 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 4 ,   P 1 9 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 8 8 5 . 2 0 0 7 . 0 0 2 4 5 . x ;   B L A C K B U R N   R S ,   1 9 8 1 ,   J   A P P L   P S Y C H O L ,   V 6 6 ,   P 3 3 7 ,   D O I   1 0 . 1 0 3 7 / / 0 0 2 1 - 9 0 1 0 . 6 6 . 3 . 3 3 7 ;   B O E K E R   W ,   1 9 9 2 ,   A D M I N   S C I   Q U A R T ,   V 3 7 ,   P 4 0 0 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 4 5 0 ;   B o r o k h o v i c h   K A ,   2 0 0 0 ,   J   F I N A N C ,   V 5 5 ,   P 1 4 5 7 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 2 5 4 ;   B o t o s a n   C A ,   1 9 9 7 ,   A C C O U N T   R E V ,   V 7 2 ,   P 3 2 3 ;   B o y d   B K ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 8 4 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 7 7 ;   B O Y D   B K ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E   J ,   V 1 6 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 6 0 4 0 4 ;   B R I C K L E Y   J A ,   1 9 8 8 ,   J   F I N A N C   E C O N ,   V 2 0 ,   P 2 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 8 ) 9 0 0 4 7 - 5 ;   B r o u t h e r s   K D ,   2 0 0 3 ,   S T R A T E G I C   M A N A G E   J ,   V 2 4 ,   P 1 2 3 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 6 2 ;   B U R T   R S ,   1 9 7 7 ,   S O C   F O R C E S ,   V 5 6 ,   P 1 0 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 7 4 1 6 ;   B u s h m a n   R M ,   2 0 0 1 ,   J   A C C O U N T   E C O N ,   V 3 2 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 1 0 1 ( 0 1 ) 0 0 0 2 7 - 1 ;   B Y R D   J W ,   1 9 9 2 ,   J   F I N A N C   E C O N ,   V 3 2 ,   P 1 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 2 ) 9 0 0 1 8 - S ;   C a d b u r y   A ,   1 9 9 2 ,   R E P O R T   C O M M I T T E E   F I N ;   C a d b u r y   A . ,   1 9 9 3 ,   C O R P O R A T E   G O V E R N A N C E ,   V 1 ,   P 5 ;   C a r t e r   C .   B . ,   2 0 0 4 ,   B A C K   D R A W I N G   B O A R D   D ;   C a r v e r   J . ,   1 9 9 7 ,   B O A R D S   M A K E   D I F F E R E N ;   C a r v e r   J ,   2 0 0 2 ,   B O A R D   L E A D E R S H I P ;   * C C G U K ,   2 0 0 0 ,   C O M B   C O D   P R I N C   C O R P ;   C h a c a r   A ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 9 3 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 7 8 ;   C h a r a n   R . ,   2 0 0 5 ,   B O A R D S   D E L I V E R   A D V   C ;   C h a r a n   R . ,   1 9 9 8 ,   B O A R D S   W O R K   C O R P O R A T ;   C H O   C K ,   2 0 0 5 ,   C O R P   G O V ,   V 1 3 ,   P 2 1 1 ;   C l a e s s e n s   S ,   2 0 0 0 ,   J   F I N A N C   E C O N ,   V 5 8 ,   P 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 0 0 ) 0 0 0 6 7 - 2 ;   C l a e s s e n s   S ,   2 0 0 2 ,   J   F I N A N C ,   V 5 7 ,   P 2 7 4 1 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 6 2 6 1 . 0 0 5 1 1 ;   C o a s e   R H ,   1 9 3 7 ,   E C O N O M I C A - N E W   S E R ,   V 4 ,   P 3 8 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 3 5 . 1 9 3 7 . t b 0 0 0 0 2 . x ;   C o n y o n   M . J . ,   1 9 9 4 ,   C O R P O R A T E   G O V E R N A N C E ,   V 2 ,   P 8 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 8 3 . 1 9 9 4 . t b 0 0 0 6 0 . x ;   C o n y o n   M J ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 8 0 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 6 9 ;   C o r e   J E ,   1 9 9 9 ,   J   F I N A N C   E C O N ,   V 5 1 ,   P 3 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 9 8 ) 0 0 0 5 8 - 0 ;   C o r r a d o   C J ,   1 9 9 7 ,   J   F I N A N C ,   V 5 2 ,   P 2 0 9 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 1 9 9 7 . t b 0 2 7 5 2 . x ;   C O S H   A D ,   1 9 8 7 ,   C A M B R I D G E   J   E C O N ,   V 1 1 ,   P 2 8 5 ;   C O T E   J A ,   1 9 9 1 ,   J   C O N S U M   R E S ,   V 1 8 ,   P 4 0 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 2 6 9 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C R A W F O R D   C M ,   N E W   P R O D U C T S   M A N A G E M ;   C r o s s l a n d   C ,   2 0 0 7 ,   S T R A T E G   M A N A G E   J ,   V 2 8 ,   P 7 6 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 1 0 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   C y e r t   R . M . ,   1 9 6 3 ,   B E H A V   T H E O R Y   F I R M ;   D a h y a   J ,   2 0 0 8 ,   J   F I N A N C   E C O N ,   V 8 7 ,   P 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j f i n e c o . 2 0 0 6 . 1 0 . 0 0 5 ;   D a i l y   C M ,   2 0 0 3 ,   A C A D   M A N A G E   R E V ,   V 2 8 ,   P 3 7 1 ;   D A I L Y   C M ,   2 0 0 4 ,   H D B   B U S I N E S S   S T R A T E G ,   P 1 5 ;   D a l t o n   D R ,   1 9 9 8 ,   S T R A T E G I C   M A N A G E   J ,   V 1 9 ,   P 2 6 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 8 0 3 ) 1 9 : 3 < 2 6 9 : : A I D - S M J 9 5 0 > 3 . 3 . C O ; 2 - B ;   D a l t o n   D R ,   2 0 0 3 ,   A C A D   M A N A G E   J ,   V 4 6 ,   P 1 3 ;   D a v i d s o n   K ,   1 9 9 7 ,   J   B E H A V   M E D ,   V 2 0 ,   P 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 5 8 7 1 1 3 1 9 2 ;   D a v i e s   A . ,   1 9 9 9 ,   S T R A T E G I C   A P P R O A C H   C ;   D A V I S   G F ,   1 9 9 4 ,   A D M I N   S C I   Q U A R T ,   V 3 9 ,   P 1 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 4 9 7 ;   D A V I S   G F ,   1 9 9 1 ,   A D M I N   S C I   Q U A R T ,   V 3 6 ,   P 5 8 3 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 2 7 5 ;   d e   M i g u e l   A ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 1 1 9 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 3 0 ;   D e   R o n d   M ,   2 0 0 5 ,   J   M A N A G E   I N Q U I R Y ,   V 1 4 ,   P 3 2 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 5 2 7 6 8 5 0 ;   D e c h o w   P .   M . ,   1 9 9 6 ,   C O N T E M P   A C C O U N T   R E S ,   V 1 3 ,   P 1 ,   D O I   D O I   1 0 . 1 0 1 6 / J . J F I N E C O . 2 0 0 8 . 0 8 . 0 0 6 ;   D e m i r g u c - K u n t   A ,   1 9 9 8 ,   J   F I N A N C ,   V 5 3 ,   P 2 1 0 7 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 0 8 4 ;   D E M S E T Z   H ,   1 9 8 5 ,   J   P O L I T   E C O N ,   V 9 3 ,   P 1 1 5 5 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 3 5 4 ;   D I M A G G I O   P J ,   1 9 8 3 ,   A M   S O C I O L   R E V ,   V 4 8 ,   P 1 4 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 1 0 1 ;   D o i d g e   C ,   2 0 0 7 ,   J   F I N A N C   E C O N ,   V 8 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j f i n e c o . 2 0 0 6 . 0 9 . 0 0 2 ;   D O K T O R   R ,   1 9 9 1 ,   A C A D   M A N A G E   R E V ,   V 1 6 ,   P 2 5 9 ;   D O N A L D S O N   L ,   1 9 9 4 ,   C O R P   G O V ,   V 2 ,   P 1 4 1 ;   D o n a l d s o n   L . ,   1 9 9 1 ,   A U S T R   J   M A N A G E M E N T ,   V 1 6 ,   P 4 9 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 3 1 2 8 9 6 2 9 1 0 1 6 0 0 1 0 3 ;   D u B o i s   F L ,   2 0 0 0 ,   J   I N T   B U S   S T U D ,   V 3 1 ,   P 6 8 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 9 2 9 ;   D u l e w i c z   V . ,   1 9 9 5 ,   J   G E N   M A N A G E ,   V 2 0 ,   P 1 ;   D u l e w i c z   V . ,   1 9 9 9 ,   C O R P   G O V ,   V 7 ,   P 1 7 8 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 6 8 3 . 0 0 1 4 5 ;   D u r n e v   A ,   2 0 0 5 ,   J   F I N A N C ,   V 6 0 ,   P 1 4 6 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 2 0 0 5 . 0 0 7 6 7 . x ;   D y c k   A ,   2 0 0 4 ,   J   F I N A N C ,   V 5 9 ,   P 5 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 2 0 0 4 . 0 0 6 4 2 . x ;   E I S E N H A R D T   K M ,   1 9 8 9 ,   A C A D   M A N A G E   R E V ,   V 1 4 ,   P 5 7 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 8 9 . 4 2 7 9 0 0 3 ;   E l s o n   C . ,   2 0 0 7 ,   J   A P P L   C O R P O R A T E   F I N ,   V 1 9 ,   P 7 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 5 - 6 6 2 2 . 2 0 0 7 . 0 0 1 2 6 . x ;   F a c c i o   M ,   2 0 0 2 ,   J   F I N A N C   E C O N ,   V 6 5 ,   P 3 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 0 2 ) 0 0 1 4 6 - 0 ;   F a c c i o   M ,   2 0 0 5 ,   J   F I N A N C ,   V 6 0 ,   P 1 3 4 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 2 0 0 5 . 0 0 7 6 4 . x ;   F A M A   E F ,   1 9 8 0 ,   J   P O L I T   E C O N ,   V 8 8 ,   P 2 8 8 ,   D O I   1 0 . 1 0 8 6 / 2 6 0 8 6 6 ;   F A M A   E F ,   1 9 8 3 ,   J   L A W   E C O N ,   V 2 6 ,   P 3 0 1 ,   D O I   1 0 . 1 0 8 6 / 4 6 7 0 3 7 ;   F i l a t o t c h e v   I ,   2 0 0 2 ,   S T R A T E G I C   M A N A G E   J ,   V 2 3 ,   P 9 4 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 2 6 9 ;   F I N K E L S T E I N   S ,   1 9 8 9 ,   S T R A T E G I C   M A N A G E   J ,   V 1 0 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 0 0 2 0 3 ;   F i n k e l s t e i n   S ,   1 9 9 8 ,   A C A D   M A N A G E   J ,   V 4 1 ,   P 1 7 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 1 0 1 ;   F I N K E L S T E I N   S ,   1 9 9 4 ,   A C A D   M A N A G E   J ,   V 3 7 ,   P 1 0 7 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 6 6 7 ;   F I N K E L S T E I N   S ,   1 9 9 2 ,   A C A D   M A N A G E   J ,   V 3 5 ,   P 5 0 5 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 4 8 5 ;   F i n k e l s t e i n   S . ,   1 9 9 6 ,   S T R A T E G I C   L E A D E R S H I P ;   F o r b e s   D P ,   1 9 9 9 ,   A C A D   M A N A G E   R E V ,   V 2 4 ,   P 4 8 9 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 9 9 . 2 2 0 2 1 3 3 ;   F r a n k e l   R M ,   2 0 0 2 ,   A C C O U N T   R E V ,   V 7 7 ,   P 7 1 ,   D O I   1 0 . 2 3 0 8 / a c c r . 2 0 0 2 . 7 7 . s - 1 . 7 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R R A T T   R ,   1 9 9 6 ,   F I S H   R O T S   H E A D ;   G a y   K ,   2 0 0 1 ,   C O R P   G O V ,   V 9 ,   P 1 5 2 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 6 8 3 . 0 0 2 4 3 ;   G e d a j l o v i c   E R ,   1 9 9 8 ,   S T R A T E G I C   M A N A G E   J ,   V 1 9 ,   P 5 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 8 0 6 ) 1 9 : 6 < 5 3 3 : : A I D - S M J 9 5 7 > 3 . 0 . C O ; 2 - # ;   G I L S O N   S C ,   1 9 9 0 ,   J   F I N A N C   E C O N ,   V 2 7 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 0 ) 9 0 0 6 0 - D ;   G O L D M A N   A ,   1 9 7 9 ,   J   M A R K E T I N G   R E S ,   V 1 6 ,   P 4 8 5 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 0 8 0 9 ;   G o m p e r s   P ,   2 0 0 3 ,   Q   J   E C O N ,   V 1 1 8 ,   P 1 0 7 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 3 5 5 3 0 3 6 0 5 3 5 1 6 2 ;   G r a n o v e t t e r   M . ,   1 9 8 5 ,   A M   J   S O C I O L ,   V 9 1 ,   P 3 ;   G R A N T   R M ,   C O N T   S T R A T E G Y   A N A L   C ;   G R E E N B U R Y   R ,   1 9 9 5 ,   R E P O R T   S T U D Y   G R O U P   C ;   G R E G G   P ,   1 9 9 3 ,   B R I T   J   I N D   R E L A T ,   V 3 1 ,   P 1 ;   G R O S S M A N   S ,   1 9 8 0 ,   B E L L   J   E C O N ,   V 1 ,   P 4 2 ;   G u o   L ,   2 0 0 8 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 5 ,   P 2 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 8 8 5 . 2 0 0 8 . 0 0 2 9 8 . x ;   H A M B R I C K   D C ,   1 9 8 4 ,   A C A D   M A N A G E   R E V ,   V 9 ,   P 1 9 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 4 3 4 ;   H a m p e l   R . ,   1 9 9 8 ,   C O M M I T T E E   C O R P O R A T E ;   H e a l y   P .   M . ,   1 9 9 9 ,   C O N T E M P   A C C O U N T   R E S ,   V 1 6 ,   P 4 8 5 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 9 1 1 - 3 8 4 6 . 1 9 9 9 . T B 0 0 5 9 2 . X ;   H e a l y   P M ,   2 0 0 1 ,   J   A C C O U N T   E C O N ,   V 3 1 ,   P 4 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 1 0 1 ( 0 1 ) 0 0 0 1 8 - 0 ;   H E C K M A N   J J ,   1 9 7 9 ,   E C O N O M E T R I C A ,   V 4 7 ,   P 1 5 3 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 2 3 5 2 ;   H e n d e r s o n   A D ,   1 9 9 6 ,   A C A D   M A N A G E   J ,   V 3 9 ,   P 5 7 5 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 6 5 6 ;   H e n d e r s o n   J ,   2 0 0 3 ,   S T R A T E G I C   M A N A G E   J ,   V 2 4 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 0 2 ;   H E R M A L I N   B E ,   1 9 9 1 ,   F I N A N C   M A N A G E ,   V 2 0 ,   P 1 0 1 ,   D O I   1 0 . 2 3 0 7 / 3 6 6 5 7 1 6 ;   H e r m a l i n   B E ,   1 9 9 8 ,   A M   E C O N   R E V ,   V 8 8 ,   P 9 6 ;   H I G G S   D ,   2 0 0 3 ,   R E V   R O L E   D F F E C T I V E N E ;   H i l m e r   F G ,   1 9 9 3 ,   S T R I C T L Y   B O A R D R O O M   I ;   H i m m e l b e r g   C P ,   1 9 9 9 ,   J   F I N A N C   E C O N ,   V 5 3 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 9 9 ) 0 0 0 2 5 - 2 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   H o l l   P ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E   J ,   V 1 8 ,   P 4 8 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 7 0 6 ) 1 8 : 6 < 4 8 3 : : A I D - S M J 8 9 5 > 3 . 0 . C O ; 2 - 6 ;   H o p e   O K ,   2 0 0 3 ,   J   A C C O U N T I N G   R E S ,   V 4 1 ,   P 2 3 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 7 5 - 6 7 9 X . 0 0 1 0 2 ;   H O S K I S S O N   R E ,   1 9 9 4 ,   A C A D   M A N A G E   J ,   V 3 7 ,   P 1 2 0 7 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 6 7 1 ;   H u b b a r d   R ,   1 9 9 8 ,   S T R A T E G I C   M A N A G E   J ,   V 1 9 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 8 0 3 ) 1 9 : 3 < 2 4 3 : : A I D - S M J 9 5 1 > 3 . 0 . C O ; 2 - 0 ;   J E N K I N S   B ,   1 9 9 3 ,   C O R P   G O V ,   V 1 ,   P 1 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 8 3 . 1 9 9 3 . t b 0 0 0 0 3 . x ;   J e n s e n   M ,   1 9 8 9 ,   H A R V A R D   B U S   R E V ,   V 5 ,   P 6 1 ;   J E N S E N   M C ,   1 9 9 3 ,   J   F I N A N C ,   V 4 8 ,   P 8 3 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 2 9 0 1 8 ;   J E N S E N   M C ,   1 9 8 6 ,   A M   E C O N   R E V ,   V 7 6 ,   P 3 2 3 ;   J E N S E N   M C ,   1 9 7 6 ,   J   F I N A N C   E C O N ,   V 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 7 6 ) 9 0 0 2 6 - X ;   J E N S E N   M C ,   1 9 9 0 ,   J   P O L I T   E C O N ,   V 9 8 ,   P 2 2 5 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 6 7 7 ;   J E N S E N   M C ,   1 9 8 3 ,   J   F I N A N C   E C O N ,   V 1 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 3 ) 9 0 0 0 4 - 1 ;   J o h n s o n   J L ,   1 9 9 6 ,   J   M A N A G E ,   V 2 2 ,   P 4 0 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 6 0 2 2 0 0 3 0 3 ;   J o h n s o n   S ,   2 0 0 0 ,   J   F I N A N C   E C O N ,   V 5 8 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 0 0 ) 0 0 0 6 9 - 6 ;   J o h n s o n   S ,   2 0 0 0 ,   A M   E C O N   R E V ,   V 9 0 ,   P 2 2 ,   D O I   1 0 . 1 2 5 7 / a e r . 9 0 . 2 . 2 2 ;   J O N E S   M J ,   1 9 9 6 ,   O M E G A ,   V 2 4 ,   P 3 3 7 ;   J u d g e   W ,   2 0 0 7 ,   C O R P   G O V ,   V 1 5 ,   P 7 0 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 8 3 . 2 0 0 7 . 0 0 6 2 5 . x ;   J u d g e   W ,   2 0 0 7 ,   C O R P   G O V ,   V 1 5 ,   P 5 0 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 8 3 . 2 0 0 7 . 0 0 5 8 3 . x ;   J u d g e   W .   Q . ,   2 0 0 9 ,   C O R P O R A T E   G O V E R N A N C E ,   V 1 7 ,   p i i i ;   K E S N E R   I F ,   1 9 9 0 ,   S T R A T E G I C   M A N A G E   J ,   V 1 1 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 1 0 4 0 8 ;   K l e i n   A ,   2 0 0 2 ,   J   A C C O U N T   E C O N ,   V 3 3 ,   P 3 7 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 1 0 1 ( 0 2 ) 0 0 0 5 9 - 9 ;   K l e i n   W ,   1 9 9 8 ,   E C O T O X   E N V I R O N   S A F E ,   V 4 1 ,   P 1 ,   D O I   1 0 . 1 0 0 6 / e e s a . 1 9 9 8 . 1 7 0 0 ;   K O S N I K   R D ,   1 9 8 7 ,   A D M I N   S C I   Q U A R T ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 1 2 4 ;   K o t l e r   P h i l i p ,   M A R K E T I N G   M A N A G E M E N T ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   L a   P o r t a   R ,   2 0 0 0 ,   J   F I N A N C ,   V 5 5 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 1 9 9 ;   L a   P o r t a   R ,   1 9 9 8 ,   J   P O L I T   E C O N ,   V 1 0 6 ,   P 1 1 1 3 ;   L a   P o r t a   R ,   1 9 9 9 ,   J   F I N A N C ,   V 5 4 ,   P 4 7 1 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 1 1 5 ;   L A N G   M ,   1 9 9 3 ,   J   A C C O U N T I N G   R E S ,   V 3 1 ,   P 2 4 6 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 1 2 7 3 ;   L a P o r t a   R ,   1 9 9 7 ,   J   F I N A N C ,   V 5 2 ,   P 1 1 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 1 9 9 7 . t b 0 2 7 2 7 . x ;   L o p e s - d e - S i l a n e s   F . ,   2 0 0 0 ,   J   F I N A N C   E C O N ,   V 5 8 ,   P 1 ;   L e e   P M ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E   J ,   V 1 8 ,   P 8 7 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 7 1 2 ) 1 8 : 1 1 < 8 7 9 : : A I D - S M J 9 2 9 > 3 . 0 . C O ; 2 - V ;   L e m m o n   M L ,   2 0 0 3 ,   J   F I N A N C ,   V 5 8 ,   P 1 4 4 5 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 6 2 6 1 . 0 0 5 7 3 ;   L E O N G   S M ,   1 9 8 9 ,   J   C O N S U M   R E S ,   V 1 5 ,   P 4 9 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 1 8 8 ;   L e u z   C ,   2 0 0 3 ,   J   F I N A N C   E C O N ,   V 6 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 0 3 ) 0 0 1 2 1 - 1 ;   L e u z   C ,   2 0 0 0 ,   J   A C C O U N T I N G   R E S ,   V 3 8 ,   P 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 6 7 2 9 1 0 ;   L i   D H ,   2 0 0 6 ,   J   F I N A N C ,   V 6 1 ,   P 2 9 7 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 2 0 0 6 . 0 1 0 0 9 . x ;   L i n s   K ,   1 9 9 9 ,   J   F I N A N C ,   V 5 4 ,   P 2 2 1 5 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 1 8 6 ;   L o r s c h   J a y   W i l l i a m ,   1 9 8 9 ,   P A W N S   P O T E N T A T E S   R E A ;   M a c e   M .   L . ,   1 9 7 1 ,   D I R E C T O R S   M Y T H   R E A L I ;   M A C M I L L A N   I C ,   1 9 8 9 ,   J   B U S   V E N T U R I N G ,   V 4 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 8 8 3 - 9 0 2 6 ( 8 9 ) 9 0 0 0 1 - 3 ;   M A L L I N   C . ,   2 0 0 4 ,   C O R P O R A T E   G O V E R N A N C E ;   M A R G O L I S   J ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 5 ,   P 1 2 1 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 5 . 3 7 6 7 . 1 2 1 3 ;   M a r t i n   K J ,   1 9 9 6 ,   J   F I N A N C ,   V 5 1 ,   P 1 2 2 7 ,   D O I   1 0 . 2 3 0 7 / 2 3 2 9 3 9 3 ;   M A Y   K O ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 6 ,   P 8 9 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 6 . 3 7 7 7 . 8 9 0 - a ;   M C C A F F E R T Y   J ,   2 0 0 8 ,   D I R E C T O R S H I P           O C T ,   P 2 1 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M C C O N N E L L   J J ,   1 9 9 0 ,   J   F I N A N C   E C O N ,   V 2 7 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 0 ) 9 0 0 6 9 - C ;   M i l l e r   D ,   1 9 9 7 ,   J   M A N A G E   I N Q U I R Y ,   V 6 ,   P 7 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 9 7 6 1 0 1 4 ;   M I Z R U C H I   M S ,   1 9 8 3 ,   A C A D   M A N A G E   R E V ,   V 8 ,   P 4 2 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 8 3 1 ;   M o n k s   R . ,   1 9 9 5 ,   C O R P O R A T E   G O V E R N A N C E ;   M O R C K   R ,   1 9 8 8 ,   J   F I N A N C   E C O N ,   V 2 0 ,   P 2 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 8 ) 9 0 0 4 8 - 7 ;   M O R C K   R ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 8 4 2 ;   M U R P H Y   K . ,   1 9 8 5 ,   J   A C C O U N T   E C O N ,   V 7 ,   P 1 ;   M u r p h y   K . ,   1 9 9 9 ,   H D B   L A B O R   E C   B ,   P 2 4 8 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 1 5 7 3 - 4 4 6 3 ( 9 9 ) 3 0 0 2 4 - 9 ;   M Y E R S   S C ,   1 9 8 4 ,   J   F I N A N C   E C O N ,   V 1 3 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 4 ) 9 0 0 2 3 - 0 ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   N o r t h   D .   C . ,   1 9 9 0 ,   I   I   C H A N G E   E C   P E R F O R ;   N u n n a l l y   J ,   1 9 7 8 ,   P S Y C H O M E T R I C   T H E O R Y ;   O R E I L L Y   C A ,   1 9 8 8 ,   A D M I N   S C I   Q U A R T ,   V 3 3 ,   P 2 5 7 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 0 5 8 ;   P a g e   A L ,   2 0 0 8 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 5 ,   P 2 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 8 8 5 . 2 0 0 8 . 0 0 2 9 7 . x ;   P a i s l e y   W .   J . ,   1 9 8 4 ,   P R O G R   C O M M U N I C A T I O N ,   V 5 ,   P 1 ;   P a l m e r   D ,   2 0 0 1 ,   A D M I N   S C I   Q U A R T ,   V 4 6 ,   P 8 7 ,   D O I   1 0 . 2 3 0 7 / 2 6 6 7 1 2 6 ;   P a s a d e o s   Y ,   1 9 9 8 ,   J   A D V E R T I S I N G ,   V 2 7 ,   P 5 3 ;   P A T T O N   A ,   1 9 8 7 ,   H A R V A R D   B U S   R E V ,   V 6 5 ,   P 1 0 ;   P E A R C E   J A ,   1 9 9 1 ,   S T R A T E G I C   M A N A G E   J ,   V 1 2 ,   P 1 3 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 2 0 2 0 5 ;   P e n g   M W ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 0 ;   P E T T I G R E W   A ,   1 9 9 5 ,   H U M   R E L A T ,   V 4 8 ,   P 8 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 8 7 2 6 7 9 5 0 4 8 0 0 8 0 2 ;   P E T T I G R E W   A M ,   1 9 9 2 ,   S T R A T E G I C   M A N A G E   J ,   V 1 3 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 3 0 9 1 1 ;   P F E F F E R   J ,   1 9 7 2 ,   A D M I N   S C I   Q U A R T ,   V 1 7 ,   P 2 1 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 9 5 6 ;   P F E F F E R   J ,   1 9 7 7 ,   S O C   F O R C E S ,   V 5 5 ,   P 9 3 8 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 7 5 6 3 ;   P f e f f e r   J . ,   1 9 9 8 ,   H U M A N   E Q U A T I O N   B U I L D ;   P f e f f e r   J . ,   1 9 7 8 ,   E X T E R N A L   C O N T R O L   O R G ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   P o d s a k o f f   P M ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 5 4 ;   P o n z i   L J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 1 9 8 2 4 8 5 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a m a s w a m y   K ,   2 0 0 2 ,   S T R A T E G I C   M A N A G E   J ,   V 2 3 ,   P 3 4 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 2 2 7 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R E C H N E R   P L ,   1 9 9 1 ,   S T R A T E G I C   M A N A G E   J ,   V 1 2 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 2 0 2 0 6 ;   R E D I K E R   K J ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E   J ,   V 1 6 ,   P 8 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 6 0 2 0 2 ;   R e i n e r   S ,   2 0 0 6 ,   M O L   B I O L   C E L L ,   V 1 7 ,   P 9 0 ;   R o g e r s   R .   C . ,   1 9 8 9 ,   J   A P P L   P S Y C H O L ,   V 7 4 ,   P 6 3 6 ;   R u m e l t   R . P . ,   1 9 7 4 ,   S T R A T E G Y   S T R U C T U R E   E ;   R y n e s   S L ,   2 0 0 1 ,   A C A D   M A N A G E   J ,   V 4 4 ,   P 3 4 0 ,   D O I   1 0 . 2 3 0 7 / 3 0 6 9 4 6 0 ;   S c h w a r t z   B N ,   2 0 0 5 ,   C R I T   P E R S P E C T ,   V 1 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 1 6 / S 1 0 4 5 - 2 3 5 4 ( 0 3 ) 0 0 0 2 1 - 2 ;   S H L E I F E R   A ,   1 9 8 6 ,   J   P O L I T   E C O N ,   V 9 4 ,   P 4 6 1 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 3 8 5 ;   S h l e i f e r   A ,   1 9 9 7 ,   J   F I N A N C ,   V 5 2 ,   P 7 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 6 1 . 1 9 9 7 . t b 0 4 8 2 0 . x ;   S i e m e n s   J C ,   2 0 0 5 ,   J   B U S   R E S ,   V 5 8 ,   P 4 6 7 ,   D O I   1 0 . 1 0 1 6 / j . j b u s r e s . 2 0 0 3 . 0 7 . 0 0 3 ;   S m i c k   D .   M . ,   2 0 0 8 ,   W O R L D   I S   C U R V E D   H I D D ;   S M I T H   C W ,   1 9 9 2 ,   J   F I N A N C   E C O N ,   V 3 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 2 ) 9 0 0 2 9 - W ;   S R I R A M   R S ,   1 9 9 4 ,   A C C O U N T I N G   E D   J     S P R ,   P 3 2 ;   S U T T O N   R I ,   1 9 9 5 ,   A D M I N   S C I   Q U A R T ,   V 4 0 ,   P 3 7 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 7 8 8 ;   T a h a i   A ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 2 7 9 ;   T e l l i s   G J ,   1 9 9 9 ,   J   M A R K E T I N G   R E S ,   V 3 6 ,   P 1 2 0 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 1 9 2 0 ;   T h o m p s o n   J .   D . ,   1 9 6 7 ,   O R G   A C T I O N   S O C I A L   S C ;   T h o m s e n   S ,   2 0 0 0 ,   S T R A T E G I C   M A N A G E   J ,   V 2 1 ,   P 6 8 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 2 0 0 0 0 6 ) 2 1 : 6 < 6 8 9 : : A I D - S M J 1 1 5 > 3 . 0 . C O ; 2 - Y ;   T o s i   H L ,   2 0 0 0 ,   J   M A N A G E ,   V 2 6 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 0 0 2 6 0 0 2 0 7 ;   T O S I   H L ,   1 9 8 9 ,   A D M I N   S C I   Q U A R T ,   V 3 4 ,   P 1 6 9 ,   D O I   1 0 . 2 3 0 7 / 2 9 8 9 8 9 4 ;   T r i c k e r   B ,   2 0 0 0 ,   C O R P   G O V ,   V 8 ,   P 4 0 3 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 6 8 3 . 0 0 2 2 0 ;   T r i c k e r   B . ,   2 0 0 8 ,   C O R P O R A T E   G O V E R N A N C E ;   T r i c k e r   B . ,   1 9 9 3 ,   C O R P O R A T E   G O V E R N A N C E ,   V 1 ,   P 1 ;   T r i c k e r   R . ,   1 9 9 4 ,   I N T   C O R P O R A T E   G O V E R N ;   T r i c k e r   R .   I . ,   1 9 8 4 ,   C O R P O R A T E   G O V E R N A N C E ;   T r i e s c h m a n n   J S ,   2 0 0 0 ,   A C A D   M A N A G E   J ,   V 4 3 ,   P 1 1 3 0 ,   D O I   1 0 . 2 3 0 7 / 1 5 5 6 3 4 1 ;   T u r n b u l l   S . ,   1 9 9 7 ,   C O R P   G O V ,   V 5 ,   P 1 8 0 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 6 8 3 . 0 0 0 6 1 ;   U R B A N   G ,   D E S I G N   M A R K E T I N G   N E W ;   U S D I K E N   B ,   1 9 9 5 ,   O R G A N   S T U D ,   V 1 6 ,   P 5 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 5 0 1 6 0 0 3 0 6 ;   U s e e m   M ,   1 9 9 3 ,   E X E C U T I V E   D E F E N S E   S H ;   V a n c e   S t a n l e y   C ,   1 9 8 3 ,   C O R P O R A T E   L E A D E R S H I P ;   V a s t a g   G ,   2 0 0 2 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 0 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 0 1 ) 0 0 0 6 1 - 5 ;   V e r m e u l e n   F ,   2 0 0 5 ,   A C A D   M A N A G E   J ,   V 4 8 ,   P 9 7 8 ;   W A L S H   J P ,   1 9 9 0 ,   A C A D   M A N A G E   R E V ,   V 1 5 ,   P 4 2 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 0 1 7 ;   W A R N E R   J B ,   1 9 8 8 ,   J   F I N A N C   E C O N ,   V 2 0 ,   P 4 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 8 ) 9 0 0 5 4 - 2 ;   W a t t s   R . ,   1 9 8 6 ,   P O S I T I V E   A C C O U N T I N G ;   W E I C K   K E ,   1 9 8 9 ,   A C A D   M A N A G E   R E V ,   V 1 4 ,   P 5 1 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 5 5 6 ;   W E I S B A C H   M S ,   1 9 8 8 ,   J   F I N A N C   E C O N ,   V 2 0 ,   P 4 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 8 8 ) 9 0 0 5 3 - 0 ;   W e r n e r   S ,   2 0 0 2 ,   J   I N T   B U S   S T U D ,   V 3 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 1 0 3 3 ;   W e s t e r l i n g   L ,   1 9 9 5 ,   1 5   I N T   S   B A L L   J E R   I S ,   V 1 ,   P 2 8 3 ;   W h i t e   E M ,   1 9 9 5 ,   E U R   J   A G R O N ,   V 4 ,   P 3 2 7 ;   W H I T E   H ,   1 9 8 0 ,   E C O N O M E T R I C A ,   V 4 8 ,   P 8 1 7 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 2 9 3 4 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W I E R S E M A   M F ,   1 9 9 2 ,   A C A D   M A N A G E   J ,   V 3 5 ,   P 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 4 7 4 ;   W i l l i a m s o n   O E ,   1 9 8 5 ,   E C   I   C A P I T A L I S M ;   W I L L I A M S O N   O E ,   1 9 7 5 ,   M A R K E T   H I E R A R C H I E S ;   W O O D W A R D   A M ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 5 ;   Y e r m a c k   D ,   1 9 9 6 ,   J   F I N A N C   E C O N ,   V 4 0 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 5 ) 0 0 8 4 4 - 5 ;   Y E R M A C K   D ,   1 9 9 5 ,   J   F I N A N C   E C O N ,   V 3 9 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 5 ) 0 0 8 2 9 - 4 ;   Z A H R A   S A ,   1 9 8 9 ,   J   M A N A G E ,   V 1 5 ,   P 2 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 8 9 0 1 5 0 0 2 0 8 ;   Z a t t o n i   A ,   2 0 0 8 ,   C O R P   G O V ,   V 1 6 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 8 3 . 2 0 0 8 . 0 0 6 6 1 . x ;   1 9 9 8 ,   C O R P O R A T E   G O V E R N A N C E ,   V 6 ,   P 1 ;   1 9 9 3 ,   C O R P O R A T E   G O V E R N A N C E ,   V 1 ,   P 2 3 6 	 2 5 5 	 3 0 	 3 2 	 2 1 	 6 8 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 0 9 6 4 - 8 4 1 0 	 	 	 C O R P   G O V - O X F O R D 	 C o r p .   G o v . 	 M A Y 	 2 0 0 9 	 1 7 	 3 	 	 	 	 	 2 6 6 	 2 9 1 	 	 1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 8 3 . 2 0 0 9 . 0 0 7 3 9 . x 	 	 2 6 	 B u s i n e s s ;   B u s i n e s s ,   F i n a n c e ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 4 5 6 B U 	 W O S : 0 0 0 2 6 6 8 1 4 1 0 0 0 0 2 	 	 
 
 J 	 K o s t o f f ,   R N ;   B r i g g s ,   M B ;   R u s h e n b e r g ,   R L ;   B o w l e s ,   C A ;   I c e n h o u r ,   A S ;   N i k o d y m ,   K F ;   B a r t h ,   R B ;   P e c h t ,   M 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   B r i g g s ,   M i c h a e l   B . ;   R u s h e n b e r g ,   R o b e r t   L . ;   B o w l e s ,   C h r i s t i n e   A . ;   I c e n h o u r ,   A l a n   S . ;   N i k o d y m ,   K i m b e r l e y   F . ;   B a r t h ,   R y a n   B . ;   P e c h t ,   M i c h a e l 	 	 	 C h i n e s e   s c i e n c e   a n d   t e c h n o l o g y   -   S t r u c t u r e   a n d   i n f r a s t r u c t u r e 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C h i n a ;   s c i e n c e   a n d   t e c h n o l o g y ;   b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   i m p a c t   f a c t o r ;   c o m p u t a t i o n a l   l i n g u i s t i c s ;   c o r e   c o m p e t e n c i e s ;   r e s e a r c h   e v a l u a t i o n ;   C L U T O ;   n a n o t e c h n o l o g y ;   c l u s t e r i n g ;   t a x o n o m i e s 	 C I T A T I O N 	 T h i s   p a p e r   i d e n t i f i e s   a n d   a n a l y z e s   t h e   s c i e n c e   a n d   t e c h n o l o g y   c o r e   c o m p e t e n c i e s   o f   C h i n a ,   b a s e d   o n   a   s a m p l i n g   o f   a p p r o x i m a t e l y   h a l f   o f   t h e   t o t a l   C h i n e s e   p u b l i c a t i o n   o u t p u t   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S C I / S S C I )   [ S C I .   C e r t a i n   d a t a   i n c l u d e d   h e r e i n   a r e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   p r e p a r e d   b y   t h e   T h o m s o n   S c i e n t i f i c ( ( R ) ) ,   I n c .   ( T h o m s o n ( ( R ) ) ) ,   P h i l a d e l p h i a ,   P e n n s y l v a n i a ,   U S A :   ( c )   C o p y r i g h t   T h o m s o n   S c i e n t i f i c ( ( R ) )   2 0 0 6 .   A l l   r i g h t s   r e s e r v e d .   [ 1 ] ]   f o r   2 0 0 5 .   A g g r e g a t e   C h i n a   p u b l i c a t i o n   a n d   c i t a t i o n   b i b l i o m e t r i c s   w e r e   o b t a i n e d   a n d   a   h i e r a r c h i c a l   r e s e a r c h   t a x o n o m y ,   b a s e d   o n   d o c u m e n t   c l u s t e r i n g ,   w a s   g e n e r a t e d .   A d d i t i o n a l l y ,   b i b l i o m e t r i c s   a n d   t h e m a t i c   t r e n d s   w e r e   t r a c k e d   o v e r   t h e   p a s t   t w o   d e c a d e s .   T h e   k e y   f i n d i n g s   w e r e   t h a t   C h i n a ' s   o u t p u t   o f   r e s e a r c h   a r t i c l e s   h a s   s i g n i f i c a n t l y   e x p a n d e d   i n   t h e   l a s t   d e c a d e .   I n   t e r m s   o f   s h e e r   n u m b e r s   o f   r e s e a r c h   a r t i c l e s ,   e s p e c i a l l y   i n   c u t i n g - e d g e   t e c h n o l o g i e s ,   s u c h   a s   n a n o t e c h n o l o g y   a n d   e n e r g e t i c   m a t e r i a l s ,   i t   i s   a m o n g   t h e   l e a d e r s .   C o m p a r e d   t o   t h e   U S A ,   t h e   b u l k   o f   C h i n a ' s   a r t i c l e s   f o c u s   o n   t h e   p h y s i c a l   a n d   e n g i n e e r i n g   s c i e n c e s ,   w h i l e   t h e   U S A   a r t i c l e s   ( c o m p a r e d   t o   C h i n a )   f o c u s   o n   m e d i c a l ,   s o c i a l ,   a n d   p s y c h o l o g i c a l   s c i e n c e s .   P u b l i s h e d   b y   E l s e v i e r   I n c . 	 [ K o s t o f f ,   R o n a l d   N . ;   I c e n h o u r ,   A l a n   S . ;   N i k o d y m ,   K i m b e r l e y   F . ]   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   [ B r i g g s ,   M i c h a e l   B . ]   M a r i n e   C o r p s   W a r f i g h t i n g   L a b ,   Q u a n t i c o ,   V A   2 2 1 3 4   U S A ;   [ R u s h e n b e r g ,   R o b e r t   L . ;   B o w l e s ,   C h r i s t i n e   A . ;   B a r t h ,   R y a n   B . ]   L L C ,   D D L   O M N I   E n g n ,   M c l e a n ,   V A   2 2 1 0 2   U S A ;   [ P e c h t ,   M i c h a e l ]   U n i v   M a r y l a n d ,   C o l l e g e   P k ,   M D   2 0 7 4 2   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 P e c h t ,   M i c h a e l / 0 0 0 0 - 0 0 0 3 - 1 1 2 6 - 8 6 6 2 ;   I c e n h o u r ,   A l a n / 0 0 0 0 - 0 0 0 2 - 0 0 9 5 - 7 0 1 9 	 	 	 G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R .   N . ,   2 0 0 6 ,   A D A 4 4 3 3 1 5   D T I C ;   K o s t o f f   R N ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 3 - 5 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   P e c h t   M ,   2 0 0 6 ,   C H I N A S   E L E C T   I N D ;   * T H O M   S C I   I N C ,   2 0 0 6 ,   S C I   C E R T   D A T   I N C L   H E 	 8 	 3 0 	 3 0 	 1 	 1 5 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 7 	 7 4 	 9 	 	 	 	 	 1 5 3 9 	 1 5 7 3 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 8 	 	 3 5 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 4 7 K Q 	 W O S : 0 0 0 2 5 2 0 7 8 2 0 0 0 0 2 	 	 
 
 J 	 S I C H E L ,   H S 	 	 	 	 S I C H E L ,   H S 	 	 	 A N A T O M Y   O F   T H E   G E N E R A L I Z E D   I N V E R S E   G A U S S I A N - P O I S S O N   D I S T R I B U T I O N   W I T H   S P E C I A L   A P P L I C A T I O N S   T O   B I B L I O M E T R I C   S T U D I E S 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I N D E X   T E R M S ;   M O D E L S 	 T h e   v a s t   n u m b e r   o f   o b s e r v e d   b i b l i o m e t r i c   a n d   s c i e n t o m e t r i c   d a t a s e t s   d i s p l a y   a   d e f i n i t e   d o w n w a r d   d e v i a t i o n   f r o m   a   s t r a i g h t   l i n e   i n   t h e   u p p e r   t a i l ,   w h e n   p l o t t e d   i n   a   d o u b l e   l o g a r i t h m i c   c o o r d i n a t e   g r i d .   F o r   t h i s   r e a s o n   c u s t o m a r y   t h e o r e t i c a l   d i s t r i b u t i o n   l a w s   a r e   v e r y   p o o r   r e p r e s e n t a t i o n s   o f   t h e   o b s e r v e d   p h e n o m e n a .   T h i s   d i s a d v a n t a g e   a l s o   e x t e n d s   t o   r e c e n t l y   s u g g e s t e d   m o d e l s   s u c h   a s   t h e   Y u l e ,   t h e   t w o -   a n d   t h e   t h r e e - p a r a m e t e r   W a r i n g   d i s t r i b u t i o n s .   T h e   m a i n   t y p e s   o f   t h e   G I G P   d i s t r i b u t i o n   a r e   d e s c r i b e d   a n d   t w o   i m p o r t a n t   l i m i t i n g   c a s e s   a r e   d i s c u s s e d .   T h e   c o n s t r a i n e d   m i n i m u m   c h i - 2   m e t h o d   i s   d e v e l o p e d   f o r   t h e   e s t i m a t i o n   o f   t h e   t h r e e   p a r a m e t e r s - a l p h a ,   b e t a ,   a n d   g a m m a .   F i n a l l y   i t   i s   a r g u e d   t h a t   t h e   K o l m o g o r o v - S m i r n o v   g o o d n e s s - o f - f i t   t e s t   i s   n o t   a p p l i c a b l e   i n   t h e   f i e l d   o f   b i b l i o m e t r i c s . 	 	 S I C H E L ,   H S   ( r e p r i n t   a u t h o r ) ,   U N I V   W I T W A T E R S R A N D , D E P T   S T A T   &   A C T U A R I A L   S C I , J O H A N N E S B U R G   2 0 0 1 , S O U T H   A F R I C A . 	 	 	 	 	 	 A N S C O M B E   F J ,   1 9 5 0 ,   B I O M E T R I K A ,   V 3 7 ,   P 3 5 8 ;   B U R R E L L   Q L ,   1 9 8 8 ,   J   D O C ,   V 4 4 ,   P 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 1 6 ;   E N G E N   S ,   1 9 7 4 ,   B I O M E T R I K A ,   V 6 1 ,   P 2 6 3 ,   D O I   1 0 . 1 0 9 3 / b i o m e t / 6 1 . 2 . 2 6 3 ;   G O F F M A N   W ,   1 9 6 9 ,   N A T U R E ,   V 2 2 1 ,   P 1 2 0 5 ,   D O I   1 0 . 1 0 3 8 / 2 2 1 1 2 0 5 a 0 ;   K O C H E N   M ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 8 0 0 5 ;   K U N Z   M ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 2 8 1 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   N E L S O N   M J ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 2 2 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 4 5 ;   N E L S O N   M J ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 2 ;   R A O   I K R ,   1 9 8 9 ,   2 N D   I N T   C   B I B L   S C I E N ;   S I C H E L   H S ,   1 9 8 2 ,   B I O M E T R I K A ,   V 6 9 ,   P 4 6 7 ,   D O I   1 0 . 2 3 0 7 / 2 3 3 5 4 2 3 ;   S I C H E L   H S ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 6 ;   S I C H E L   H S ,   1 9 8 6 ,   C Z E C H   J   P H Y S ,   V 3 6 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 5 9 9 7 4 6 ;   S T E I N   G Z ,   1 9 8 7 ,   J   A M   S T A T   A S S O C ,   V 8 2 ,   P 9 3 8 ;   S T E P H E N S   M A ,   1 9 8 3 ,   E N C Y   S T A T I S T I C A L   S C I ,   V 4 ,   P 3 9 8 ;   V L A C H Y   J ,   1 9 8 0 ,   S C I   Y U G O S L ,   V 6 ,   P 1 5 5 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O R   P R I N C 	 1 7 	 3 0 	 3 1 	 0 	 2 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D ,   E N G L A N D   O X 5   1 G B 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 	 1 9 9 2 	 2 8 	 1 	 	 	 	 	 5 	 1 7 	 	 1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 8 - H 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 H B 6 9 4 	 W O S : A 1 9 9 2 H B 6 9 4 0 0 0 0 2 	 	 
 
 J 	 C o s t a s ,   R ;   Z a h e d i ,   Z ;   W o u t e r s ,   P 	 	 	 	 C o s t a s ,   R o d r i g o ;   Z a h e d i ,   Z o h r e h ;   W o u t e r s ,   P a u l 	 	 	 D o   " a l t m e t r i c s "   c o r r e l a t e   w i t h   c i t a t i o n s ?   E x t e n s i v e   c o m p a r i s o n   o f   a l t m e t r i c   i n d i c a t o r s   w i t h   c i t a t i o n s   f r o m   a   m u l t i d i s c i p l i n a r y   p e r s p e c t i v e 	 J O U R N A L   O F   T H E   A S S O C I A T I O N   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   d a t a b a s e s 	 M E T R I C S ;   I M P A C T 	 A n   e x t e n s i v e   a n a l y s i s   o f   t h e   p r e s e n c e   o f   d i f f e r e n t   a l t m e t r i c   i n d i c a t o r s   p r o v i d e d   b y   A l t m e t r i c . c o m   a c r o s s   s c i e n t i f i c   f i e l d s   i s   p r e s e n t e d ,   p a r t i c u l a r l y   f o c u s i n g   o n   t h e i r   r e l a t i o n s h i p   w i t h   c i t a t i o n s .   O u r   r e s u l t s   c o n f i r m   t h a t   t h e   p r e s e n c e   a n d   d e n s i t y   o f   s o c i a l   m e d i a   a l t m e t r i c   c o u n t s   a r e   s t i l l   v e r y   l o w   a n d   n o t   v e r y   f r e q u e n t   a m o n g   s c i e n t i f i c   p u b l i c a t i o n s ,   w i t h   1 5 % - 2 4 %   o f   t h e   p u b l i c a t i o n s   p r e s e n t i n g   s o m e   a l t m e t r i c   a c t i v i t y   a n d   c o n c e n t r a t e d   o n   t h e   m o s t   r e c e n t   p u b l i c a t i o n s ,   a l t h o u g h   t h e i r   p r e s e n c e   i s   i n c r e a s i n g   o v e r   t i m e .   P u b l i c a t i o n s   f r o m   t h e   s o c i a l   s c i e n c e s ,   h u m a n i t i e s ,   a n d   t h e   m e d i c a l   a n d   l i f e   s c i e n c e s   s h o w   t h e   h i g h e s t   p r e s e n c e   o f   a l t m e t r i c s ,   i n d i c a t i n g   t h e i r   p o t e n t i a l   v a l u e   a n d   i n t e r e s t   f o r   t h e s e   f i e l d s .   T h e   a n a l y s i s   o f   t h e   r e l a t i o n s h i p s   b e t w e e n   a l t m e t r i c s   a n d   c i t a t i o n s   c o n f i r m s   p r e v i o u s   c l a i m s   o f   p o s i t i v e   c o r r e l a t i o n s   b u t   i s   r e l a t i v e l y   w e a k ,   t h u s   s u p p o r t i n g   t h e   i d e a   t h a t   a l t m e t r i c s   d o   n o t   r e f l e c t   t h e   s a m e   k i n d   o f   i m p a c t   a s   c i t a t i o n s .   A l s o ,   a l t m e t r i c   c o u n t s   d o   n o t   a l w a y s   p r e s e n t   a   b e t t e r   f i l t e r i n g   o f   h i g h l y - c i t e d   p u b l i c a t i o n s   t h a n   j o u r n a l   c i t a t i o n   s c o r e s .   A l t m e t r i c   s c o r e s   ( p a r t i c u l a r l y   m e n t i o n s   i n   b l o g s )   a r e   a b l e   t o   i d e n t i f y   h i g h l y - c i t e d   p u b l i c a t i o n s   w i t h   h i g h e r   l e v e l s   o f   p r e c i s i o n   t h a n   j o u r n a l   c i t a t i o n   s c o r e s   ( J C S ) ,   b u t   t h e y   h a v e   a   l o w e r   l e v e l   o f   r e c a l l .   T h e   v a l u e   o f   a l t m e t r i c s   a s   a   c o m p l e m e n t a r y   t o o l   o f   c i t a t i o n   a n a l y s i s   i s   h i g h l i g h t e d ,   a l t h o u g h   m o r e   r e s e a r c h   i s   s u g g e s t e d   t o   d i s e n t a n g l e   t h e   p o t e n t i a l   m e a n i n g   a n d   v a l u e   o f   a l t m e t r i c   i n d i c a t o r s   f o r   r e s e a r c h   e v a l u a t i o n . 	 [ C o s t a s ,   R o d r i g o ;   Z a h e d i ,   Z o h r e h ;   W o u t e r s ,   P a u l ]   L e i d e n   U n i v ,   F a c   S o c i a l   &   B e h a v   S c i ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   N L - 2 3 0 0   A X   L e i d e n ,   N e t h e r l a n d s 	 C o s t a s ,   R   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   F a c   S o c i a l   &   B e h a v   S c i ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   P O B   9 0 5 ,   N L - 2 3 0 0   A X   L e i d e n ,   N e t h e r l a n d s . 	 r c o s t a s @ c w t s . l e i d e n u n i v . n l ;   z . z a h e d i . 2 @ c w t s . l e i d e n u n i v . n l ;   p . f . w o u t e r s @ c w t s . l e i d e n u n i v . n l 	 	 Z a h e d i ,   Z o h r e h / 0 0 0 0 - 0 0 0 1 - 5 8 0 1 - 1 8 8 6 	 E U   F P 7   A C U M E N   p r o j e c t   [ 2 6 6 6 3 2 ] 	 W e   w o u l d   l i k e   t o   t h a n k   E u a n   A d i e   f r o m   A l t m e t r i c . c o m   f o r   h e l p   a n d   s u p p o r t   i n   w o r k i n g   w i t h   a n d   u n d e r s t a n d i n g   A l t m e t r i c . c o m   d a t a .   W e   a l s o   t h a n k   E r i k   v a n   W i j k   f r o m   C W T S   i n   m a n a g i n g   t h e   a l t m e t r i c   d a t a .   T h i s   w o r k   i s   p a r t i a l l y   s u p p o r t e d   b y   t h e   E U   F P 7   A C U M E N   p r o j e c t   ( G r a n t   a g r e e m e n t :   2 6 6 6 3 2 ) .   F i n a l l y ,   w e   t h a n k   L u d o   W a l t m a n   f r o m   C W T S   f o r   c o m m e n t s   a n d   s u g g e s t i o n s   o n   e a r l y   v e r s i o n s   o f   t h i s   p a p e r   a s   w e l l   a s   t h e   t w o   a n o n y m o u s   r e f e r e e s . 	 A d i e   E ,   2 0 1 3 ,   L E A R N   P U B L ,   V 2 6 ,   P 1 1 ,   D O I   1 0 . 1 0 8 7 / 2 0 1 3 0 1 0 3 ;   B a r - I l a n   J . ,   2 0 1 2 ,   P   1 7   I N T   C   S C I   T E C H N ;   B a r - I l a n   J . ,   2 0 1 2 ,   A C M   W E B   S C I   C   W O R K S H ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 5 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 8 ;   C o s t a s   R ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 5 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 8 7 - 7 ;   C r o n i n   B l a i s e ,   1 9 9 5 ,   R E V   E S P   D O C   C I E N T ,   V 1 8 ,   P 1 7 2 ,   D O I   1 0 . 3 9 8 9 / r e d c . 1 9 9 5 . v 1 8 . i 2 . 6 5 4 ;   G a l l i g a n   F ,   2 0 1 3 ,   S E R I A L S   R E V ,   V 3 9 ,   P 5 6 ,   D O I   1 0 . 1 0 1 6 / j . s e r r e v . 2 0 1 3 . 0 1 . 0 0 3 ;   G r o t h   P . ,   2 0 1 0 ,   W E B S C I 1 0   E X T   F R O N T   S ;   H a u s t e i n   S ,   2 0 1 3 ,   P   1 8   I N T   C   S C I   T E C H N ,   P 1 6 4 ;   H a u s t e i n   S ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 6 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 1 0 1 ;   H e n e b e r g   P ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 5 9 8 7 7 ;   M o e d   H F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 0 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 6 3 ;   P i w o w a r   H e a t h e r ,   2 0 1 3 ,   B u l l e t i n   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e   a n d   T e c h n o l o g y ,   V 3 9 ,   P 1 0 ;   P i w o w a r   H ,   2 0 1 3 ,   N A T U R E ,   V 4 9 3 ,   P 1 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 9 3 1 5 9 a ;   P r i e m   J ,   2 0 1 2 ,   A L T M E T R I C S   W I L D   U S I N ;   P r i e m   J . ,   2 0 1 0 ,   A L T M E T R I C S   M A N I F E S T O ;   R o u s s e a u   R ,   2 0 1 3 ,   C H I N E S E   S C I   B U L L ,   V 5 8 ,   P 1 0 ;   S c h m i d t   M . ,   2 0 1 2 ,   P   1 7   I N T   C   S C I   T E C H N ,   V 2 ,   P 7 0 7 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S h e m a   H . ,   2 0 1 4 ,   J   A S S   I N F O R   I N   P R E S S ;   S h e m a   H ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 3 5 8 6 9 ;   S u d   P ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 9 8 ,   P 1 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 1 1 7 - 2 ;   T h e l w a l l   M ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 6 4 8 4 1 ;   T o r t   A B L ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 5 3 3 7 4 ;   W a l t m a n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 4 0 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I S M   C O N ;   W u   X . ,   2 0 0 3 ,   K N O W L   I N F   S Y S T ,   V 5 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 1 1 5 - 0 0 3 - 0 1 1 3 - x ;   Z a h e d i   Z ,   2 0 1 3 ,   P R O   I N T   C O N F   S C I   I N F ,   P 8 7 6 	 3 0 	 2 9 	 2 9 	 3 7 	 1 5 3 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 2 3 3 0 - 1 6 3 5 	 2 3 3 0 - 1 6 4 3 	 	 J   A S S O C   I N F   S C I   T E C H 	 	 O C T 	 2 0 1 5 	 6 6 	 1 0 	 	 	 	 	 2 0 0 3 	 2 0 1 9 	 	 1 0 . 1 0 0 2 / a s i . 2 3 3 0 9 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C R 2 T W 	 W O S : 0 0 0 3 6 1 1 8 4 5 0 0 0 0 3 	 	 
 
 J 	 H a m m a r f e l t ,   B 	 	 	 	 H a m m a r f e l t ,   B j o e r n 	 	 	 U s i n g   a l t m e t r i c s   f o r   a s s e s s i n g   r e s e a r c h   i m p a c t   i n   t h e   h u m a n i t i e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 4 t h   I n t e r n a t i o n a l - S o c i e t y - o f - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s   C o n f e r e n c e   ( I S S I ) 	 J U L   1 5 - 2 0 ,   2 0 1 3 	 V i e n n a ,   A U S T R I A 	 I n t   S o c   S c e i n t o m e t r   &   I n f o m e t r ,   A S I S   &   T ,   E l s e v i e r   B   V ,   E B S C O   I n f o r m a t   S e r v ,   F e d   M i n i s t   S c i   &   R e s ,   F e d   M i n i s t   T r a n s p o r t   I n n o v a t   &   T e c h n o l ,   I n f o r m a t   A s s i s t a n t   V e r e i n   I n f o r m a t   M a n a g e m e n t ,   O R C I D ,   S c i   M e t r i x   R   &   D   R e p o r t s ,   S w e t s   I n f o r m a t   S e r v ,   T h o m s o n   R e u t e r s ,   Z S I   -   C t r   S o c i a l   I n n o v a t 	 	 A l t m e t r i c s ;   B i b l i o m e t r i c s ;   H u m a n i t i e s ;   M e n d e l e y ;   T w i t t e r ;   L i b r a r y   T h i n g 	 S O C I A L - S C I E N C E S ;   C I T A T I O N   A N A L Y S I S 	 T h e   p r o s p e c t s   o f   a l t m e t r i c s   a r e   e s p e c i a l l y   e n c o u r a g i n g   f o r   r e s e a r c h   f i e l d s   i n   t h e   h u m a n i t i e s   t h a t   c u r r e n t l y   a r e   d i f f i c u l t   t o   s t u d y   u s i n g   e s t a b l i s h e d   b i b l i o m e t r i c   m e t h o d s .   Y e t ,   l i t t l e   i s   k n o w n   a b o u t   t h e   a l t m e t r i c   i m p a c t   o f   r e s e a r c h   f i e l d s   i n   t h e   h u m a n i t i e s .   C o n s e q u e n t l y ,   t h i s   p a p e r   a n a l y s e s   t h e   a l t m e t r i c   c o v e r a g e   a n d   i m p a c t   o f   h u m a n i t i e s - o r i e n t e d   a r t i c l e s   a n d   b o o k s   p u b l i s h e d   b y   S w e d i s h   u n i v e r s i t i e s   d u r i n g   2 0 1 2 .   S o m e   o f   t h e   m o s t   c o m m o n   a l t m e t r i c   s o u r c e s   a r e   e x a m i n e d   u s i n g   a   s a m p l e   o f   3 1 0   j o u r n a l   a r t i c l e s   a n d   5 4   b o o k s .   M e n d e l e y   h a s   t h e   h i g h e s t   c o v e r a g e   o f   j o u r n a l   a r t i c l e s   ( 6 1 % )   f o l l o w e d   b y   T w i t t e r   ( 2 1 % )   w h i l e   v e r y   f e w   o f   t h e   p u b l i c a t i o n s   a r e   m e n t i o n e d   i n   b l o g s   o r   o n   F a c e b o o k .   B o o k s ,   o n   t h e   o t h e r   h a n d ,   a r e   q u i t e   o f t e n   t w e e t e d   w h i l e   b o t h   M e n d e l e y ' s   a n d   t h e   n o v e l   d a t a   s o u r c e   L i b r a r y   T h i n g ' s   c o v e r a g e   i s   l o w .   M a n y   o f   t h e   p r o b l e m s   o f   a p p l y i n g   b i b l i o m e t r i c s   t o   t h e   h u m a n i t i e s   a r e   a l s o   r e l e v a n t   f o r   a l t m e t r i c   a p p r o a c h e s ;   t h e   i m p o r t a n c e   o f   n o n - j o u r n a l   p u b l i c a t i o n s ,   t h e   r e l i a n c e   o n   p r i n t   a s   w e l l   t h e   l i m i t e d   c o v e r a g e   o f   n o n - E n g l i s h   l a n g u a g e   p u b l i c a t i o n s .   H o w e v e r ,   t h e   c o n t i n u i n g   d e v e l o p m e n t   a n d   d i v e r s i f i c a t i o n   o f   m e t h o d s   s u g g e s t s   t h a t   a l t m e t r i c s   c o u l d   e v o l v e   i n t o   a   v a l u a b l e   t o o l   f o r   a s s e s s i n g   r e s e a r c h   i n   t h e   h u m a n i t i e s . 	 [ H a m m a r f e l t ,   B j o e r n ]   U p p s a l a   U n i v ,   D e p t   A L M ,   U p p s a l a ,   S w e d e n ;   [ H a m m a r f e l t ,   B j o e r n ]   U n i v   B o r a s ,   S w e d i s h   S c h   L i b   &   I n f o r m a t   S c i ,   B o r a s ,   S w e d e n 	 H a m m a r f e l t ,   B   ( r e p r i n t   a u t h o r ) ,   U p p s a l a   U n i v ,   D e p t   A L M ,   U p p s a l a ,   S w e d e n . 	 b j o r n . h a m m a r f e l t @ a b m . u u . s e 	 	 H a m m a r f e l t ,   B j o r n / 0 0 0 0 - 0 0 0 2 - 1 5 0 4 - 8 3 9 5 	 	 	 A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   B a r - I l a n   J . ,   2 0 1 2 ,   P   1 7   I N T   C   S C I   T E C H N ,   V 5 2 9 0 0 ,   P 9 8 ;   C h a m b e r l a i n   S c o t t ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 4 ,   D O I   D O I   1 0 . 3 7 8 9 / I S Q V 2 5 N O 2 . 2 0 1 3 . 0 2 ;   C o l l i n s   E . ,   2 0 1 2 ,   A R T S   H U M A N I T I E S   H I G H ,   V 1 1 ,   P 7 6 ;   H a m m a r f e l t   B . ,   2 0 1 3 ,   P   I S S I   2 0 1 3   V I E N N   1 4 ,   P 7 2 1 ;   H a m m a r f e l t   B . ,   2 0 1 2 ,   T H E S I S   A C T A   U   U P S A L I ;   H e l l q v i s t   B ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 3 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 5 6 ;   H o l m b e r g   K ,   2 0 1 3 ,   P R O   I N T   C O N F   S C I   I N F ,   P 5 6 7 ;   K o u s h a   K ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 5 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 5 ;   K u r t z   M J ,   2 0 1 0 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 4 ,   P 3 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 4 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 3 6 ;   L i   X D ,   2 0 1 1 ,   S O I L   C O N T A M I N A T I O N ,   P 1 ,   D O I   1 0 . 1 0 9 7 / B R S . 0 b 0 1 3 e 3 1 8 2 0 5 6 2 0 a ;   L i n m a n s   A J M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 8 8 - 9 ;   M o h a m m a d i   E ,   2 0 1 3 ,   P R O   I N T   C O N F   S C I   I N F ,   P 2 0 0 ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   P r i e m   J . ,   2 0 1 2 ,   1 2 0 3 4 7 4 5   A R X I V ;   P r i e m   J . ,   2 0 1 0 ,   A L T M E T R I C S   M A N I F E S T O ;   R a s m u s s e n   P .   G . ,   2 0 1 3 ,   S C I E C O M   I N F ,   V 9 ;   R o w l a n d s   I ,   2 0 1 1 ,   L E A R N   P U B L ,   V 2 4 ,   P 1 8 3 ,   D O I   1 0 . 1 0 8 7 / 2 0 1 1 0 3 0 6 ;   S u d   P ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 9 8 ,   P 1 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 1 1 7 - 2 ;   T a n g   M . ,   2 0 1 2 ,   P   A S I S   T   A N N   M ,   V 4 9 ;   V o o r b i j   H ,   2 0 1 2 ,   O N L I N E   I N F O R M   R E V ,   V 3 6 ,   P 1 9 6 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 1 2 1 1 2 2 9 0 3 9 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I S M   C O N 	 2 3 	 2 9 	 3 0 	 3 4 	 1 7 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 N O V 	 2 0 1 4 	 1 0 1 	 2 	 	 	 	 	 1 4 1 9 	 1 4 3 0 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 4 - 1 2 6 1 - 3 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A R 5 F F 	 W O S : 0 0 0 3 4 3 6 0 9 9 0 0 0 3 1 	 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 R e v i s i t i n g   t h e   s c a l i n g   o f   c i t a t i o n s   f o r   r e s e a r c h   a s s e s s m e n t 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   B i b l i o m e t r i c s ;   C i t a t i o n s ;   S c a l i n g 	 	 O v e r   t h e   p a s t   d e c a d e ,   n a t i o n a l   r e s e a r c h   e v a l u a t i o n   e x e r c i s e s ,   t r a d i t i o n a l l y   c o n d u c t e d   u s i n g   t h e   p e e r   r e v i e w   m e t h o d ,   h a v e   b e g u n   o p e n i n g   t o   b i b l i o m e t r i c   i n d i c a t o r s .   T h e   c i t a t i o n s   r e c e i v e d   b y   a   p u b l i c a t i o n   a r e   a s s u m e d   a s   p r o x y   f o r   i t s   q u a l i t y ,   b u t   t h e y   r e q u i r e   s t a n d a r d i z a t i o n   p r i o r   t o   u s e   i n   c o m p a r a t i v e   e v a l u a t i o n   o f   o r g a n i z a t i o n s   o r   i n d i v i d u a l   s c i e n t i s t s :   t h e   c i t a t i o n   d a t a   m u s t   b e   s t a n d a r d i z e d ,   d u e   t o   t h e   v a r y i n g   c i t a t i o n   b e h a v i o r   a c r o s s   r e s e a r c h   f i e l d s .   T h e   o b j e c t i v e   o f   t h i s   p a p e r   i s   t o   c o m p a r e   t h e   e f f e c t i v e n e s s   o f   t h e   d i f f e r e n t   m e t h o d s   o f   n o r m a l i z i n g   c i t a t i o n s ,   i n   o r d e r   t o   p r o v i d e   u s e f u l   i n d i c a t i o n s   t o   r e s e a r c h   a s s e s s m e n t   p r a c t i t i o n e r s .   S i m u l a t i n g   a   t y p i c a l   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e ,   h e   a n a l y s i s   i s   c o n d u c t e d   f o r   a l l   s u b j e c t   c a t e g o r i e s   i n   t h e   h a r d   s c i e n c e s   a n d   i s   b a s e d   o n   t h e   T h o m s o n   R e u t e r s   S c i e n c e   C i t a t i o n   I n d e x - E x p a n d e d   ( R ) .   C o m p a r i s o n s   s h o w   t h a t   t h e   c i t a t i o n s   a v e r a g e   i s   t h e   m o s t   e f f e c t i v e   s c a l i n g   p a r a m e t e r ,   w h e n   t h e   a v e r a g e   i s   b a s e d   o n l y   o n   t h e   p u b l i c a t i o n s   a c t u a l l y   c i t e d .   ( C )   2 0 1 2   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 3 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 1 9 - 0 ;   A l b a r r a n   P . ,   2 0 0 9 ,   E C   S E R I E S   U   C A R L O S   3 ;   B o r m a n n   L . ,   2 0 0 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 1 6 6 4 ;   B O X   G E P ,   1 9 6 4 ,   J   R O Y   S T A T   S O C   B ,   V 2 6 ,   P 2 1 1 ;   E R A ,   2 0 1 0 ,   E X C   R E S   A U S T R   I N ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   2 0 0 8   B E R L ;   G u p t a   H .   M . ,   2 0 0 5 ,   B R A Z I L I A N   J   P H Y S ,   V 3 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   P e t e r s o n   G J ,   2 0 1 0 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 7 ,   P 1 6 0 2 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 0 1 0 7 5 7 1 0 7 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R a d i c c h i   F ,   2 0 1 1 ,   P H Y S   R E V   E ,   V 8 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 3 . 0 4 6 1 1 6 ;   R e h n   C . ,   2 0 0 7 ,   B I B L I O M E T R I C   I N D I C A T ;   V i e i r a   E S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 6 . 0 0 2 ;   V I N K L E R   P ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 3 9 ;   V Q R ,   2 0 1 1 ,   I T   Q U A L   R E S   E V   V Q R   2 ;   V T R ,   2 0 0 6 ,   I T   T R I E N N   R E S   E V 	 1 9 	 2 9 	 2 9 	 6 	 2 8 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 2 	 6 	 4 	 	 	 	 	 4 7 0 	 4 7 9 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 3 . 0 0 5 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 0 3 A Y 	 W O S : 0 0 0 3 0 8 5 8 1 7 0 0 0 0 3 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   D i   C o s t a ,   F 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a 	 	 	 R e s e a r c h   p r o d u c t i v i t y :   A r e   h i g h e r   a c a d e m i c   r a n k s   m o r e   p r o d u c t i v e   t h a n   l o w e r   o n e s ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   p r o d u c t i v i t y ;   A c a d e m i c   r a n k ;   U n i v e r s i t i e s ;   B i b l i o m e t r i c s ;   I t a l y 	 R E S E A R C H   P E R F O R M A N C E ;   P U B L I C A T I O N 	 T h i s   w o r k   a n a l y s e s   t h e   l i n k s   b e t w e e n   i n d i v i d u a l   r e s e a r c h   p e r f o r m a n c e   a n d   a c a d e m i c   r a n k .   A   t y p i c a l   b i b l i o m e t r i c   m e t h o d o l o g y   i s   u s e d   t o   s t u d y   t h e   p e r f o r m a n c e   o f   a l l   I t a l i a n   u n i v e r s i t y   r e s e a r c h e r s   a c t i v e   i n   t h e   h a r d   s c i e n c e s ,   f o r   t h e   p e r i o d   2 0 0 4 - 2 0 0 8 .   T h e   o b j e c t i v e   i s   t o   c h a r a c t e r i z e   t h e   p e r f o r m a n c e   o f   t h e   r a n k s   o f   f u l l   ( F P s ) ,   a s s o c i a t e   a n d   a s s i s t a n t   p r o f e s s o r s   ( A P s ) ,   a l o n g   v a r i o u s   d i m e n s i o n s ,   i n   o r d e r   t o   v e r i f y   t h e   e x i s t e n c e   o f   p e r f o r m a n c e   d i f f e r e n c e s   a m o n g   t h e   r a n k s   i n   g e n e r a l   a n d   f o r   s i n g l e   d i s c i p l i n e s . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   I - 0 0 1 3 3   R o m e ,   R M ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i ,   I - 0 0 1 8 5   R o m e ,   R M ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   R M ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t ;   d i . c o s t a @ d i i . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   B L A C K B U R N   R T ,   1 9 7 8 ,   S O C I O L   E D U C ,   V 5 1 ,   P 1 3 2 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 2 4 5 ;   C a r a y o l   N ,   2 0 0 6 ,   I N F   E C O N   P O L I C Y ,   V 1 8 ,   P 5 5 ,   D O I   1 0 . 1 0 1 6 / j . i n f o e c o p o l . 2 0 0 5 . 0 9 . 0 0 2 ;   C O L E   S ,   1 9 7 9 ,   A M   J   S O C I O L ,   V 8 4 ,   P 9 5 8 ,   D O I   1 0 . 1 0 8 6 / 2 2 6 8 6 8 ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 5 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 8 ;   D ' A n g e l o   C .   A . ,   2 0 1 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 2 ,   P 2 5 7 ;   G i n g r a s   Y ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 0 4 8 ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   2 0 0 8   B E R L   4   I N ;   K y v i k   S ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 4 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 6 7 - z ;   L i s s o n i   F ,   2 0 1 1 ,   I N D   C O R P   C H A N G E ,   V 2 0 ,   P 2 5 3 ,   D O I   1 0 . 1 0 9 3 / i c c / d t q 0 7 3 ;   M I U R ,   2 0 1 0 ,   D E C   R A P P   S T A T   S I S T   U ;   M o e d   H F ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 8 - 1 ;   S h i n   J C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 5 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 3 6 - 2 ;   V e n t u r a   O N ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 2 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 5 4 - 5 	 1 5 	 2 9 	 2 9 	 1 	 3 2 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 2 0 1 1 	 8 8 	 3 	 	 	 	 	 9 1 5 	 9 2 8 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 2 6 - 6 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 1 9 P O 	 W O S : 0 0 0 2 9 4 8 3 9 7 0 0 0 1 4 	 	 
 
 J 	 P o l i t ,   D F ;   N o r t h a m ,   S 	 	 	 	 P o l i t ,   D e n i s e   F . ;   N o r t h a m ,   S a l l y 	 	 	 I m p a c t   f a c t o r s   i n   n u r s i n g   j o u r n a l s 	 N U R S I N G   O U T L O O K 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n   r a t e ;   C o m m u n i c a t i o n ;   I m p a c t   f a c t o r ;   N u r s i n g   j o u r n a l ;   P r o f e s s i o n a l   i s s u e s ;   P u b l i s h i n g 	 Q U A L I T Y ;   A S S O C I A T I O N ;   M A N U S C R I P T S ;   S C H O L A R S H I P ;   T R I A L S ;   F A T E 	 J o u r n a l   i m p a c t   f a c t o r s   ( I F s ) ,   a   m e a s u r e   o f   c i t a t i o n   f r e q u e n c y ,   a r e   p u b l i s h e d   a n n u a l l y   i n   J o u r n a l   C i t a t i o n   R e p o r t s   ( J C R ) .   J o u r n a l   I F s ,   a l t h o u g h   c o n t r o v e r s i a l   b e c a u s e   o f   t h e   u s e s   t o   w h i c h   t h e y   h a v e   b e e n   p u t   i n   a c a d e m i c   a r e n a s ,   r e m a i n   a   m e t r i c   a b o u t   w h i c h   n u r s e s   s h o u l d   b e   i n f o r m e d .   T h i s   p a p e r   d i s c u s s e s   k e y   i s s u e s   i n   t h e   c o n t r o v e r s y ,   e x p l a i n s   h o w   I F s   a r e   c o m p u t e d ,   a n d   p r e s e n t s   h i s t o r i c a l   a n d   2 0 0 9   I F   d a t a   f o r   n u r s i n g   j o u r n a l s .   T h e   n u m b e r   o f   n u r s i n g   j o u r n a l s   i n d e x e d   i n   J C R   h a s   g r o w n   f r o m   3 5   i n   2 0 0 4   t o   7 4   i n   2 0 0 9 .   T h e   j o u r n a l s   c u r r e n t l y   i n d e x e d   a r e   d i v e r s e   i n   t e r m s   o f   f o c u s   ( p r a c t i c e   v s   r e s e a r c h ) ,   s p e c i a l t y   a r e a s ,   a n d   c o u n t r y   o f   p u b l i c a t i o n .   T h e   m e d i a n   I F   s c o r e   f o r   n u r s i n g   j o u r n a l s   ( 0 . 9 1   i n   2 0 0 9 )   i s   s i m i l a r   t o   t h a t   f o r   s e v e r a l   o t h e r   h e a l t h   c a r e   c a t e g o r i e s .   G i v e n   t h e   c o n t r o v e r s i e s   s u r r o u n d i n g   I F s ,   i t   m a y   b e   u s e f u l   f o r   n u r s e s   t o   p l a y   a   m o r e   a c t i v e   r o l e   i n   f u r t h e r i n g   t h e   d e b a t e   b y   u n d e r t a k i n g   r e s e a r c h   r e l a t i n g   t o   I F s ,   i n c l u d i n g   s t u d i e s   o f   h o w   t h e y   a f f e c t   n u r s e s '   s c h o l a r l y   p u r s u i t s   a n d   p u b l i c a t i o n   d e c i s i o n s .   C i t e   t h i s   a r t i c l e :   P a t ,   D .   F . ,   &   N o r t h a m ,   S .   ( 2 0 1 1 ,   F E B R U A R Y ) .   I m p a c t   f a c t o r s   i n   n u r s i n g   j o u r n a l s .   N u r s i n g   O u t l o o k ,   5 9 ( 1 ) ,   1 8 - 2 8 .   d o i : 1 0 . 1 0 1 6 / j . o u t l o o k . 2 0 1 0 . 1 1 . 0 0 1 . 	 [ P o l i t ,   D e n i s e   F . ]   H u m a n a l y s i s   I n c ,   S a r a t o g a   S p r i n g s ,   N Y   1 2 8 6 6   U S A ;   [ P o l i t ,   D e n i s e   F . ]   G r i f f i t h   U n i v ,   R e s   C t r   C l i n   &   C o m m u n i t y   P r a c t i c e   I n n o v a t ,   G o l d   C o a s t ,   A u s t r a l i a ;   [ N o r t h a m ,   S a l l y ]   U n i v   T e x a s   T y l e r ,   C o l l   N u r s i n g   &   H l t h   S c i ,   T y l e r ,   T X   7 5 7 9 9   U S A 	 P o l i t ,   D F   ( r e p r i n t   a u t h o r ) ,   H u m a n a l y s i s   I n c ,   7 5   C l i n t o n   S t ,   S a r a t o g a   S p r i n g s ,   N Y   1 2 8 6 6   U S A . 	 d p o l i t @ r o c k e t m a i l . c o m 	 	 	 	 	 A n d e r s e n   J u l i a ,   2 0 0 6 ,   J o u r n a l   o f   M i c r o b i o l o g y   I m m u n o l o g y   a n d   I n f e c t i o n ,   V 3 9 ,   P 4 3 6 ;   B r o o m e   M E ,   2 0 0 5 ,   N U R S   O U T L O O K ,   V 5 3 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / j . o u t l o o k . 2 0 0 5 . 0 8 . 0 0 2 ;   C h e e k   J ,   2 0 0 6 ,   Q U A L   H E A L T H   R E S ,   V 1 6 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 2 3 0 5 2 8 5 7 0 1 ;   C h e w   M ,   2 0 0 7 ,   J   R O Y   S O C   M E D ,   V 1 0 0 ,   P 1 4 2 ,   D O I   1 0 . 1 2 5 8 / j r s m . 1 0 0 . 3 . 1 4 2 ;   C o u r t n e y   M ,   2 0 0 6 ,   A U S T   J   A D V   N U R S ,   V 2 3 ,   P 6 ;   E g e r o d   I n g r i d ,   2 0 0 8 ,   N u r s   C r i t   C a r e ,   V 1 3 ,   P 1 8 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 8 - 5 1 5 3 . 2 0 0 8 . 0 0 2 8 8 . x ;   F r e d a   M C ,   2 0 0 6 ,   N U R S   O U T L O O K ,   V 5 4 ,   P 5 8 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E . ,   2 0 0 5 ,   I N T   C   P E E R   R E V   B I O M ;   G a r f i e l d   E . ,   1 9 8 4 ,   E S S A Y S   I N F O R M   S C I ,   V 7 ,   P 3 3 6 ;   G e n n a r o   S ,   2 0 1 0 ,   J   N U R S   S C H O L A R S H I P ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 7 - 5 0 6 9 . 2 0 1 0 . 0 1 3 6 1 . x ;   H a l l   S A ,   2 0 0 7 ,   E P I D E M I O L O G Y ,   V 1 8 ,   P 2 6 2 ,   D O I   1 0 . 1 0 9 7 / 0 1 . e d e . 0 0 0 0 2 5 4 6 6 8 . 6 3 3 7 8 . 3 2 ;   H o e f f e l   C ,   1 9 9 8 ,   A L L E R G Y ,   V 5 3 ,   P 1 2 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 8 . t b 0 3 8 4 8 . x ;   I r o n s i d e   P a m e l a   M ,   2 0 0 7 ,   J   C o n t i n   E d u c   N u r s ,   V 3 8 ,   P 9 9 ;   J a c k s o n   D ,   2 0 0 9 ,   J   C L I N   N U R S ,   V 1 8 ,   P 2 5 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 0 2 . 2 0 0 9 . 0 2 9 2 7 . x ;   J o h n s t o n e   M J ,   2 0 0 7 ,   I N T   N U R S   R E V ,   V 5 4 ,   P 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 5 2 7 . x ;   K e t e f i a n   S ,   2 0 1 0 ,   I N T   N U R S   R E V ,   V 5 7 ,   P 3 4 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 1 0 . 0 0 8 1 9 . x ;   K E T E F I A N   S ,   2 0 0 9 ,   I N T   J   N U R S   S T U D ,   V 4 6 ,   P 5 7 1 ;   K u m a r   V ,   2 0 0 9 ,   S I N G A P   M E D   J ,   V 5 0 ,   P 7 5 2 ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   L e e   K P ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 0 5 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 0 5 ;   M c V e i g h   M E ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 1 0 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 1 ;   M o l a s s i o t i s   A ,   2 0 0 6 ,   C A N C E R   N U R S ,   V 2 9 ,   P 4 3 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 2 8 2 0 - 2 0 0 6 1 1 0 0 0 - 0 0 0 0 1 ;   N o r t h a m   S ,   2 0 0 0 ,   N u r s e   E d u c ,   V 2 5 ,   P 2 2 7 ;   O e r m a n n   M H ,   2 0 0 8 ,   I N T   J   N U R S   S T U D ,   V 4 5 ,   P 5 8 0 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 6 . 1 0 . 0 0 5 ;   P o l i t   D F ,   2 0 1 0 ,   N U R S   E D U C ,   V 3 5 ,   P 2 3 7 ,   D O I   1 0 . 1 0 9 7 / N N E . 0 b 0 1 3 e 3 1 8 1 f 7 f 1 e a ;   P o l i t   D F ,   2 0 0 9 ,   N U R S   R E S ,   V 5 8 ,   P 3 9 1 ,   D O I   1 0 . 1 0 9 7 / N N R . 0 b 0 1 3 e 3 1 8 1 b f 1 5 0 5 ;   P O S T M A   E ,   2 0 0 7 ,   P L O S   O N E ,   V 1 0 ,   p E 9 9 9 ;   R i z k a l l a h   J ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 0 2 0 4 ;   R y c r o f t - M a l o n e   J ,   2 0 0 9 ,   W O R L D V   E V I D - B A S E D   N U ,   V 6 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 7 8 7 . 2 0 0 9 . 0 0 1 4 5 . x ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S i m o n s   K ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 2 ,   P 1 6 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 6 5 3 1 6 ;   S m i t h   B A ,   2 0 0 8 ,   N U R S   O U T L O O K ,   V 5 6 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / j . o u t l o o k . 2 0 0 7 . 0 9 . 0 0 2 ;   S m i t h   D R ,   2 0 0 8 ,   N U R S   H E A L T H   S C I ,   V 1 0 ,   P 2 6 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 8 . 0 0 4 1 4 . x ;   [ A n o n y m o u s ] ,   J   C I T   R E P ;   U r q u h a r t   C ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 5 . 1 0 . 0 0 2 ;   v a n   T e i j l i n g e n   E ,   2 0 0 2 ,   J   A D V   N U R S ,   V 3 7 ,   P 5 0 6 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 2 . 0 2 1 3 5 . x ;   W A L L N E R   C ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 3 ,   P 4 6 1 ;   W i j n h o v e n   B P L ,   2 0 1 0 ,   B R I T   J   S U R G ,   V 9 7 ,   P 4 5 0 ,   D O I   1 0 . 1 0 0 2 / b j s . 6 8 8 0 	 4 1 	 2 9 	 2 9 	 0 	 1 5 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 2 9 - 6 5 5 4 	 	 	 N U R S   O U T L O O K 	 N u r s .   O u t l o o k 	 J A N - F E B 	 2 0 1 1 	 5 9 	 1 	 	 	 	 	 1 8 	 2 8 	 	 1 0 . 1 0 1 6 / j . o u t l o o k . 2 0 1 0 . 1 1 . 0 0 1 	 	 1 1 	 N u r s i n g 	 N u r s i n g 	 7 1 9 D Z 	 W O S : 0 0 0 2 8 7 1 8 1 3 0 0 0 0 6 	 2 1 2 5 6 3 5 9 	 
 
 J 	 P e n a s ,   C S ;   W i l l e t t ,   P 	 	 	 	 P e n a s ,   C e l i a   S a n c h e z ;   W i l l e t t ,   P e t e r 	 	 	 G e n d e r   d i f f e r e n c e s   i n   p u b l i c a t i o n   a n d   c i t a t i o n   c o u n t s   i n   l i b r a r i a n s h i p   a n d   i n f o r m a t i o n   s c i e n c e   r e s e a r c h 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   c o u n t s ;   g e n d e r   d i f f e r e n c e s ;   p u b l i c a t i o n   c o u n t s 	 R E S E A R C H   P R O D U C T I V I T Y ;   W O M E N ;   L I B R A R Y ;   F A C U L T Y ;   M E N 	 A n   a n a l y s i s   i s   p r e s e n t e d   o f   t h e   p u b l i c a t i o n s   b y ,   a n d   c i t a t i o n s   t o ,   5 7   m a l e   a n d   4 8   f e m a l e   a c a d e m i c s   i n   f i v e   d e p a r t m e n t s   o f   l i b r a r i a n s h i p   a n d   i n f o r m a t i o n   s c i e n c e .   A f t e r   t a k i n g   a c c o u n t   o f   d i f f e r e n c e s   i n   s u b j e c t   a n d   d i f f e r e n c e s   i n   n u m b e r s   o f   a c a d e m i c s ,   i t   i s   s h o w n   t h a t   m a l e   a c a d e m i c s   p u b l i s h   s i g n i f i c a n t l y   m o r e   p a p e r s   o n   a v e r a g e   t h a n   d o   f e m a l e   a u t h o r s ,   b u t   t h a t   t h e r e   i s   n o   s i g n i f i c a n t   d i f f e r e n c e   i n   t h e   n u m b e r s   o f   c i t a t i o n s   t o   p u b l i s h e d   p a p e r s . 	 U n i v   S h e f f i e l d ,   D e p t   I n f o r m a t   S t u d i e s ,   S h e f f i e l d   S 1   4 D P ,   S   Y o r k s h i r e ,   E n g l a n d 	 W i l l e t t ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   S h e f f i e l d ,   D e p t   I n f o r m a t   S t u d i e s ,   2 1 1   P o r t o b e l l o ,   S h e f f i e l d   S 1   4 D P ,   S   Y o r k s h i r e ,   E n g l a n d . 	 p . w i l l e t t @ s h e f f i e l d . a c . u k 	 	 	 	 	 A C K E R   S ,   1 9 8 0 ,   B R I T   J   S O C I O L   E D U C ,   V 1 ,   P 8 1 ,   D O I   1 0 . 1 0 8 0 / 0 1 4 2 5 6 9 8 0 0 0 1 0 1 0 6 ;   B I G G S   M ,   1 9 9 3 ,   L I B R   Q U A R T ,   V 6 3 ,   P 2 8 2 ;   B r o o k s   A ,   1 9 9 7 ,   A C A D   W O M E N ;   C u l l a r s   J M ,   1 9 9 8 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 0 ,   P 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 9 8 ) 9 0 0 0 5 - 6 ;   D u n d a r   H ,   1 9 9 8 ,   R E S   H I G H   E D U C ,   V 3 9 ,   P 6 0 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 8 7 0 5 8 2 3 7 6 3 ;   F e r b e r   M A ,   1 9 8 8 ,   G E N D E R   S O C ,   V 2 ,   P 8 2 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 3 8 8 0 0 2 0 0 1 0 0 6 ;   H o l m e s   A . ,   2 0 0 1 ,   I N F O R M   R E S ,   V 6 ;   K a p l a n   S H ,   1 9 9 6 ,   N E W   E N G L   J   M E D ,   V 3 3 5 ,   P 1 2 8 2 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 6 1 0 2 4 3 3 5 1 7 0 6 ;   K O R Y T N Y K   C A ,   1 9 8 8 ,   L I B R   Q U A R T ,   V 5 8 ,   P 5 2 ;   L o n g   J .   S ,   2 0 0 1 ,   S C A R C I T Y   V I S I B I L I T Y ;   L u z z a d d e r - B e a c h   S ,   2 0 0 0 ,   P R O F   G E O G R ,   V 5 2 ,   P 4 0 7 ,   D O I   1 0 . 1 1 1 1 / 0 0 3 3 - 0 1 2 4 . 0 0 2 3 5 ;   M a t h e w s   A L ,   2 0 0 1 ,   P S ,   V 3 4 ,   P 1 4 3 ;   M c E l h i n n y   B ,   2 0 0 3 ,   L A N G   S O C ,   V 3 2 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 7 / S 0 0 4 7 4 0 4 5 0 3 3 2 3 0 1 2 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   W a l s h   V ,   1 9 9 5 ,   F E M I N I S T   A C A D   C R E A T I ;   * N A T   S C I   F D N   D I V   S ,   2 0 0 3 ,   G E N D   D I F F   C A R   A C   S C I ;   P r p i c   K ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 4 6 8 1 9 4 5 7 ;   S a n t o s   M ,   1 9 9 8 ,   J   L I B R   I N F   S C I ,   V 3 0 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 9 8 0 3 0 0 0 1 0 5 ;   S i e g a l   S . ,   1 9 8 8 ,   N O N P A R A M E T R I C   S T A T   B ;   V a n   R a a n   A n t h o n y   F . J . ,   2 0 0 3 ,   T E C H N I K F O L G E N A B S C H A T ,   V 1 ,   P 2 0 ;   V a u g h a n   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 9 9 	 2 1 	 2 9 	 2 9 	 3 	 1 6 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F   S C I 	 J .   I n f .   S c i . 	 	 2 0 0 6 	 3 2 	 5 	 	 	 	 	 4 8 0 	 4 8 5 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 6 0 5 8 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 0 6 G X 	 W O S : 0 0 0 2 4 2 0 9 0 1 0 0 0 0 7 	 	 
 
 J 	 P o r t e r ,   A L 	 	 	 	 P o r t e r ,   A L 	 	 	 Q T I P :   Q u i c k   t e c h n o l o g y   i n t e l l i g e n c e   p r o c e s s e s 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 S c i e n t i f i c   S e m i n a r   o n   N e w   T e c h n o l o g y   F o r e s i g h t ,   F o r e c a s t i n g   a n d   A s s e s s m e n t   M e t h o d s 	 M A Y   1 3 - 1 4 ,   2 0 0 4 	 S e v i l l e ,   S P A I N 	 I n s t   P r o s p e c t   T e c h n o l   S t u d i e s ,   E u r o p e a n   C o m m i s s   D i r e c t o r a t e   G e n   J o i n t   R e s   C t r 	 	 t e c h n i c a l   i n t e l l i g e n c e ;   b i b l i o m e t r i c s ;   t e c h n o l o g y   f o r e s i g h t ;   t e c h n o l o g y   m a n a g e m e n t ;   r a p i d   t e c h n o l o g y   a n a l y s e s ;   t e c h   m i n i n g ;   t e x t   m i n i n g ;   k n o w l e d g e   d i s c o v e r y   i n   d a t a b a s e s 	 	 E m p i r i c a l   t e c h n o l o g y   a n a l y s e s   n e e d   n o t   t a k e   m o n t h s ;   t h e y   c a n   b e   d o n e   i n   m i n u t e s .   O n e   c a n   t h e r e b y   t a k e   a d v a n t a g e   o f   w i d e   a v a i l a b i l i t y   o f   r i c h   s c i e n c e   a n d   t e c h n o l o g y   p u b l i c a t i o n   a n d   p a t e n t   a b s t r a c t   d a t a b a s e s   t o   b e t t e r   i n f o r m   t e c h n o l o g y   m a n a g e m e n t .   T o   d o   s o   r e q u i r e s   d e v e l o p i n g   t e m p l a t e s   o f   i n n o v a t i o n   i n d i c a t o r s   t o   a n s w e r   s t a n d a r d   q u e s t i o n s .   T h e n ,   o n e   c a n   a u t o m a t e   r o u t i n e s   t o   g e n e r a t e   c o m p o s i t e   i n f o r m a t i o n   r e p r e s e n t a t i o n s   ( " o n e - p a g e r s " )   t h a t   a d d r e s s   t h e   i s s u e s   a t   h a n d ,   t h e   w a y   t h a t   t h e   t a r g e t   u s e r s   w a n t .   ( c )   2 0 0 5   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 S e a r c h   T e c h n o l   I n c ,   R & D ,   N o r c r o s s ,   G A   3 0 0 7 1   U S A ;   G e o r g i a   T e c h ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   U S A 	 S e a r c h   T e c h n o l   I n c ,   R & D ,   4 9 6 0   P e a c h t r e e   I n d   B l v , S u i t e   2 3 0 ,   N o r c r o s s ,   G A   3 0 0 7 1   U S A . 	 a p o r t e r @ s e a r c h t e c h . c o m 	 K u m a r ,   A j i t / J - 1 6 1 7 - 2 0 1 5 ;   p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 	 K u m a r ,   A j i t / 0 0 0 0 - 0 0 0 3 - 3 2 5 5 - 5 0 5 4 ;   p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 	 	 	 C h e n   C . ,   2 0 0 3 ,   M A P P I N G   S C I   F R O N T I E R ;   C h e n   G T ,   2 0 0 3 ,   R A I R O - O P E R   R E S ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 5 1 / r o : 2 0 0 3 0 2 0 ;   D e   B r u i j n   H ,   2 0 0 4 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 6 ,   P 2 6 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 4 1 0 0 0 1 6 8 2 9 1 9 ;   E r n s t   H . ,   2 0 0 3 ,   W o r l d   P a t e n t   I n f o r m a t i o n ,   V 2 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 0 3 ) 0 0 0 7 7 - 2 ;   K o n t o s t a t h i s   A ,   2 0 0 4 ,   S U R V E Y   O F   T E X T   M I N I N G ,   P 1 8 5 ;   N e w m a n   N i l s   C . ,   2 0 0 1 ,   I N F O R M A T I O N   O U T L O O K ,   V 5 ,   P 2 4 ;   P o r t e r   A L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 7 3 0 2 9 2 5 8 ;   P o r t e r   A . L . ,   2 0 0 5 ,   T E C H   M I N I N G   E X P L O I T I ;   P O R T E R   A L ,   2 0 0 4 ,   G E T T I N G   W H A T   Y O U   N E E ;   S h i f f r i n   R M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 8 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 8 5 2 1 0 0 ;   T e i c h e r t   T ,   2 0 0 2 ,   I E M C - 2 0 0 2 :   I E E E   I N T E R N A T I O N A L   E N G I N E E R I N G   M A N A G E M E N T   C O N F E R E N C E ,   V O L S   I   A N D   I I ,   P R O C E E D I N G S ,   P 5 9 6 ,   D O I   1 0 . 1 1 0 9 / I E M C . 2 0 0 2 . 1 0 3 8 5 0 3 ;   W a t t s   R J ,   1 9 9 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 6 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 	 1 2 	 2 9 	 2 9 	 8 	 5 0 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 5 	 7 2 	 9 	 	 	 	 	 1 0 7 0 	 1 0 8 1 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 4 . 1 0 . 0 0 7 	 	 1 2 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 9 9 4 I D 	 W O S : 0 0 0 2 3 4 0 2 3 9 0 0 0 0 3 	 	 
 
 J 	 S t r e m e r s c h ,   S ;   V e r h o e f ,   P C 	 	 	 	 S t r e m e r s c h ,   S ;   V e r h o e f ,   P C 	 	 	 G l o b a l i z a t i o n   o f   a u t h o r s h i p   i n   t h e   m a r k e t i n g   d i s c i p l i n e :   D o e s   i t   h e l p   o r   h i n d e r   t h e   f i e l d ? 	 M A R K E T I N G   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 g l o b a l i z a t i o n ;   j o u r n a l   i m p a c t ;   j o u r n a l   d i v e r s i t y ;   j o u r n a l   c i t a t i o n s ;   p h i l o s o p h y   o f   s c i e n c e ;   b i b l i o m e t r i c s 	 C I T A T I O N   A N A L Y S I S ;   C O N S U M E R   R E S E A R C H ;   J O U R N A L S ;   P E R S P E C T I V E ;   E C O N O M I C S ;   P R O D U C T S ;   S C I E N C E ;   T R U T H 	 M a r k e t i n g   s c h o l a r s   h a v e   r e f l e c t e d   u p o n   t h e   m a r k e t i n g   d i s c i p l i n e ' s   i n t e r n a l   e v o l u t i o n   b e f o r e .   H o w e v e r ,   n o   p r i o r   s t u d y   h a s   a s s e s s e d   t h e   g l o b a l i z a t i o n   o f   a u t h o r s h i p   i n   o u r   d i s c i p l i n e ,   l e t   a l o n e   a s s e s s e d   i t s   c o n s e q u e n c e s   f o r   t h e   f i e l d .   T h i s   p a p e r   a d d r e s s e s   t h e   f o l l o w i n g   t w o   q u e s t i o n s :   ( 1 )   I s   t h e r e   e v i d e n c e   o f   i n c r e a s i n g   g l o b a l i z a t i o n   o f   a u t h o r s h i p   i n   t h e   m a r k e t i n g   d i s c i p l i n e ?   ( 2 )   I f   s o ,   d o e s   i t   h e l p   o r   h i n d e r   t h e   f i e l d ?   O u r   w o r k   s h o w s   e m p i r i c a l l y   h o w   t h e   g l o b a l i z a t i o n   o f   o u r   d i s c i p l i n e   e v o l v e d ,   h o w   U . S .   d o m i n a n c e   i s   f a d i n g ,   a n d   w h i c h   c o u n t r i e s   e x p e r i e n c e d   a   r i s e   i n   p r o d u c t i v i t y   o f   t h e i r   a f f i l i a t e   a n d   n a t i v e   s c h o l a r s .   G l o b a l i z a t i o n   h i n d e r s   t h e   f i e l d ,   b e c a u s e   i t   h a s   a   n e g a t i v e   e f f e c t   o n   t h e   i m p a c t   o f   s e v e r a l   m a j o r   j o u r n a l s   ( m o s t   i m p o r t a n t l y ,   t h e   J o u r n a l   o f   M a r k e t i n g   a n d   t h e   J o u r n a l   o f   M a r k e t i n g   R e s e a r c h ) .   G l o b a l i z a t i o n   h e l p s   t h e   f i e l d ,   b e c a u s e   i t   h a s   a   p o s i t i v e   e f f e c t   o n   t h e   d i v e r s i t y   o f   o u r   d i s c i p l i n e .   I m p o r t a n t   i m p l i c a t i o n s   o f   o u r   r e s e a r c h   a r e :   ( 1 )   J o u r n a l s   a n d   s p o n s o r i n g   o r g a n i z a t i o n s   s h o u l d   s t r i v e   f o r   m o r e   i n t e r n a t i o n a l   m e e t i n g s .   ( 2 )   E d i t o r s ,   r e v i e w e r s ,   a n d   a u t h o r s   s h o u l d   p a y   m o r e   a t t e n t i o n   t o   t h e   g l o b a l   r e l e v a n c e   o f   t h e   r e s e a r c h   t h e y   p u b l i s h ,   r e v i e w ,   a n d   s u b m i t .   ( 3 )   I n d i v i d u a l   r e s e a r c h e r s   s h o u l d   a i m   t o   b e   p a r t   o f   t h e   g l o b a l   c o m m u n i t y   o f   m a r k e t i n g   s c i e n t i s t s   t h r o u g h ,   f o r   i n s t a n c e ,   i n t e r n a t i o n a l   r e s e a r c h   v i s i t s . 	 E r a s m u s   U n i v ,   D e p t   M k t ,   S c h   E c o n ,   N L - 3 0 6 5   P A   R o t t e r d a m ,   N e t h e r l a n d s ;   E m o r y   U n i v ,   G o i z u e t a   B u s i n e s s   S c h ,   A t l a n t a ,   G A   3 0 3 2 2   U S A ;   U n i v   G r o n i n g e n ,   F a c   E c o n ,   N L - 9 7 0 0   A V   G r o n i n g e n ,   N e t h e r l a n d s 	 S t r e m e r s c h ,   S   ( r e p r i n t   a u t h o r ) ,   E r a s m u s   U n i v ,   D e p t   M k t ,   S c h   E c o n ,   B u r g m e e s t e r   O u d l a a n   5 0 ,   N L - 3 0 6 5   P A   R o t t e r d a m ,   N e t h e r l a n d s . 	 s t r e m e r s c h @ f e w . e u r . n l ;   p . c . v e r h o e f @ r u g . n l 	 V e r h o e f ,   P e t e r / E - 8 5 4 4 - 2 0 1 4 	 	 	 	 A d a i r   J G ,   2 0 0 2 ,   I N T   J   P S Y C H O L ,   V 3 7 ,   P 1 6 0 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 9 0 1 4 3 0 0 0 3 5 1 ;   A h m a d i   R ,   2 0 0 0 ,   M A R K E T   S C I ,   V 1 9 ,   P 2 7 9 ,   D O I   1 0 . 1 2 8 7 / m k s c . 1 9 . 3 . 2 7 9 . 1 1 7 9 9 ;   A N D E R S O N   P F ,   1 9 8 8 ,   J   C O N S U M   R E S ,   V 1 5 ,   P 1 3 3 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 1 5 3 ;   A N D E R S O N   P F ,   1 9 8 6 ,   J   C O N S U M   R E S ,   V 1 3 ,   P 1 5 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 0 5 8 ;   R o s e   G .   M . ,   2 0 0 0 ,   J   M A R K E T I N G   E D ,   V 2 2 ,   P 9 9 ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B a u s e r m a n   R ,   1 9 9 7 ,   I N T   J   P S Y C H O L ,   V 3 2 ,   P 1 0 7 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 9 9 7 4 0 0 9 0 8 ;   B e l s l e y   D . A . ,   1 9 8 0 ,   R E G R E S S I O N   D I A G N O S T I ;   C A M E R O N   A C ,   1 9 9 0 ,   J   E C O N O M E T R I C S ,   V 4 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 7 6 ( 9 0 ) 9 0 0 1 4 - K ;   C O T E   J A ,   1 9 9 1 ,   J   C O N S U M   R E S ,   V 1 8 ,   P 4 0 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 2 6 9 ;   E l b e r s e   A ,   2 0 0 3 ,   M A R K E T   S C I ,   V 2 2 ,   P 3 2 9 ,   D O I   1 0 . 1 2 8 7 / m k s c . 2 2 . 3 . 3 2 9 . 1 7 7 4 0 ;   H e l m   A . E . ,   2 0 0 3 ,   A M A   S U M M E R   E D   C   P ,   V 1 4 ,   P 1 9 8 ;   H U N T   S D ,   1 9 9 0 ,   J   M A R K E T I N G ,   V 5 4 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 8 1 2 ;   K A M A K U R A   W A ,   2 0 0 1 ,   J   M A R K E T I N G   R E S ,   V 3 8 ,   P 1 ,   D O I   1 0 . 1 5 0 9 / j m k r . 3 8 . 1 . 1 . 1 8 8 2 4 ;   K o c h e r   M G ,   2 0 0 1 ,   E C O N   J ,   V 1 1 1 ,   p F 4 0 5 ;   P E T E R   J P ,   1 9 8 3 ,   J   M A R K E T I N G ,   V 4 7 ,   P 1 1 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 4 0 4 ;   R O S E N Z W E I G   M R ,   1 9 9 2 ,   A M   P S Y C H O L ,   V 4 7 ,   P 7 1 8 ,   D O I   1 0 . 1 0 3 7 / / 0 0 0 3 - 0 6 6 X . 4 7 . 6 . 7 1 8 ;   S h u g a n   S M ,   2 0 0 3 ,   M A R K E T   S C I ,   V 2 2 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / m k s c . 2 2 . 1 . 1 . 1 2 8 4 8 ;   S H U G A N   S M ,   2 0 0 4 ,   M A R K E T   S C I ,   V 2 2 ,   P 4 3 7 ;   S P A K E   D F ,   1 9 9 7 ,   A M A   E D U C A T O R S   P   E N H A ,   P 1 9 1 ;   T e l l i s   G J ,   2 0 0 3 ,   M A R K E T   S C I ,   V 2 2 ,   P 1 8 8 ,   D O I   1 0 . 1 2 8 7 / m k s c . 2 2 . 2 . 1 8 8 . 1 6 0 4 1 ;   T e l l i s   G J ,   1 9 9 9 ,   J   M A R K E T I N G   R E S ,   V 3 6 ,   P 1 2 0 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 1 9 2 0 ;   T y a g i   R K ,   2 0 0 4 ,   M A R K E T   S C I ,   V 2 3 ,   P 3 3 5 ,   D O I   1 0 . 1 2 8 7 / m k s c . 1 0 3 0 . 0 0 3 8 ;   Y e a r l e y   S . ,   1 9 9 6 ,   S O C I O L O G Y   E N V   G L O B A L ;   Z I N K H A N   G M ,   1 9 9 2 ,   J   M A R K E T I N G ,   V 5 6 ,   P 8 0 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 0 4 4 	 2 5 	 2 9 	 2 9 	 0 	 1 0 	 I N S T   O P E R A T I O N S   R E S E A R C H     M A N A G E M E N T   S C I E N C E S 	 L I N T H I C U M   H T S 	 9 0 1   E L K R I D G E   L A N D I N G   R D ,   S T E   4 0 0 ,   L I N T H I C U M   H T S ,   M D   2 1 0 9 0 - 2 9 0 9   U S A 	 0 7 3 2 - 2 3 9 9 	 	 	 M A R K E T   S C I 	 M a r k .   S c i . 	 F A L 	 2 0 0 5 	 2 4 	 4 	 	 	 	 	 5 8 5 	 5 9 4 	 	 1 0 . 1 2 8 7 / m k s c . 1 0 5 0 . 0 1 5 2 	 	 1 0 	 B u s i n e s s 	 B u s i n e s s   &   E c o n o m i c s 	 9 9 8 M I 	 W O S : 0 0 0 2 3 4 3 2 2 5 0 0 0 0 6 	 	 
 
 J 	 G l o v e r ,   S W ;   B o w e n ,   S L 	 	 	 	 G l o v e r ,   S W ;   B o w e n ,   S L 	 	 	 B i b l i o m e t r i c   a n a l y s i s   o f   r e s e a r c h   p u b l i s h e d   i n   T r o p i c a l   M e d i c i n e   a n d   I n t e r n a t i o n a l   H e a l t h   1 9 9 6 - 2 0 0 3 	 T R O P I C A L   M E D I C I N E   &   I N T E R N A T I O N A L   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   b i b l i o m e t r i c s ;   h i s t o r i c a l   a r t i c l e ;   p e r i o d i c a l s ;   p u b l i s h i n g 	 R A N D O M I Z E D - T R I A L ;   M A L A R I A ;   C H I L D R E N ;   M O R T A L I T Y ;   B E D N E T S ;   N A T I O N S ;   I M P A C T 	 W e   e x a m i n e   t h e   b i b l i o m e t r i c   p r o f i l e   o f   T r o p i c a l   M e d i c i n e   a n d   I n t e r n a t i o n a l   H e a l t h   u s i n g   t h e   s u b j e c t s   o f   t h e   a r t i c l e s   p u b l i s h e d   a n d   t h e   g e o g r a p h i c a l   d i s t r i b u t i o n   o f   t h e   a u t h o r s .   T h e   m o s t   c o m m o n   s u b j e c t   a r e a s   o f   p a p e r s   p u b l i s h e d   d u r i n g   1 9 9 6 - 2 0 0 3   a r e   h i g h l i g h t e d ,   a n d   t h e   m o s t   c i t e d   p a p e r s   i n d i c a t e d . 	 C h r i s t i e   H o s p   N H S   T r u s t ,   M a n c h e s t e r   M 2 0   4 B X ,   L a n c s ,   E n g l a n d ;   B l a c k b u r n   R o y a l   I n f i r m ,   E   L a n c a s h i r e   H o s p   N H S   T r u s t ,   B l a c k b u r n   B B 2   3 L R ,   L a n c s ,   E n g l a n d 	 G l o v e r ,   S W   ( r e p r i n t   a u t h o r ) ,   C h r i s t i e   H o s p   N H S   T r u s t ,   M a n c h e s t e r   M 2 0   4 B X ,   L a n c s ,   E n g l a n d . 	 s g l o v e r @ p i c r . m a n . a c . u k 	 	 	 	 	 A n n a n   K ,   2 0 0 3 ,   S C I E N C E ,   V 2 9 9 ,   P 1 4 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 9 . 5 6 1 2 . 1 4 8 5 ;   B a l t u s s e n   A ,   2 0 0 4 ,   I N T E N S   C A R E   M E D ,   V 3 0 ,   P 9 0 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 4 - 2 1 9 5 - 7 ;   B i n k a   F N ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 1 4 7 ;   C A L Z A   L ,   1 9 9 5 ,   N A T U R E ,   V 3 7 4 ,   P 4 9 2 ,   D O I   1 0 . 1 0 3 8 / 3 7 4 4 9 2 a 0 ;   * I S I ,   2 0 0 3 ,   J   C I T A T I O N   R E P O R T S   2 ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   M a y   R M ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 1 ,   P 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 1 . 5 3 7 3 . 4 9 ;   M u l l e r   O ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 1 2 4 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 3 1 5 6 . 1 9 9 6 . d 0 1 - 1 3 . x ;   N e v i l l   C G ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 1 3 9 ;   S c h o o n b a e r t   D ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 7 3 9 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   T a y l o r   T E ,   1 9 9 8 ,   T R O P   M E D   I N T   H E A L T H ,   V 3 ,   P 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 3 1 5 6 . 1 9 9 8 . 0 0 1 6 6 . x ;   V e r h o e f f   F H ,   1 9 9 9 ,   T R O P   M E D   I N T   H E A L T H ,   V 4 ,   P 5 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 3 1 5 6 . 1 9 9 9 . 0 0 3 4 9 . x 	 1 4 	 2 9 	 2 9 	 0 	 9 	 B L A C K W E L L   P U B L I S H I N G   L T D 	 O X F O R D 	 9 6 0 0   G A R S I N G T O N   R D ,   O X F O R D   O X 4   2 D G ,   O X O N ,   E N G L A N D 	 1 3 6 0 - 2 2 7 6 	 	 	 T R O P   M E D   I N T   H E A L T H 	 T r o p .   M e d .   I n t .   H e a l t h 	 D E C 	 2 0 0 4 	 9 	 1 2 	 	 	 	 	 1 3 2 7 	 1 3 3 0 	 	 1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 5 6 . 2 0 0 4 . 0 1 3 3 1 . x 	 	 4 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h ;   T r o p i c a l   M e d i c i n e 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h ;   T r o p i c a l   M e d i c i n e 	 8 7 8 H Q 	 W O S : 0 0 0 2 2 5 6 3 7 8 0 0 0 1 2 	 1 5 5 9 8 2 6 5 	 
 
 J 	 R e i d ,   E O F 	 	 	 	 R e i d ,   E O F 	 	 	 E v o l u t i o n   o f   a   b o d y   o f   k n o w l e d g e :   A n   a n a l y s i s   o f   t e r r o r i s m   r e s e a r c h 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 T h i s   s t u d y   p r o v i d e s   a n   a n a l y s i s   o f   t h e   d e v e l o p m e n t   o f   c o n t e m p o r a r y   t e r r o r i s m   r e s e a r c h   i n   t h e   U n i t e d   S t a t e s .   U s i n g   o n - l i n e   b i b l i o m e t r i c s ,   t r a c i n g   a n d   c i t a t i o n   a n a l y s i s ,   i t   e x p l o r e s   h o w   t e r r o r i s m   r e s e a r c h e r s   i n t e r a c t e d   w i t h   o t h e r   k n o w l e d g e   p r o d u c e r s   t o   s h a p e   t h e   p e r c e p t i o n   o f   t e r r o r i s m .   T h e   r e s u l t s   i n d i c a t e   t h a t   t h e   r e s e a r c h   a r e a   w a s   i n f l u e n c e d   d i r e c t l y   b y   k n o w l e d g e   p r o d u c e r s   s u c h   a s   t h e   m e d i a   a n d   t h e   U . S .   g o v e r n m e n t .   T h e y   h a d   m a j o r   i m p a c t s   o n   t h e   d e f i n i t i o n s   o f   t e r r o r i s m ,   t h e   t y p e s   o f   d a t a   u s e d   i n   a n a l y s i s ,   a n d   t h e   d i f f u s i o n   o f   i d e a s .   T h i s   r e s u l t e d   i n   t h e   c r e a t i o n   o f   i n v i s i b l e   c o l l e g e s   o f   p r o - w e s t e r n   t e r r o r i s m   r e s e a r c h e r s   a n d   g e n e r a t i o n   o f   m a n y   t e r r o r i s m   s t u d i e s   f r o m   a   o n e - s i d e d   p e r s p e c t i v e   o f   t e r r o r i s m   f r o m   b e l o w   ( s m a l l   i n s u r g e n t   g r o u p s ) .   C o p y r i g h t   ( C )   1 9 9 7   E l s e v i e r   S c i e n c e   L t d 	 R U T G E R S   S T A T E   U N I V , S C H   C O M M U N   I N F O R M A T   &   L I B   S T U D I E S , N E W   B R U N S W I C K , N J   0 8 9 0 3 	 	 	 	 	 	 	 A B D U L L A H   S ,   1 9 9 0 ,   T H E S I S   U   I L L I N O I S   U R ;   A b s h i r e   D a v i d   M . ,   1 9 8 2 ,   W A S H I N G T O N   Q ,   V 5 ,   P 8 3 ;   A l e x a n d e r   Y . ,   1 9 7 8 ,   J   I N T   A F F ,   V 3 2 ,   P 1 0 1 ;   A L E X A N D E R   Y ,   1 9 7 8 ,   P O L I C E   S T U D I E S ,   V 1 ,   P 4 2 ;   A L E X A N D E R   Y ,   1 9 9 0 ,   T E R R O R I S M   I N T   R E S O U R ;   A L E X A N D E R   Y ,   1 9 8 4 ,   T E R R O R I S M   P O L I T I C A L ,   P 1 3 5 ;   A L E X A N D E R   Y ,   1 9 8 0 ,   I N T   T E R R O R I S M   C U R R E N ,   P 8 9 ;   A L E X A N D E R   Y ,   1 9 8 0 ,   T E R R O R I S M   T H R E A T   R E A ,   P 3 3 1 ;   A S T O N   C C ,   1 9 8 1 ,   C O N T   T E R R O R   S T U D I E S ,   P 7 5 ;   B I N G H A M   R D ,   1 9 8 0 ,   S O C I A L   S C I   Q ,   P 2 7 5 ;   * C O N G R   R E S   S E R V ,   1 9 9 1 ,   T E R R   U S   P O L   O P T ;   C O O P E R   H H A ,   1 9 7 7 ,   T E R R O R I S M   I N T E R D I S C I ,   P 1 4 1 ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   C R E L I N S T E N   R D ,   1 9 8 6 ,   C O N T   R E S   T E R R O R I S M ,   P 3 ;   C R E L I N S T E N   R D ,   1 9 8 8 ,   T E R R O S I S M ,   P 1 6 7 ;   C R E L I N S T E N   R D ,   1 9 8 6 ,   C O N T   R E S   T E R R O R I S M ,   P 4 1 9 ;   C R E N S H A W   M ,   1 9 8 1 ,   C O M P   P O L I T ,   V 1 3 ,   P 3 7 9 ,   D O I   1 0 . 2 3 0 7 / 4 2 1 7 1 7 ;   E P S T E I N   E C ,   1 9 7 7 ,   S T A N F O R D   J   I N T   S T U D I ,   V 1 2 ,   P 6 6 ;   E V A N S   E H ,   1 9 7 7 ,   T H E S I S   M I T ;   F o w l e r   W i l l i a m   W . ,   1 9 8 1 ,   T E R R O R I S M   D A T A   B A S E S ;   G A R V E Y   W .   D . ,   1 9 7 9 ,   C O M M U N I C A T I O N   E S S E N C ;   G E R B N E R   G ,   1 9 7 8 ,   A N A L   C O M M U N I C A T I O N   C ;   G U R R   T D ,   1 9 7 9 ,   P O L I T I C S   T E R R O R I S M ,   P 2 3 ;   G u r r   T .   R . ,   1 9 8 8 ,   C U R R E N T   P E R S P E C T I V E S ,   P 1 1 5 ;   H A A S   P M ,   1 9 9 2 ,   I N T   O R G A N ,   V 4 6 ,   P 1 ;   H E R M A N   E ,   1 9 8 3 ,   R E A L   T E R R O R   N E T W O R K ;   H e r m a n   E . ,   1 9 8 9 ,   T E R R O R I S M   I N D   E X P E R T ;   H E R M A N   E ,   1 9 8 1 ,   B E H A V   Q U A N T I T A T I V E   P ,   P 1 7 5 ;   H e r m a n   E S ,   1 9 8 8 ,   M A N U F A C T U R I N G   C O N S E N ;   J E N K I N S   B ,   1 9 8 5 ,   A R M E D   F O R C E S   J   I N T ,   V 1 2 2 ,   P 3 9 ;   J E N K I N S   B ,   1 9 7 7 ,   P 5 9 0 5   R A N D   C O R P ;   J E N K I N S   B ,   1 9 7 6 ,   W I L L   T E R R O R I S T S   G O   N ;   J E N K I N S   B ,   1 9 7 6 ,   P 5 6 1 1   F A R   R A N D   C O R P ;   J E N K I N S   B ,   1 9 8 0 ,   T E R R O R I S M   8 0 S ;   J e n k i n s   B r i a n   M . ,   1 9 8 1 ,   E M B A S S I E S   S I E G E   R E V ;   K L E I N   J T ,   1 9 8 5 ,   K N O W L E D G E   C R E A T I O N   D ,   P 1 1 7 ;   K O C H E N   M ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 8 0 0 5 ;   K U P P E R M A N   R H ,   1 9 8 0 ,   T E R R O R I S M   T H R E A T   R E A ;   L a k o s   A m o s ,   1 9 8 6 ,   I N T   T E R R O R I S M   B I B L I O ;   L A N C A S T E R   F W ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 6 0 8 ;   L A Q U E U R   W ,   1 9 7 8 ,   T E R R O S I S M   R E A D E R   H I S ,   P 2 5 1 ;   L e e   M a r t i n   A . ,   1 9 9 0 ,   U N R E L I A B L E   S O U R C E S   G ;   L E I M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 5 ;   M i c k o l u s   E d w a r d   F . ,   1 9 8 0 ,   R E S P O N D I N G   T E R R O R I S T ,   P 1 7 4 ;   M i c k o l u s   E d w a r d   F . ,   1 9 8 0 ,   L I T   T E R R O R I S M   S E L E C T ;   M I C K O L U S   E F ,   1 9 8 8 ,   T E R R O R I S M   1 9 8 0   1 9 8 7 ,   P 1 0 8 9 2 ;   M i l b a n k   D a v i d   L . ,   1 9 7 6 ,   I N T   T R A N S N A T I O N A L   T E ;   N E L S O N   P ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ;   N O R T O N   A R ,   1 9 7 9 ,   I N T   T E R R O R I S M   A N N O T A ,   P 1 0 8 9 2 ;   O C O N N O R   D O ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 9 ;   O N T I V E R O S   S R ,   1 9 8 6 ,   G L O B A L   T E R R O R I S M   H I S ;   P a u l l   P . ,   1 9 8 2 ,   T H E S I S   U   S A N   F R A N C I S ;   P R I C E   D J D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 1 1 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P R I T C H A R D   A ,   1 9 6 9 ,   J   D O C ,   V 2 3 ,   P 1 0 1 1 ;   R A P O P O R T   D ,   1 9 8 8 ,   I N S I D E   T E R R O R I S T   O R G ,   P 2 ;   R e i d   E . ,   1 9 9 3 ,   K N O W L E D G E   P O L I C Y ,   V 6 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 9 2 7 9 9 ;   R e i d   E .   F . ,   1 9 8 3 ,   A N A L   T E R R O R I S M   L I T   B ;   R E I D   E O F ,   1 9 9 2 ,   1 3 T H   N A T I O N A L   O N L I N E   M E E T I N G   :   P R O C E E D I N G S   -   1 9 9 2 ,   P 2 7 9 ;   S A N D L E R   T ,   1 9 8 3 ,   A M   P O L I T   S C I   R E V ,   V 7 7 ,   P 3 6 ,   D O I   1 0 . 2 3 0 7 / 1 9 5 6 0 1 0 ;   S c h m i d   A .   P . ,   1 9 8 3 ,   P O L I T I C A L   T E R R O R I S M ;   S c h m i d   A l e x   P . ,   1 9 8 8 ,   P O L I T I C A L   T E R R O R I S M ;   S C H M I D   A L E X   P . ,   1 9 8 2 ,   V I O L E N C E   A S   C O M M U N I C ;   S l a t e r   R . ,   1 9 8 8 ,   C U R R E N T   P E R S P E C T I V E S ,   P 1 ;   S M I T H   J E ,   1 9 9 1 ,   I D E A   B R O K E R   T H I N K   T A ;   S t o h l   M . ,   1 9 8 6 ,   G O V T   V I O L E N C E   R E P R E S ;   S t o h l   M . ,   1 9 7 9 ,   P O L I T I C S   T E R R O R I S M ,   P 1 ;   S Z U M S K I   B ,   1 9 8 6 ,   T E R R O R I S M   O P P O S I N G   V ;   * U S   C E N T R   I N T   A G ,   1 9 8 2 ,   8 1 1 0 1 6 3 0   P A   U S   C E N T R ;   * U S   C E N T R   I N T   A G ,   1 9 7 8 ,   R P 7 8 1 0 2 5 5 U   U S   C E N T R ;   * U S   C E N T R   I N T   A G ,   1 9 8 0 ,   8 0 1 0 0 7 2 U   P A   U S   C E N T R ;   * U S   C E N T R   I N T   A G ,   1 9 7 9 ,   R P 7 9 1 0 1 4 9   U S   C E N T R   I ;   * U S   C E N T R   I N T   A G ,   1 9 7 7 ,   7 7 1 0 0 3 4 1   R P   U S   C E N T R ;   * U S   N A T   S C I   F ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ,   V 1 ;   W a r d l a w   G ,   1 9 8 2 ,   P O L I T I C A L   T E R R O R I S M ;   W A R D L A W   G ,   1 9 8 8 ,   C U R R E N T   P E R S P E C T I V E S ,   P 3 0 6 ;   W a r d l a w   G . ,   1 9 8 9 ,   P O L I T I C A L   T E R R O R I S M ;   W i l k i n s o n   P . ,   1 9 8 6 ,   T E R R O R I S M   I N T   O R D E R ,   P 3 7 ;   W I T T E B O L S   J ,   1 9 9 1 ,   C O M M U N   T H E O R Y ,   V 1 ,   P 2 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 8 8 5 . 1 9 9 1 . t b 0 0 0 1 8 . x ;   W I T T E B O L S   J H ,   1 9 9 1 ,   M E D I A   A N A L               F A L ,   P 3 3 6 	 8 1 	 2 9 	 2 9 	 3 	 1 4 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D ,   E N G L A N D   O X 5   1 G B 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 J A N 	 1 9 9 7 	 3 3 	 1 	 	 	 	 	 9 1 	 1 0 6 	 	 1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 6 ) 0 0 0 5 2 - 0 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 W B 7 4 2 	 W O S : A 1 9 9 7 W B 7 4 2 0 0 0 0 7 	 	 
 
 J 	 S h a r m a ,   B ;   B o e t ,   S ;   G r a n t c h a r o v ,   T ;   S h i n ,   E ;   B a r r o w m a n ,   N J ;   B o u l d ,   M D 	 	 	 	 S h a r m a ,   B h a r a t ;   B o e t ,   S y l v a i n ;   G r a n t c h a r o v ,   T e o d o r ;   S h i n ,   E u n k y u n g ;   B a r r o w m a n ,   N i c h o l a s   J . ;   B o u l d ,   M .   D y l a n 	 	 	 T h e   h - i n d e x   o u t p e r f o r m s   o t h e r   b i b l i o m e t r i c s   i n   t h e   a s s e s s m e n t   o f   r e s e a r c h   p e r f o r m a n c e   i n   g e n e r a l   s u r g e r y :   A   p r o v i n c e - w i d e   s t u d y 	 S U R G E R Y 	 	 	 E n g l i s h 	 A r t   E x h i b i t   R e v i e w 	 	 	 	 	 	 	 G O O G L E - S C H O L A R ;   C I T A T I O N ;   U N I V E R S I T Y ;   V A L I D I T Y ;   J O U R N A L S ;   S C I E N C E ;   S C O P U S ;   W E B 	 B a c k g r o u n d .   T h e   h - i n d e x   i s   u s e d   a s   a n   o b j e c t i v e   m e a s u r e   o f   r e s e a r c h   i m p a c t .   I t s   v a l i d i t y ,   h o w e v e r ,   i s   n o t   k n o w n   i n   t h e   c o n t e x t   o f   g e n e r a l   s u r g e r y   a n d   c o m p a r i s o n s   w i t h   o t h e r   b i b l i o m e t r i c   i n d i c e s   a r e   l a c k i n g .   W e   s o u g h t   t o   e v a l u a t e   t h e   h - i n d e x   a s   a   r e l i a b l e   a n d   v a l i d   m e a s u r e   o f   r e s e a r c h   p e r f o r m a n c e   i n   g e n e r a l   s u r g e r y   a c r o s s   6   u n i v e r s i t i e s   i n   t h e   p r o v i n c e   o f   O n t a r i o ,   C a n a d a .   M e t h o d s .   B i b l i o m e t r i c   i n d i c e s   f o r   2 1 9   f a c u l t y   m e m b e r s   i n   g e n e r a l   s u r g e r y   w e r e   c a l c u l a t e d   u s i n g   t h e   S c o p u s   a n d   W e b   o f   S c i e n c e   o n l i n e   d a t a b a s e s .   W e   i n v e s t i g a t e d   a g r e e m e n t   b e t w e e n   t h e   d a t a b a s e s .   A   2 - w a y   a n a l y s i s   o f   v a r i a n c e   w a s   u s e d   t o   c o m p a r e   t h e   h - i n d e x   o f   s u r g e o n s   g r o u p e d   b y   i n s t i t u t i o n a l   a f f i l i a t i o n   a n d   a c a d e m i c   r a n k   a n d   t o   i d e n t i f y   t h e   r e l a t i v e   i m p a c t   o f   t h e s e   f a c t o r s   o n   d i f f e r e n t   b i b l i o m e t r i c   i n d i c e s .   R e s u l t s .   T h e   a g r e e m e n t   o n   h - i n d i c e s   b e t w e e n   t h e   S c o p u s   a n d   W e b   o f   S c i e n c e   w a s   p r o b l e m a t i c .   T h e   h - i n d e x   w a s   a s s o c i a t e d   m o r e   s t r o n g l y   w i t h   a c a d e m i c   r a n k   ( a c a d e m i c   r a n k   a c c o u n t e d   f o r   3 3 . 3 %   o f   r e s e a r c h e r ' s   h - i n d e x )   t h a n   o f   t h e   n u m b e r   o f   p u b l i c a t i o n s   ( 1 2 . 5 % )   o r   t h e   n u m b e r   o f   c i t a t i o n s   p e r   a u t h o r   ( 1 0 . 2 % ) .   T h e   n u m b e r   o f   c i t a t i o n s   p e r   p a p e r   w a s   n o t   a s s o c i a t e d   w i t h   a c a d e m i c   r a n k .   T h e   i n s t i t u t i o n a l   a f f i l i a t i o n   a f f e c t e d   b i b l i o m e t r i c   i n d i c e s   t o   a   s i m i l a r   d e g r e e   t o   a c a d e m i c   r a n k .   C o n c l u s i o n .   O u r   d a t a   s u g g e s t   b e t t e r   c o n s t r u c t   v a l i d i t y   f o r   t h e   h - i n d e x   t h a n   f o r   o t h e r   b i b l i o m e t r i c s ,   a l t h o u g h   t h e   a g r e e m e n t   o f   h - i n d e x   v a l u e s   b e t w e e n   d a t a b a s e s   c a n   b e   p r o b l e m a t i c   f o r   s o m e   r e s e a r c h e r s .   T h e   u s e   o f   t h e   h - i n d e x   a s   a   c r i t e r i o n - b a s e d   a s s e s s m e n t   a c r o s s   d i f f e r e n t   u n i v e r s i t i e s   i s   p r o b l e m a t i c   a n d   t h a t   i t   s h o u l d   b e   u s e d   a s   a   n o r m a t i v e   a s s e s s m e n t   t o o l ,   w i t h   c o m p a r i s o n s   w i t h   a   s p e c i f i e d   p o p u l a t i o n   o f   i n t e r e s t .   ( S u r g e r y   2 0 1 3 ; 1 5 3 : 4 9 3 - 5 0 1 . ) . 	 [ S h a r m a ,   B h a r a t ;   G r a n t c h a r o v ,   T e o d o r ;   S h i n ,   E u n k y u n g ]   U n i v   T o r o n t o ,   S t   M i c h a e l s   H o s p ,   D e p t   S u r g ,   T o r o n t o ,   O N   M 5 B   1 W 8 ,   C a n a d a ;   [ B o e t ,   S y l v a i n ]   U n i v   O t t a w a ,   O t t a w a   H o s p ,   D e p t   A n e s t h e s i o l ,   O t t a w a ,   O N ,   C a n a d a ;   [ B a r r o w m a n ,   N i c h o l a s   J . ]   C h i l d r e n s   H o s p   E a s t e r n   O n t a r i o ,   D e p t   P e d i a t ,   O t t a w a ,   O N ,   C a n a d a ;   [ B o u l d ,   M .   D y l a n ]   C h i l d r e n s   H o s p   E a s t e r n   O n t a r i o ,   D e p t   A n e s t h e s i o l ,   O t t a w a ,   O N ,   C a n a d a ;   [ B o e t ,   S y l v a i n ;   B o u l d ,   M .   D y l a n ]   U n i v   O t t a w a ,   A c a d   I n n o v a t   M e d   E d u c ,   O t t a w a ,   O N ,   C a n a d a 	 B o u l d ,   M D   ( r e p r i n t   a u t h o r ) ,   U n i v   O t t a w a ,   C h i l d r e n s   H o s p   E a s t e r n   O n t a r i o ,   D e p t   A n e s t h e s i o l ,   O t t a w a ,   O N ,   C a n a d a . 	 d b o u l d @ c h e o . o n . c a 	 b o e t ,   s y l v a i n / C - 3 9 8 3 - 2 0 1 1 ;   	 b o e t ,   s y l v a i n / 0 0 0 0 - 0 0 0 2 - 1 6 7 9 - 8 1 8 X ;   B o u l d ,   D y l a n / 0 0 0 0 - 0 0 0 3 - 1 6 7 5 - 4 6 6 X 	 A l l a n   W a t e r s   F a m i l y   P a t i e n t   S i m u l a t i o n   C e n t r e ,   S t .   M i c h a e l ' s   H o s p i t a l ,   U n i v e r s i t y   o f   T o r o n t o ,   T o r o n t o ,   O n t a r i o 	 F u n d e d   b y   t h e   A l l a n   W a t e r s   F a m i l y   P a t i e n t   S i m u l a t i o n   C e n t r e ,   S t .   M i c h a e l ' s   H o s p i t a l ,   U n i v e r s i t y   o f   T o r o n t o ,   T o r o n t o ,   O n t a r i o . 	 B a l l   P ,   2 0 0 7 ,   N A T U R E ,   V 4 4 8 ,   P 7 3 7 ,   D O I   1 0 . 1 0 3 8 / 4 4 8 7 3 7 a ;   B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B l a n d   M .   J . ,   1 9 8 6 ,   L A N C E T ,   V 3 2 7 ,   P 3 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 8 6 ) 9 0 8 3 7 - 8 ;   B o u l d   M D ,   2 0 1 1 ,   B R I T   J   A N A E S T H ,   V 1 0 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 9 3 / b j a / a e q 4 0 3 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   C h o i   M ,   2 0 0 9 ,   I N T   J   R A D I A T   O N C O L ,   V 7 4 ,   P 1 7 2 ,   D O I   1 0 . 1 0 1 6 / j . i j r o b p . 2 0 0 8 . 0 7 . 0 3 0 ;   D e v o s   P ,   2 0 0 6 ,   S T   H E A L   T ,   V 1 2 4 ,   P 5 4 3 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F u l l e r   C l i f t o n   D ,   2 0 0 9 ,   J   A m   C o l l   R a d i o l ,   V 6 ,   P 1 1 2 ,   D O I   1 0 . 1 0 1 6 / j . j a c r . 2 0 0 8 . 0 7 . 0 0 4 ;   H e d l e y - W h y t e   J ,   2 0 1 0 ,   A M   J   C L I N   P A T H O L ,   V 1 3 4 ,   P 1 8 5 ,   D O I   1 0 . 1 3 0 9 / A J C P M V A Y D 5 V 8 D L Z N ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K a n e   M T ,   2 0 0 1 ,   J   E D U C   M E A S ,   V 3 8 ,   P 3 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 5 - 3 9 8 4 . 2 0 0 1 . t b 0 1 1 3 0 . x ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M a n t h a   S ,   2 0 0 0 ,   A N E S T H   A N A L G ,   V 9 0 ,   P 5 9 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 3 9 - 2 0 0 0 0 3 0 0 0 - 0 0 0 1 8 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 4 4 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 3 . J N S 1 0 3 2 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R E S E A R C H   I n f o s o u r c e   I n c ,   2 0 1 1 ,   T O P   5 0   C A N   R E S   U   L I S ;   S t a t i s t i c s   C a n a d a ,   2 0 1 1 ,   Q   D E M   E S T 	 1 9 	 2 8 	 2 8 	 0 	 4 9 	 M O S B Y - E L S E V I E R 	 N E W   Y O R K 	 3 6 0   P A R K   A V E N U E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 3 9 - 6 0 6 0 	 	 	 S U R G E R Y 	 S u r g e r y 	 A P R 	 2 0 1 3 	 1 5 3 	 4 	 	 	 	 	 4 9 3 	 5 0 1 	 	 1 0 . 1 0 1 6 / j . s u r g . 2 0 1 2 . 0 9 . 0 0 6 	 	 9 	 S u r g e r y 	 S u r g e r y 	 1 1 3 F D 	 W O S : 0 0 0 3 1 6 6 5 1 0 0 0 0 0 9 	 2 3 4 6 5 9 4 2 	 
 
 J 	 K o s t o f f ,   R N ;   K o y t c h e f f ,   R G ;   L a u ,   C G Y 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   K o y t c h e f f ,   R a y m o n d   G . ;   L a u ,   C l i f f o r d   G .   Y . 	 	 	 T e c h n i c a l   s t r u c t u r e   o f   t h e   g l o b a l   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y   l i t e r a t u r e 	 J O U R N A L   O F   N A N O P A R T I C L E   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n a n o p a r t i c l e s ;   n a n o m a t e r i a l s ;   n a n o f a b r i c a t i o n ;   n a n o d e v i c e s ;   n a n o s y s t e m s ;   t e x t   m i n i n g ;   c i t a t i o n   a n a l y s i s 	 I N F R A S T R U C T U R E 	 T e x t   m i n i n g   w a s   u s e d   t o   e x t r a c t   t e c h n i c a l   i n t e l l i g e n c e   f r o m   t h e   o p e n   s o u r c e   g l o b a l   n a n o t e c h n o l o g y   a n d   n a n o s c i e n c e   r e s e a r c h   l i t e r a t u r e .   A n   e x t e n s i v e   n a n o t e c h n o l o g y / n a n o s c i e n c e - f o c u s e d   q u e r y   w a s   a p p l i e d   t o   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S C I / S S C I )   d a t a b a s e s .   T h e   n a n o t e c h n o l o g y / n a n o s c i e n c e   r e s e a r c h   l i t e r a t u r e   t e c h n i c a l   s t r u c t u r e   ( t a x o n o m y )   w a s   o b t a i n e d   u s i n g   c o m p u t a t i o n a l   l i n g u i s t i c s / d o c u m e n t   c l u s t e r i n g   a n d   f a c t o r   a n a l y s i s .   T h e   i n f r a s t r u c t u r e   ( p r o l i f i c   a u t h o r s ,   k e y   j o u r n a l s / i n s t i t u t i o n s / c o u n t r i e s ,   m o s t   c i t e d   a u t h o r s / j o u r n a l s / d o c u m e n t s )   f o r   e a c h   o f   t h e   c l u s t e r s   g e n e r a t e d   b y   t h e   d o c u m e n t   c l u s t e r i n g   a l g o r i t h m   w a s   o b t a i n e d   u s i n g   b i b l i o m e t r i c s .   A n o t h e r   n o v e l   a d d i t i o n   w a s   t h e   u s e   o f   p h r a s e   a u t o - c o r r e l a t i o n   m a p s   t o   s h o w   t e c h n i c a l   t h r u s t   a r e a s   b a s e d   o n   p h r a s e   c o - o c c u r r e n c e   i n   A b s t r a c t s ,   a n d   t h e   u s e   o f   p h r a s e - p h r a s e   c r o s s - c o r r e l a t i o n   m a p s   t o   s h o w   t e c h n i c a l   t h r u s t   a r e a s   b a s e d   o n   p h r a s e   r e l a t i o n s   d u e   t o   t h e   s h a r i n g   o f   c o m m o n   c o - o c c u r r i n g   p h r a s e s .   T h e   s i m i l a r   t o   4 0 0   m o s t   c i t e d   n a n o t e c h n o l o g y   p a p e r s   s i n c e   1 9 9 1   w e r e   g r o u p e d ,   a n d   t h e i r   c h a r a c t e r i s t i c s   g e n e r a t e d .   W h e r e a s   t h e   m a i n   a n a l y s i s   p r o v i d e d   t e c h n i c a l   t h r u s t s   o f   a l l   n a n o t e c h n o l o g y   p a p e r s   r e t r i e v e d ,   a n a l y s i s   o f   t h e   m o s t   c i t e d   p a p e r s   a l l o w e d   t h e i r   c h a r a c t e r i s t i c s   t o   b e   d i s p l a y e d .   F i n a l l y ,   m o s t   c i t e d   p a p e r s   f r o m   s e l e c t e d   t i m e   p e r i o d s   w e r e   e x t r a c t e d ,   a l o n g   w i t h   a l l   p u b l i c a t i o n s   f r o m   t h o s e   t i m e   p e r i o d s ,   a n d   t h e   i n s t i t u t i o n s   a n d   c o u n t r i e s   w e r e   c o m p a r e d   b a s e d   o n   t h e i r   r e p r e s e n t a t i o n   i n   t h e   m o s t   c i t e d   d o c u m e n t s   l i s t   r e l a t i v e   t o   t h e i r   r e p r e s e n t a t i o n   i n   t h e   m o s t   p u b l i c a t i o n s   l i s t . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   I n s t   D e f   A n a l ,   A l e x a n d r i a ,   V A   2 2 3 1 1   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 K A R Y P I S   G ,   2 0 0 5 ,   C L U T O   C L U S T E R I N G   T O O ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R . N . ,   2 0 0 7 ,   A D A 4 6 1 9 3 0   D T I C ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 4 - 9 ;   K o s t o f f   R N ,   2 0 0 6 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 8 ,   P 1 8 7 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 6 0 0 6 2 4 1 0 5 ;   * S C I ,   2 0 0 6 ,   C E R T   D A T   I N C L   H E R   D E ;   Z h a o   Y ,   2 0 0 5 ,   D A T A   M I N   K N O W L   D I S C ,   V 1 0 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 1 8 - 0 0 5 - 0 3 6 1 - 3 ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 	 1 0 	 2 8 	 2 9 	 0 	 1 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 1 3 8 8 - 0 7 6 4 	 	 	 J   N A N O P A R T   R E S 	 J .   N a n o p a r t .   R e s . 	 O C T 	 2 0 0 7 	 9 	 5 	 	 	 	 	 7 0 1 	 7 2 4 	 	 1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 2 4 - 8 	 	 2 4 	 C h e m i s t r y ,   M u l t i d i s c i p l i n a r y ;   N a n o s c i e n c e   &   N a n o t e c h n o l o g y ;   M a t e r i a l s   S c i e n c e ,   M u l t i d i s c i p l i n a r y 	 C h e m i s t r y ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   M a t e r i a l s   S c i e n c e 	 1 8 1 Y E 	 W O S : 0 0 0 2 4 7 4 7 1 5 0 0 0 0 1 	 	 
 
 J 	 S H A P I R O ,   F R 	 	 	 	 S H A P I R O ,   F R 	 	 	 O R I G I N S   O F   B I B L I O M E T R I C S ,   C I T A T I O N   I N D E X I N G ,   A N D   C I T A T I O N   A N A L Y S I S   -   T H E   N E G L E C T E D   L E G A L   L I T E R A T U R E 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S T A T E   S U P R E M E   C O U R T S ;   P R E C E D E N T 	 H i s t o r i a n s   o f   b i b l i o m e t r i c s   h a v e   n e g l e c t e d   l e g a l   b i b l i o m e t r i c s   a l m o s t   c o m p l e t e l y .   Y e t   b i b l i o m e t r i c s ,   c i t a t i o n   i n d e x i n g ,   a n d   c i t a t i o n   a n a l y s i s   a l l   a p p e a r   t o   h a v e   b e e n   p r a c t i c e d   i n   t h e   l e g a l   f i e l d   l o n g   b e f o r e   t h e y   w e r e   i n t r o d u c e d   i n t o   s c i e n t i f i c   l i t e r a t u r e .   P u b l i c a t i o n   c o u n t s   a r e   f o u n d   i n   l e g a l   w r i t i n g s   a s   e a r l y   a s   1 8 1 7 .   C i t a t i o n   i n d e x i n g   o r i g i n a t e d   w i t h   " t a b l e s   o f   c a s e s   c i t e d , "   w h i c h   d a t e   a t   l e a s t   a s   f a r   b a c k   a s   1 7 4 3 .   A   f u l l - f l e d g e d   c i t a t i o n   i n d e x   b o o k   w a s   p u b l i s h e d   i n   1 8 6 0 .   T w o   a m b i t i o u s   c i t a t i o n   a n a l y s e s   o f   c o u r t   d e c i s i o n s   a p p e a r e d   i n   1 8 9 4   a n d   1 8 9 5 . 	 	 S H A P I R O ,   F R   ( r e p r i n t   a u t h o r ) ,   Y A L E   U N I V , S C H   L A W , 4 0 1 A   Y A L E   S T N , N E W   H A V E N , C T   0 6 5 2 0 ,   U S A . 	 	 	 	 	 	 C A L D E I R A   G A ,   1 9 8 5 ,   A M   P O L I T   S C I   R E V ,   V 7 9 ,   P 1 7 8 ,   D O I   1 0 . 2 3 0 7 / 1 9 5 6 1 2 6 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   * C O M M   L A W   R E P ,   1 9 8 5 ,   1 8 T H   A N N   M E E T   R E P ,   P 3 4 3 ;   * C O M M   L I B   L E G   L I T ,   1 8 9 5 ,   7 T H   A N N   M E E T   A M   B A R ,   P 5 3 ;   D O U G L A S   S ,   1 7 8 3 ,   R E P O R T S   C A S E S   A R G U E D ;   F R I E D M A N   L M ,   1 9 8 1 ,   S T A N F O R D   L A W   R E V ,   V 3 3 ,   P 7 7 3 ,   D O I   1 0 . 2 3 0 7 / 1 2 2 8 4 0 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G r e e n l e a f   S . ,   1 8 2 1 ,   C O L L E C T I O N   C A S E S   O V E ;   G r i s w o l d   S t e p h e n   B . ,   1 8 7 6 ,   P U B L I C   L I B   U S   A M   T   1 ,   V 1 6 1 ,   P 1 6 9 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H E R T Z E L D H ,   1 9 8 7 ,   E N C Y   L I B R A R Y I N F O R M A T ,   V 4 2 ,   P 1 4 4 ;   H i g h   J . L . ,   1 8 8 2 ,   A M   L   R E V ,   V 1 6 ,   P 4 2 9 ;   H o f f e r   P e t e r   C h a r l e s ,   1 8 2 1 ,   S Y L L A B U S   C O U R S E   L E C T ;   H O F F M A N   D ,   1 8 1 7 ,   C O U R S E   L E G A L   S T U D Y ;   H u m p h r e y s   J a m e s ,   1 8 2 6 ,   O B S E R V A T I O N S   A C T U A L ;   L A B A T T   H J ,   1 9 6 0 ,   T A B L E   C A S E S   C A L I F O R N ;   L A N D E S   W M ,   1 9 7 6 ,   J   L A W   E C O N ,   V 1 9 ,   P 2 4 9 ,   D O I   1 0 . 1 0 8 6 / 4 6 6 8 6 8 ;   L A W A N I   S M ,   1 9 8 1 ,   L I B R I ,   V 3 1 ,   P 2 9 4 ;   M a g g s   D o u g l a s   B ,   1 9 3 0 ,   S O U T H   C A L I F   L A W   R E V ,   V 3 ,   P 1 8 1 ;   M E R R Y M A N   J H ,   1 9 7 7 ,   S O U T H E R N   C A L I F   L A W   R ,   V 5 0 ,   P 3 8 1 ;   M e r r y m a n   J H ,   1 9 5 4 ,   S T A N F O R D   L A W   R E V ,   V 6 ,   P 6 1 3 ,   D O I   1 0 . 2 3 0 7 / 1 2 2 6 4 9 3 ;   M o t t   R L ,   1 9 3 6 ,   A M   P O L I T   S C I   R E V ,   V 3 0 ,   P 2 9 5 ,   D O I   1 0 . 2 3 0 7 / 1 9 4 7 2 6 0 ;   P R I T C H A R D   A G ,   1 9 8 1 ,   B I B L I O M E T R I C S   B I B L I O ;   R A Y M O N D   R ,   1 7 4 3 ,   R E P O R T S   C A S E S   A R G U E D ,   V 1 ;   S h a p i r o   F r e d   R . ,   1 9 9 1 ,   Y A L E   L A W   J ,   V 1 0 0 ,   P 1 4 4 9 ,   D O I   1 0 . 2 3 0 7 / 7 9 6 6 9 6 ;   W A I T   W ,   1 8 7 2 ,   T A B L E   C A S E S   A F F I R M E D ;   1 9 4 8 ,   U S E   S H E P A R D S   C I T A T I O 	 2 7 	 2 8 	 2 9 	 0 	 2 	 J O H N   W I L E Y   &   S O N S   I N C 	 N E W   Y O R K 	 6 0 5   T H I R D   A V E ,   N E W   Y O R K ,   N Y   1 0 1 5 8 - 0 0 1 2 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 J U N 	 1 9 9 2 	 4 3 	 5 	 	 	 	 	 3 3 7 	 3 3 9 	 	 1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 6 ) 4 3 : 5 < 3 3 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - T 	 	 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 H V 3 6 0 	 W O S : A 1 9 9 2 H V 3 6 0 0 0 0 0 1 	 	 
 
 J 	 K h a n ,   N R ;   T h o m p s o n ,   C J ;   T a y l o r ,   D R ;   V e n a b l e ,   G T ;   W h a m ,   R M ;   M i c h a e l ,   L M ;   K l i m o ,   P 	 	 	 	 K h a n ,   N i c k a l u s   R . ;   T h o m p s o n ,   C l i n t o n   J . ;   T a y l o r ,   D o u g l a s   R . ;   V e n a b l e ,   G a r r e t t   T . ;   W h a m ,   R .   M a t t h e w ;   M i c h a e l ,   L .   M a d i s o n ,   I I ;   K l i m o ,   P a u l ,   J r . 	 	 	 A n   a n a l y s i s   o f   p u b l i c a t i o n   p r o d u c t i v i t y   f o r   1 2 2 5   a c a d e m i c   n e u r o s u r g e o n s   a n d   9 9   d e p a r t m e n t s   i n   t h e   U n i t e d   S t a t e s 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 h - i n d e x ;   a c a d e m i c   n e u r o s u r g e r y ;   b i b l i o m e t r i c s ;   c i t a t i o n   i m p a c t ;   S c o p u s ;   G o o g l e   S c h o l a r ;   W e b   o f   S c i e n c e ;   g - i n d e x ;   c o n t e m p o r a r y   h - i n d e x ;   m - q u o t i e n t 	 H - I N D E X ;   C I T A T I O N   A N A L Y S I S ;   S C H O L A R L Y   P R O D U C T I V I T Y ;   C L I N I C I A N - E D U C A T O R S ;   G E N D E R   D I S P A R I T I E S ;   P R O M O T I O N   C R I T E R I A ;   S E X - D I F F E R E N C E S ;   G O O G L E - S C H O L A R ;   I M P A C T ;   O U T P U T 	 O b j e c t .   B i b l i o m e t r i c s   i s   d e f i n e d   a s   t h e   s t u d y   o f   s t a t i s t i c a l   a n d   m a t h e m a t i c a l   m e t h o d s   u s e d   t o   q u a n t i t a t i v e l y   a n a l y z e   s c i e n t i f i c   l i t e r a t u r e .   T h e   a p p l i c a t i o n   o f   b i b l i o m e t r i c s   i n   n e u r o s u r g e r y   i s   i n   i t s   i n f a n c y .   T h e   a u t h o r s   c a l c u l a t e   a   n u m b e r   o f   p u b l i c a t i o n   p r o d u c t i v i t y   m e a s u r e s   f o r   a l m o s t   a l l   a c a d e m i c   n e u r o s u r g e o n s   a n d   d e p a r t m e n t s   w i t h i n   t h e   U S .   M e t h o d s .   T h e   h - i n d e x ,   g - i n d e x ,   m - q u o t i e n t ,   a n d   c o n t e m p o r a r y   h - i n d e x   ( h e - i n d e x )   w e r e   c a l c u l a t e d   f o r   1 2 2 5   a c a d e m i c   n e u r o s u r g e o n s   i n   9 9   ( o f   1 0 1 )   p r o g r a m s   l i s t e d   b y   t h e   A c c r e d i t a t i o n   C o u n c i l   f o r   G r a d u a t e   M e d i c a l   E d u c a t i o n   i n   J a n u a r y   2 0 1 3 .   T h r e e   c u r r e n t l y   a v a i l a b l e   c i t a t i o n   d a t a b a s e s   w e r e   u s e d :   G o o g l e   S c h o l a r ,   S c o p u s ,   a n d   W e b   o f   S c i e n c e .   B i b l i o m e t r i c   p r o f i l e s   w e r e   c r e a t e d   f o r   e a c h   s u r g e o n .   C o m p a r i s o n s   b a s e d   o n   a c a d e m i c   r a n k   ( t h a t   i s ,   c h a i r p e r s o n ,   p r o f e s s o r ,   a s s o c i a t e ,   a s s i s t a n t ,   a n d   i n s t r u c t o r ) ,   s e x ,   a n d   s u b s p e c i a l t i e s   w e r e   p e r f o r m e d .   D e p a r t m e n t s   w e r e   r a n k e d   b a s e d   o n   t h e   s u m m a t i o n   o f   i n d i v i d u a l   f a c u l t y   h - i n d i c e s .   C a l c u l a t i o n s   w e r e   c a r r i e d   o u t   f r o m   J a n u a r y   t o   F e b r u a r y   2 0 1 3 .   R e s u l t s .   T h e   m e d i a n   h - i n d e x ,   g - i n d e x ,   h e - i n d e x ,   a n d   m - q u o t i e n t   w e r e   1 1 ,   2 0 ,   8 ,   a n d   0 . 6 2 ,   r e s p e c t i v e l y .   A l l   i n d i c e s   d e m o n s t r a t e d   a   p o s i t i v e   r e l a t i o n s h i p   w i t h   i n c r e a s i n g   a c a d e m i c   r a n k   ( p   < 0 . 0 0 1 ) .   T h e   m e d i a n   h - i n d e x   w a s   1 1   f o r   m a l e s   ( n   =   1 1 4 4 )   a n d   8   f o r   f e m a l e s   ( n   =   8 1 ) .   T h e   h - i n d e x ,   g - i n d e x   a n d   h e - i n d e x   s i g n i f i c a n t l y   v a r i e d   b y   s e x   ( p   < 0 . 0 0 1 ) .   H o w e v e r ,   w h e n   c o r r e c t e d   f o r   a c a d e m i c   r a n k ,   t h i s   d i f f e r e n c e   w a s   n o   l o n g e r   s i g n i f i c a n t .   T h e r e   w a s   n o   d i f f e r e n c e   i n   t h e   m - q u o t i e n t   b y   s e x .   N e u r o s u r g e o n s   w i t h   s u b s p e c i a l t i e s   i n   f u n c t i o n a l / e p i l e p s y ,   p e r i p h e r a l   n e r v e ,   r a d i o s u r g e r y ,   n e u r o o n c o l o g y / s k u l l   b a s e ,   a n d   v a s c u l a r   h a v e   t h e   h i g h e s t   m e d i a n   h - i n d i c e s ;   g e n e r a l ,   p e d i a t r i c ,   a n d   s p i n e   n e u r o s u r g e o n s   h a v e   t h e   l o w e s t   m e d i a n   h - i n d i c e s .   B y   s u m m i n g   t h e   m a n u a l l y   c a l c u l a t e d   S c o p u s   h - i n d i c e s   o f   a l l   i n d i v i d u a l s   w i t h i n   a   d e p a r t m e n t ,   t h e   t o p   5   p r o g r a m s   f o r   p u b l i c a t i o n   p r o d u c t i v i t y   a r e   U n i v e r s i t y   o f   C a l i f o r n i a ,   S a n   F r a n c i s c o ;   B a r r o w   N e u r o l o g i c a l   I n s t i t u t e ;   J o h n s   H o p k i n s   U n i v e r s i t y ;   U n i v e r s i t y   o f   P i t t s b u r g h ;   a n d   U n i v e r s i t y   o f   C a l i f o r n i a ,   L o s   A n g e l e s .   C o n c l u s i o n s .   T h i s   s t u d y   r e p r e s e n t s   t h e   m o s t   d e t a i l e d   p u b l i c a t i o n   a n a l y s i s   o f   a c a d e m i c   n e u r o s u r g e o n s   a n d   t h e i r   p r o g r a m s   t o   d a t e .   T h e   r e s u l t s   f o r   t h e   m e t r i c s   p r e s e n t e d   s h o u l d   b e   v i e w e d   a s   b e n c h m a r k s   f o r   c o m p a r i s o n   p u r p o s e s .   I t   i s   o u r   h o p e   t h a t   o r g a n i z e d   n e u r o s u r g e r y   w i l l   a d o p t   a n d   c o n t i n u e   t o   r e f i n e   b i b l i o m e t r i c   p r o f i l i n g   o f   i n d i v i d u a l s   a n d   d e p a r t m e n t s . 	 [ K h a n ,   N i c k a l u s   R . ;   M i c h a e l ,   L .   M a d i s o n ,   I I ;   K l i m o ,   P a u l ,   J r . ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   D e p t   N e u r o s u r g ,   M e m p h i s ,   T N   3 8 1 6 3   U S A ;   [ T a y l o r ,   D o u g l a s   R . ;   V e n a b l e ,   G a r r e t t   T . ;   W h a m ,   R .   M a t t h e w ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   M e m p h i s ,   T N   3 8 1 6 3   U S A ;   [ M i c h a e l ,   L .   M a d i s o n ,   I I ;   K l i m o ,   P a u l ,   J r . ]   S e m m e s   M u r p h e y   N e u r o l   &   S p i n e   I n s t ,   M e m p h i s ,   T N   3 8 1 2 0   U S A ;   [ T h o m p s o n ,   C l i n t o n   J . ]   G e o r g e   W a s h i n g t o n   U n i v ,   S c h   P u b l   H l t h   &   H l t h   S e r v ,   W a s h i n g t o n ,   D C   U S A 	 K l i m o ,   P   ( r e p r i n t   a u t h o r ) ,   S e m m e s   M u r p h e y   N e u r o l   &   S p i n e   I n s t ,   6 3 2 5   H u m p h r e y s   B l v d ,   M e m p h i s ,   T N   3 8 1 2 0   U S A . 	 p k l i m o @ s e m m e s - m u r p h e y . c o m 	 	 	 	 	 A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   A o u n   S G ,   2 0 1 2 ,   W O R L D   N E U R O S U R G ;   A t a s o y l u   A A ,   2 0 0 3 ,   J   G E N   I N T E R N   M E D ,   V 1 8 ,   P 7 1 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 5 - 1 4 9 7 . 2 0 0 3 . 1 0 4 2 5 . x ;   B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B a l d o c k   C ,   2 0 0 9 ,   M E D   P H Y S ,   V 3 6 ,   P 1 0 4 3 ,   D O I   1 0 . 1 1 1 8 / 1 . 3 0 8 9 4 2 1 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B a r r e s   B A ,   2 0 0 6 ,   N A T U R E ,   V 4 4 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 2 1 3 3 a ;   B e a s l e y   B W ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 8 ,   P 7 2 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 8 . 9 . 7 2 3 ;   B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B l i g h   J ,   2 0 0 9 ,   A C A D   M E D ,   V 8 4 ,   P 1 1 6 1 ,   D O I   1 0 . 1 0 9 7 / A C M . 0 b 0 1 3 e 3 1 8 1 a c e 6 3 3 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   C a m p b e l l   P G ,   2 0 1 1 ,   J   N E U R O S U R G ,   V 1 1 5 ,   P 3 8 0 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 1 . 3 . J N S 1 0 1 1 7 6 ;   C h e e k   J ,   2 0 0 6 ,   Q U A L   H E A L T H   R E S ,   V 1 6 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 2 3 0 5 2 8 5 7 0 1 ;   C h o i   M ,   2 0 0 9 ,   I N T   J   R A D I A T   O N C O L ,   V 7 4 ,   P 1 7 2 ,   D O I   1 0 . 1 0 1 6 / j . i j r o b p . 2 0 0 8 . 0 7 . 0 3 0 ;   C o l e   J R ,   1 9 8 4 ,   A D V   M O T I V A T I O N   A C H I E ,   P 2 1 7 ;   C o s t a s   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 2 . 0 0 1 ;   C o s t a s   R ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 3 6 - 4 ;   E g g h e   L ,   2 0 0 6 ,   N E W S L E T T E R ,   V 2 ,   P 8 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E g g h e   L ,   2 0 1 0 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 4 ,   P 6 5 ;   E l o y   J A ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 8 6 5 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 4 0 3 9 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 8 ,   P 2 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 2 4 6 6 0 5 5 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G a s t e r   N ,   2 0 1 2 ,   B I O E S S A Y S ,   V 3 4 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / b i e s . 2 0 1 2 0 0 0 3 6 ;   H a r z i n g   A . W . ,   2 0 1 0 ,   P U B L I S H   P E R I S H   B O O K ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K a l r a   R R ,   2 0 1 3 ,   J   N E U R O S U R G - P E D I A T R ,   V 1 2 ,   P 2 6 2 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 3 . 6 . P E D S 1 3 1 1 2 ;   K h a n   N ,   2 0 1 3 ,   W O R L D   N E U R O S U R G ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   L O N G   J S ,   1 9 9 2 ,   S O C   F O R C E S ,   V 7 1 ,   P 1 5 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 9 9 7 1 ;   M o e d   H F ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 1 - 5 ;   P a g e l   P S ,   2 0 1 1 ,   A N A E S T H E S I A ,   V 6 6 ,   P 8 7 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 1 1 . 0 6 8 6 0 . x ;   P a t e l   V M ,   2 0 1 3 ,   M E D   P R I N   P R A C T ,   V 2 2 ,   P 1 7 8 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 3 4 1 7 5 6 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 4 4 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 3 . J N S 1 0 3 2 ;   P o y n a r d   T ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ;   Q u i g l e y   M R ,   2 0 1 2 ,   J   C A N C E R   E D U C ,   V 2 7 ,   P 4 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 3 1 8 7 - 0 1 2 - 0 3 6 3 - y ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   S a h e l   J A ,   2 0 1 1 ,   S C I   T R A N S L   M E D ,   V 3 ;   S a l e e m   T a i m u r ,   2 0 1 1 ,   I n t   A r c h   M e d ,   V 4 ,   P 2 5 ,   D O I   1 0 . 1 1 8 6 / 1 7 5 5 - 7 6 8 2 - 4 - 2 5 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   S p e a r m a n   C M ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 9 2 9 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ;   S u m m e r s   L H ,   N B E R   C   D I V   S C I   E N G   W ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 1 8 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 6 5 9 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 5 6 9 ;   S y m o n d s   M R E ,   2 0 0 6 ,   P L O S   O N E ,   V 1 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 1 2 7 ;   T u r a g a   K K ,   2 0 1 2 ,   J   S U R G   E D U C ,   V 6 9 ,   P 4 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j s u r g . 2 0 1 2 . 0 2 . 0 0 4 ;   W e n d l   M C ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 b ;   W i l l i a m s o n   J R ,   2 0 0 9 ,   A C S   C H E M   B I O L ,   V 4 ,   P 3 1 1 ,   D O I   1 0 . 1 0 2 1 / c b 9 0 0 1 0 1 4 ;   X i e   Y ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 4 7 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 5 ;   Z h a n g   C T ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 5 4 2 9 ;   Z h a n g   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 5 8 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 5 . 0 0 4 	 5 4 	 2 7 	 2 7 	 1 	 3 2 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 1 9 3 3 - 0 6 9 3 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 M A R 	 2 0 1 4 	 1 2 0 	 3 	 	 	 	 	 7 4 6 	 7 5 5 	 	 1 0 . 3 1 7 1 / 2 0 1 3 . 1 1 . J N S 1 3 1 7 0 8 	 	 1 0 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 A B 8 O B 	 W O S : 0 0 0 3 3 2 0 4 8 8 0 0 0 2 5 	 2 4 3 5 9 0 1 2 	 
 
 J 	 D a n t h i ,   N ;   W u ,   C O ;   S h i ,   P B ;   L a u e r ,   M 	 	 	 	 D a n t h i ,   N a r a s i m h a n ;   W u ,   C o l i n   O . ;   S h i ,   P e i b e i ;   L a u e r ,   M i c h a e l 	 	 	 P e r c e n t i l e   R a n k i n g   a n d   C i t a t i o n   I m p a c t   o f   a   L a r g e   C o h o r t   o f   N a t i o n a l   H e a r t ,   L u n g ,   a n d   B l o o d   I n s t i t u t e - F u n d e d   C a r d i o v a s c u l a r   R 0 1   G r a n t s 	 C I R C U L A T I O N   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   N a t i o n a l   H e a r t ;   L u n g ;   a n d   B l o o d   I n s t i t u t e   ( U ;   S ;   ) 	 S C I E N T I F I C   P R O D U C T I V I T Y 	 R a t i o n a l e :   F u n d i n g   d e c i s i o n s   f o r   c a r d i o v a s c u l a r   R 0 1   g r a n t   a p p l i c a t i o n s   a t   t h e   N a t i o n a l   H e a r t ,   L u n g ,   a n d   B l o o d   I n s t i t u t e   ( N H L B I )   l a r g e l y   h i n g e   o n   p e r c e n t i l e   r a n k i n g s .   I t   i s   n o t   k n o w n   w h e t h e r   t h i s   a p p r o a c h   e n a b l e s   t h e   h i g h e s t   i m p a c t   s c i e n c e .   O b j e c t i v e :   O u r   a i m   w a s   t o   c o n d u c t   a n   o b s e r v a t i o n a l   a n a l y s i s   o f   p e r c e n t i l e   r a n k i n g s   a n d   b i b l i o m e t r i c   o u t c o m e s   f o r   a   c o n t e m p o r a r y   s e t   o f   f u n d e d   N H L B I   c a r d i o v a s c u l a r   R 0 1   g r a n t s .   M e t h o d s   a n d   R e s u l t s :   W e   i d e n t i f i e d   1 4 9 2   i n v e s t i g a t o r - i n i t i a t e d   d e   n o v o   R 0 1   g r a n t   a p p l i c a t i o n s   t h a t   w e r e   f u n d e d   b e t w e e n   2 0 0 1   a n d   2 0 0 8   a n d   f o l l o w e d   t h e i r   p r o g r e s s   f o r   l i n k e d   p u b l i c a t i o n s   a n d   c i t a t i o n s   t o   t h o s e   p u b l i c a t i o n s .   O u r   c o p r i m a r y   e n d   p o i n t s   w e r e   c i t a t i o n s   r e c e i v e d   p e r   m i l l i o n   d o l l a r s   o f   f u n d i n g ,   c i t a t i o n s   o b t a i n e d   < 2   y e a r s   o f   p u b l i c a t i o n ,   a n d   2 - y e a r   c i t a t i o n s   f o r   e a c h   g r a n t ' s   m a x i m a l l y   c i t e d   p a p e r .   I n   7 6 5 4   g r a n t - y e a r s   o f   f u n d i n g   t h a t   g e n e r a t e d   $ 3 0 0 4   m i l l i o n   o f   t o t a l   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   a w a r d s ,   t h e   p o r t f o l i o   y i e l d e d   1 6   7 9 3   p u b l i c a t i o n s   t h a t   a p p e a r e d   b e t w e e n   2 0 0 1   a n d   2 0 1 2   ( m e d i a n   p e r   g r a n t ,   8 ;   2 5 t h   a n d   7 5 t h   p e r c e n t i l e s ,   4   a n d   1 4 ;   r a n g e ,   0 - 1 2 3 ) ,   w h i c h   r e c e i v e d   2   2 2 4   2 5 5   c i t a t i o n s   ( m e d i a n   p e r   g r a n t ,   1 0 4 8 ;   2 5 t h   a n d   7 5 t h   p e r c e n t i l e s ,   4 9 2   a n d   1 9 3 2 ;   r a n g e ,   0 - 1 6   2 9 5 ) .   W e   f o u n d   n o   a s s o c i a t i o n   b e t w e e n   p e r c e n t i l e   r a n k i n g s   a n d   c i t a t i o n   m e t r i c s ;   t h e   a b s e n c e   o f   a s s o c i a t i o n   p e r s i s t e d   e v e n   a f t e r   a c c o u n t i n g   f o r   c a l e n d a r   t i m e ,   g r a n t   d u r a t i o n ,   n u m b e r   o f   g r a n t s   a c k n o w l e d g e d   p e r   p a p e r ,   n u m b e r   o f   a u t h o r s   p e r   p a p e r ,   e a r l y   i n v e s t i g a t o r   s t a t u s ,   h u m a n   v e r s u s   n o n h u m a n   f o c u s ,   a n d   i n s t i t u t i o n a l   f u n d i n g .   A n   e x p l o r a t o r y   m a c h i n e   l e a r n i n g   a n a l y s i s   s u g g e s t e d   t h a t   g r a n t s   w i t h   t h e   b e s t   p e r c e n t i l e   r a n k i n g s   d i d   y i e l d   m o r e   m a x i m a l l y   c i t e d   p a p e r s .   C o n c l u s i o n s :   I n   a   l a r g e   c o h o r t   o f   N H L B I - f u n d e d   c a r d i o v a s c u l a r   R 0 1   g r a n t s ,   w e   w e r e   u n a b l e   t o   f i n d   a   m o n o t o n i c   a s s o c i a t i o n   b e t w e e n   b e t t e r   p e r c e n t i l e   r a n k i n g   a n d   h i g h e r   s c i e n t i f i c   i m p a c t   a s   a s s e s s e d   b y   c i t a t i o n   m e t r i c s . 	 [ D a n t h i ,   N a r a s i m h a n ]   N H L B I ,   A d v   T e c h n o l   &   S u r g   B r a n c h ,   B e t h e s d a ,   M D   2 0 8 2 4   U S A ;   [ W u ,   C o l i n   O . ;   S h i ,   P e i b e i ]   N H L B I ,   O f f   B i o s t a t   R e s ,   B e t h e s d a ,   M D   2 0 8 2 4   U S A ;   [ L a u e r ,   M i c h a e l ]   N H L B I ,   O f f   D i r e c t o r ,   D i v   C a r d i o v a s c   S c i ,   B e t h e s d a ,   M D   2 0 8 2 4   U S A 	 L a u e r ,   M   ( r e p r i n t   a u t h o r ) ,   N H L B I ,   D i v   C a r d i o v a s c   S c i ,   6 7 0 1   R o c k l e d g e   D r , R o o m   8 1 2 8 ,   B e t h e s d a ,   M D   2 0 8 2 4   U S A . 	 l a u e r m @ n h l b i . n i h . g o v 	 	 	 I n t r a m u r a l   N I H   H H S   [ Z 9 9   H L 9 9 9 9 9 9 ] 	 	 A l b e r t s   B ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 0 ,   P 7 8 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 4 0 3 1 9 ;   A z o u l a y   P ,   2 0 1 1 ,   R A N D   J   E C O N ,   V 4 2 ,   P 5 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 5 6 - 2 1 7 1 . 2 0 1 1 . 0 0 1 4 0 . x ;   B a l a b a n   R S ,   2 0 1 3 ,   J   G E N   P H Y S I O L ,   V 1 4 2 ,   P 1 7 7 ,   D O I   1 0 . 1 0 8 5 / j g p . 2 0 1 3 1 1 0 7 6 ;   D e m i c h e l i   V ,   2 0 0 7 ,   C O C H R A N E   D B   S Y S T   R E V ,   D O I   1 0 . 1 0 0 2 / 1 4 6 5 1 8 5 8 . M R 0 0 0 0 0 3 . p u b 2 ;   D i z i k e s   P . ,   M I T N E W S ;   F o r t i n   J M ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 6 5 2 6 3 ;   G a l i s   Z S ,   2 0 1 2 ,   C I R C   R E S ,   V 1 1 1 ,   P 8 3 3 ,   D O I   1 0 . 1 1 6 1 / C I R C R E S A H A . 1 1 2 . 2 7 9 5 9 6 ;   G r a v e s   N ,   2 0 1 1 ,   B R I T   M E D   J ,   V 3 4 3 ,   D O I   1 0 . 1 1 3 6 / b m j . d 4 7 9 7 ;   H a s t i e   T . ,   1 9 9 0 ,   G E N   A D D I T I V E   M O D E L S ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I o a n n i d i s   J P A ,   2 0 1 1 ,   N A T U R E ,   V 4 7 7 ,   P 5 2 9 ,   D O I   1 0 . 1 0 3 8 / 4 7 7 5 2 9 a ;   I s h w a r a n   H ,   2 0 1 0 ,   J   A M   S T A T   A S S O C ,   V 1 0 5 ,   P 2 0 5 ,   D O I   1 0 . 1 1 9 8 / j a s a . 2 0 0 9 . t m 0 8 6 2 2 ;   J a c o b   B A ,   2 0 1 1 ,   J   P U B L I C   E C O N ,   V 9 5 ,   P 1 1 6 8 ,   D O I   1 0 . 1 0 1 6 / j . j p u b e c o . 2 0 1 1 . 0 5 . 0 0 5 ;   K a p l a n   D ,   2 0 1 1 ,   F A S E B   J ,   V 2 5 ,   P 3 7 6 3 ,   D O I   1 0 . 1 0 9 6 / f j . 1 1 - 1 9 1 0 1 5 ;   L a n g e r   J S ,   2 0 1 2 ,   S C I E N C E ,   V 3 3 8 ,   P 1 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 3 0 9 4 7 ;   M a y o   N E ,   2 0 0 6 ,   J   C L I N   E P I D E M I O L ,   V 5 9 ,   P 8 4 2 ,   D O I   1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 5 . 1 2 . 0 0 7 ;   P r e s s   W H ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 2 ,   P 8 1 7 ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   N A T U R E ,   V 4 3 5 ,   P 1 0 0 3 	 1 8 	 2 7 	 2 8 	 1 	 1 6 	 L I P P I N C O T T   W I L L I A M S   &   W I L K I N S 	 P H I L A D E L P H I A 	 5 3 0   W A L N U T   S T ,   P H I L A D E L P H I A ,   P A   1 9 1 0 6 - 3 6 2 1   U S A 	 0 0 0 9 - 7 3 3 0 	 1 5 2 4 - 4 5 7 1 	 	 C I R C   R E S 	 C i r c . R e s . 	 F E B   1 4 	 2 0 1 4 	 1 1 4 	 4 	 	 	 	 	 6 0 0 	 6 0 6 	 	 1 0 . 1 1 6 1 / C I R C R E S A H A . 1 1 4 . 3 0 2 6 5 6 	 	 7 	 C a r d i a c   &   C a r d i o v a s c u l a r   S y s t e m s ;   H e m a t o l o g y ;   P e r i p h e r a l   V a s c u l a r   D i s e a s e 	 C a r d i o v a s c u l a r   S y s t e m   &   C a r d i o l o g y ;   H e m a t o l o g y 	 A G 7 G T 	 W O S : 0 0 0 3 3 5 5 8 7 0 0 0 0 1 0 	 2 4 4 0 6 9 8 3 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   C i c e r o ,   T 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   C i c e r o ,   T i n d a r o 	 	 	 W h a t   i s   t h e   a p p r o p r i a t e   l e n g t h   o f   t h e   p u b l i c a t i o n   p e r i o d   o v e r   w h i c h   t o   a s s e s s   r e s e a r c h   p e r f o r m a n c e ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   B i b l i o m e t r i c s ;   P u b l i c a t i o n   p e r i o d ;   S e n s i t i v i t y   a n a l y s i s ;   R e s e a r c h   p r o d u c t i v i t y ;   U n i v e r s i t i e s 	 C I T A T I O N ;   S C I E N C E ;   L E V E L 	 N a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s   a r e   c o n d u c t e d   i n   d i f f e r e n t   n a t i o n s   o v e r   v a r y i n g   p e r i o d s .   T h e   c h o i c e   o f   t h e   p u b l i c a t i o n   p e r i o d   t o   b e   o b s e r v e d   h a s   t o   a d d r e s s   o f t e n   c o n t r a s t i n g   n e e d s :   i t   h a s   t o   e n s u r e   t h e   r e l i a b i l i t y   o f   t h e   r e s u l t s   i s s u i n g   f r o m   t h e   e v a l u a t i o n ,   b u t   a l s o   r e a c h   t h e   a c h i e v e m e n t   o f   f r e q u e n t   a s s e s s m e n t s .   I n   t h i s   w o r k   w e   a t t e m p t   t o   i d e n t i f y   w h i c h   i s   t h e   m o s t   a p p r o p r i a t e   o r   o p t i m a l   p u b l i c a t i o n   p e r i o d   t o   b e   o b s e r v e d .   F o r   t h i s ,   w e   a n a l y z e   t h e   v a r i a t i o n   o f   i n d i v i d u a l   r e s e a r c h e r s '   p r o d u c t i v i t y   r a n k i n g s   w i t h   t h e   l e n g t h   o f   t h e   p u b l i c a t i o n   p e r i o d   w i t h i n   t h e   p e r i o d   2 0 0 3 - 2 0 0 8 ,   b y   t h e   o v e r   3 0 , 0 0 0   I t a l i a n   u n i v e r s i t y   s c i e n t i s t s   i n   t h e   h a r d   s c i e n c e s .   F i r s t   w e   a n a l y z e   t h e   v a r i a t i o n   i n   r a n k i n g s   r e f e r r i n g   t o   p a i r s   o f   c o n t i g u o u s   a n d   o v e r l a p p i n g   p u b l i c a t i o n   p e r i o d s ,   a n d   s h o w   t h a t   t h e   v a r i a t i o n s   r e d u c e   m a r k e d l y   w i t h   p e r i o d s   a b o v e   3   y e a r s .   T h e n   w e   w i l l   s h o w   t h e   s t r o n g   r a n d o m n e s s   o f   p e r f o r m a n c e   r a n k i n g s   o v e r   p u b l i c a t i o n   p e r i o d s   u n d e r   3   y e a r s .   W e   c o n c l u d e   t h a t   t h e   c h o i c e   o f   a   3   y e a r   p u b l i c a t i o n   p e r i o d   w o u l d   s e e m   r e l i a b l e ,   p a r t i c u l a r l y   f o r   p h y s i c s ,   c h e m i s t r y ,   b i o l o g y   a n d   m e d i c i n e . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   C i c e r o ,   T i n d a r o ]   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i ,   I - 0 0 1 8 5   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t ;   t i n d a r o . c i c e r o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 3 ,   P 7 6 2 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 2 . 0 0 3 ;   A b r a m o   G ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 4 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   A m a t   C B ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 2 3 - 8 ;   B h a t t a c h a r y a   A . ,   2 0 1 0 ,   D I S C U S S I O N   P A P E R S   U ;   B u r r e l l   Q L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 7 1 8 0 8 9 2 1 ;   B u t l e r   L ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 3 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 7 8 0 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   E R A ,   2 0 1 0 ,   E X C   R E S   A U S T R   E R A   I N ;   G e u n a   A ,   2 0 0 3 ,   M I N E R V A ,   V 4 1 ,   P 2 7 7 ,   D O I   1 0 . 1 0 2 3 / B : M I N E . 0 0 0 0 0 0 5 1 5 5 . 7 0 8 7 0 . b d ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 5 1 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 9 1 . 0 6 2 4 0 . 2 a ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   L u w e l   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   O E C D ,   2 0 1 0 ,   W O R K S H   P   O E C D   2 0 1 0 ,   P 1 8 7 ;   R e h n   C . ,   2 0 0 7 ,   B I B L I O M E T R I C   I N D I C A T ;   T R I V E D I   P K ,   1 9 9 3 ,   J   A P P L   E C O N O M ,   V 8 ,   P 9 3 ,   D O I   1 0 . 1 0 0 2 / j a e . 3 9 5 0 0 8 0 1 0 8 	 1 8 	 2 7 	 2 7 	 0 	 4 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 D E C 	 2 0 1 2 	 9 3 	 3 	 	 	 	 	 1 0 0 5 	 1 0 1 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 1 4 - 9 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 3 5 R D 	 W O S : 0 0 0 3 1 0 9 6 4 5 0 0 0 2 6 	 	 
 
 J 	 W a n g ,   J ;   S h a p i r a ,   P 	 	 	 	 W a n g ,   J u e ;   S h a p i r a ,   P h i l i p 	 	 	 F u n d i n g   a c k n o w l e d g e m e n t   a n a l y s i s :   a n   e n h a n c e d   t o o l   t o   i n v e s t i g a t e   r e s e a r c h   s p o n s o r s h i p   i m p a c t s :   t h e   c a s e   o f   n a n o t e c h n o l o g y 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 F u n d i n g   a c k n o w l e d g e m e n t   a n a l y s i s ;   R e s e a r c h   f u n d i n g ;   R e s e a r c h   s p o n s o r s h i p ;   N a n o t e c h n o l o g y ;   R e s e a r c h   o u t p u t s ;   P u b l i c a t i o n s ;   B i b l i o m e t r i c s 	 I N F O R M A T I O N - S C I E N C E ;   B A S I C   R E S E A R C H ;   C I T A T I O N ;   G R A N T S ;   M O N E Y 	 T h e r e   i s   i n c r e a s i n g   i n t e r e s t   i n   a s s e s s i n g   h o w   s p o n s o r e d   r e s e a r c h   f u n d i n g   i n f l u e n c e s   t h e   d e v e l o p m e n t   a n d   t r a j e c t o r y   o f   s c i e n c e   a n d   t e c h n o l o g y .   T r a d i t i o n a l l y ,   l i n k a g e s   b e t w e e n   r e s e a r c h   f u n d i n g   a n d   s u b s e q u e n t   r e s u l t s   a r e   h a r d   t o   t r a c k ,   o f t e n   r e q u i r i n g   a c c e s s   t o   s e p a r a t e   f u n d i n g   o r   p e r f o r m a n c e   r e p o r t s   r e l e a s e d   b y   r e s e a r c h e r s   o r   s p o n s o r s .   T r a c i n g   r e s e a r c h   s p o n s o r s h i p   a n d   o u t p u t   l i n k a g e s   i s   e v e n   m o r e   c h a l l e n g i n g   w h e n   r e s e a r c h e r s   r e c e i v e   m u l t i p l e   f u n d i n g   a w a r d s   a n d   c o l l a b o r a t e   w i t h   a   v a r i e t y   o f   d i f f e r e n t i a l l y - s p o n s o r e d   r e s e a r c h   c o l l e a g u e s .   T h i s   a r t i c l e   p r e s e n t s   a   n o v e l   b i b l i o m e t r i c   a p p r o a c h   t o   u n d e r t a k i n g   f u n d i n g   a c k n o w l e d g e m e n t   a n a l y s i s   w h i c h   l i n k s   r e s e a r c h   o u t p u t s   w i t h   t h e i r   f u n d i n g   s o u r c e s .   U s i n g   t h i s   a p p r o a c h   i n   t h e   c o n t e x t   o f   n a n o t e c h n o l o g y   r e s e a r c h ,   t h e   a r t i c l e   p r o b e s   t h e   f u n d i n g   p a t t e r n s   o f   l e a d i n g   c o u n t r i e s   a n d   a g e n c i e s   i n c l u d i n g   p a t t e r n s   o f   c r o s s - b o r d e r   r e s e a r c h   s p o n s o r s h i p .   W e   i d e n t i f y   m o r e   t h a n   9 1 , 5 0 0   n a n o t e c h n o l o g y   a r t i c l e s   p u b l i s h e d   w o r l d w i d e   d u r i n g   a   1 2 - m o n t h   p e r i o d   i n   2 0 0 8 - 2 0 0 9 .   A b o u t   6 7 %   o f   t h e s e   p u b l i c a t i o n s   i n c l u d e   f u n d i n g   a c k n o w l e d g e m e n t s   i n f o r m a t i o n .   W e   c o m p a r e   a r t i c l e s   r e p o r t i n g   f u n d i n g   w i t h   t h o s e   t h a t   d o   n o t   ( f o r   r e a s o n s   t h a t   m a y   i n c l u d e   r e l i a n c e   o n   i n t e r n a l   c o r e - f u n d i n g   r a t h e r   t h a n   e x t e r n a l   a w a r d s   a s   w e l l   a s   o m i s s i o n s   i n   r e p o r t i n g ) .   W h i l e   w e   f i n d   s o m e   c o u n t r y   a n d   f i e l d   d i f f e r e n c e s ,   w e   j u d g e   t h a t   t h e   l e v e l   o f   r e p o r t i n g   o f   f u n d i n g   s o u r c e s   i s   s u f f i c i e n t l y   h i g h   t o   p r o v i d e   a   b a s i s   f o r   a n a l y s i s .   T h e   f u n d i n g   a c k n o w l e d g e m e n t   d a t a   i s   u s e d   t o   c o m p a r e   n a n o t e c h n o l o g y   f u n d i n g   p o l i c i e s   a n d   p r o g r a m s   i n   s e l e c t e d   c o u n t r i e s   a n d   t o   e x a m i n e   t h e i r   i m p a c t s   o n   s c i e n t i f i c   o u t p u t .   W e   a l s o   e x a m i n e   t h e   i n t e r n a t i o n a l i z a t i o n   o f   r e s e a r c h   f u n d i n g   t h r o u g h   t h e   i n t e r p l a y   o f   v a r i o u s   f u n d i n g   s o u r c e s   a t   n a t i o n a l   a n d   o r g a n i z a t i o n a l   l e v e l s .   W e   f i n d   t h a t   w h i l e   m o s t   n a n o t e c h n o l o g y   f u n d i n g   i s   n a t i o n a l l y - o r i e n t e d ,   i n t e r n a t i o n a l i z a t i o n   a n d   k n o w l e d g e   e x c h a n g e   d o e s   o c c u r   a s   r e s e a r c h e r s   c o l l a b o r a t e   a c r o s s   b o r d e r s .   O u r   m e t h o d   o f f e r s   a   n e w   a p p r o a c h   n o t   o n l y   i n   i d e n t i f y i n g   t h e   f u n d i n g   s o u r c e s   o f   p u b l i c a t i o n s   b u t   a l s o   i n   f e a s i b l y   u n d e r t a k i n g   l a r g e - s c a l e   a n a l y s e s   a c r o s s   s c i e n t i f i c   f i e l d s ,   i n s t i t u t i o n s   a n d   c o u n t r i e s . 	 [ W a n g ,   J u e ]   F l o r i d a   I n t   U n i v ,   D e p t   P u b l   A d m ,   M i a m i ,   F L   3 3 1 9 9   U S A ;   [ S h a p i r a ,   P h i l i p ]   U n i v   M a n c h e s t e r ,   M a n c h e s t e r   B u s i n e s s   S c h ,   M a n c h e s t e r   I n s t   I n n o v a t   R e s ,   M a n c h e s t e r   M 1 3   9 P L ,   L a n c s ,   E n g l a n d ;   [ S h a p i r a ,   P h i l i p ]   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   A t l a n t a ,   G A   3 0 3 3 2   U S A 	 W a n g ,   J   ( r e p r i n t   a u t h o r ) ,   F l o r i d a   I n t   U n i v ,   D e p t   P u b l   A d m ,   M i a m i ,   F L   3 3 1 9 9   U S A . 	 j w a n g @ f i u . e d u ;   p s h a p i r a @ m b s . a c . u k 	 S h a p i r a ,   P h i l i p / E - 4 6 3 8 - 2 0 1 1 ;   W a n g ,   J u e / P - 6 1 6 8 - 2 0 1 4 	 S h a p i r a ,   P h i l i p / 0 0 0 0 - 0 0 0 3 - 2 4 8 8 - 5 9 8 5 ;   W a n g ,   J u e / 0 0 0 0 - 0 0 0 2 - 3 4 0 1 - 7 1 3 X 	 C e n t e r   f o r   N a n o t e c h n o l o g y   i n   S o c i e t y   a t   A r i z o n a   S t a t e   U n i v e r s i t y   ( C N S - A S U )   u n d e r   N a t i o n a l   S c i e n c e   F o u n d a t i o n   [ 0 5 3 1 1 9 4 ] 	 T h i s   r e s e a r c h   w a s   s u p p o r t e d   i n   p a r t   b y   t h e   C e n t e r   f o r   N a n o t e c h n o l o g y   i n   S o c i e t y   a t   A r i z o n a   S t a t e   U n i v e r s i t y   ( C N S - A S U )   u n d e r   N a t i o n a l   S c i e n c e   F o u n d a t i o n   A w a r d   0 5 3 1 1 9 4 .   T h e   a u t h o r s   g r a t e f u l l y   a c k n o w l e d g e   c o m m e n t s   a n d   s u g g e s t i o n s   r e c e i v e d   f r o m   I s m a e l   R a f o l s ,   L u c i a n o   K a y   a n d   A b d u l l a h   G o k .   T h e   f i n d i n g s   i n   t h i s   a r t i c l e   a r e   t h o s e   o f   t h e   a u t h o r s   a n d   d o   n o t   n e c e s s a r i l y   r e f l e c t   t h e   v i e w s   o f   t h e   N a t i o n a l   S c i e n c e   F o u n d a t i o n   a n d   t h e   o t h e r s . 	 A d a m s   J .   D . ,   1 9 9 8 ,   A N N   E C   S T A T ,   V 4 9 ,   P 1 2 7 ;   B a i r d   D . ,   2 0 0 4 ,   D I S C O V E R I N G   N A N O S C A L ;   B a k e r   S ,   2 0 0 5 ,   B U S   W E E K ,   P 6 4 ;   B o y a c k   K W ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 3 0 ;   B r a u n   D ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 8 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 2 - 4 ;   B R O A D H E A D   R S ,   1 9 7 6 ,   S O C   P R O B L ,   V 2 3 ,   P 3 2 5 ,   D O I   1 0 . 1 5 2 5 / s p . 1 9 7 6 . 2 3 . 3 . 0 3 a 0 0 0 8 0 ;   B u t l e r   L ,   2 0 0 1 ,   R E S   E V A L U A T ,   V 1 0 ,   P 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 1 7 8 1 7 7 7 1 4 1 ;   C a m p b e l l   D ,   2 0 1 0 ,   A M   J   E V A L ,   V 3 1 ,   P 6 6 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 9 3 5 4 7 7 4 ;   C r o n i n   B ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 4 0 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 3 ;   D r e x l e r   E r i c   K ,   1 9 8 6 ,   E N G I N E S   C R E A T I O N   C O M ;   E u r o p e a n   C o m m i s s i o n ,   2 0 0 4 ,   E U R   S T R A T   N A N ;   E u r o p e a n   C o m m i s s i o n ,   2 0 0 9 ,   N A N   N A N   A C T   P L A N   E U R ;   G a u g h a n   M ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 5 2 ;   G r i l i c h e s   Z ,   1 9 8 5 ,   W 1 5 4 7   N B E R ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 5 8 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - O ;   H e i n z e   T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 1 0 8 - 6 ;   H I C K S   D ,   2 0 0 2 ,   B I B L I O M E T R I C   A N A L   C O ;   H u a n g   Z ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 8 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 6 - 9 1 4 7 - 9 ;   J o i n t   E c o n o m i c   C o m m i t t e e ,   2 0 0 7 ,   N A N   F U T   C O M   S O O N   Y O U ;   K E A R N E S   M ,   2 0 0 9 ,   E S R C   P R O J E C T   S T R A T E G ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   L e w i s o n   G ,   2 0 0 3 ,   I N T   J   L A N G   C O M M   D I S ,   V 3 8 ,   P 4 8 ;   L I C H T E N B E R G   F R ,   1 9 8 5 ,   W O R K S H   F E D   R O L   R E S   D ,   P 1 1 5 ;   L U X   R E S E A R C H ,   2 0 0 6 ,   N A N   R E P ;   L u x   R e s e a r c h ,   2 0 0 4 ,   N A N   R E P   I N V   O V   M A R K ;   * L U X   R E S ,   2 0 0 7 ,   T O P   N A T   N A N   S E E   T H E I ;   M A N S F I E L D   E ,   1 9 8 0 ,   A M   E C O N   R E V ,   V 7 0 ,   P 8 6 3 ;   M A N S F I E L D   E ,   1 9 8 1 ,   H A R V A R D   B U S   R E V ,   V 5 9 ,   P 9 8 ;   M a r t i n   B . ,   1 9 9 6 ,   R E L A T I O N S H I P   P U B L I C L ;   M C A L L I S T E R   P R ,   1 9 8 3 ,   I E E E   T   E N G   M A N A G E ,   V 3 0 ,   P 4 ;   * O T A ,   1 9 8 6 ,   O T A T M S E T 3 6   U S   C   O F F ;   * O T A ,   1 9 9 1 ,   O T A S E T 4 9 0   U S   C   O F F   T ;   P a a s i   M ,   1 9 9 8 ,   E C   S Y S T E M S ,   V 2 2 ,   P 2 1 7 ;   P A V I T T   K ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 7 4 - Z ;   P a y n e   A .   A . ,   2 0 0 3 ,   A D V   E C   A N A L   P O L I C Y ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 2 2 1 7 / B M M . 1 4 . 8 4 ;   P C A S T   ( P r e s i d e n t ' s   C o u n c i l   o f   A d v i s o r s   o n   S c i e n c e   a n d   T e c h n o l o g y ) ,   2 0 0 5 ,   N A T   N A N   I N   5   Y E A R S   A ;   P E T E R S O N   C ,   1 9 9 1 ,   N A N O T E C H N O L O G Y   R A C E ;   P o r t e r   A L ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 6 6 - y ;   P o r t e r   A L ,   2 0 0 9 ,   J   N A N O P A R T   R E S ,   V 1 1 ,   P 1 0 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 6 0 7 - 0 ;   R I G B Y   J ,   2 0 1 1 ,   6 1 1   U   M A N C H   M A N C H   B U ;   R o c o   M i h a i l   C . ,   2 0 0 7 ,   H D B   N A N O S C I E N C E   E N G ;   S a n d s t r o m   U ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 3 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 2 2 - 2 ;   S a r e w i t z   D ,   1 9 9 7 ,   I S S U E S   S C I   T E C H N O L ,   V 1 3 ,   P 2 9 ;   S A R G E N T   J F ,   2 0 0 8 ,   R L 3 4 4 9 3   C   R E S   S E R V ;   * S C I   T E C H N   C O M M ,   2 0 0 4 ,   S C I   T E C H N   5   R E P ;   S H A P I R A   P ,   2 0 0 7 ,   D G R T D 2 0 0 5 M 0 1 0 2   E U R   C ;   S h a p i r a   P ,   2 0 1 0 ,   N A T U R E ,   V 4 6 8 ,   P 6 2 7 ,   D O I   1 0 . 1 0 3 8 / 4 6 8 6 2 7 a ;   S O L O W   R M ,   1 9 5 7 ,   R E V   E C O N   S T A T ,   V 3 9 ,   P 3 1 2 ,   D O I   1 0 . 2 3 0 7 / 1 9 2 6 0 4 7 ;   T A K E M U R A   M ,   2 0 0 5 ,   S T R A T E G I C   P R O M O T I O N ;   T E R L E C K Y J   N E ,   1 9 8 5 ,   W O R K S H   F E D   R O L   R E S   D ,   P 1 5 1 ;   T e r l e c k y j   N .   E . ,   1 9 7 4 ,   E F F E C T S   R   D   P R O D U C T I ;   * T H O M S   R E U T ,   2 0 1 0 ,   F U N D   A C K N ;   T r o c h i m   W M ,   2 0 0 8 ,   A M   J   E V A L ,   V 2 9 ,   P 8 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 7 3 0 9 2 8 0 ;   U L D R I C H   J ,   2 0 0 3 ,   N E X T   B I G   T H I N G   R E A L L ;   W O O L G A R   L ,   2 0 1 0 ,   E R A W T A C H   R E S   I N V   R E P ;   Y o u t i e   J ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 8 - 9 3 6 0 - 9 	 5 6 	 2 7 	 2 8 	 4 	 5 1 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 1 1 	 8 7 	 3 	 	 	 	 	 5 6 3 	 5 8 6 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 2 - 5 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 3 P S 	 W O S : 0 0 0 2 8 9 7 9 2 6 0 0 0 0 9 	 	 
 
 J 	 F r a n d s e n ,   T F ;   N i c o l a i s e n ,   J 	 	 	 	 F r a n d s e n ,   T o v e   F a b e r ;   N i c o l a i s e n ,   J e p p e 	 	 	 W h a t   i s   i n   a   n a m e ?   C r e d i t   a s s i g n m e n t   p r a c t i c e s   i n   d i f f e r e n t   d i s c i p l i n e s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C r e d i t   a s s i g n m e n t ;   A l p h a b e t i z a t i o n ;   A u t h o r s h i p ;   M u l t i - a u t h o r s h i p ;   B i b l i o m e t r i c s 	 C O R E   J O U R N A L S ;   A U T H O R   O R D E R ;   S C I E N T I F I C   C O L L A B O R A T I O N ;   S C H O L A R L Y   C O M M U N I C A T I O N ;   E C O N O M I C S   J O U R N A L S ;   M E D I C A L   J O U R N A L S ;   A R T I C L E S ;   S C I E N C E ;   P U B L I C A T I O N S ;   H Y P E R A U T H O R S H I P 	 T h e   p a p e r   r e v i e w s   t h e   l i t e r a t u r e   o n   d i s c i p l i n a r y   c r e d i t   a s s i g n m e n t   p r a c t i c e s ,   a n d   p r e s e n t s   t h e   r e s u l t s   o f   a   l o n g i t u d i n a l   s t u d y   o f   c r e d i t   a s s i g n m e n t   p r a c t i c e s   i n   t h e   f i e l d s   o f   e c o n o m i c s ,   h i g h   e n e r g y   p h y s i c s ,   a n d   i n f o r m a t i o n   s c i e n c e .   T h e   p r a c t i c e   o f   a l p h a b e t i z a t i o n   o f   a u t h o r s h i p   i s   d e m o n s t r a t e d   t o   v a r y   s i g n i f i c a n t l y   b e t w e e n   t h e   f i e l d s .   A   s l i g h t   i n c r e a s e   i s   f o u n d   t o   h a v e   t a k e n   p l a c e   i n   e c o n o m i c s   d u r i n g   t h e   l a s t   3 0   y e a r s   ( 1 9 7 8 - 2 0 0 7 ) .   A   s u b s t a n t i a l   d e c r e a s e   i s   f o u n d   t o   h a v e   t a k e n   p l a c e   i n   i n f o r m a t i o n   s c i e n c e   d u r i n g   t h e   s a m e   p e r i o d .   H i g h   e n e r g y   p h y s i c s   i s   f o u n d   t o   b e   c h a r a c t e r i s e d   b y   a   h i g h   a n d   s t a b l e   s h a r e   o f   a l p h a b e t i z e d   m u l t i - a u t h o r s h i p s   d u r i n g   t h e   i n v e s t i g a t e d   p e r i o d   ( 1 9 9 0 - 2 0 0 7 ) .   I t   i s   i m p o r t a n t   t o   b e   a w a r e   o f   s u c h   d i s c i p l i n a r y   d i f f e r e n c e s   w h e n   c o n d u c t i n g   b i b l i o m e t r i c   a n a l y s e s .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ F r a n d s e n ,   T o v e   F a b e r ]   U n i v   S o   D e n m a r k ,   D K - 5 2 3 0   O d e n s e   M ,   D e n m a r k ;   [ N i c o l a i s e n ,   J e p p e ]   R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   D K - 2 3 0 0   C o p e n h a g e n   S ,   D e n m a r k 	 F r a n d s e n ,   T F   ( r e p r i n t   a u t h o r ) ,   U n i v   S o   D e n m a r k ,   C a m p u s v e j   5 5 ,   D K - 5 2 3 0   O d e n s e   M ,   D e n m a r k . 	 t o f r @ l i t c u l . s d u . d k ;   j n i @ d b . d k 	 F r a n d s e n ,   T o v e / A - 6 1 8 5 - 2 0 1 2 	 F r a n d s e n ,   T o v e / 0 0 0 0 - 0 0 0 2 - 8 9 8 3 - 5 0 0 9 	 	 	 A s t r o m   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 9 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 6 7 ;   A x a r l o g l o u   K ,   2 0 0 3 ,   J   E U R   E C O N   A S S O C ,   V 1 ,   P 1 4 0 2 ,   D O I   1 0 . 1 1 6 2 / 1 5 4 2 4 7 6 0 3 3 2 2 7 5 2 5 8 4 ;   B a e r l o c h e r   M O ,   2 0 0 7 ,   J   I N V E S T   M E D ,   V 5 5 ,   P 1 7 4 ,   D O I   1 0 . 2 3 1 0 / 6 6 5 0 . 2 0 0 7 . 0 6 0 4 4 ;   B a t e s   T ,   2 0 0 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 2 ,   P 8 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 2 . 1 . 8 6 ;   B e e d   C ,   1 9 9 6 ,   J   P O S T   K E Y N E S I A N   E C ,   V 1 8 ,   P 3 6 9 ;   B i r n h o l t z   J P ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 2 2 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 8 4 ;   B i r n h o l t z   J P ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 7 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 8 0 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r a u n i n g e r   M ,   2 0 0 3 ,   K Y K L O S ,   V 5 6 ,   P 1 7 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 6 4 3 5 . 0 0 2 1 6 ;   B r a u n i n g e r   M . ,   2 0 0 1 ,   P E R S P E K T I V E N   W I R T S C H ,   V 2 ,   P 1 8 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 2 5 1 6 . 0 0 0 4 4 ;   B U R T O N   M P ,   1 9 9 5 ,   E C O N   J ,   V 1 0 5 ,   P 3 6 1 ,   D O I   1 0 . 2 3 0 7 / 2 2 3 5 4 9 6 ;   C h a m b e r s   R ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 1 4 6 0 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 2 7 . 1 4 6 0 ;   G a n d h i   J e n n i f e r ,   2 0 0 6 ,   R E P O R T   A P S A   W O R K I N G ;   C r o n i n   B ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 9 0 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 7 ;   D a v e n p o r t   E ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 2 3 . a b s ;   D I A M O N D   A M ,   1 9 8 9 ,   C U R R   C O N T E N T S ,   V 1 ,   P 4 ;   D r e n t h   J P H ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 9 ;   E f t h y v o u l o u   G ,   2 0 0 8 ,   J   S O C I O - E C O N ,   V 3 7 ,   P 1 2 6 6 ,   D O I   D O I   1 0 . 1 0 1 6 / J . S 0 C E C . 2 0 0 7 . 1 2 . 0 0 5 ;   E i n a v   L ,   2 0 0 6 ,   J   E C O N   P E R S P E C T ,   V 2 0 ,   P 1 7 5 ,   D O I   1 0 . 1 2 5 7 / 0 8 9 5 3 3 0 0 6 7 7 6 5 2 6 0 8 5 ;   E n g e r s   M ,   1 9 9 9 ,   J   P O L I T   E C O N ,   V 1 0 7 ,   P 8 5 9 ,   D O I   1 0 . 1 0 8 6 / 2 5 0 0 8 2 ;   F l a n a g i n   A ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 2 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 2 2 ;   G A R F I E L D   E ,   1 9 8 2 ,   C U R R   C O N T E N T S ,   P 5 ;   G l a n z e l   W . ,   2 0 0 6 ,   1   I N T   C   M U L T   I N F   S C I ;   H u   X J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 3 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 6 4 ;   H u d s o n   J ,   1 9 9 6 ,   J   E C O N   P E R S P E C T ,   V 1 0 ,   P 1 5 3 ;   J o s e p h   K ,   2 0 0 5 ,   S O U T H   E C O N   J ,   V 7 1 ,   P 5 4 5 ;   K a l a i t z i d a k i s   P ,   1 9 9 9 ,   E U R   E C O N   R E V ,   V 4 3 ,   P 1 1 5 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 4 - 2 9 2 1 ( 9 9 ) 0 0 0 1 9 - 7 ;   K e n n e d y   D ,   2 0 0 3 ,   S C I E N C E ,   V 3 0 1 ,   P 7 3 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 0 1 . 5 6 3 4 . 7 3 3 ;   L a b a n d   D N ,   2 0 0 2 ,   L A B O U R   E C O N ,   V 9 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 7 - 5 3 7 1 ( 0 1 ) 0 0 0 5 4 - 9 ;   L a b a n d   D N ,   2 0 0 0 ,   J   P O L I T   E C O N ,   V 1 0 8 ,   P 6 3 2 ;   L a k e   D A ,   2 0 1 0 ,   P S - P O L I T   S C I   P O L I T ,   V 4 3 ,   P 4 3 ,   D O I   1 0 . 1 0 1 7 / S 1 0 4 9 0 9 6 5 0 9 9 9 0 8 0 1 ;   L i a n g   L M ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 7 3 5 9 . 2 2 1 5 1 . 6 f ;   L i a n g   L M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 2 5 2 0 1 7 9 7 1 ;   L i p e t z   B A ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 9 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 9 9 4 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - U ;   M a c i e j o v s k y   B ,   2 0 0 9 ,   M A R K E T   S C I ,   V 2 8 ,   P 5 8 9 ,   D O I   1 0 . 1 2 8 7 / m k s c . 1 0 8 0 . 0 4 0 6 ;   M e d o f f   M H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 9 - 4 ;   M o e d   H F ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 9 9 0 ;   M o n a s t e r s k y   R . ,   2 0 0 5 ,   C H R O N I C L E   H I G H E R   E D ;   N i c o l a i s e n   J . ,   2 0 0 2 ,   P   4   I N T   C   C O N C   L I B   I ,   P 1 2 3 ;   N O Y O N S   E C M ,   1 9 9 8 ,   M A P P I N G   S C I E N T O M E T R I ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   R U D D   E ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 6 8 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 8 ;   S a v i t z   D A ,   1 9 9 9 ,   A M   J   E P I D E M I O L ,   V 1 4 9 ,   P 4 0 1 ;   S m i t h   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 5 ,   P 6 9 6 ;   S u t t e r   M ,   2 0 0 1 ,   E V A L U A T I O N   R E V ,   V 2 5 ,   P 5 5 5 ;   v a n   P r a a g   C M ,   2 0 0 8 ,   E C O N O M I C A ,   V 7 5 ,   P 7 8 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 3 5 . 2 0 0 7 . 0 0 6 5 3 . x ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M 	 5 0 	 2 7 	 2 7 	 2 	 3 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 0 	 4 	 4 	 	 	 	 	 6 0 8 	 6 1 7 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 1 0 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 4 7 K A 	 W O S : 0 0 0 2 8 1 6 1 6 2 0 0 0 1 5 	 	 
 
 J 	 L i n m a n s ,   A J M 	 	 	 	 L i n m a n s ,   A .   J .   M . 	 	 	 W h y   w i t h   b i b l i o m e t r i c s   t h e   H u m a n i t i e s   d o e s   n o t   n e e d   t o   b e   t h e   w e a k e s t   l i n k   I n d i c a t o r s   f o r   r e s e a r c h   e v a l u a t i o n   b a s e d   o n   c i t a t i o n s ,   l i b r a r y   h o l d i n g s ,   a n d   p r o d u c t i v i t y   m e a s u r e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   H u m a n i t i e s ;   C i t a t i o n   a n a l y s i s ;   L i b r a r y   h o l d i n g   a n a l y s i s ;   R e s e a r c h   e v a l u a t i o n 	 S O C I A L - S C I E N C E S ;   S O C I O L O G Y 	 I n   t h i s   s t u d y   a n   a t t e m p t   i s   m a d e   t o   e s t a b l i s h   n e w   b i b l i o m e t r i c   i n d i c a t o r s   f o r   t h e   a s s e s s m e n t   o f   r e s e a r c h   i n   t h e   H u m a n i t i e s .   D a t a   f r o m   a   D u t c h   F a c u l t y   o f   H u m a n i t i e s   w a s   u s e d   t o   p r o v i d e   t h e   i n v e s t i g a t i o n   a   s o u n d   e m p i r i c a l   b a s i s .   F o r   s e v e r a l   r e a s o n s   ( p a r t i c u l a r l y   r e l a t e d   t o   c o v e r a g e )   t h e   s t a n d a r d   c i t a t i o n   i n d i c a t o r s ,   d e v e l o p e d   f o r   t h e   s c i e n c e s ,   a r e   u n s a t i s f a c t o r y .   T a r g e t   e x p a n d e d   c i t a t i o n   a n a l y s i s   a n d   t h e   u s e   o f   o e u v r e   ( l i f e t i m e )   c i t a t i o n   d a t a ,   a s   w e l l   a s   t h e   a d d i t i o n   o f   l i b r a r y   h o l d i n g s   a n d   p r o d u c t i v i t y   i n d i c a t o r s   e n a b l e   a   m o r e   r e p r e s e n t a t i v e   a n d   f a i r   a s s e s s m e n t .   G i v e n   t h e   s k e w   d i s t r i b u t i o n   o f   p o p u l a t i o n   d a t a ,   i n d i v i d u a l   r a n k i n g s   c a n   b e s t   b e   d e t e r m i n e d   b a s e d   o n   l o g   t r a n s f o r m e d   d a t a .   F o r   g r o u p   r a n k i n g s   t h i s   i s   l e s s   u r g e n t   b e c a u s e   o f   t h e   c e n t r a l   l i m i t   t h e o r e m .   L i f e t i m e   c i t a t i o n   d a t a   i s   c o r r e c t e d   f o r   p r o f e s s i o n a l   a g e   b y   m e a n s   o f   e x p o n e n t i a l   r e g r e s s i o n . 	 L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   L e i d e n ,   N e t h e r l a n d s 	 L i n m a n s ,   A J M   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   L e i d e n ,   N e t h e r l a n d s . 	 l i n m a n s @ x s 4 a l l . n l 	 	 	 	 	 A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   B U R R E L L   Q L ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 5 7 ;   B u t l e r   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 4 - 1 ;   C r o n i n   B ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 2 6 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 0 ;   D e k k i n g   F . M . ,   2 0 0 5 ,   M O D E R N   I N T R O   P R O B A B I ;   H I R S C H   J E ,   2 0 0 5 ,   A R X I V P H Y S 0 5 0 8 0 2 5 ;   L a r i v i e r e   V ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 4 9 ;   L e e u w e n   T .   N .   V . ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 3 5 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 9 7 1 9 4 8 4 ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 4 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 7 ;   L i n d h o l m R o m a n t s c h u k   Y ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 3 8 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 7 2 ;   L I N E   M B ,   1 9 7 9 ,   J   D O C ,   V 3 5 ,   P 2 6 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 8 2 ;   L I N M A N S   A J M ,   2 0 0 8 ,   W E T E N S C H A P P E L I J K   O N D ;   L u w e l   M . ,   1 9 9 9 ,   I N D I C A T O R S   R E S   P E R F O ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   S n o w   C .   P . ,   1 9 5 9 ,   2   C U L T U R E S   2   L O O K ;   T o r r e s - S a l i n a s   D ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 1 0 . 0 0 2 ;   v a n   R a a n   A F J ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 4 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 8 4 	 1 9 	 2 7 	 2 7 	 5 	 4 1 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A Y 	 2 0 1 0 	 8 3 	 2 	 	 	 	 	 3 3 7 	 3 5 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 8 8 - 9 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 8 1 C U 	 W O S : 0 0 0 2 7 6 4 9 9 5 0 0 0 0 1 	 	 
 
 J 	 P i w o w a r ,   H A ;   C h a p m a n ,   W W 	 	 	 	 P i w o w a r ,   H e a t h e r   A . ;   C h a p m a n ,   W e n d y   W . 	 	 	 P u b l i c   s h a r i n g   o f   r e s e a r c h   d a t a s e t s :   A   p i l o t   s t u d y   o f   a s s o c i a t i o n s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 s t   J o i n t   A S I S & T / I S S   C o n f e r e n c e   S e m i n a r   2 0 0 9 	 N O V   0 7 ,   2 0 0 9 	 V a n c o u v e r ,   C A N A D A 	 	 	 B i b l i o m e t r i c s ;   B i o i n f o r m a t i c s ;   P o l i c y   e v a l u a t i o n ;   D a t a   s h a r i n g 	 A U T H O R   N A M E   D I S A M B I G U A T I O N ;   M I C R O A R R A Y   D A T A ;   E X P R E S S I O N   P R O F I L E S ;   N A T I O N A L - S U R V E Y ;   I N F O R M A T I O N ;   D A T A B A S E ;   R E P O S I T O R I E S ;   S U B M I S S I O N ;   S C I E N C E S ;   G E N E T I C S 	 T h e   p u b l i c   s h a r i n g   o f   p r i m a r y   r e s e a r c h   d a t a s e t s   p o t e n t i a l l y   b e n e f i t s   t h e   r e s e a r c h   c o m m u n i t y   b u t   i s   n o t   y e t   c o m m o n   p r a c t i c e .   I n   t h i s   p i l o t   s t u d y ,   w e   a n a l y z e d   w h e t h e r   d a t a   s h a r i n g   f r e q u e n c y   w a s   a s s o c i a t e d   w i t h   f u n d e r   a n d   p u b l i s h e r   r e q u i r e m e n t s ,   j o u r n a l   i m p a c t   f a c t o r ,   o r   i n v e s t i g a t o r   e x p e r i e n c e   a n d   i m p a c t .   A c r o s s   3 9 7   r e c e n t   b i o m e d i c a l   m i c r o a r r a y   s t u d i e s ,   w e   f o u n d   i n v e s t i g a t o r s   w e r e   m o r e   l i k e l y   t o   p u b l i c l y   s h a r e   t h e i r   r a w   d a t a s e t   w h e n   t h e i r   s t u d y   w a s   p u b l i s h e d   i n   a   h i g h - i m p a c t   j o u r n a l   a n d   w h e n   t h e   f i r s t   o r   l a s t   a u t h o r s   h a d   h i g h   l e v e l s   o f   c a r e e r   e x p e r i e n c e   a n d   i m p a c t .   W e   e s t i m a t e   t h e   U S A ' s   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N I H )   d a t a   s h a r i n g   p o l i c y   a p p l i e d   t o   1 9 %   o f   t h e   s t u d i e s   i n   o u r   c o h o r t ;   b e i n g   s u b j e c t   t o   t h e   N I H   d a t a   s h a r i n g   p l a n   r e q u i r e m e n t   w a s   n o t   f o u n d   t o   c o r r e l a t e   w i t h   i n c r e a s e d   d a t a   s h a r i n g   b e h a v i o r   i n   m u l t i v a r i a t e   l o g i s t i c   r e g r e s s i o n   a n a l y s i s .   S t u d i e s   p u b l i s h e d   i n   j o u r n a l s   t h a t   r e q u i r e d   a   d a t a b a s e   s u b m i s s i o n   a c c e s s i o n   n u m b e r   a s   a   c o n d i t i o n   o f   p u b l i c a t i o n   w e r e   m o r e   l i k e l y   t o   s h a r e   t h e i r   d a t a ,   b u t   t h i s   t r e n d   w a s   n o t   s t a t i s t i c a l l y   s i g n i f i c a n t .   T h e s e   e a r l y   r e s u l t s   w i l l   i n f o r m   o u r   o n g o i n g   l a r g e r   a n a l y s i s ,   a n d   h o p e f u l l y   c o n t r i b u t e   t o   t h e   d e v e l o p m e n t   o f   m o r e   e f f e c t i v e   d a t a   s h a r i n g   i n i t i a t i v e s .   ( C )   2 0 0 9   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ P i w o w a r ,   H e a t h e r   A . ;   C h a p m a n ,   W e n d y   W . ]   U n i v   P i t t s b u r g h ,   D e p t   B i o m e d   I n f o r m a t ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A 	 P i w o w a r ,   H A   ( r e p r i n t   a u t h o r ) ,   U n i v   P i t t s b u r g h ,   D e p t   B i o m e d   I n f o r m a t ,   2 0 0   M e y r a n   A v e ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A . 	 h p i w o w a r @ g m a i l . c o m ;   w e c 6 @ p i t t . e d u 	 P i w o w a r ,   H e a t h e r / A - 4 6 8 0 - 2 0 0 9 ;   	 P i w o w a r ,   H e a t h e r / 0 0 0 0 - 0 0 0 3 - 1 6 1 3 - 5 9 8 1 ;   C h a p m a n ,   W e n d y / 0 0 0 0 - 0 0 0 1 - 8 7 0 2 - 4 4 8 3 	 N L M   N I H   H H S   [ R 0 1   L M 0 0 9 4 2 7 ,   R 0 1   L M 0 0 9 4 2 7 - 0 1 ,   T 1 5   L M 0 0 7 0 5 9 ,   T 1 5   L M 0 0 7 0 5 9 - 1 9 ] 	 	 B a l l   C A ,   2 0 0 4 ,   P L O S   B I O L ,   V 2 ,   P 1 2 7 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 2 0 3 1 7 ;   B a r r e t t   T ,   2 0 0 7 ,   N U C L E I C   A C I D S   R E S ,   V 3 5 ,   p D 7 6 0 ,   D O I   1 0 . 1 0 9 3 / n a r / g k l 8 8 7 ;   B i t z e r   J ,   2 0 0 7 ,   J   C O M P   E C O N ,   V 3 5 ,   P 1 6 0 ,   D O I   1 0 . 1 0 1 6 / j . j c e . 2 0 0 6 . 1 0 . 0 0 1 ;   B l u m e n t h a l   D ,   2 0 0 6 ,   A C A D   M E D ,   V 8 1 ,   P 1 3 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 8 8 8 - 2 0 0 6 0 2 0 0 0 - 0 0 0 0 8 ;   B l u m e n t h a l   D ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 7 ,   P 1 2 2 4 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 7 . 1 5 . 1 2 2 4 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 6 ;   B r a z m a   A ,   2 0 0 1 ,   N A T   G E N E T ,   V 2 9 ,   P 3 6 5 ,   D O I   1 0 . 1 0 3 8 / n g 1 2 0 1 - 3 6 5 ;   B r o w n   C ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 2 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 8 9 ;   C a m p b e l l   E G ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 4 . 4 7 3 ;   C A M P B E L L   P ,   1 9 9 9 ,   C H R O N   H I G H E R   E D U C ,   p A 4 2 ;   C e c h   T .   R . ,   2 0 0 3 ,   S H A R I N G   P U B L I C A T I O N ;   C E C I L   J S ,   1 9 8 8 ,   L A W   H U M A N   B E H A V ,   V 1 2 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 0 7 3 1 2 6 ;   C O N S T A N T   D ,   1 9 9 4 ,   I N F O R M   S Y S T   R E S ,   V 5 ,   P 4 0 0 ,   D O I   1 0 . 1 2 8 7 / i s r e . 5 . 4 . 4 0 0 ;   F i e n b e r g   S .   E . ,   1 9 8 5 ,   S H A R I N G   R E S   D A T A ;   G I O R D A N O   R ,   2 0 0 7 ,   S C I   S E C R E T I V E   S E L F I S ;   H E D S T R O M   M ,   2 0 0 6 ,   I A S S I S T   C   2 0 0 6   P R E S ;   H E D S T R O M   M ,   2 0 0 8 ,   S O C   A M   A R C H   A N N   M ;   H e r r e l l   J r   F . E . ,   2 0 0 1 ,   R E G R E S S I O N   M O D E L I N G ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o s e k   S D ,   2 0 0 5 ,   G E N D E R   D I F F E R E N C E S   M ;   H r y n a s z k i e w i c z   I ,   2 0 0 9 ,   T R I A L S ,   V 1 0 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 5 - 6 2 1 5 - 1 0 - 1 7 ;   J i n   B . ,   2 0 0 6 ,   S C I   F O C U S ,   V 1 ,   P 8 ;   K a k a z u   K e r r y   K ,   2 0 0 4 ,   H a w a i i   M e d   J ,   V 6 3 ,   P 2 7 3 ;   K i m   J . ,   2 0 0 7 ,   J   D I G I T A L   I N F O R M ,   V 8 ;   K i n g   G . ,   1 9 9 5 ,   P S   P O L I T I C A L   S C I   P O L ,   V 2 8 ,   P 4 4 3 ;   K u o   F Y ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 2 2 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 1 6 ;   K y z a s   P A ,   2 0 0 5 ,   J   N A T L   C A N C E R   I ,   V 9 7 ,   P 1 0 4 3 ,   D O I   1 0 . 1 0 9 3 / j n c i / d j i 1 8 4 ;   L e e   C .   P . ,   2 0 0 6 ,   P   2 0 0 6   2 0   A N N   C   C O M P ;   L O W R A N C E   W I L L I A M   W . ,   2 0 0 6 ,   A C C E S S   C O L L E C T I O N S   D ;   M a n o l i o   T A ,   2 0 0 7 ,   N A T   G E N E T ,   V 3 9 ,   P 1 0 4 5 ,   D O I   1 0 . 1 0 3 8 / n g 2 1 2 7 ;   M a t z l e r   K ,   2 0 0 8 ,   J   E C O N   P S Y C H O L ,   V 2 9 ,   P 3 0 1 ,   D O I   1 0 . 1 0 1 6 / j . j o e p . 2 0 0 7 . 0 6 . 0 0 4 ;   M C C A I N   K W ,   1 9 9 5 ,   S C I   C O M M U N ,   V 1 6 ,   P 4 0 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 9 5 0 1 6 0 0 4 0 0 3 ;   M c C u l l o u g h   B D ,   2 0 0 8 ,   C A N   J   E C O N ,   V 4 1 ,   P 1 4 0 6 ;   N a t u r e ,   2 0 0 2 ,   N A T U R E ,   V 4 1 9 ,   P 3 2 3 ;   * N I H ,   2 0 0 7 ,   N O T O D 0 8 0 1 3   N I H ;   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   2 0 0 3 ,   N O T O D 0 3 0 3 2   N I H ;   N I U   J ,   2 0 0 4 ,   I N C E N T I V E   S T U D Y   R E S ;   N o o r   M A F ,   2 0 0 6 ,   P L O S   B I O L ,   V 4 ,   P 1 1 1 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 4 0 2 2 8 ;   O c h s n e r   S A ,   2 0 0 8 ,   N A T   M E T H O D S ,   V 5 ,   P 9 9 1 ,   D O I   1 0 . 1 0 3 8 / n m e t h 1 2 0 8 - 9 9 1 ;   P a r k i n s o n   H ,   2 0 0 7 ,   N U C L E I C   A C I D S   R E S ,   V 3 5 ,   p D 7 4 7 ,   D O I   1 0 . 1 0 9 3 / n a r / g k l 9 9 5 ;   R e i d p a t h   D D ,   2 0 0 1 ,   B I O E T H I C S ,   V 1 5 ,   P 1 2 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 1 9 . 0 0 2 2 0 ;   R h o d e s   D R ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 9 3 0 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 1 9 9 4 1 0 1 ;   R y u   S ,   2 0 0 3 ,   E X P E R T   S Y S T   A P P L ,   V 2 5 ,   P 1 1 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 7 - 4 1 7 4 ( 0 3 ) 0 0 0 1 1 - 3 ;   S c h o f i e l d   P N ,   2 0 0 9 ,   N A T U R E ,   V 4 6 1 ,   P 1 7 1 ,   D O I   1 0 . 1 0 3 8 / 4 6 1 1 7 1 a ;   S C H O F I E L D   P N ,   2 0 0 8 ,   I N T   C   E L   P U B L   E L P U B ;   S e o n g h e e   K . ,   2 0 0 8 ,   L I B   I N F O R M   S C I   R E S ,   V 3 0 ,   P 2 8 2 ,   D O I   D O I   1 0 . 1 0 1 6 / J . L I S R . 2 0 0 8 . 0 4 . 0 0 3 ;   S I M P S O N   E H ,   1 9 5 1 ,   J   R O Y   S T A T   S O C   B ,   V 1 3 ,   P 2 3 8 ;   T o r v i k   V I ,   2 0 0 9 ,   A C M   T   K N O W L   D I S C O V   D ,   V 3 ,   D O I   1 0 . 1 1 4 5 / 1 5 5 2 3 0 3 . 1 5 5 2 3 0 4 ;   T o r v i k   V I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 4 0 ,   D O I   [ 1 0 . 1 0 0 2 / a s i . 2 0 1 0 5 ,   1 0 . 1 0 0 2 / a s i / 2 0 1 0 5 ] ;   * U   N O T T   J U L I E T ,   R E S   F U N D   O P   A C C   P O L ;   V e n t u r a   B ,   2 0 0 5 ,   P H Y S I O L   G E N O M I C S ,   V 2 0 ,   P 1 5 3 ,   D O I   1 0 . 1 1 5 2 / p h y s i o l g e n o m i c s . 0 0 2 6 4 . 2 0 0 4 ;   W a r l i c k   S t e f a n i e   E ,   2 0 0 7 ,   B i o m e d   D i g i t   L i b r ,   V 4 ,   P 1 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 4 - 1 ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   N A T U R E ,   V 4 6 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 3 8 / 4 6 1 1 4 5 a ;   2 0 0 7 ,   N A T U R E   B I O T E C H N O L O G Y ,   V 2 5 ,   P 8 2 1 ;   2 0 0 7 ,   N A T U R E   N E U R O S C I E N C E ,   V 1 0 ,   P 9 3 1 	 5 5 	 2 7 	 2 8 	 1 	 1 7 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 A P R 	 2 0 1 0 	 4 	 2 	 	 	 	 	 1 4 8 	 1 5 6 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 1 . 0 1 0 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 6 8 I I 	 W O S : 0 0 0 2 7 5 5 1 5 5 0 0 0 0 3 	 2 1 3 3 9 8 4 1 	 
 
 J 	 C a m p b e l l ,   D ;   P i c a r d - A i t k e n ,   M ;   C o t e ,   G ;   C a r u s o ,   J ;   V a l e n t i m ,   R ;   E d m o n d s ,   S ;   W i l l i a m s ,   G T ;   M a c a l u s o ,   B ;   R o b i t a i l l e ,   J P ;   B a s t i e n ,   N ;   L a f r a m b o i s e ,   M C ;   L e b e a u ,   L M ;   M i r a b e l ,   P ;   L a r i v i e r e ,   V ;   A r c h a m b a u l t ,   E 	 	 	 	 C a m p b e l l ,   D a v i d ;   P i c a r d - A i t k e n ,   M i c h e l l e ;   C o t e ,   G r e g o i r e ;   C a r u s o ,   J u l i e ;   V a l e n t i m ,   R o d o l f o ;   E d m o n d s ,   S t u a r t ;   W i l l i a m s ,   G r e g o r y   T h o m a s ;   M a c a l u s o ,   B e n o i t ;   R o b i t a i l l e ,   J e a n - P i e r r e ;   B a s t i e n ,   N i c o l a s ;   L a f r a m b o i s e ,   M a r i e - C l a u d e ;   L e b e a u ,   L o u i s - M i c h e l ;   M i r a b e l ,   P h i l i p p e ;   L a r i v i e r e ,   V i n c e n t ;   A r c h a m b a u l t ,   E r i c 	 	 	 B i b l i o m e t r i c s   a s   a   P e r f o r m a n c e   M e a s u r e m e n t   T o o l   f o r   R e s e a r c h   E v a l u a t i o n :   T h e   C a s e   o f   R e s e a r c h   F u n d e d   b y   t h e   N a t i o n a l   C a n c e r   I n s t i t u t e   o f   C a n a d a 	 A M E R I C A N   J O U R N A L   O F   E V A L U A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   g r a n t   p r o g r a m ;   p e r f o r m a n c e   m e a s u r e m e n t ;   r e s e a r c h   e v a l u a t i o n 	 C I T A T I O N ;   I N D I C A T O R S ;   J O U R N A L S 	 A s   b i b l i o m e t r i c   i n d i c a t o r s   a r e   o b j e c t i v e ,   r e l i a b l e ,   a n d   c o s t - e f f e c t i v e   m e a s u r e s   o f   p e e r - r e v i e w e d   r e s e a r c h   o u t p u t s ,   t h e y   a r e   e x p e c t e d   t o   p l a y   a n   i n c r e a s i n g l y   i m p o r t a n t   r o l e   i n   r e s e a r c h   a s s e s s m e n t / m a n a g e m e n t .   R e c e n t l y ,   a   b i b l i o m e t r i c   a p p r o a c h   w a s   d e v e l o p e d   a n d   i n t e g r a t e d   w i t h i n   t h e   e v a l u a t i o n   f r a m e w o r k   o f   r e s e a r c h   f u n d e d   b y   t h e   N a t i o n a l   C a n c e r   I n s t i t u t e   o f   C a n a d a   ( N C I C ) .   T h i s   a p p r o a c h   h e l p e d   a d d r e s s   t h e   f o l l o w i n g   q u e s t i o n s   t h a t   w e r e   d i f f i c u l t   t o   a n s w e r   o b j e c t i v e l y   u s i n g   a l t e r n a t i v e   m e t h o d s   s u c h   a s   p r o g r a m   d o c u m e n t a t i o n   r e v i e w   a n d   k e y   i n f o r m a n t   i n t e r v i e w s :   ( a )   H a s   t h e   N C I C   p e e r - r e v i e w   p r o c e s s   s e l e c t e d   o u t s t a n d i n g   C a n a d i a n   s c i e n t i s t s   i n   c a n c e r   r e s e a r c h ?   ( b )   H a v e   t h e   N C I C   g r a n t s   c o n t r i b u t e d   t o   i n c r e a s i n g   t h e   s c i e n t i f i c   p e r f o r m a n c e   o f   s u p p o r t e d   r e s e a r c h e r s ?   ( c )   H o w   d o   t h e   N C I C - s u p p o r t e d   r e s e a r c h e r s   c o m p a r e   t o   t h e i r   n e i g h b o r s   s u p p o r t e d   b y   t h e   U .   S .   N a t i o n a l   C a n c e r   I n s t i t u t e ?   U s i n g   t h e   N C I C   e v a l u a t i o n   a s   a   c a s e   s t u d y ,   t h i s   a r t i c l e   d e m o n s t r a t e s   t h e   u s e f u l n e s s   o f   b i b l i o m e t r i c s   t o   a d d r e s s   k e y   e v a l u a t i o n   q u e s t i o n s   a n d   d i s c u s s e s   i t s   i n t e g r a t i o n ,   a l o n g   c o m p l e m e n t a r y   i n d i c a t o r s   ( e .   g . ,   p e e r   r a t i n g s ) ,   i n   a   p r a c t i c e - d r i v e n   r e s e a r c h   e v a l u a t i o n   c o n t i n u u m . 	 [ C a m p b e l l ,   D a v i d ;   P i c a r d - A i t k e n ,   M i c h e l l e ;   C o t e ,   G r e g o i r e ;   C a r u s o ,   J u l i e ;   A r c h a m b a u l t ,   E r i c ]   S c i   M e t r i x ,   M o n t r e a l ,   P Q   H 2 J   1 Y 6 ,   C a n a d a ;   [ V a l e n t i m ,   R o d o l f o ;   W i l l i a m s ,   G r e g o r y   T h o m a s ]   C a n a d i a n   C a n c   S o c ,   T o r o n t o ,   O N ,   C a n a d a ;   [ E d m o n d s ,   S t u a r t ]   C a n a d i a n   P a r t n e r s h i p   C a n c ,   T o r o n t o ,   O N ,   C a n a d a ;   [ M a c a l u s o ,   B e n o i t ;   R o b i t a i l l e ,   J e a n - P i e r r e ;   B a s t i e n ,   N i c o l a s ;   L a f r a m b o i s e ,   M a r i e - C l a u d e ;   L e b e a u ,   L o u i s - M i c h e l ;   M i r a b e l ,   P h i l i p p e ;   L a r i v i e r e ,   V i n c e n t ]   U n i v   Q u e b e c ,   C I R S T ,   O S T ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a 	 C a m p b e l l ,   D   ( r e p r i n t   a u t h o r ) ,   S c i   M e t r i x ,   1 3 3 5 A   A v e   M t   R o y a l   E s t ,   M o n t r e a l ,   P Q   H 2 J   1 Y 6 ,   C a n a d a . 	 d a v i d . c a m p b e l l @ s c i e n c e - m e t r i x . c o m 	 	 	 	 	 A R C H A M B A U L T   E ,   2 0 0 8 ,   R E S   M O N E Y ,   V 2 2 ,   P 8 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ;   * C A N   C A N C   R E S   A L L ,   2 0 0 7 ,   C A N C   R E S   I N V   C A N   2 0 0 ;   C r o n i n   B ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 4 0 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 3 ;   H i c k s   D ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 7 8 ;   J o n s s o n   B ,   2 0 0 7 ,   A N N   O N C O L ,   V 1 8 ,   P 4 9 ,   D O I   1 0 . 1 0 9 3 / a n n o n c / m d m 1 0 0 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   L a r i v i e r e   V ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 4 9 ;   L A W I N I   S M ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 5 9 ;   L e w i s o n   G ,   2 0 0 3 ,   I N T   J   L A N G   C O M M   D I S ,   V 3 8 ,   P 6 5 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 8 2 8 2 0 0 1 0 0 0 0 4 1 9 0 3 ;   L o p e z - I l l e s c a s   C ,   2 0 0 8 ,   E U R   J   C A N C E R ,   V 4 4 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . e j c a . 2 0 0 7 . 1 0 . 0 2 0 ;   L u c i a n i   S ,   2 0 0 0 ,   C h r o n i c   D i s   C a n ,   V 2 1 ,   P 2 3 ;   L u u k k o n e n   T ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 8 1 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 8 7 1 ;   M a r t i n   B R ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 9 ;   M C A L L I S T E R   P R ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 3 0 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 1 - 5 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   * N A T   C A N C   I   C A N ,   2 0 0 5 ,   N C I C   2 0 1 5   D R I V   E X C   C ;   N a t i o n a l   S c i e n c e   F o u n d a t i o n   D i v i s i o n   o f   S c i e n c e   R e s o u r c e s   S t a t i s t i c s ,   2 0 0 6 ,   S C I   E N G   I N D ;   R a n g n e k a r   D ,   2 0 0 5 ,   A S L I B   P R O C ,   V 5 7 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 5 1 0 5 9 9 2 0 8 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 ;   S T O E R I A D E S   E S ,   2 0 0 6 ,   F A S E B   J ,   V 2 0 ,   P 2 9 ;   T r o c h i m   W M ,   2 0 0 8 ,   A M   J   E V A L ,   V 2 9 ,   P 8 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 7 3 0 9 2 8 0 ;   V a n   R a a n   A . F . J . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I 	 2 5 	 2 7 	 3 0 	 3 	 4 1 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0   U S A 	 1 0 9 8 - 2 1 4 0 	 	 	 A M   J   E V A L 	 A m .   J .   E v a l . 	 M A R 	 2 0 1 0 	 3 1 	 1 	 	 	 	 	 6 6 	 8 3 	 	 1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 9 3 5 4 7 7 4 	 	 1 8 	 S o c i a l   S c i e n c e s ,   I n t e r d i s c i p l i n a r y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 5 6 8 K F 	 W O S : 0 0 0 2 7 5 5 2 0 5 0 0 0 0 4 	 	 
 
 J 	 G l a n z e l ,   W ;   J a n s s e n s ,   F ;   T h i j s ,   B 	 	 	 	 G l a e n z e l ,   W o l f g a n g ;   J a n s s e n s ,   F r i z o ;   T h i j s ,   B a r t 	 	 	 A   c o m p a r a t i v e   a n a l y s i s   o f   p u b l i c a t i o n   a c t i v i t y   a n d   c i t a t i o n   i m p a c t   b a s e d   o n   t h e   c o r e   l i t e r a t u r e   i n   b i o i n f o r m a t i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l - S o c i e t y - f o r - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s 	 J U N   2 5 - 2 7 ,   2 0 0 7 	 M a d r i d ,   S P A I N 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r ,   C S I C ,   M i n i s t   E d u c   &   C i e n c i a ,   F E C Y T ,   C o m u n i d a d   M a d r i d ,   E u g e n e   G a r f i e l d   F d n ,   T h o m s o n ,   E l s e v i e r ,   J o u r n a l   I n f o r m e t r ,   S c o p u s ,   A y u n t a m i e n t o   M a d r i d ,   S c i   M e t r i x ,   U n i v   C a r l o s   I I I   M a d r i d 	 	 	 F I E L D S ;   W O R L D 	 A   n o v e l   s u b j e c t - d e l i n e a t i o n   s t r a t e g y   h a s   b e e n   d e v e l o p e d   f o r   t h e   r e t r i e v a l   o f   t h e   c o r e   l i t e r a t u r e   i n   b i o i n f o r m a t i c s .   T h e   s t r a t e g y   c o m b i n e s   t e x t u a l   c o m p o n e n t s   w i t h   b i b l i o m e t r i c ,   c i t a t i o n - b a s e d   t e c h n i q u e s .   T h i s   b i b l i o m e t r i c s - a i d e d   s e a r c h   s t r a t e g y   i s   a p p l i e d   t o   t h e   1 9 8 0 - 2 0 0 4   a n n u a l   v o l u m e s   o f   t h e   W e b   o f   S c i e n c e .   R e t r i e v e d   l i t e r a t u r e   h a s   u n d e r g o n e   a   s t r u c t u r a l   a s   w e l l   a s   q u a n t i t a t i v e   a n a l y s i s .   P a t t e r n s   o f   n a t i o n a l   p u b l i c a t i o n   a c t i v i t y ,   c i t a t i o n   i m p a c t   a n d   i n t e r n a t i o n a l   c o l l a b o r a t i o n   a r e   a n a l y s e d   f o r   t h e   1 9 9 0 s   a n d   t h e   n e w   m i l l e n n i u m . 	 [ G l a e n z e l ,   W o l f g a n g ;   J a n s s e n s ,   F r i z o ;   T h i j s ,   B a r t ]   K a t h o l i e k e   U n i v   L e u v e n ,   S t e u n p u n t   O & O   I n d i c a t o r e n ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m ;   [ G l a e n z e l ,   W o l f g a n g ;   J a n s s e n s ,   F r i z o ;   T h i j s ,   B a r t ]   K a t h o l i e k e   U n i v   L e u v e n ,   F a c   E T E W ,   D e p t   M S I ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m ;   [ G l a e n z e l ,   W o l f g a n g ]   H u n g a r i a n   A c a d   S c i ,   I n s t   R e s   P o l i c y   S t u d i e s ,   B u d a p e s t ,   H u n g a r y ;   [ J a n s s e n s ,   F r i z o ]   K a t h o l i e k e   U n i v   L e u v e n ,   D e p t   E l e c t   E n g n ,   E S A T   S C D ,   B - 3 0 0 1   L o u v a i n ,   B e l g i u m 	 G l a n z e l ,   W   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   S t e u n p u n t   O & O   I n d i c a t o r e n ,   D e k e n s t r   2 ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m . 	 W o l f g a n g . G l a n z e l @ e c o n . k u l e u v e n . b e 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 ;   T h i j s ,   B a r t / C - 2 9 9 5 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 ;   T h i j s ,   B a r t / 0 0 0 0 - 0 0 0 3 - 0 4 4 6 - 8 3 3 2 	 	 	 B a s s e c o u l a r d   E . ,   2 0 0 7 ,   1 1   I N T   C   S C I E N T   I N F ,   P 7 4 ;   B a t a g e l j   V ,   2 0 0 2 ,   L E C T   N O T E S   C O M P U T   S C ,   V 2 2 6 5 ,   P 4 7 7 ;   B e r k h i n   P . ,   2 0 0 2 ,   S U R V E Y   C L U S T E R I N G   D A ;   * E U R   C O M M ,   1 9 9 7 ,   1 7 6 3 9   E U R   C O M M ;   F R A M E   J   D ,   1 9 7 7 ,   I n t e r c i e n c i a ,   V 2 ,   P 1 4 3 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 6 3 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 0 6 6 2 7 9 4 4 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 1 ;   G L A N Z E L   W ,   2 0 0 7 ,   P   1 1   I N T   C   I N T   S O C   S ,   P 2 2 1 ;   G l a n z e l   W . ,   2 0 0 3 ,   N A N O T E C H N O L O G Y   A N A L ;   G L A N Z E L   W ,   2 0 0 6 ,   9   I N T   C   S C I   T E C H N   I N ;   G l a n z e l   W ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 4 - 5 ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J a n s s e n s   F . ,   2 0 0 6 ,   P   1   I N T   C   M U L T   I N F   S ,   P 6 1 5 ;   J A N S S E N S   F ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ,   P 2 8 4 ;   J a n s s e n s   F . ,   2 0 0 7 ,   T H E S I S   K A T H O L I E K E   U ;   J A N S S E N S   F ,   2 0 0 7 ,   P   1 3   A C M   S I G K D D   I N T ,   P 3 6 0 ,   D O I   1 0 . 1 1 4 5 / 1 2 8 1 1 9 2 . 1 2 8 1 2 3 3 ;   K a t z   J .   S . ,   2 0 0 0 ,   S C I   P U B L   P O L I C Y ,   V 2 7 ,   P 2 3 ,   D O I   [ 1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ] ;   K a u f m a n   L . ,   1 9 9 0 ,   F I N D I N G   G R O U P S   D A T A ;   O u z o u n i s   C A ,   2 0 0 3 ,   B I O I N F O R M A T I C S ,   V 1 9 ,   P 2 1 7 6 ,   D O I   1 0 . 1 0 9 3 / b i o i n f o r m a t i c s / b t g 3 0 9 ;   P a t r a   S K ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 7 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 9 ;   P E R E Z I R A T X E T A   C ,   2 0 0 6 ,   B R I E F I N G S   B   I N   P R E S S ;   D e   S o l l a   P r i c e   D e r e k   J . ,   1 9 6 6 ,   L I T T L E   S C I   B I G   S C I ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S C H U B E R T   A ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 0 4 6 1 ;   Z i t t   M ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 6 	 2 7 	 2 7 	 2 8 	 1 	 3 1 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 0 9 	 7 9 	 1 	 	 	 	 	 1 0 9 	 1 2 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 0 7 - 1 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 2 3 H R 	 W O S : 0 0 0 2 6 4 4 8 7 9 0 0 0 0 7 	 	 
 
 J 	 G u a n ,   J C ;   G a o ,   X 	 	 	 	 G u a n ,   J i a n   C h e n g ;   G a o ,   X i a 	 	 	 E x p l o r i n g   t h e   h - I n d e x   a t   P a t e n t   L e v e l 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 H I R S C H - I N D E X ;   C I T A T I O N S ;   T E C H N O L O G Y ;   S C I E N T I S T S ;   J O U R N A L S 	 A s   a n   a c c e p t a b l e   p r o x y   f o r   i n n o v a t i v e   a c t i v i t y ,   p a t e n t s   h a v e   b e c o m e   i n c r e a s i n g l y   i m p o r t a n t   i n   r e c e n t   y e a r s .   P a t e n t s   a n d   p a t e n t   c i t a t i o n s   h a v e   b e e n   u s e d   f o r   c o n s t r u c t i o n   o f   t e c h n o l o g y   i n d i c a t o r s .   T h i s   a r t i c l e   p r e s e n t s   a n   a l t e r n a t i v e   t o   o t h e r   c i t a t i o n - b a s e d   i n d i c a t o r s ,   i . e . ,   t h e   p a t e n t   h - i n d e x ,   w h i c h   i s   b o r r o w e d   f r o m   b i b l i o m e t r i c s .   W e   c o n d u c t   t h e   a n a l y s i s   o n   a   s a m p l e   o f   t h e   w o r l d ' s   t o p   2 0   f i r m s   r a n k e d   b y   t o t a l   p a t e n t s   g r a n t e d   i n   t h e   p e r i o d   1 9 9 6 - 2 0 0 5   f r o m   t h e   D e r w e n t   I n n o v a t i o n s   I n d e x   i n   t h e   s e m i c o n d u c t o r   a r e a .   W e   a l s o   i n v e s t i g a t e   t h e   r e l a t i o n s h i p s   b e t w e e n   t h e   p a t e n t   h - i n d e x   a n d   o t h e r   t h r e e   i n d i c a t o r s ,   i . e . ,   p a t e n t   c o u n t s ,   c i t a t i o n   c o u n t s ,   a n d   t h e   m e a n   f a m i l y   s i z e   ( M F S ) .   T h e   f i n d i n g s   s h o w   t h a t   t h e   p a t e n t   h - i n d e x   i s   i n d e e d   a n   e f f e c t i v e   i n d i c a t o r   f o r   e v a l u a t i n g   t h e   t e c h n o l o g i c a l   i m p o r t a n c e   a n d   q u a l i t y ,   o r   i m p a c t ,   f o r   a n   a s s i g n e e .   I n   a d d i t i o n ,   t h e   M F S   i n d i c a t o r   c o r r e l a t e s   n e g a t i v e l y   a n d   n o t   s i g n i f i c a n t l y   w i t h   t h e   p a t e n t   h - i n d e x ,   w h i c h   i n d i c a t e s   t h a t   t h e   " s o c i a l   v a l u e "   o f   a   p a t e n t   i s   i n   d i s a g r e e m e n t   w i t h   i t s   " p r i v a t e   v a l u e . "   T h e   t w o   i n d i c a t o r s ,   p a t e n t   h - i n d e x   a n d   M F S ,   b o t h   p r o v i d e   a n   o v e r v i e w   o f   t h e   v a l u e   o f   p a t e n t s ,   b u t   f r o m   t w o   d i f f e r e n t   a n g l e s . 	 [ G u a n ,   J i a n   C h e n g ]   F u d a n   U n i v ,   S c h   M a n a g e m e n t ,   S h a n g h a i   2 0 0 4 3 3 ,   P e o p l e s   R   C h i n a ;   [ G a o ,   X i a ]   B e i j i n g   U n i v   A e r o n a u t   &   A s t r o n a u t ,   S c h   M a n a g e m e n t ,   B e i j i n g   1 0 0 0 8 3 ,   P e o p l e s   R   C h i n a 	 G u a n ,   J C   ( r e p r i n t   a u t h o r ) ,   F u d a n   U n i v ,   S c h   M a n a g e m e n t ,   6 7 0   G u o   S h u n   R d ,   S h a n g h a i   2 0 0 4 3 3 ,   P e o p l e s   R   C h i n a . 	 g u a n j i a n c h @ b u a a . e d u . c n ;   g a o x i a 1 9 7 6 @ s i n a . c o m 	 	 	 N a t i o n a l   S o c i a l   S c i e n c e   F o u n d a t i o n   o f   C h i n a   [ 0 8 B J Y 0 3 1 ] ;   N a t i o n a l   N a t u r a l   S c i e n c e   F o u n d a t i o n   o f   C h i n a   [ 7 0 7 7 3 0 0 6 ] ;   S h a n g h a i   L e a d i n g   A c a d e m i c   D i s c i p l i n e   P r o j e c t   [ B 2 1 0 ] 	 T h i s   r e s e a r c h   i s   f u n d e d   b y   N a t i o n a l   S o c i a l   S c i e n c e   F o u n d a t i o n   o f   C h i n a   ( P r o j e c t   N o .   0 8 B J Y 0 3 1 ) ,   N a t i o n a l   N a t u r a l   S c i e n c e   F o u n d a t i o n   o f   C h i n a   ( P r o j e c t   N o .   7 0 7 7 3 0 0 6 ) ,   a n d   b y   S h a n g h a i   L e a d i n g   A c a d e m i c   D i s c i p l i n e   P r o j e c t   ( P r o j e c t   N o .   B 2 1 0 ) .   T h e   a u t h o r s   a r e   g r a t e f u l   f o r   t h e   v a l u a b l e   c o m m e n t s   a n d   s u g g e s t i o n s   o f   a n o n y m o u s   r e v i e w e r s   a n d   t h e   e d i t o r s ,   w h i c h   s i g n i f i c a n t l y   i m p r o v e d   t h e   a r t i c l e .   W e   a l s o   t h a n k   P r o f e s s o r   R .   R o u s s e a u ,   D r .   S . J .   W a n g   a n d   P r o f e s s o r   D . Y .   H a o   f o r   t h e i r   h e l p f u l   d i s c u s s i o n s   a n d   E n g l i s h   c o r r e c t i o n s   o f   t h e   a r t i c l e . 	 B a l l   P ,   2 0 0 5 ,   N A T U R E ,   V 4 3 6 ,   P 9 0 0 ,   D O I   1 0 . 1 0 3 8 / 4 3 6 9 0 0 a ;   B a s s e c o u l a r d   E ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 6 6 5 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   C H A K R A B A R T I   A K ,   1 9 9 1 ,   I E E E   T   E N G   M A N A G E ,   V 3 8 ,   P 7 8 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 6 5 7 6 3 ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T I S T ,   V 2 0 ,   P 1 4 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 3 - 8 ;   H a r h o f f   D ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 3 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 1 2 4 - 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J i n   B . ,   2 0 0 6 ,   S C I   F O C U S ,   V 1 ,   P 8 ;   J i n   B H ,   2 0 0 7 ,   C H I N E S E   S C I   B U L L ,   V 5 2 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ;   K a r k i   M . ,   1 9 9 7 ,   W O R L D   P A T E N T   I N F O R M A ,   V 1 9 ,   P 2 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 7 2 - 2 1 9 0 ( 9 7 ) 0 0 0 3 3 - 1 ;   K n i g h t   H . ,   2 0 0 1 ,   P A T E N T   S T R A T E G Y   R E S ;   L i a n g   L M ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 5 - 6 ;   M e y e r   M ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 1 3 3 2 5 6 4 8 ;   M O G E E   M E ,   1 9 9 2 ,   E X T R A C T I N G   U S E F U L   I N ;   N a r i n   F . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   O p p e n h e i m   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 0 ;   P a v i t t   K . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   P u t n a m   J . ,   1 9 9 6 ,   T H E S I S   Y A L E   U   N E W   H A ;   S a a d   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 2 - 9 ;   S m i t h   V .   M . ,   1 9 9 3 ,   C H E M   W E E K ,   V 3 8 ,   P 1 3 7 ;   T R A J T E N B E R G   M ,   1 9 9 0 ,   R A N D   J   E C O N ,   V 2 1 ,   P 1 7 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 5 0 2 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W a n g   W P ,   2 0 0 7 ,   I E E E   T   D E V I C E   M A T   R E ,   V 7 ,   P 5 0 9 ,   D O I   1 0 . 1 1 0 9 / T D M R . 2 0 0 7 . 9 1 0 1 3 0 	 2 6 	 2 7 	 2 9 	 8 	 4 4 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J A N 	 2 0 0 9 	 6 0 	 1 	 	 	 	 	 3 5 	 4 0 	 	 1 0 . 1 0 0 2 / a s i . 2 0 9 5 4 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 9 4 D D 	 W O S : 0 0 0 2 6 2 4 2 4 9 0 0 0 0 5 	 	 
 
 J 	 R e i d ,   E F ;   C h e n ,   H C 	 	 	 	 R e i d ,   E d n a   F . ;   C h e n ,   H s i n c h u n 	 	 	 M a p p i n g   t h e   c o n t e m p o r a r y   t e r r o r i s m   r e s e a r c h   d o m a i n 	 I N T E R N A T I O N A L   J O U R N A L   O F   H U M A N - C O M P U T E R   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 S y m p o s i u m   o n   I n f o r m a t i o n   S e c u r i t y   i n   t h e   K n o w l e d g e   E c o n o m y 	 S E P   0 7 - 0 8 ,   2 0 0 5 	 T e m p e ,   A Z 	 A r i z o n a   S t a t e   U n i v ,   C t r   A d v a n c i n g   B u s i n e s s   I n f o r m a t   T e c h n o l 	 	 t e r r o r i s m ;   v i s u a l i z a t i o n ;   b i b l i o m e t r i c s ;   c o - c i t a t i o n   a n a l y s i s ;   i n t e l l e c t u a l   s t r u c t u r e 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S 	 A   s y s t e m a t i c   v i e w   o f   t e r r o r i s m   r e s e a r c h   t o   r e v e a l   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   t h e   f i e l d   a n d   e m p i r i c a l l y   d i s c e r n   t h e   d i s t i n c t   s e t   o f   c o r e   r e s e a r c h e r s ,   i n s t i t u t i o n a l   a f f i l i a t i o n s ,   p u b l i c a t i o n s ,   a n d   c o n c e p t u a l   a r e a s   c a n   h e l p   u s   g a i n   a   d e e p e r   u n d e r s t a n d i n g   o f   a p p r o a c h e s   t o   t e r r o r i s m .   T h i s   p a p e r   r e s p o n d s   t o   t h i s   n e e d   b y   u s i n g   a n   i n t e g r a t e d   k n o w l e d g e - m a p p i n g   f r a m e w o r k   t h a t   w e   d e v e l o p e d   t o   i d e n t i f y   t h e   c o r e   r e s e a r c h e r s   a n d   k n o w l e d g e   c r e a t i o n   a p p r o a c h e s   i n   t e r r o r i s m .   T h e   f r a m e w o r k   u s e s   t h r e e   t y p e s   o f   a n a l y s i s :   ( a )   b a s i c   a n a l y s i s   o f   s c i e n t i f i c   o u t p u t   u s i n g   c i t a t i o n ,   b i b l i o m e t r i c ,   a n d   s o c i a l   n e t w o r k   a n a l y s e s ,   ( b )   c o n t e n t   m a p   a n a l y s i s   o f   l a r g e   c o r p o r a   o f   l i t e r a t u r e ,   a n d   ( c )   c o c i t a t i o n   a n a l y s i s   t o   a n a l y s e   l i n k a g e s   a m o n g   p a i r s   o f   r e s e a r c h e r s .   W e   a p p l i e d   d o m a i n   v i s u a l i z a t i o n   t e c h n i q u e s   s u c h   a s   c o n t e n t   m a p   a n a l y s i s ,   b l o c k - m o d e l i n g ,   a n d   c o - c i t a t i o n   a n a l y s i s   t o   t h e   l i t e r a t u r e   a n d   a u t h o r   c i t a t i o n   d a t a   f r o m   t h e   y e a r s   1 9 6 5   t o   2 0 0 3 .   T h e   d a t a   w e r e   g a t h e r e d   f r o m   t e n   d a t a b a s e s   s u c h   a s   t h e   I S I   W e b   o f   S c i e n c e .   T h e   r e s u l t s   r e v e a l :   ( 1 )   t h e   n a m e s   o f   t h e   t o p   4 2   c o r e   t e r r o r i s m   r e s e a r c h e r s   ( e . g . ,   B r i a n   J e n k i n s ,   B r u c e   H o f f m a n ,   a n d   P a u l   W i l k i n s o n )   a s   w e l l   a s   t h e i r   i n s t i t u t i o n a l   a f f i l i a t i o n s ;   ( 2 )   t h e i r   i n f l u e n t i a l   p u b l i c a t i o n s ;   ( 3 )   c l u s t e r s   o f   t e r r o r i s m   r e s e a r c h e r s   w h o   w o r k   i n   s i m i l a r   a r e a s ;   a n d   ( 4 )   t h a t   t h e   r e s e a r c h   f o c u s   h a s   s h i f t e d   f r o m   t e r r o r i s m   a s   a   l o w - i n t e n s i t y   c o n f l i c t   t o   a   s t r a t e g i c   t h r e a t   t o   w o r l d   p o w e r s   w i t h   i n c r e a s e d   f o c u s   o n   O s a m a   B i n   L a d e n .   ( c )   2 0 0 6   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   A r i z o n a ,   M I S   D e p t ,   A r t i f i c i a l   I n t e l l i g e n c e   L a b ,   T u c s o n ,   A Z   8 5 7 2 1   U S A 	 R e i d ,   E F   ( r e p r i n t   a u t h o r ) ,   C l a r i o n   U n i v   P e n n s y l v a n i a ,   D e p t   L i b   S c i ,   8 4 0   W o o d   S t ,   C l a r i o n ,   P A   1 6 2 1 4   U S A . 	 e d n a r e i d @ e l l e r . a r i z o n a . e d u 	 	 	 	 	 A n d r e w s   J E ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 7 ;   B E R G E N   P ,   1 9 9 8 ,   H O L Y   W A R R I O R   I S   T H I S ;   B O R G M A N   C L ,   2 0 0 2 ,   A N N   R E V   I N F O R M A T I O N ;   B o y a c k   K W ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 9 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 0 9 1 0 0 ;   B O Y A C K   K W ,   2 0 0 3 ,   M A P P I N G   K N O W L E D G E   D O ;   C H E N   C ,   2 0 0 1 ,   I E E E   C O M P U T ,   V 3 4 ,   P 6 5 ;   C h e n   H C ,   2 0 0 4 ,   C O M P U T E R ,   V 3 7 ,   P 5 0 ,   D O I   1 0 . 1 1 0 9 / M C . 2 0 0 4 . 1 2 9 7 3 0 1 ;   C H U A   C ,   2 0 0 2 ,   J   A S S   I N F O R M A T I O N   S Y ,   V 3 ,   P 1 4 6 ;   C r e n s h a w   M ,   2 0 0 0 ,   P O L I T   P S Y C H O L ,   V 2 1 ,   P 4 0 5 ,   D O I   1 0 . 1 1 1 1 / 0 1 6 2 - 8 9 5 X . 0 0 1 9 5 ;   C R O N I N   B ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 1 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 0 ;   C R O N I N   B ,   2 0 0 2 ,   H I G H   F I D E L I T Y   M A P P I N ;   D e f l e m   M a t h i e u ,   2 0 0 4 ,   T E R R O R I S M   C O U N T E R   T E ,   P 1 ;   D u g a n   L ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 4 9 5 ,   P 3 4 0 ;   E G G E R S   S ,   2 0 0 5 ,   M E D   I N F O R M A T I C S   K N O W ;   E L L I S   J O ,   2 0 0 4 ,   2   S   I N T   S E C   I N F   I S I ,   P 5 2 0 ;   F E R L I G O J   A ,   1 9 9 6 ,   J   C O M P U T I N G   I N F O R M A T ,   V 4 ,   P 6 3 ;   G A R F I E L D   E ,   2 0 0 2 ,   5   A N N   M   A S S I S T ;   G a r f i e l d   E . ,   1 9 9 2 ,   S C I   P U B L   P O L I C Y ,   V 1 9 ,   P 3 2 1 ;   G o r d o n   A ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 4 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 3 0 - 8 ;   G o r d o n   A ,   2 0 0 4 ,   S T U D   C O N F L   T E R R O R ,   V 2 7 ,   P 7 9 ,   D O I   1 0 . 1 0 8 0 / 1 0 5 7 6 1 0 0 4 9 0 2 7 5 0 7 6 ;   G o r d o n   A ,   1 9 9 9 ,   T E R R O R   P O L I T   V I O L E N C ,   V 1 1 ,   P 1 4 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 4 6 5 5 9 9 0 8 4 2 7 5 1 0 ;   G U R R   T e d   R . ,   1 9 7 2 ,   W H Y   M E N   R E B E L ;   H o l l y w o o d   J . ,   2 0 0 4 ,   O U T   O R D I N A R Y   F I N D I N G ;   H u a n g   Z ,   2 0 0 4 ,   J   N A N O P A R T   R E S ,   V 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 4 - 4 1 1 7 - 6 ;   H U G H E S   G ,   2 0 0 3 ,   A G E   N E W S P A P E R ;   * I D S S ,   2 0 0 3 ,   C O N F L   N O N T R   S E C ;   * I S I ,   2 0 0 3 ,   C I T   T H R E S H ;   * I S I ,   2 0 0 3 ,   D O E S   I S I   I D   H I G H L   C I ;   J E N K I N S   B M ,   2 0 0 2 ,   R A N D   R E V ;   K E   W ,   2 0 0 4 ,   A N A L   V I S U A L I Z A T I O N   4 ;   K e n n e d y   L . ,   2 0 0 3 ,   D E V   F D N   P O L I C Y   R E L E V ;   K N E Z O   G J ,   2 0 0 3 ,   H O M E L A N D   S E C U R I T Y   C O ,   P 6 1 ;   K o k u   E ,   2 0 0 1 ,   A M   B E H A V   S C I ,   V 4 4 ,   P 1 7 5 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 2 7 6 4 0 1 2 1 9 5 8 0 2 3 ;   L a q u e u r   W a l t e r ,   1 9 7 7 ,   H I S T   T E R R O R I S M ;   L I N   X ,   2 0 0 1 ,   A U T H O R L I N K   I N S T A N T   A ;   M C C A I N   K ,   1 9 9 0 ,   J   A M   S O C   I N F O R M A T I O N ,   V 4 1 ;   M e r a r i   A r i e l ,   1 9 9 1 ,   T E R R O R I S M   P O L I T I C A L ,   V 3 ,   P 8 8 ;   * N A M ,   2 0 0 4 ,   N A M   B A S ;   N g u y e n   N Q ,   2 0 0 0 ,   D E R M A T O L   S U R G ,   V 2 6 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 4 - 4 7 2 5 . 2 0 0 0 . 0 0 2 5 2 . x ;   P A R K   H W ,   2 0 0 3 ,   J C M C ,   V 8 ;   R e i d   D T ,   1 9 9 7 ,   I E E E   J   Q U A N T U M   E L E C T ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 1 0 9 / 3 . 5 5 4 8 5 4 ;   R e i d   E ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 4 9 5 ,   P 3 2 2 ;   R e i d   E ,   2 0 0 4 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 0 7 3 ,   P 1 2 5 ;   R e i d   E d n a   F . ,   1 9 8 3 ,   T H E S I S   U   S O   C A L I F O R N ;   * R I I A ,   2 0 0 5 ,   S E C   T E R R   U K ,   P 8 ;   S c h m i d   A l e x   P . ,   1 9 8 3 ,   P O L I T I C A L   T E R R O R I S M ;   S c h m i d   A l e x   P . ,   1 9 8 8 ,   P O L I T I C A L   T E R R O R I S M ;   S h i f f r i n   R . M . ,   2 0 0 4 ,   M A P P I N G   K N O W L E D G E   D O ;   S i l k e   A n d r e w ,   2 0 0 4 ,   R E S   T E R R O R I S M   T R E N D S ,   p [ 1 8 6 ,   1 9 4 ] ;   S i l k e   A ,   2 0 0 1 ,   T E R R O R   P O L I T   V I O L E N C ,   V 1 3 ,   P 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 4 6 5 5 0 1 0 9 6 0 9 6 9 7 ;   S u n   Z ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 4 9 5 ,   P 3 7 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   2 0 0 1 ,   J O I N T   I N T   C   A S S   C O M P ;   W i l k i n s o n   P . ,   1 9 8 6 ,   T E R R O R I S M   I N T   O R D E R ,   P 3 7 ;   W I L K I N S O N   P ,   2 0 0 3 ,   T E R R O R I S M   I M P L I C A T I O ;   W i l k i n s o n   P . ,   1 9 8 6 ,   T E R R O R I S M   L I B E R A L   S T ;   Z a h n   M . ,   2 0 0 4 ,   T E R R O R I S M   C O U N T E R   T E ,   P 1 1 1 	 5 7 	 2 7 	 2 8 	 3 	 2 4 	 A C A D E M I C   P R E S S   L T D -   E L S E V I E R   S C I E N C E   L T D 	 L O N D O N 	 2 4 - 2 8   O V A L   R D ,   L O N D O N   N W 1   7 D X ,   E N G L A N D 	 1 0 7 1 - 5 8 1 9 	 	 	 I N T   J   H U M - C O M P U T   S T 	 I n t .   J .   H u m . - C o m p u t .   S t u d . 	 J A N 	 2 0 0 7 	 6 5 	 1 	 	 	 	 	 4 2 	 5 6 	 	 1 0 . 1 0 1 6 / j . i j h c s . 2 0 0 6 . 0 8 . 0 0 6 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   C y b e r n e t i c s ;   E r g o n o m i c s ;   P s y c h o l o g y ,   M u l t i d i s c i p l i n a r y 	 C o m p u t e r   S c i e n c e ;   E n g i n e e r i n g ;   P s y c h o l o g y 	 1 1 7 S K 	 W O S : 0 0 0 2 4 2 8 9 3 4 0 0 0 0 5 	 	 
 
 J 	 P a r k ,   H W ;   T h e l w a l l ,   M 	 	 	 	 P a r k ,   H a n   W o o ;   T h e l w a l l ,   M i k e 	 	 	 W e b - s c i e n c e   c o m m u n i c a t i o n   i n   t h e   a g e   o f   g l o b a l i z a t i o n 	 N E W   M E D I A   &   S O C I E T Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A s i a ;   A s i a - E u r o p e   M e e t i n g   ( A S E M ) ;   E u r o p e ;   g l o b a l i z a t i o n ;   h y p e r l i n k ;   n e t w o r k   a n a l y s i s ;   s c i e n c e   c o m m u n i c a t i o n ;   u n i v e r s i t y   w e b s i t e ;   w e b o m e t r i c s 	 W O R L D - W I D E - W E B ;   S C I E N T I F I C   C O M M U N I C A T I O N ;   A C A D E M I C - I N S T I T U T I O N S ;   O N L I N E   I M P A C T ;   S O U T H - K O R E A ;   N E T W O R K ;   S I T E S ;   B I B L I O M E T R I C S ;   I N T E R L I N K I N G ;   I N F O R M A T I O N 	 T h e   w e b   i s   i m p o r t a n t   f o r   a c a d e m i c   c o m m u n i c a t i o n   a n d   p u b l i s h i n g   o n   a n   i n t e r n a t i o n a l   s c a l e ,   b u t   i t   i s   d i f f i c u l t   t o   a s s e s s   t h e   e x t e n t   t o   w h i c h   g l o b a l i z a t i o n   a c t u a l l y   h a s   o c c u r r e d .   T h i s   a r t i c l e   e x a m i n e s   t h e   c o n n e c t i v i t y   s t r u c t u r e   o f   l i n k s   b e t w e e n   u n i v e r s i t y   w e b s i t e s   i n   2 5   A s i a n   a n d   E u r o p e a n   c o u n t r i e s   a s   a   c a s e   s t u d y   o f   a n   i n t e r - r e g i o n a l   a n d   i n t r a - r e g i o n a l   w e b   p h e n o m e n o n .   T h e   f i v e   m o s t   l i n k e d - t o   u n i v e r s i t i e s   i n   e a c h   n a t i o n - s t a t e   w e r e   s e l e c t e d   a n d   n e t w o r k   a n a l y s i s   t e c h n i q u e s   w e r e   u s e d .   T h e   r e s u l t s   s u g g e s t e d   t h a t   t h e   U K   ( a n d   t o   a   l e s s e r   e x t e n t   s o m e   o t h e r   E u r o p e a n   c o u n t r i e s )   h a s   a   h i g h   i m p a c t   o n   t h e   f o r m a t i o n   o f   l i n k - m e d i a t e d   a c a d e m i c   n e t w o r k s   i n   A s i a   a n d   E u r o p e .   U n i v e r s i t i e s '   w e b s i t e s   i n   A s i a   a r e   m o r e   h e a v i l y   c o n n e c t e d   t o   E u r o p e a n   u n i v e r s i t i e s   t h a n   l i n k e d   t o   e a c h   o t h e r .   T h e   o v e r a l l   f i n d i n g s   w e r e   i n d i c a t i v e   o f   g l o b a l i z a t i o n   r a t h e r   t h a n   r e g i o n a l i s m ,   b u t   a   b e t t e r   c h a r a c t e r i z a t i o n   m i g h t   b e   g l o b a l i z a t i o n   w i t h   r e g i o n a l   i m b a l a n c e s   a n d   i n d i v i d u a l   h i g h   p e r f o r m i n g   c o u n t r i e s . 	 Y e u n g n a m   U n i v ,   D e p t   C o m m u n   &   I n f o r m a t ,   K y o n g s a n   7 1 2 7 4 9 ,   G y e o n g s a n g b u k ,   S o u t h   K o r e a ;   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 P a r k ,   H W   ( r e p r i n t   a u t h o r ) ,   Y e u n g n a m   U n i v ,   D e p t   C o m m u n   &   I n f o r m a t ,   2 1 4 - 1   D a e   D o n g ,   K y o n g s a n   7 1 2 7 4 9 ,   G y e o n g s a n g b u k ,   S o u t h   K o r e a . 	 h a n p a r k @ y n u . a c . k r ;   m . t h e l w a l l @ w l v . a c . u k 	 p a r k ,   h a n   w o o / F - 4 0 5 1 - 2 0 1 1 ;   T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A d a m i c   L .   A . ,   2 0 0 1 ,   1 0   A N N   I N T   W O R L D   W I D ;   A r u n a c h a l a m   S ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 2 1 ;   B a r - I l a n   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 3 9 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 0 . 3 3 7 0 6 . c 1 ;   B a r - I l a n   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 9 ;   B a r - I l a n   J . ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 / 3 ,   P 1 ;   B a r n e t t   G A ,   2 0 0 1 ,   A M   B E H A V   S C I ,   V 4 4 ,   P 1 6 3 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 2 7 6 4 2 0 1 0 4 4 0 1 0 0 0 7 ;   B E A U L I E U   A ,   2 0 0 5 ,   V I R T U A L   M E T H O D S   I S S U ,   P 1 8 2 ;   B e l l   D ,   1 9 7 3 ,   C O M I N G   P O S T   I N D   S O C ;   B E R N E R S L E E   T ,   1 9 9 2 ,   W 3   S E R V E R S ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B o r g a t t i   S .   P . ,   2 0 0 2 ,   U C I N E T   F O R   W I N D O W S ;   B r o d e r   A . ,   2 0 0 0 ,   9   I N T   W O R L D   W I D   W E B ;   B r u n n   S D ,   2 0 0 1 ,   A M   B E H A V   S C I ,   V 4 4 ,   P 1 7 1 7 ;   C H O I   S Y ,   2 0 0 0 ,   I N T E R N E T   E C   T E C H N O L O ;   C h o n   K ,   2 0 0 1 ,   C O M M U N   A C M ,   V 4 4 ,   P 1 1 6 ,   D O I   1 0 . 1 1 4 5 / 3 6 5 1 8 1 . 3 6 5 2 3 1 ;   C I O L E K   T M ,   2 0 0 1 ,   I N T   P O L   E C   F O R   2 0 0 1 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   * C Y R ,   2 0 0 3 ,   N E T M   U S   M A N ;   D a v i d   P A ,   2 0 0 2 ,   I N T   S O C   S C I   J ,   V 5 4 ,   P 9 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 2 4 5 1 . 0 0 3 5 5 ;   F E A T H E R S T O N E   M ,   1 9 9 9 ,   G L O B A L   C U L T U R E ;   F i n h o l t   T A ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 7 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 6 0 1 0 3 ;   F o o t   K . ,   2 0 0 3 ,   J   C O M P U T E R   M E D I A T E D ,   V 8 ,   P 0 ;   F R E D E R I C K   H o w a r d   H ,   1 9 9 3 ,   G L O B A L   C O M M U N I C A T I O N ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   F r y   J . ,   2 0 0 4 ,   L i t e r a r y   &   L i n g u i s t i c   C o m p u t i n g ,   V 1 9 ,   D O I   1 0 . 1 0 9 3 / l l c / 1 9 . 3 . 3 0 3 ;   G a r r i d o   M a r i a ,   2 0 0 3 ,   C Y B E R A C T I V I S M   O N L I N E ,   P 1 6 5 ;   G i d d e n s   A . ,   1 9 9 0 ,   C O N S E Q U E N C E S   M O D E R N I ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 1 3 2 1 7 2 3 ;   H a r r i e s   G ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 4 3 6 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 6 7 3 6 ;   H i n e   C . ,   2 0 0 0 ,   V I R T U A L   E T H N O G R A P H Y ;   H o w a r d   P N ,   2 0 0 2 ,   N E W   M E D I A   S O C ,   V 4 ,   P 5 5 0 ,   D O I   1 0 . 1 1 7 7 / 1 4 6 1 4 4 4 0 2 3 2 1 4 6 6 8 1 3 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K A M A D A   T ,   1 9 8 9 ,   I N F O R M   P R O C E S S   L E T T ,   V 3 1 ,   P 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 1 9 0 ( 8 9 ) 9 0 1 0 2 - 6 ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   M a c z e w s k i   M . ,   2 0 0 2 ,   C H I L D   Y O U T H   C A R E   F O R ,   V 3 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 3 2 2 6 0 2 5 9 7 ;   M c M i l l a n   S J ,   2 0 0 0 ,   J   M A S S   C O M M U N   Q ,   V 7 7 ,   P 8 0 ;   P a r k   H W ,   2 0 0 4 ,   N E W   M E D I A   S O C ,   V 6 ,   P 4 0 3 ,   D O I   1 0 . 1 1 7 7 / 1 4 6 1 4 4 4 8 0 4 0 4 2 5 2 2 ;   P a r k   H W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 5 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 2 ;   P A R K   H W ,   2 0 0 4 ,   I N T   I N F   L I B R   R E V ,   V 3 6 ,   P 3 2 9 ,   D O I   D O I   1 0 . 1 0 1 6 / j . i i l r . 2 0 0 3 . 1 2 . 0 0 1 ;   P a r k   H .   W . ,   2 0 0 3 ,   J   C O M P U T E R   M E D I A T E D ,   V 8 ;   P a r k   H .   W . ,   2 0 0 2 ,   E L E C T   J   C O M M U N I C A T I O ,   V 1 2 ;   P a r k   H ,   2 0 0 5 ,   S O C I O L   S T U D   C H I L D   Y O ,   V 1 0 ,   P 4 3 ,   D O I   1 0 . 1 0 1 6 / S 1 5 3 7 - 4 6 6 1 ( 0 4 ) 1 0 0 0 4 - 4 ;   P o l a n y i   M . ,   1 9 6 7 ,   T A C I T   D I M E N S I O N ;   R o b e r t s o n   R ,   1 9 9 5 ,   G L O B A L   M O D E R N I T I E S ,   P 2 5 ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S T O C K H O F   W ,   1 9 9 8 ,   A S   E U R   M   A S E M   W I N D   O ;   T h e l w a l l   M ,   2 0 0 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 9 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 9 0 1 1 0 ;   T h e l w a l l   M ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 2 ;   T h e l w a l l   M ,   2 0 0 3 ,   O N L I N E   I N F O R M   R E V ,   V 2 7 ,   P 3 3 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 3 1 0 5 0 2 2 9 8 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 1 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 1 ;   T h e l w a l l   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 4 1 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 8 7 1 0 5 9 0 4 ;   T h e l w a l l   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 1 0 7 2 8 8 5 2 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T h e l w a l l   M . ,   2 0 0 4 ,   J   I N F   S C I ,   V 3 0 ,   P 2 4 3 ;   T h e l w a l l   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 5 3 ;   T H E L W A L L   M ,   2 0 0 1 ,   C Y B E R M E T R I C S ,   V 5 ;   T h e l w a l l   M . ,   2 0 0 3 ,   I N F O R M   R E S ,   V 8 ;   W i l k i n s o n   D . ,   2 0 0 3 ,   J   I N F   S C I ,   V 2 9 ,   P 4 4 5 ;   V A N D E R V E L D E   P ,   2 0 0 2 ,   I I A S   N E W S L E T T E R     N O V ,   P 3 ;   W A L L E R S T E I N   I m m a n u e l ,   1 9 7 6 ,   M O D E R N   W O R L D   S Y S T E M ;   W A R D   J H ,   1 9 6 3 ,   J   A M   S T A T   A S S O C ,   V 5 8 ,   P 2 3 6 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 2 9 6 7 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W e a r e   C ,   2 0 0 0 ,   S O C   S C I   C O M P U T   R E V ,   V 1 8 ,   P 2 7 2 ;   W i l k i n s o n   D ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 ;   Z A K O N   R ,   2 0 0 4 ,   H O B B E S 	 6 8 	 2 7 	 2 7 	 3 	 2 4 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 1 4 6 1 - 4 4 4 8 	 1 4 6 1 - 7 3 1 5 	 	 N E W   M E D I A   S O C 	 N e w   M e d i a   S o c . 	 A U G 	 2 0 0 6 	 8 	 4 	 	 	 	 	 6 2 9 	 6 5 0 	 	 1 0 . 1 1 7 7 / 1 4 6 1 4 4 4 8 0 6 0 6 5 6 6 0 	 	 2 2 	 C o m m u n i c a t i o n 	 C o m m u n i c a t i o n 	 0 7 7 L Y 	 W O S : 0 0 0 2 4 0 0 3 2 1 0 0 0 0 6 	 	 
 
 J 	 M a ,   C B ;   S t e r n ,   D I 	 	 	 	 M a ,   C h u n b o ;   S t e r n ,   D a v i d   I . 	 	 	 E n v i r o n m e n t a l   a n d   e c o l o g i c a l   e c o n o m i c s :   A   c i t a t i o n   a n a l y s i s 	 E C O L O G I C A L   E C O N O M I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 8 t h   B i e n n i a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l - S o c i e t y - f o r - E c o l o g i c a l - E c o n o m i c s 	 J U L   1 1 - 1 4 ,   2 0 0 4 	 M o n t r e a l ,   C A N A D A 	 I n t   S o c   E c o l   E c o n 	 	 c i t a t i o n s ;   b i b l i o m e t r i c s ;   e n v i r o n m e n t a l   e c o n o m i c s ;   e c o l o g i c a l   e c o n o m i c s 	 T R E N D S ;   D E P A R T M E N T S ;   R A N K I N G S ;   J O U R N A L S ;   Q U A L I T Y ;   G O O D S ;   J E E M ;   U S 	 T h i s   s t u d y   l o o k s   a t   t w o   d i s t i n c t   q u e s t i o n s :   ' W h a t   h a v e   b e e n   t h e   m o s t   i n f l u e n t i a l   j o u r n a l   a r t i c l e s   i n   e n v i r o n m e n t a l   e c o n o m i c s   a n d   e c o l o g i c a l   e c o n o m i c s   o v e r   t h e   1 0 - y e a r   p e r i o d   1 9 9 4 - 2 0 0 3 ? ' ;   a n d   ' H o w   m u c h   o v e r l a p   i s   t h e r e   b e t w e e n   t h e   f i e l d s   o f   e n v i r o n m e n t a l   a n d   e c o l o g i c a l   e c o n o m i c s ? '   W e   e x a m i n e   t h e   r e f e r e n c e s   i n   a l l   a r t i c l e s   p u b l i s h e d   i n   J E E M   a n d   E c o l o g i c a l   E c o n o m i c s   ( E E )   o v e r   t h i s   p e r i o d .   F o r   e a c h   o f   t h e s e   t w o   f i e l d s ,   a   l i s t   o f   t h e   t o p   a r t i c l e s   a n d   t o p   j o u r n a l s   c i t e d   b y   a r t i c l e s   p u b l i s h e d   i n   J E E M   a n d   E E   i s   p r e s e n t e d .   W e   a l s o   p r e s e n t   s o m e   r e s u l t s   b a s e d   o n   o u r   s t u d y   o f   t h e   I S I   J o u r n a l   C i t a t i o n   R e p o r t s .   W e   f i n d   t h a t   t h e r e   i s   a   s i g n i f i c a n t   o v e r l a p   b e t w e e n   t h e   t w o   f i e l d s   a t   t h e   j o u r n a l   l e v e l   -   t h e   t w o   j o u r n a l s   c i t e   s i m i l a r   j o u r n a l s .   T h e r e   i s   a   c o r r e l a t i o n   o f   0 . 3 4   b e t w e e n   t h e   n u m b e r   o f   c i t a t i o n s   r e c e i v e d   b y   t h e   j o u r n a l s   t h a t   a r e   m o s t   c i t e d   a n d   t h e   c o r r e l a t i o n   i s   e v e n   h i g h e r   i f   j o u r n a l   s e l f - c i t a t i o n   i s   e x c l u d e d .   T h e   m a i n   d i f f e r e n c e s   a r e   t h a t   e c o l o g i c a l   e c o n o m i c s   t e n d s   t o   c i t e   ( b u t   n o t   b e   c i t e d   b y )   g e n e r a l   n a t u r a l   s c i e n c e   j o u r n a l s   m o r e   o f t e n   t h a n   e n v i r o n m e n t a l   e c o n o m i c s   d o e s ,   e n v i r o n m e n t a l   e c o n o m i c s   c i t e s   m o r e   h e a v i l y   f r o m   j o u r n a l s   r a t h e r   t h a n   o t h e r   p u b l i c a t i o n s ,   a n d   c i t a t i o n s   i n   e n v i r o n m e n t a l   e c o n o m i c s   a r e   m o r e   c o n c e n t r a t e d   o n   p a r t i c u l a r   j o u r n a l s   a n d   i n d i v i d u a l   p u b l i c a t i o n s .   H o w e v e r ,   t h e r e   i s   m u c h   l e s s   s i m i l a r i t y   a t   t h e   l e v e l   o f   i n d i v i d u a l   a r t i c l e s .   N o n - m a r k e t   v a l u a t i o n   a r t i c l e s   d o m i n a t e   t h e   m o s t   c i t e d   a r t i c l e s   i n   J E E M   w h i l e   g r e e n   a c c o u n t i n g ,   s u s t a i n a b i l i t y ,   a n d   t h e   e n v i r o n m e n t a l   K u z n e t s   c u r v e   a r e   a l l   p r o m i n e n t   t o p i c s   i n   E E .   ( c )   2 0 0 5   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 R e n s s e l a e r   P o l y t e c h   I n s t ,   S a g e   L a b ,   D e p t   E c o n ,   T r o y ,   N Y   1 2 1 8 0   U S A 	 S t e r n ,   D I   ( r e p r i n t   a u t h o r ) ,   R e n s s e l a e r   P o l y t e c h   I n s t ,   S a g e   L a b ,   D e p t   E c o n ,   1 1 0   8 t h   S t ,   T r o y ,   N Y   1 2 1 8 0   U S A . 	 m a c 2 @ r p i . e d u ;   s t e r n d @ r p i . e d u 	 S t e r n ,   D a v i d / B - 4 7 0 0 - 2 0 0 9 ;   M a ,   C h u n b o / D - 3 4 7 8 - 2 0 1 1 	 S t e r n ,   D a v i d / 0 0 0 0 - 0 0 0 1 - 6 5 9 5 - 4 2 6 8 ;   M a ,   C h u n b o / 0 0 0 0 - 0 0 0 2 - 9 9 7 3 - 2 9 4 3 	 	 	 B U R T O N   M P ,   1 9 9 5 ,   E C O N   J ,   V 1 0 5 ,   P 3 6 1 ,   D O I   1 0 . 2 3 0 7 / 2 2 3 5 4 9 6 ;   C a h l i k   T ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 3 8 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 3 5 0 6 0 6 1 ;   C A M E R O N   T A ,   1 9 8 8 ,   J   E N V I R O N   E C O N   M A N A G ,   V 1 5 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 5 - 0 6 9 6 ( 8 8 ) 9 0 0 0 8 - 3 ;   C O A S E   R H ,   1 9 6 0 ,   J   L A W   E C O N ,   V 3 ,   P 1 ,   D O I   1 0 . 1 0 8 6 / 4 6 6 5 6 0 ;   C o s t a n z a   R ,   2 0 0 4 ,   E C O L   E C O N ,   V 5 0 ,   P 2 6 1 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 4 . 0 6 . 0 0 1 ;   C o u p e   T ,   2 0 0 3 ,   J   E U R   E C O N   A S S O C ,   V 1 ,   P 1 3 0 9 ,   D O I   1 0 . 1 1 6 2 / 1 5 4 2 4 7 6 0 3 3 2 2 7 5 2 5 5 7 ;   D o m b r o w   J ,   2 0 0 4 ,   J   R E A L   E S T A T E   F I N A N C ,   V 2 9 ,   P 4 7 ,   D O I   1 0 . 1 0 2 3 / B : R E A L . 0 0 0 0 0 2 7 2 0 0 . 0 4 4 8 2 . 1 e ;   D u s a n s k y   R ,   1 9 9 8 ,   J   E C O N   P E R S P E C T ,   V 1 2 ,   P 1 5 7 ;   F i s h e r   A ,   2 0 0 0 ,   J   E N V I R O N   E C O N   M A N A G ,   V 3 9 ,   P 2 6 4 ,   D O I   1 0 . 1 0 0 6 / j e e m . 1 9 9 9 . 1 1 1 8 ;   F u c h s   V R ,   2 0 0 0 ,   J   H E A L T H   E C O N ,   V 1 9 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 6 2 9 6 ( 9 9 ) 0 0 0 3 3 - 8 ;   G R O S S M A N   G M ,   1 9 9 5 ,   Q   J   E C O N ,   V 1 1 0 ,   P 3 5 3 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 8 4 4 3 ;   H o t e l l i n g   H ,   1 9 3 1 ,   J   P O L I T   E C O N ,   V 3 9 ,   P 1 3 7 ,   D O I   1 0 . 1 0 8 6 / 2 5 4 1 9 5 ;   K A H N E M A N   D ,   1 9 9 2 ,   J   E N V I R O N   E C O N   M A N A G ,   V 2 2 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 5 - 0 6 9 6 ( 9 2 ) 9 0 0 1 9 - S ;   K a l a i t z i d a k i s   P ,   2 0 0 3 ,   J   E U R   E C O N   A S S O C ,   V 1 ,   P 1 3 4 6 ,   D O I   1 0 . 1 1 6 2 / 1 5 4 2 4 7 6 0 3 3 2 2 7 5 2 5 6 6 ;   K o l s t a d   C D ,   2 0 0 0 ,   J   E N V I R O N   E C O N   M A N A G ,   V 3 9 ,   P 2 8 2 ,   D O I   1 0 . 1 0 0 6 / j e e m . 1 9 9 9 . 1 1 1 5 ;   K r u t i l l a   J V ,   1 9 6 7 ,   A M   E C O N   R E V ,   V 5 7 ,   P 7 7 7 ;   L a b a n d   D N ,   2 0 0 2 ,   K Y K L O S ,   V 5 5 ,   P 3 1 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 6 4 3 5 . 0 0 1 8 9 ;   L A B A N D   D N ,   1 9 9 4 ,   J   E C O N   L I T ,   V 3 2 ,   P 6 4 0 ;   P a l a c i o s - H u e r t a   I ,   2 0 0 4 ,   E C O N O M E T R I C A ,   V 7 2 ,   P 9 6 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 2 6 2 . 2 0 0 4 . 0 0 5 1 9 . x ;   P E A R C E   D W ,   2 0 0 2 ,   B I O D I V E R S   C O N S E R V ,   V 1 1 ,   P 1 5 0 5 ;   S c o t t   L C ,   1 9 9 6 ,   E C O N   I N Q ,   V 3 4 ,   P 3 7 8 ;   S E L D E N   T M ,   1 9 9 4 ,   J   E N V I R O N   E C O N   M A N A G ,   V 2 7 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 6 / j e e m . 1 9 9 4 . 1 0 3 1 ;   S m i t h   V K ,   2 0 0 0 ,   J   E N V I R O N   E C O N   M A N A G ,   V 3 9 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 6 / j e e m . 1 9 9 9 . 1 1 1 1 ;   S o l o w   R .   M . ,   1 9 7 4 ,   R E V   E C O N   S T U D ,   V 4 1 ,   P 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 2 9 6 3 7 0 	 2 4 	 2 7 	 2 8 	 0 	 1 7 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 9 2 1 - 8 0 0 9 	 	 	 E C O L   E C O N 	 E c o l .   E c o n . 	 J U N   2 5 	 2 0 0 6 	 5 8 	 3 	 	 	 	 	 4 9 1 	 5 0 6 	 	 1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 5 . 0 7 . 0 2 3 	 	 1 6 	 E c o l o g y ;   E c o n o m i c s ;   E n v i r o n m e n t a l   S c i e n c e s ;   E n v i r o n m e n t a l   S t u d i e s 	 E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y ;   B u s i n e s s   &   E c o n o m i c s 	 0 6 0 W C 	 W O S : 0 0 0 2 3 8 8 3 1 4 0 0 0 0 4 	 	 
 
 J 	 C o t h e y ,   V 	 	 	 	 C o t h e y ,   V 	 	 	 W e b - c r a w l i n g   r e l i a b i l i t y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W O R L D - W I D E - W E B ;   S E A R C H   E N G I N E S ;   B I B L I O M E T R I C S ;   I N F O R M A T I O N ;   C O L L E C T I O N ;   I N T E R N E T 	 I n   t h i s   a r t i c l e ,   I   i n v e s t i g a t e   t h e   r e l i a b i l i t y ,   i n   t h e   s o c i a l   s c i e n c e   s e n s e ,   o f   c o l l e c t i n g   i n f o r m e t r i c   d a t a   a b o u t   t h e   W o r l d   W i d e   W e b   b y   W e b   c r a w l i n g .   T h e   i n v e s t i g a t i o n   i n c l u d e s   a   c r i t i c a l   e x a m i n a t i o n   o f   t h e   p r a c t i c e   o f   W e b   c r a w l i n g   a n d   c o n t r a s t s   t h e   r e s u l t s   o f   c o n t e n t   c r a w l i n g   w i t h   t h e   r e s u l t s   o f   l i n k   c r a w l i n g .   I t   i s   s h o w n   t h a t   W e b   c r a w l i n g   b y   s e a r c h   e n g i n e s   i s   i n t e n t i o n a l l y   b i a s e d   a n d   s e l e c t i v e .   I   a l s o   r e p o r t   t h e   r e s u l t s   o f   a   l a r g e - s c a l e   e x p e r i m e n t a l   s i m u l a t i o n   o f   W e b   c r a w l i n g   t h a t   i l l u s t r a t e s   t h e   e f f e c t s   o f   d i f f e r e n t   c r a w l i n g   p o l i c i e s   o n   d a t a   c o l l e c t i o n .   I t   i s   c o n c l u d e d   t h a t   t h e   r e l i a b i l i t y   o f   W e b   c r a w l i n g   a s   a   d a t a   c o l l e c t i o n   t e c h n i q u e   i s   i m p r o v e d   b y   f u l l e r   r e p o r t i n g   o f   r e l e v a n t   c r a w l i n g   p o l i c i e s . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 C o t h e y ,   V   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   L i c h f i e l d   S t ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d . 	 v i v . c o t h e y @ w l v . a c . u k 	 	 	 	 	 A m i t a y   E . ,   2 0 0 3 ,   P   1 4   A C M   C   H Y P   H Y P   H ,   P 3 8 ;   B a i l e y   P ,   2 0 0 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 9 ,   P 8 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 8 4 - 5 ;   B a r - I l a n   J ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 3 7 1 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B e r g m a r k   D . ,   2 0 0 2 ,   P   6   E U R   C   R E S   A D V   T E ,   P 9 1 ;   B h a r a t   K ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 2 7 - 5 ;   B h a r a t   K ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 1 1 4 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 2 5 > 3 . 0 . C O ; 2 - 0 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B r o d e r   A ,   2 0 0 0 ,   C O M P U T   N E T W ,   V 3 3 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 9 - 1 2 8 6 ( 0 0 ) 0 0 0 8 3 - 9 ;   B U R N E R   M ,   1 9 9 7 ,   C R A W L I N G   E T E R N I T Y   B U ,   V 2 ;   C A H K R A B A R T I   S ,   2 0 0 2 ,   P   1 1   W O R L D   W I D   W E B   C ,   P 5 0 8 ;   C h o   J . ,   2 0 0 2 ,   P   1 1   I N T   C   W O R L D   W I D ,   P 1 2 4 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   E D W A R D S   J ,   2 0 0 2 ,   P   1 1   W O R L D   W I D   W E B   C ,   P 1 0 6 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   E I C H M A N N   D ,   1 9 9 4 ,   P   1   W O R L D   W I D   W E B   C ;   G o r d o n   M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 4 1 - 7 ;   H a w k i n g   D ,   1 9 9 9 ,   C O M P U T   N E T W ,   V 3 1 ,   P 1 3 2 1 ,   D O I   1 0 . 1 0 1 6 / S 1 3 8 9 - 1 2 8 6 ( 9 9 ) 0 0 0 2 4 - 9 ;   H e n z i g n e r   M R ,   2 0 0 1 ,   I E E E   I N T E R N E T   C O M P U T ,   V 5 ,   P 4 5 ,   D O I   1 0 . 1 1 0 9 / 4 2 3 6 . 8 9 5 1 4 1 ;   H e n z i n g e r   M . R . ,   2 0 0 3 ,   I N T E R N E T   M A T H ,   V 1 ,   P 1 1 5 ;   K E L I N B E R G   J M ,   1 9 9 9 ,   P   5   I N T   C   C O M P   C O M B ,   P 1 ;   K E L R I N G E R   F N ,   2 0 0 0 ,   F D N   B E H A V   R E S ;   K o s t e r   M a r t i j n ,   1 9 9 3 ,   G U I D E L I N E S   R O B O T   W R I ;   L a w r e n c e   S ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 3 8 / 2 1 9 8 7 ;   L a w r e n c e   S ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 9 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 0 . 5 3 6 0 . 9 8 ;   M e g h a b g h a b   G ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 2 4 . a b s ;   M e t t r o p   W ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 6 2 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 9 6 ;   N a j o r k   M . ,   2 0 0 1 ,   1 7 3   C O M P   S Y S T   R E S   C T ;   N a j o r k   M . ,   2 0 0 1 ,   P   1 0   I N T   C   W O R L D   W I D ,   P 1 1 4 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 7 1 9 2 0 . 3 7 1 9 6 5 ;   S t e w a r t   D . W . ,   1 9 9 3 ,   S E C O N D A R Y   R E S   I N F O R M ;   T a d i c   B ,   2 0 0 2 ,   C O M P U T   P H Y S   C O M M U N ,   V 1 4 7 ,   P 5 8 6 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 4 6 5 5 ( 0 2 ) 0 0 3 7 3 - 9 ;   T h e l w a l l   M ,   2 0 0 2 ,   I N T E R N E T   R E S ,   V 1 2 ,   P 1 2 4 ,   D O I   1 0 . 1 1 0 8 / 1 0 6 6 2 2 4 0 2 1 0 4 2 2 5 0 3 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 1 9 ;   W a l l   L . ,   1 9 9 6 ,   P R O G R A M M I N G   P E R L 	 3 5 	 2 7 	 2 8 	 0 	 7 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 0 4 	 5 5 	 1 4 	 	 	 	 	 1 2 2 8 	 1 2 3 8 	 	 1 0 . 1 0 0 2 / a s i . 2 0 0 7 8 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 7 0 U S 	 W O S : 0 0 0 2 2 5 0 8 4 7 0 0 0 0 3 	 	 
 
 J 	 T h e l w a l l ,   M ;   V a u g h a n ,   L ;   C o t h e y ,   V ;   L i ,   X M ;   S m i t h ,   A G 	 	 	 	 T h e l w a l l ,   M ;   V a u g h a n ,   L ;   C o t h e y ,   V ;   L i ,   X M ;   S m i t h ,   A G 	 	 	 W h i c h   a c a d e m i c   s u b j e c t s   h a v e   m o s t   o n l i n e   i m p a c t ?   A   p i l o t   s t u d y   a n d   a   n e w   c l a s s i f i c a t i o n   p r o c e s s 	 O N L I N E   I N F O R M A T I O N   R E V I E W 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 w o r l d w i d e   W e b ;   s u b j e c t   c a t a l o g u i n g ;   c l a s s i f i c a t i o n ;   u n i v e r s i t i e s 	 W O R L D - W I D E - W E B ;   S C H O L A R L Y   C O M M U N I C A T I O N ;   S E A R C H   E N G I N E ;   L I N K S ;   B I B L I O M E T R I C S ;   S I T E S 	 T h e   u s e   o f   t h e   W e b   b y   a c a d e m i c   r e s e a r c h e r s   i s   d i s c i p l i n e - d e p e n d e n t   a n d   h i g h l y   v a r i a b l e .   I t   i s   i n c r e a s i n g l y   c e n t r a l   f o r   s h a r i n g   i n f o r m a t i o n ,   d i s s e m i n a t i n g   r e s u l t s   a n d   p u b l i c i s i n g   r e s e a r c h   p r o j e c t s .   T h i s   p i l o t   s t u d y   s e e k s   t o   i d e n t i f y   t h e   s u b j e c t s   t h a t   h a v e   t h e   m o s t   i m p a c t   o n   t h e   W e b ,   a n d   l o o k   f o r   n a t i o n a l   d i f f e r e n c e s   i n   o n l i n e   s u b j e c t   v i s i b i l i t y .   T h e   h i g h e s t   i m p a c t   s i t e s   w e r e   f r o m   c o m p u t i n g ,   b u t   t h e r e   w e r e   m a j o r   n a t i o n a l   d i f f e r e n c e s   i n   t h e   i m p a c t   o f   e n g i n e e r i n g   a n d   t e c h n o l o g y   s i t e s .   A n o t h e r   d i f f e r e n c e   w a s   t h a t   T a i w a n   h a d   m o r e   h i g h   i m p a c t   n o n - a c a d e m i c   s i t e s   h o s t e d   b y   u n i v e r s i t i e s .   A s   a   p i l o t   s t u d y ,   t h e   c l a s s i f i c a t i o n   p r o c e s s   i t s e l f   w a s   a l s o   i n v e s t i g a t e d   a n d   t h e   p r o b l e m s   o f   a p p l y i n g   s u b j e c t   c l a s s i f i c a t i o n   t o   a c a d e m i c   W e b   s i t e s   d i s c u s s e d .   T h e   s t u d y   d r a w s   o u t   a   n u m b e r   o f   i s s u e s   i n   t h i s   r e g a r d ,   h a v i n g   n o   s i m p l e   s o l u t i o n s   a n d   p o i n t   t o   t h e   n e e d   t o   i n t e r p r e t   t h e   r e s u l t s   w i t h   c a u t i o n . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I T ,   W o l v e r h a m p t o n   W V 1   1 D J ,   W   M i d l a n d s ,   E n g l a n d ;   U n i v   W e s t e r n   O n t a r i o ,   F a c   I n f o r m a t   &   M e d i a   S t u d i e s ,   L o n d o n ,   O N   N 6 A   3 K 7 ,   C a n a d a ;   V i c t o r i a   U n i v   W e l l i n g t o n ,   S c h   I n f o r m a t   M a n a g e m e n t ,   W e l l i n g t o n ,   N e w   Z e a l a n d 	 T h e l w a l l ,   M   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I T ,   W o l v e r h a m p t o n   W V 1   1 D J ,   W   M i d l a n d s ,   E n g l a n d . 	 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A g u i l l o   I .   F . ,   1 9 9 8 ,   O n l i n e   I n f o r m a t i o n   9 8 .   P r o c e e d i n g s ,   P 2 3 9 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   D A V E N P O R T   E ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 5 1 7 ;   D E V A D A S O N   F ,   2 0 0 1 ,   P   A S I S T   2 0 0 1 ,   P 2 2 4 ;   F i n h o l t   T A ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 7 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 6 0 1 0 3 ;   R o d r i g u e z   i   G a i r i n   J .   M . ,   1 9 9 7 ,   R E V   E S P   D O C   C I E N T ,   V 2 0 ,   P 1 7 5 ;   G i b b o n   M i c h a e l ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G i b b o n s   M . ,   2 0 0 0 ,   C H A N G I N G   M O D E S   N E W   K ,   P 3 4 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 1 3 2 1 7 2 3 ;   H a w k i n g   D . ,   2 0 0 0 ,   I n f o r m a t i o n   T e c h n o l o g y :   E i g h t h   T e x t   R E t r i e v a l   C o n f e r e n c e   ( T R E C - 8 )   ( N I S T   S P   5 0 0 - 2 4 6 ) ;   H y l a n d   K e n ,   2 0 0 0 ,   D I S C I P L I N A R Y   D I S C O U R ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   J e n k i n s   C ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 6 4 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 0 3 5 - X ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K l i n g   R ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 8 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 8 9 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 8 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   K R A A K   A ,   2 0 0 0 ,   C H A N G I N G   M O D E S   N E W   K ,   P 3 4 ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   M c M i l l a n   S J ,   2 0 0 0 ,   J   M A S S   C O M M U N   Q ,   V 7 7 ,   P 8 0 ;   M i d d l e t o n   I ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 2 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 3 0 6 ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   R O N A Y N E   C ,   1 9 9 7 ,   A T S E   F O C U S ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ;   S m i t h   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 0 4 1 5 8 2 2 ;   T A N G   R ,   2 0 0 3 ,   I N   P R E S S   L I B   I N F O R M A ;   T h e l w a l l   M ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 1 8 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 0 1 0 8 0 3 8 0 1 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 5 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 3 1 9 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T H E L W A L L   M ,   2 0 0 4 ,   I N   P R E S S   L I B   I N F O R M A ;   T H E L W A L L   M ,   2 0 0 3 ,   I N   P R E S S   S C I E N T A M E T R ;   T h e l w a l l   M . ,   2 0 0 2 ,   J   I N F   S C I ,   V 2 8 ,   P 4 8 5 ;   T h e l w a l l   M . ,   2 0 0 1 ,   P U B L I C L Y   A C C E S S I B L E ;   U n e s c o ,   1 9 9 7 ,   I N T   S T A N D   C L A S S   E D ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   W e a r e   C ,   2 0 0 0 ,   S O C   S C I   C O M P U T   R E V ,   V 1 8 ,   P 2 7 2 ;   W i l k i n s o n   D . ,   2 0 0 3 ,   J   I N F O R M A T I O N   S C I ,   V 2 9 ,   P 5 9 	 4 0 	 2 7 	 2 8 	 1 	 1 0 	 E M E R A L D   G R O U P   P U B L I S H I N G   L I M I T E D 	 B R A D F O R D 	 6 0 / 6 2   T O L L E R   L A N E ,   B R A D F O R D   B D 8   9 B Y ,   W   Y O R K S H I R E ,   E N G L A N D 	 1 4 6 8 - 4 5 2 7 	 	 	 O N L I N E   I N F O R M   R E V 	 O n l i n e   I n f .   R e v . 	 	 2 0 0 3 	 2 7 	 5 	 	 	 	 	 3 3 3 	 3 4 3 	 	 1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 3 1 0 5 0 2 2 9 8 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 7 W Z 	 W O S : 0 0 0 1 8 7 5 8 5 6 0 0 0 0 5 	 	 
 
 J 	 D E B R U I N ,   R E ;   M O E D ,   H F 	 	 	 	 D E B R U I N ,   R E ;   M O E D ,   H F 	 	 	 D E L I M I T A T I O N   O F   S C I E N T I F I C   S U B F I E L D S   U S I N G   C O G N I T I V E   W O R D S   F R O M   C O R P O R A T E   A D D R E S S E S   I N   S C I E N T I F I C   P U B L I C A T I O N S 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 E U R O P E A N   W O R K S H O P   O N   S C I E N T O M E T R I C   M E T H O D S   O F   R E S E A R C H   E V A L U A T I O N   I N   T H E   S C I E N C E S ,   S O C I A L   S C I E N C E S   A N D   T E C H N O L O G Y 	 A P R   1 3 - 1 7 ,   1 9 9 1 	 P O T S D A M ,   G E R M A N Y 	 F E D   M I N I S T   S C I   &   T E C H N O L ,   G E R M A N   R E S   S O C ,   D O N O R S   A S S O C   P R O M O T I N G   A R T S   &   S C I   G E R M A N Y 	 	 	 	 A n   a p p r o p r i a t e   d e l i m i t a t i o n   o f   s c i e n t i f i c   s u b f i e l d s   c o n s t i t u t e s   o n e   o f   t h e   k e y   p r o b l e m s   i n   b i b l i o m e t r i c s .   S e v e r a l   m e t h o d s   h a v e   b e e n   e x p l o r e d   f o r   t h i s   t a s k .   T h e   m a i n   o n e s   a r e   c o - c i t a t i o n   a n a l y s i s ,   c o - w o r d   a n a l y s i s ,   t h e   u s e   o f   i n d e x i n g   s y s t e m s   b a s e d   o n   c o n t r o l l e d   o r   u n c o n t r o l l e d   k e y w o r d s ,   a n d   f i n a l l y   t h e   u s e   o f   a   c l a s s i f i c a t i o n   o f   s c i e n t i f i c   j o u r n a l s   i n t o   s u b f i e l d s   o r   c a t e g o r i e s .   I n   o u r   c o n t r i b u t i o n   w e   w i l l   e x p l o r e   a   n e w   m e t h o d ,   w h i c h   i s   b a s e d   o n   c o g n i t i v e   w o r d s   f r o m   a d d r e s s e s   ( c o r p o r a t e   s o u r c e s )   i n   s c i e n t i f i c   p u b l i c a t i o n s .   C o g n i t i v e   a d d r e s s   w o r d s   a m   w o r d s   r e f e r r i n g   t o   s c i e n t i f i c   ( s u b ) f i e l d s ,   m e t h o d s   o r   o b j e c t s   o f   r e s e a r c h ,   t h a t   a p p e a r   i n   t h e   i n s t i t u t i o n a l   a f f i l i a t i o n s   o f   t h e   p u b l i s h i n g   a u t h o r s   ( e . g . ,   ' D e p a r t m e n t   o f   P h a r m a c o l o g y , '   A I D S   R e s e a r c h   C e n t e r ' ) .   W e   w i l l   f o c u s   o n   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I ) ,   p u b l i s h e d   b y   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n .   O u r   m e t h o d s   w i l l   b e   a p p l i e d   t o   a   m u l t i d i s c i p l i n a r y   s e t   o f   a r t i c l e s   e x t r a c t e d   f r o m   t h e   j o u r n a l s   S c i e n c e   a n d   N a t u r e . 	 	 D E B R U I N ,   R E   ( r e p r i n t   a u t h o r ) ,   L E I D E N   U N I V , C T R   S C I   &   T E C H N O L   S T U D I E S , W A S S E N A A R S E W E G   5 2 , P O B   9 5 5 5 , 2 3 0 0   R B   L E I D E N , N E T H E R L A N D S . 	 	 	 	 	 	 B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B R A A M   R R ,   1 9 9 2 ,   J   I N F O R M   S C I ,   V 1 8 ,   P 3 9 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 2 0 1 8 0 0 5 0 8 ;   B R A A M   R R ,   1 9 9 1 ,   T H E S I S   L E I D E N ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   D E B R U I N   R E ,   1 9 9 0 ,   I N F O R M E T R I C S   1 9 8 9   9 0 ;   M O E D   H F ,   1 9 8 8 ,   I N F O R M E T R I C S   1 9 8 7   8 8 ;   M O E D   H F ,   1 9 8 8 ,   P U B L I C A T I O N   A C T I V I T Y ;   N E D E R H O F   A J ,   1 9 9 0 ,   T R E N D S   P U B L I C A T I O N   A ;   N o m a   E ,   1 9 8 6 ,   S U B J E C T   C L A S S I F I C A T I ;   S M A L L   H ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 7 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   T U S S E N   R J W ,   1 9 8 9 ,   C W T S 8 9 0 1   C T R   S C I   T E C ;   1 9 8 9 ,   I N T   H D B   U   O T H E R   I   H I 	 1 3 	 2 7 	 2 7 	 0 	 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 1 9 9 3 	 2 6 	 1 	 	 	 	 	 6 5 	 8 0 	 	 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 K M 3 4 0 	 W O S : A 1 9 9 3 K M 3 4 0 0 0 0 0 5 	 	 
 
 J 	 K e ,   Q ;   F e r r a r a ,   E ;   R a d i c c h i ,   F ;   F l a m m i n i ,   A 	 	 	 	 K e ,   Q i n g ;   F e r r a r a ,   E m i l i o ;   R a d i c c h i ,   F i l i p p o ;   F l a m m i n i ,   A l e s s a n d r o 	 	 	 D e f i n i n g   a n d   i d e n t i f y i n g   S l e e p i n g   B e a u t i e s   i n   s c i e n c e 	 P R O C E E D I N G S   O F   T H E   N A T I O N A L   A C A D E M Y   O F   S C I E N C E S   O F   T H E   U N I T E D   S T A T E S   O F   A M E R I C A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 d e l a y e d   r e c o g n i t i o n ;   S l e e p i n g   B e a u t y ;   b i b l i o m e t r i c s 	 J O U R N A L   I M P A C T   F A C T O R ;   D E L A Y E D   R E C O G N I T I O N ;   C I T A T I O N   N E T W O R K S ;   S C I E N T I F I C   I M P A C T ;   C O M P L E X   N E T W O R K S ;   C O L L A B O R A T I O N ;   D I S T R I B U T I O N S ;   P U B L I C A T I O N ;   A D V A N T A G E ;   E V O L U T I O N 	 A   S l e e p i n g   B e a u t y   ( S B )   i n   s c i e n c e   r e f e r s   t o   a   p a p e r   w h o s e   i m p o r t a n c e   i s   n o t   r e c o g n i z e d   f o r   s e v e r a l   y e a r s   a f t e r   p u b l i c a t i o n .   I t s   c i t a t i o n   h i s t o r y   e x h i b i t s   a   l o n g   h i b e r n a t i o n   p e r i o d   f o l l o w e d   b y   a   s u d d e n   s p i k e   o f   p o p u l a r i t y .   P r e v i o u s   s t u d i e s   s u g g e s t   a   r e l a t i v e   s c a r c i t y   o f   S B s .   T h e   r e l i a b i l i t y   o f   t h i s   c o n c l u s i o n   i s ,   h o w e v e r ,   h e a v i l y   d e p e n d e n t   o n   i d e n t i f i c a t i o n   m e t h o d s   b a s e d   o n   a r b i t r a r y   t h r e s h o l d   p a r a m e t e r s   f o r   s l e e p i n g   t i m e   a n d   n u m b e r   o f   c i t a t i o n s ,   a p p l i e d   t o   s m a l l   o r   m o n o d i s c i p l i n a r y   b i b l i o g r a p h i c   d a t a s e t s .   H e r e   w e   p r e s e n t   a   s y s t e m a t i c ,   l a r g e - s c a l e ,   a n d   m u l t i d i s c i p l i n a r y   a n a l y s i s   o f   t h e   S B   p h e n o m e n o n   i n   s c i e n c e .   W e   i n t r o d u c e   a   p a r a m e t e r - f r e e   m e a s u r e   t h a t   q u a n t i f i e s   t h e   e x t e n t   t o   w h i c h   a   s p e c i f i c   p a p e r   c a n   b e   c o n s i d e r e d   a n   S B .   W e   a p p l y   o u r   m e t h o d   t o   2 2   m i l l i o n   s c i e n t i f i c   p a p e r s   p u b l i s h e d   i n   a l l   d i s c i p l i n e s   o f   n a t u r a l   a n d   s o c i a l   s c i e n c e s   o v e r   a   t i m e   s p a n   l o n g e r   t h a n   a   c e n t u r y .   O u r   r e s u l t s   r e v e a l   t h a t   t h e   S B   p h e n o m e n o n   i s   n o t   e x c e p t i o n a l .   T h e r e   i s   a   c o n t i n u o u s   s p e c t r u m   o f   d e l a y e d   r e c o g n i t i o n   w h e r e   b o t h   t h e   h i b e r n a t i o n   p e r i o d   a n d   t h e   a w a k e n i n g   i n t e n s i t y   a r e   t a k e n   i n t o   a c c o u n t .   A l t h o u g h   m a n y   c a s e s   o f   S B s   c a n   b e   i d e n t i f i e d   b y   l o o k i n g   a t   m o n o d i s c i p l i n a r y   b i b l i o g r a p h i c   d a t a ,   t h e   S B   p h e n o m e n o n   b e c o m e s   m u c h   m o r e   a p p a r e n t   w i t h   t h e   a n a l y s i s   o f   m u l t i d i s c i p l i n a r y   d a t a s e t s ,   w h e r e   w e   c a n   o b s e r v e   m a n y   e x a m p l e s   o f   p a p e r s   a c h i e v i n g   d e l a y e d   y e t   e x c e p t i o n a l   i m p o r t a n c e   i n   d i s c i p l i n e s   d i f f e r e n t   f r o m   t h o s e   w h e r e   t h e y   w e r e   o r i g i n a l l y   p u b l i s h e d .   O u r   a n a l y s i s   e m p h a s i z e s   a   c o m p l e x   f e a t u r e   o f   c i t a t i o n   d y n a m i c s   t h a t   s o   f a r   h a s   r e c e i v e d   l i t t l e   a t t e n t i o n ,   a n d   a l s o   p r o v i d e s   e m p i r i c a l   e v i d e n c e   a g a i n s t   t h e   u s e   o f   s h o r t - t e r m   c i t a t i o n   m e t r i c s   i n   t h e   q u a n t i f i c a t i o n   o f   s c i e n t i f i c   i m p a c t . 	 [ K e ,   Q i n g ;   F e r r a r a ,   E m i l i o ;   R a d i c c h i ,   F i l i p p o ;   F l a m m i n i ,   A l e s s a n d r o ]   I n d i a n a   U n i v ,   S c h   I n f o r m a t   &   C o m p ,   C t r   C o m p l e x   N e t w o r k s   &   S y s t   R e s ,   B l o o m i n g t o n ,   I N   4 7 4 0 8   U S A 	 F l a m m i n i ,   A   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   I n f o r m a t   &   C o m p ,   C t r   C o m p l e x   N e t w o r k s   &   S y s t   R e s ,   B l o o m i n g t o n ,   I N   4 7 4 0 8   U S A . 	 a f l a m m i n @ i n d i a n a . e d u 	 R a d i c c h i ,   F i l i p p o / B - 4 4 0 7 - 2 0 0 9 	 	 N a t i o n a l   S c i e n c e   F o u n d a t i o n   [ S M A - 1 4 4 6 0 7 8 ] 	 W e   t h a n k   C l a u d i o   C a s t e l l a n o ,   F i l i p p o   M e n c z e r ,   Y o n g - Y e o l   A h n ,   C a s s i d y   S u g i m o t o ,   a n d   C h a o q u n   N i   f o r   i n s i g h t f u l   d i s c u s s i o n s ,   a n d   t h e   A m e r i c a n   P h y s i c a l   S o c i e t y   f o r   m a k i n g   t h e   A P S   d a t a s e t   p u b l i c l y   a v a i l a b l e .   T h i s   w o r k   i s   p a r t i a l l y   s u p p o r t e d   b y   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( G r a n t   S M A - 1 4 4 6 0 7 8 ) . 	 A l b e r t   R ,   2 0 0 2 ,   R E V   M O D   P H Y S ,   V 7 4 ,   P 4 7 ,   D O I   1 0 . 1 1 0 3 / R e v M o d P h y s . 7 4 . 4 7 ;   B a r a b a s i   A L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 0 9 ;   B o c c a l e t t i   S ,   2 0 0 6 ,   P H Y S   R E P ,   V 4 2 4 ,   P 1 7 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s r e p . 2 0 0 5 . 1 0 . 0 0 9 ;   B o r n m a n n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 1 - 1 ;   B o r n m a n n   L ,   2 0 1 4 ,   J   I N F O R M E T R ,   V 8 ,   P 1 7 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 1 1 . 0 0 5 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 9 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 9 . 0 0 3 ;   C l a u s e t   A ,   2 0 0 9 ,   S I A M   R E V ,   V 5 1 ,   P 6 6 1 ,   D O I   1 0 . 1 1 3 7 / 0 7 0 7 1 0 1 1 1 ;   D A V I S   P ,   1 9 8 4 ,   A M   E C O N   R E V ,   V 7 4 ,   P 2 2 5 ;   D o r o g o v t s e v   S N ,   2 0 0 0 ,   P H Y S   R E V   E ,   V 6 2 ,   P 1 8 4 2 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 2 . 1 8 4 2 ;   D o r o g o v t s e v   S N ,   2 0 0 1 ,   P H Y S   R E V   E ,   V 6 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 3 . 0 5 6 1 2 5 ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M   Q U A N T I T ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G A R F I E L D   E ,   1 9 8 9 ,   C U R R   C O N T E N T S ,   V 3 8 ,   P 3 ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R   C O N T E N T S ,   V 9 ,   P 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 8 0 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 8 9 ,   C U R R   C O N T E N T S ,   V 2 3 ,   P 3 ;   G i r v a n   M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 7 8 2 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 2 2 6 5 3 7 9 9 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T I S T ,   V 1 8 ,   P 8 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 7 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 1 . 3 0 7 0 0 . e a ;   G u i m e r a   R ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 8 ,   P 6 9 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 0 6 3 4 0 ;   H a j r a   K B ,   2 0 0 6 ,   P H Y S I C A   A ,   V 3 6 8 ,   P 5 7 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 5 . 1 2 . 0 4 4 ;   H a j r a   K B ,   2 0 0 5 ,   P H Y S I C A   A ,   V 3 4 6 ,   P 4 4 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 4 . 0 8 . 0 4 8 ;   H a j r a   K B ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 7 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 5 6 1 0 3 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J o n e s   B F ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 2 ,   P 1 2 5 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 8 3 5 7 ;   K A R P L U S   R ,   1 9 5 4 ,   P H Y S   R E V ,   V 9 5 ,   P 1 1 5 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v . 9 5 . 1 1 5 4 ;   K i n n e y   A L ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 7 9 4 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 4 4 1 6 1 0 4 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K r a p i v s k y   P L ,   2 0 0 1 ,   P H Y S   R E V   E ,   V 6 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 3 . 0 6 6 1 2 3 ;   L i u   N C ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 1 1 6 ;   M a r x   W ,   2 0 1 4 ,   A N N   P H Y S - B E R L I N ,   V 5 2 6 ,   p A 4 1 ,   D O I   1 0 . 1 0 0 2 / a n d p . 2 0 1 4 0 0 8 0 6 ;   M a r x   W ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 0 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 7 7 ;   M E T Z N E R   W ,   1 9 8 9 ,   P H Y S   R E V   L E T T ,   V 6 2 ,   P 3 2 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 6 2 . 3 2 4 ;   M i l o j e v i c   S ,   2 0 1 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 1 1 ,   P 3 9 8 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 3 0 9 7 2 3 1 1 1 ;   M o l i n a   M I ,   1 9 9 8 ,   P H Y S   R E V   B ,   V 5 8 ,   P 1 2 5 4 7 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v B . 5 8 . 1 2 5 4 7 ;   N e w m a n   M E J ,   2 0 0 9 ,   E P L - E U R O P H Y S   L E T T ,   V 8 6 ,   D O I   1 0 . 1 2 0 9 / 0 2 9 5 - 5 0 7 5 / 8 6 / 6 8 0 0 1 ;   N e w m a n   M E J ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 0 0 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 4 5 1 0 0 ;   N O R D H E I M   L W ,   1 9 5 0 ,   P H Y S   R E V ,   V 7 8 ,   P 2 9 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v . 7 8 . 2 9 4 ;   P e t e r s e n   A M ,   2 0 1 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 1 1 ,   P 1 5 3 1 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 3 2 3 1 1 1 1 1 1 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R e d n e r   S ,   2 0 0 5 ,   P H Y S   T O D A Y ,   V 5 8 ,   P 4 9 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 9 9 6 4 7 5 ;   S a r i g o l   E ,   2 0 1 4 ,   E P J   D A T A   S C I ,   V 3 ,   D O I   1 0 . 1 1 4 0 / e p j d s / s 1 3 6 8 8 - 0 1 4 - 0 0 0 9 - x ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S u n   X L ,   2 0 1 3 ,   S C I   R E P - U K ,   V 3 ,   D O I   1 0 . 1 0 3 8 / s r e p 0 1 0 6 9 ;   U z z i   B ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 2 ,   P 4 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 4 0 4 7 4 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 . 8 2 4 4 1 . f 1 ;   W a n g   D S ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 2 ,   P 1 2 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 3 7 8 2 5 ;   W a n g   J ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 8 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 7 5 - 9 ;   W a n g   M Y ,   2 0 0 8 ,   P H Y S I C A   A ,   V 3 8 7 ,   P 4 6 9 2 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 8 . 0 3 . 0 1 7 ;   W u c h t y   S ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 6 ,   P 1 0 3 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 3 6 0 9 9 ;   Z A C H A R Y   W W ,   1 9 7 7 ,   J   A N T H R O P O L   R E S ,   V 3 3 ,   P 4 5 2 ;   Z E N E R   C ,   1 9 5 1 ,   P H Y S   R E V ,   V 8 2 ,   P 4 0 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v . 8 2 . 4 0 3 ;   Z h u   H ,   2 0 0 3 ,   P H Y S   R E V   E ,   V 6 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 8 . 0 5 6 1 2 1 	 5 7 	 2 6 	 2 6 	 9 	 6 2 	 N A T L   A C A D   S C I E N C E S 	 W A S H I N G T O N 	 2 1 0 1   C O N S T I T U T I O N   A V E   N W ,   W A S H I N G T O N ,   D C   2 0 4 1 8   U S A 	 0 0 2 7 - 8 4 2 4 	 	 	 P   N A T L   A C A D   S C I   U S A 	 P r o c .   N a t l .   A c a d .   S c i .   U .   S .   A . 	 J U N   1 6 	 2 0 1 5 	 1 1 2 	 2 4 	 	 	 	 	 7 4 2 6 	 7 4 3 1 	 	 1 0 . 1 0 7 3 / p n a s . 1 4 2 4 3 2 9 1 1 2 	 	 6 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 C K 5 G S 	 W O S : 0 0 0 3 5 6 2 5 1 8 0 0 0 3 9 	 2 6 0 1 5 5 6 3 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 H o w   d o   y o u   d e f i n e   a n d   m e a s u r e   r e s e a r c h   p r o d u c t i v i t y ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 4 t h   I n t e r n a t i o n a l - S o c i e t y - o f - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s   C o n f e r e n c e   ( I S S I ) 	 J U L   1 5 - 2 0 ,   2 0 1 3 	 V i e n n a ,   A U S T R I A 	 I n t   S o c   S c e i n t o m e t r   &   I n f o m e t r ,   A S I S   &   T ,   E l s e v i e r   B   V ,   E B S C O   I n f o r m a t   S e r v ,   F e d   M i n i s t   S c i   &   R e s ,   F e d   M i n i s t   T r a n s p o r t   I n n o v a t   &   T e c h n o l ,   I n f o r m a t   A s s i s t a n t   V e r e i n   I n f o r m a t   M a n a g e m e n t ,   O R C I D ,   S c i   M e t r i x   R   &   D   R e p o r t s ,   S w e t s   I n f o r m a t   S e r v ,   T h o m s o n   R e u t e r s ,   Z S I   -   C t r   S o c i a l   I n n o v a t 	 	 R e s e a r c h   p r o d u c t i v i t y ;   F S S ;   R e s e a r c h   e v a l u a t i o n ;   U n i v e r s i t y   r a n k i n g s 	 R E S E A R C H   P E R F O R M A N C E ;   L I F E   S C I E N C E S ;   C I T A T I O N S ;   N A T I O N S ;   A U T H O R S ;   I M P A C T ;   O R D E R ;   T I M E 	 P r o d u c t i v i t y   i s   t h e   q u i n t e s s e n t i a l   i n d i c a t o r   o f   e f f i c i e n c y   i n   a n y   p r o d u c t i o n   s y s t e m .   I t   s e e m s   i t   h a s   b e c o m e   a   n o r m   i n   b i b l i o m e t r i c s   t o   d e f i n e   r e s e a r c h   p r o d u c t i v i t y   a s   t h e   n u m b e r   o f   p u b l i c a t i o n s   p e r   r e s e a r c h e r ,   d i s t i n g u i s h i n g   i t   f r o m   i m p a c t .   I n   t h i s   w o r k   w e   o p e r a t i o n a l i z e   t h e   e c o n o m i c   c o n c e p t   o f   p r o d u c t i v i t y   f o r   t h e   s p e c i f i c   c o n t e x t   o f   r e s e a r c h   a c t i v i t y   a n d   s h o w   t h e   l i m i t s   o f   t h e   c o m m o n l y   a c c e p t e d   d e f i n i t i o n .   W e   p r o p o s e   t h e n   a   m e a s u r a b l e   f o r m   o f   r e s e a r c h   p r o d u c t i v i t y   t h r o u g h   t h e   i n d i c a t o r   " F r a c t i o n a l   S c i e n t i f i c   S t r e n g t h   ( F S S ) " ,   i n   k e e p i n g   w i t h   t h e   m i c r o e c o n o m i c   t h e o r y   o f   p r o d u c t i o n .   W e   p r e s e n t   t h e   m e t h o d o l o g y   f o r   m e a s u r e   o f   F S S   a t   v a r i o u s   l e v e l s   o f   a n a l y s i s :   i n d i v i d u a l ,   f i e l d ,   d i s c i p l i n e ,   d e p a r t m e n t ,   i n s t i t u t i o n ,   r e g i o n   a n d   n a t i o n .   F i n a l l y ,   w e   c o m p a r e   t h e   r a n k i n g   l i s t s   o f   I t a l i a n   u n i v e r s i t i e s   b y   t h e   t w o   d e f i n i t i o n s   o f   r e s e a r c h   p r o d u c t i v i t y . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   N a t l   R e s   C o u n c i l   I t a l y ,   C N R ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 8 5   R o m e ,   I t a l y ;   [ D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   E n g n   &   M a n a g e m e n t ,   I - 0 0 1 3 3   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   R e s   C o u n c i l   I t a l y ,   C N R ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   V i a l e   M a n z o n i   3 0 ,   I - 0 0 1 8 5   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 3 ,   P 7 6 2 ;   A b r a m o   G ,   2 0 1 4 ,   H I G H   E D U C ,   V 6 8 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 1 3 - 9 6 8 5 - x ;   A b r a m o   G ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 7 ,   P 7 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 0 1 3 - 9 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 1 . 0 1 3 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 1 . 0 0 3 ;   A b r a m o   G ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 3 ,   P 1 0 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 1 4 - 9 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 4 7 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 3 . 0 0 5 ;   A b r a m o   G ,   2 0 1 2 ,   H I G H   E D U C ,   V 6 3 ,   P 7 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 1 1 - 9 4 7 1 - 6 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 2 . 0 0 3 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 9 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 2 6 - 6 ;   A b r a m o   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 6 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 6 4 - 1 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ;   B A N K E R   R D ,   1 9 8 4 ,   M A N A G E   S C I ,   V 3 0 ,   P 1 0 7 8 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 0 . 9 . 1 0 7 8 ;   B u t l e r   L ,   2 0 0 7 ,   S C I   P U B L   P O L I C Y ,   V 3 4 ,   P 5 6 5 ,   D O I   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 7 X 2 5 4 4 0 4 ;   C H A R N E S   A ,   1 9 7 8 ,   E U R   J   O P E R   R E S ,   V 2 ,   P 4 2 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 7 8 ) 9 0 1 3 8 - 8 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   L a u d e l   G ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 2 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 6 0 6 6 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 5 0 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 3 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M O E D   H F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 5 ;   O p t h o f   T ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 2 . 0 0 3 ;   P e p e   A ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 4 6 4 2 8 ;   F r a e n k e l   B ,   2 0 0 4 ,   S I G N A T U R E   S C I   S O C I O L ;   Q S - Q u a c q u a r e l l i   S y m o n d s ,   2 0 1 3 ,   W O R L D   U   R A N K   2 0 1 3 ;   R I N   ( R e s e a r c h   I n f o r m a t i o n   N e t w o r k ) ,   2 0 0 9 ,   C O M M   K N O W L   W H Y   R E S   P ;   S c h e e l   H . ,   2 0 0 0 ,   E M S   E F F I C I E N C Y   M E A S U ;   S J T U - S h a n g h a i   J i a o   T o n g   U n i v e r s i t y ,   2 0 1 3 ,   A C   R A N K   W O R L D   U   2 0 1 3 ;   T H E ,   2 0 1 3 ,   W O R L D   U   R A N K   2 0 1 3   2 0 ;   T h o m p s o n   B ,   1 9 9 3 ,   A N N   M   M I D   S   E D   R E S   A ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 	 3 8 	 2 6 	 2 7 	 1 5 	 8 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 N O V 	 2 0 1 4 	 1 0 1 	 2 	 	 	 	 	 1 1 2 9 	 1 1 4 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 4 - 1 2 6 9 - 8 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A R 5 F F 	 W O S : 0 0 0 3 4 3 6 0 9 9 0 0 0 1 4 	 	 
 
 J 	 J o n s ,   H ;   H o y l e r ,   M 	 	 	 	 J o e n s ,   H e i k e ;   H o y l e r ,   M i c h a e l 	 	 	 G l o b a l   g e o g r a p h i e s   o f   h i g h e r   e d u c a t i o n :   T h e   p e r s p e c t i v e   o f   w o r l d   u n i v e r s i t y   r a n k i n g s 	 G E O F O R U M 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 W o r l d   u n i v e r s i t y   r a n k i n g s ;   K n o w l e d g e - b a s e d   e c o n o m y ;   H i g h e r   e d u c a t i o n ;   I n t e r n a t i o n a l i z a t i o n ;   G l o b a l i z a t i o n ;   U n i v e r s i t i e s 	 A C A D E M I C   M O B I L I T Y ;   A N G L O - A M E R I C A N ;   U N I T E D - S T A T E S ;   K N O W L E D G E ;   G L O B A L I Z A T I O N ;   N E T W O R K S ;   S C I E N C E ;   G E R M A N Y ;   C I T I E S ;   I N T E R N A T I O N A L I Z A T I O N 	 T h i s   p a p e r   c o n t r i b u t e s   t o   e m e r g i n g   d e b a t e s   a b o u t   u n e v e n   g l o b a l   g e o g r a p h i e s   o f   h i g h e r   e d u c a t i o n   t h r o u g h   a   c r i t i c a l   a n a l y s i s   o f   w o r l d   u n i v e r s i t y   r a n k i n g s .   D r a w i n g   o n   r e c e n t   w o r k   i n   g e o g r a p h y ,   i n t e r n a t i o n a l   h i g h e r   e d u c a t i o n   a n d   b i b l i o m e t r i c s ,   t h e   p a p e r   e x a m i n e s   t w o   o f   t h e   m a j o r   i n t e r n a t i o n a l   r a n k i n g   s c h e m e s   t h a t   h a v e   h a d   s i g n i f i c a n t   p u b l i c   i m p a c t   i n   t h e   c o n t e x t   o f   t h e   o n - g o i n g   n e o l i b e r a l i z a t i o n   o f   h i g h e r   e d u c a t i o n .   W e   a r g u e   t h a t   t h e   e m e r g e n c e   o f   t h e s e   g l o b a l   r a n k i n g s   r e f l e c t s   a   s c a l a r   s h i f t   i n   t h e   g e o p o l i t i c s   a n d   g e o e c o n o m i c s   o f   h i g h e r   e d u c a t i o n   f r o m   t h e   n a t i o n a l   t o   t h e   g l o b a l   t h a t   p r i o r i t i z e s   a c a d e m i c   p r a c t i c e s   a n d   d i s c o u r s e s   c o n d u c t e d   i n   p a r t i c u l a r   p l a c e s   a n d   f i e l d s   o f   r e s e a r c h .   O u r   a n a l y s i s   i l l u s t r a t e s   h o w   t h e   s u b s t a n t i a l   v a r i a t i o n   i n   r a n k i n g   c r i t e r i a   p r o d u c e s   n o t   o n l y   n e c e s s a r i l y   p a r t i a l   b u t   a l s o   v e r y   s p e c i f i c   g l o b a l   g e o g r a p h i e s   o f   h i g h e r   e d u c a t i o n .   I n   c o m p a r i s o n ,   t h e s e   r e v e a l   a   w i d e r   t e n s i o n   i n   t h e   k n o w l e d g e - b a s e d   e c o n o m y   b e t w e e n   e s t a b l i s h e d   k n o w l e d g e   c e n t e r s   i n   E u r o p e   a n d   t h e   U n i t e d   S t a t e s   a n d   e m e r g i n g   k n o w l e d g e   h u b s   i n   A s i a   P a c i f i c .   A n   a n a l y s i s   o f   i n d i v i d u a l   r a n k i n g   c r i t e r i a ,   h o w e v e r ,   s u g g e s t s   t h a t   o t h e r   m e a s u r e s   a n d   s u b j e c t - s p e c i f i c   p e r s p e c t i v e s   w o u l d   p r o d u c e   v e r y   d i f f e r e n t   l a n d s c a p e s   o f   h i g h e r   e d u c a t i o n .   ( C )   2 0 1 2   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ J o e n s ,   H e i k e ;   H o y l e r ,   M i c h a e l ]   U n i v   L o u g h b o r o u g h ,   D e p t   G e o g ,   L o u g h b o r o u g h   L E 1 1   3 T U ,   L e i c s ,   E n g l a n d 	 J o n s ,   H   ( r e p r i n t   a u t h o r ) ,   U n i v   L o u g h b o r o u g h ,   D e p t   G e o g ,   L o u g h b o r o u g h   L E 1 1   3 T U ,   L e i c s ,   E n g l a n d . 	 H . J o n s @ l b o r o . a c . u k ;   M . H o y l e r @ l b o r o . a c . u k 	 	 J o n s ,   H e i k e / 0 0 0 0 - 0 0 0 1 - 9 2 5 0 - 4 7 8 0 	 	 	 A a l b e r s   M B ,   2 0 0 7 ,   S O C   C U L T   G E O G R ,   V 8 ,   P 2 8 3 ,   D O I   1 0 . 1 0 8 0 / 1 4 6 4 9 3 6 0 7 0 1 3 6 0 2 2 0 ;   A c k e r s   L ,   2 0 0 8 ,   M I N E R V A ,   V 4 6 ,   P 4 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 2 4 - 0 0 8 - 9 1 1 0 - 2 ;   A d a m s   J ,   2 0 0 7 ,   P A T T E R N S   I N T   C O L L A B O ;   A g u i l l o   I F ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 9 0 - z ;   A l t b a c h   P . ,   2 0 0 7 ,   W O R L D   C L A S S   W O R L D W I D ;   A l t b a c h   P . ,   2 0 1 0 ,   I N T   H I G H E R   E D ,   P 3 ;   A l t b a c h   P h i l i p   G . ,   2 0 0 3 ,   I N T   H I G H E R   E D ,   V 3 3 ,   P 5 ;   A l t b a c h   P .   G . ,   2 0 0 4 ,   T E R T I A R Y   E D   M A N A G E M E ,   V 1 0 ,   P 3 ,   D O I   [ D O I   1 0 . 1 0 8 0 / 1 3 5 8 3 8 8 3 . 2 0 0 4 . 9 9 6 7 1 1 4 ,   D O I   1 0 . 1 0 2 3 / B : T E A M . 0 0 0 0 0 1 2 2 3 9 . 5 5 1 3 6 . 4 B ] ;   A l t b a c h   P h i l i p   G . ,   2 0 0 7 ,   J   S T U D   I N T   E D U C ,   V 1 1 ,   P 2 9 0 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 0 2 8 3 1 5 3 0 7 3 0 3 5 4 2 ;   A r r i g h i   G i o v a n n i ,   2 0 1 0 ,   L O N G   2 0   C E N T U R Y   M O N E ;   A t k i n s o n   M . ,   2 0 0 8 ,   P O L I C Y   O P T I O N S ,   P 6 5 ;   B a j e r s k i   A ,   2 0 1 1 ,   A R E A ,   V 4 3 ,   P 3 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 4 7 6 2 . 2 0 1 0 . 0 0 9 8 9 . x ;   B a t t y   M ,   2 0 0 3 ,   E N V I R O N   P L A N N   B ,   V 3 0 ,   P 1 ,   D O I   1 0 . 1 0 6 8 / b 3 0 0 1 e d ;   B e r g   L D ,   1 9 9 7 ,   J   G E O G R   H I G H E R   E D U C ,   V 2 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 9 8 2 6 9 7 0 8 7 2 5 4 2 1 ;   B e r g   L D ,   1 9 9 8 ,   E N V I R O N   P L A N N   D ,   V 1 6 ,   P 1 2 8 ;   B e r g   L D ,   2 0 0 4 ,   G E O F O R U M ,   V 3 5 ,   P 5 5 3 ,   D O I   1 0 . 1 0 1 6 / j . g e o f o r u m . 2 0 0 4 . 0 1 . 0 0 5 ;   B i l l a u t   J C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 2 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 1 5 - x ;   B o h m   A . ,   2 0 0 3 ,   G L O B A L   S T U D E N T   M O B I L ;   B o o k s t e i n   F L ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 2 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 8 9 - 5 ;   B r o o k s   R ,   2 0 1 1 ,   S T U D E N T   M O B I L I T I E S ,   M I G R A T I O N   A N D   T H E   I N T E R N A T I O N A L I Z A T I O N   O F   H I G H E R   E D U C A T I O N ,   P 1 ,   D O I   1 0 . 1 0 5 7 / 9 7 8 0 2 3 0 3 0 5 5 8 8 ;   C a n a a n   J E ,   2 0 0 8 ,   R O U T L   R E S   E D U C ,   V 1 5 ,   P 1 ;   C a r n e g i e   F o u n d a t i o n ,   2 0 1 0 ,   C A R N   C L A S S   I   H I G H   E D ;   C a s t r e e   N ,   2 0 0 0 ,   A N T I P O D E ,   V 3 2 ,   P 2 2 2 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 3 3 0 . 0 0 1 3 1 ;   C a s t r e e   N ,   2 0 0 6 ,   P R O G   H U M   G E O G ,   V 3 0 ,   P 7 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 9 1 3 2 5 0 6 0 7 1 5 1 8 ;   C h a r l e   C ,   2 0 0 4 ,   T R A N S N A T I O N A L   I N T E L L ,   P 4 0 1 ;   C h a r l e   C . ,   2 0 0 4 ,   H I S T   U   E U R O P E ,   V I I I ,   P 3 3 ,   D O I   1 0 . 1 0 1 7 / C B O 9 7 8 0 5 1 1 4 9 6 8 6 8 . 0 0 4 ;   C o c h r a n e   A . ,   2 0 1 2 ,   P O L I C Y   P O L I T I C S ;   D e e m   R . ,   2 0 0 8 ,   H I G H   E D U C   P O L I C Y ,   V 2 1 ,   P 8 3 ,   D O I   D O I   1 0 . 1 0 5 7 / P A L G R A V E . H E P . 8 3 0 0 1 7 9 ;   D i l l   D D ,   2 0 0 5 ,   H I G H   E D U C ,   V 4 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 4 - 1 7 4 6 - 8 ;   E n s e r i n k   M ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 7 ,   P 1 0 2 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 1 7 . 5 8 4 1 . 1 0 2 6 ;   E p s t e i n   D ,   2 0 0 7 ,   W O R L D   Y E A R B   E D U C ,   P 1 ;   E s p e l a n d   W N ,   2 0 0 7 ,   A M   J   S O C I O L ,   V 1 1 3 ,   P 1 ,   D O I   1 0 . 1 0 8 6 / 5 1 7 8 9 7 ;   F a u l c o n b r i d g e   J .   R . ,   2 0 0 9 ,   G E O G R A P H Y   C O M P A S S ,   V 3 ,   P 1 7 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 9 - 8 1 9 8 . 2 0 0 8 . 0 0 1 7 6 . x ;   F i n d l a y   A ,   2 0 0 6 ,   E U R   U R B A N   R E G   S T U D ,   V 1 3 ,   P 2 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 9 7 7 6 4 0 6 0 6 5 4 2 9 ;   F i n d l a y   A M ,   2 0 1 2 ,   T   I   B R I T   G E O G R ,   V 3 7 ,   P 1 1 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 5 6 6 1 . 2 0 1 1 . 0 0 4 5 4 . x ;   F l o r i a n   R V ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 7 - 1 7 1 2 - 1 ;   G a r c i a - R a m o n   M D ,   2 0 0 3 ,   P R O G   H U M   G E O G ,   V 2 7 ,   P 1 ,   D O I   1 0 . 1 1 9 1 / 0 3 0 9 1 3 2 5 0 3 p h 4 0 9 x x ;   G o d d a r d   J . ,   2 0 1 1 ,   H D B   L O C A L   R E G I O N A L   D ,   P 4 2 5 ;   H a l l   S ,   2 0 0 8 ,   T   I   B R I T   G E O G R ,   V 3 3 ,   P 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 5 6 6 1 . 2 0 0 7 . 0 0 2 8 8 . x ;   H a l p i n   T . ,   2 0 0 4 ,   T I M E S ;   H a n n a h   M . G . ,   2 0 1 1 ,   A U D I T   C U L T U R E S   A C A D ;   H A R A W A Y   D ,   1 9 8 8 ,   F E M I N I S T   S T U D ,   V 1 4 ,   P 5 7 5 ,   D O I   1 0 . 2 3 0 7 / 3 1 7 8 0 6 6 ;   H a z e l k o r n   E ,   2 0 1 1 ,   R A N K I N G S   A N D   T H E   R E S H A P I N G   O F   H I G H E R   E D U C A T I O N :   T H E   B A T T L E   F O R   W O R L D - C L A S S   E X C E L L E N C E ,   P 1 ,   D O I   1 0 . 1 0 5 7 / 9 7 8 0 2 3 0 3 0 6 3 9 4 ;   H a z e n   H D ,   2 0 0 6 ,   P O P U L   S P A C E   P L A C E ,   V 1 2 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 2 / p s p . 4 0 9 ;   H E F C E ,   2 0 0 8 ,   C O U N T   W H A T   I S   M E A S   M ;   H e f f e r n a n   M ,   2 0 0 7 ,   M I N E R V A ,   V 4 5 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 2 4 - 0 0 7 - 9 0 6 5 - 8 ;   H e l m s   G ,   2 0 0 5 ,   A R E A ,   V 3 7 ,   P 2 4 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 4 7 6 2 . 2 0 0 5 . 0 0 6 2 7 . x ;   H o l l o w a y   S L ,   2 0 1 2 ,   T   I   B R I T   G E O G R ,   V 3 7 ,   P 4 8 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 5 6 6 1 . 2 0 1 2 . 0 0 5 4 2 . x ;   H o l l o w a y   S L ,   2 0 1 0 ,   P R O G   H U M   G E O G ,   V 3 4 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 9 1 3 2 5 1 0 3 6 2 6 0 1 ;   H o l m e s   R ,   2 0 0 6 ,   A S I A N   J   U   E D ,   V 1 ,   P 1 ;   H o y l e r   M ,   2 0 0 8 ,   C O N N E C T I N G   C I T I E S   N E ,   P 1 2 4 ;   H u i s m a n   J . ,   2 0 0 8 ,   H I G H   E D U C   P O L I C Y ,   V 2 1 ,   P 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . h e p . 8 3 0 0 1 8 0 ;   I A U ,   2 0 1 0 ,   W O R L D   H I G H   E D   D A T ;   I A U ,   2 0 0 8 ,   W O R L D   H I G H   E D   D A T ;   I H E P   ( I n s t i t u t e   f o r   H i g h e r   E d u c a t i o n   P o l i c y ) ,   2 0 0 9 ,   I M P   C O L L   R A N K   I   D E C ;   I R E G ,   2 0 0 6 ,   B E R L   P R I N C   R A N K   H I G H ;   J o n s   H ,   2 0 0 9 ,   G L O B A L   N E T W ,   V 9 ,   P 3 1 5 ;   J o n s   H ,   2 0 0 8 ,   J   H I S T   G E O G R ,   V 3 4 ,   P 3 3 8 ,   D O I   1 0 . 1 0 1 6 / j . j h g . 2 0 0 7 . 1 1 . 0 0 6 ;   J o n s   H . ,   2 0 0 7 ,   S O C I A L   G E O G R A P H Y ,   V 2 ,   P 9 7 ,   D O I   D O I   1 0 . 5 1 9 4 / S G - 2 - 9 7 - 2 0 0 7 ;   K a u r   S . ,   2 0 0 7 ,   C O M M U N I C A T I O N ;   K e n w a y   J ,   2 0 0 6 ,   I N T   L I B R   S O C I O L ,   P 1 ;   B u l l e n   E . ,   2 0 0 4 ,   P O L I C Y   F U T U R E S   E D ,   V 2 ,   P 3 3 0 ,   D O I   1 0 . 2 3 0 4 / p f i e . 2 0 0 4 . 2 . 2 . 8 ;   K i t c h i n   R ,   2 0 0 5 ,   S O C   C U L T   G E O G R ,   V 6 ,   P 1 ,   D O I   1 0 . 1 0 8 0 / 1 4 6 4 9 3 6 0 5 2 0 0 0 3 3 5 9 3 7 ;   K i v i n e n   O ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 2 0 - y ;   K n i g h t   J . ,   2 0 0 3 ,   I N T   H I G H E R   E D   P R A C T I ;   L a i   A ,   2 0 1 1 ,   A S I A   P A C   J   E D U C ,   V 3 1 ,   P 2 4 9 ,   D O I   1 0 . 1 0 8 0 / 0 2 1 8 8 7 9 1 . 2 0 1 1 . 5 9 4 4 1 8 ;   L e u n g   M ,   2 0 1 1 ,   I N T   D E V   P L A N N   R E V ,   V 3 3 ,   P 4 7 5 ,   D O I   1 0 . 3 8 2 8 / i d p r . 2 0 1 1 . 2 5 ;   L e v i n   R . C . ,   2 0 1 0 ,   N Y   T I M E S ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 5 . 0 0 5 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 8 3 0 - 4 ;   L i u   N . C . ,   2 0 0 9 ,   I N T   H I G H E R   E D ,   P 2 ;   L i u   N .   C . ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 0 8 2 ;   L i u   N C ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 1 1 6 ;   L i v i n g s t o n e   D a v i d   N ,   2 0 0 3 ,   P U T T I N G   S C I   I T S   P L A C ;   L y n c h   K . ,   2 0 0 6 ,   E U R O P E A N   E D   R E S   J ,   V 5 ,   P 1 ,   D O I   [ 1 0 . 2 3 0 4 / e e r j . 2 0 0 6 . 5 . 1 . 1 ,   D O I   1 0 . 2 3 0 4 / E E R J . 2 0 0 6 . 5 . 1 . 1 ] ;   M a r g i n s o n   S ,   2 0 0 6 ,   H I G H   E D U C ,   V 5 2 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 4 - 7 6 4 9 - x ;   M a r g i n s o n   S . ,   2 0 0 7 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 2 9 ,   P 1 3 1 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 6 0 0 8 0 0 7 0 1 3 5 1 6 6 0 ;   M a r g i n s o n   S . ,   2 0 0 7 ,   J   S T U D   I N T   E D U C ,   V 1 1 ,   P 3 0 6 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 0 2 8 3 1 5 3 0 7 3 0 3 5 4 4 ;   M a r s h a l l   J . ,   2 0 0 7 ,   T I M E S   H I G H E R   E D   0 7 0 6 ;   M a s s e y   D . ,   1 9 9 9 ,   P O W E R   G E O M E T R I E S   P O L ;   M a t t h i e s s e n   C W ,   2 0 1 0 ,   U R B A N   S T U D ,   V 4 7 ,   P 1 8 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 2 0 9 8 0 1 0 3 7 2 6 8 3 ;   M e u s b u r g e r   M . ,   2 0 1 2 ,   W I S S E N S C H A F T S A T L A S   H ;   M i n c a   C ,   2 0 0 0 ,   E N V I R O N   P L A N N   D ,   V 1 8 ,   P 2 8 5 ,   D O I   1 0 . 1 0 6 8 / d 1 8 0 3 e d ;   M i t c h e l l   D . ,   2 0 0 8 ,   H U M A N   G E O G R A P H Y ,   V 1 ;   M o e d   H .   F . ,   2 0 0 6 ,   B I B L I O M E T R I C   R A N K I N G ;   M o r g a n   J . ,   2 0 1 0 ,   T I M E S   H I G H E R   E D   0 2 0 1 ;   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( N S F ) ,   2 0 0 9 ,   D O C T   R E C   U S   U   S U M M   R ;   O ' C o n n o r   K . ,   2 0 0 5 ,   G A W C   R E S   B ,   V 1 6 1 ;   O r g a n i s a t i o n   f o r   E c o n o m i c   C o - o p e r a t i o n   a n d   D e v e l o p m e n t   ( O E C D ) ,   2 0 1 2 ,   E D   G L A N C   2 0 1 2 ;   O E C D ,   2 0 0 9 ,   E D   G L A N C   2 0 0 9 ;   O l d s   K . ,   2 0 0 8 ,   G L O B A L H I G H E R E D     0 4 1 6 ;   O l d s   K . ,   2 0 0 8 ,   G L O B A L H I G H E R E D     0 8 0 7 ;   O l d s   K . ,   2 0 0 7 ,   G L O B A L H I G H E R E D   S U R V E ;   O l d s   K . ,   2 0 0 7 ,   U   R A N K I N G S   D E L I B E R A T ;   O l d s   K ,   2 0 0 7 ,   W O R L D   D E V ,   V 3 5 ,   P 9 5 9 ,   D O I   1 0 . 1 0 1 6 / j . w o r l d d e v . 2 0 0 6 . 0 5 . 0 1 4 ;   P a a s i   A ,   2 0 0 5 ,   E N V I R O N   P L A N N   A ,   V 3 7 ,   P 7 6 9 ,   D O I   1 0 . 1 0 6 8 / a 3 7 6 9 ;   P i e t s c h   T ,   2 0 1 0 ,   J   H I S T   G E O G R ,   V 3 6 ,   P 3 7 7 ,   D O I   1 0 . 1 0 1 6 / j . j h g 2 0 1 0 . 0 3 . 0 0 2 ;   Q S   Q u a c q u a r e l l i   S y m o n d s   L i m i t e d ,   2 0 1 0 ,   W O R L D   U   R A N K ;   R a u h v a r g e r s   A . ,   2 0 1 1 ,   G L O B A L   U   R A N K I N G S   T H ;   R o b e r t s o n   S . ,   2 0 1 0 ,   R E V   I N T   E D ,   V 5 4 ,   P 1 0 5 ;   R o d r i g u e z - P o s e   A ,   2 0 0 6 ,   E N V I R O N   P L A N N   A ,   V 3 8 ,   P 6 0 3 ,   D O I   1 0 . 1 0 6 8 / a 3 8 2 8 0 ;   R u t t e n   R . ,   2 0 0 3 ,   E C   G E O G R A P H Y   H I G H E R ;   S a d l a k   S ,   2 0 0 7 ,   W O R L D   C L A S S   U   R A N K I N ;   S a m e r s   M ,   2 0 0 0 ,   E N V I R O N   P L A N N   D ,   V 1 8 ,   P 6 6 3 ,   D O I   1 0 . 1 0 6 8 / d 1 8 0 6 e d ;   S a x e n i a n   A n n a   L e e ,   2 0 0 6 ,   N E W   A R G O N A U T S   R E G I O N ;   [ A n o n y m o u s ] ,   2 0 1 0 ,   A C   R A N K   W O R L D   U ;   S m i t h   D P ,   2 0 0 7 ,   E N V I R O N   P L A N N   A ,   V 3 9 ,   P 1 4 2 ,   D O I   1 0 . 1 0 6 8 / a 3 8 4 7 6 ;   L a w t o n   S m i t h   H . ,   2 0 0 6 ,   U   I N N O V A T I O N   E C ;   S t e i n b e r g   P . E . ,   2 0 0 9 ,   A C M E ,   V 8 ,   P 5 5 2 ;   S t r a t h e r n   M . ,   2 0 0 0 ,   A U D I T   C U L T U R E S ;   T a y l o r   P . ,   2 0 0 7 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 2 9 ,   P 2 4 5 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 6 0 0 8 0 0 7 0 1 4 5 7 8 5 5 ;   T a y l o r   P J ,   2 0 0 8 ,   M I N E R V A ,   V 4 6 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 2 4 - 0 0 8 - 9 1 0 9 - 8 ;   T a y l o r   P .   J . ,   1 9 9 6 ,   W A Y   M O D E R N   W O R L D   W O R ;   T e i c h l e r   U ,   2 0 0 4 ,   H I G H   E D U C ,   V 4 8 ,   P 5 ,   D O I   1 0 . 1 0 2 3 / B : H I G H . 0 0 0 0 0 3 3 7 7 1 . 6 9 0 7 8 . 4 1 ;   T h e r y   H . ,   2 0 0 9 ,   P A L M A R E S   U   M O N D I A L E S ;   H a n s o n   T h i e m   C . ,   2 0 0 9 ,   P R O G R   H U M A N   G E O G R A P H ,   V 3 3 ,   P 1 5 4 ;   U K   U n i v e r s i t i e s ,   2 0 0 7 ,   T A L   W A R S   I N T   M A R K   A C ;   [ A n o n y m o u s ] ,   2 0 1 0 ,   U S   N E W S ;   U s h e r   A . ,   2 0 0 6 ,   W O R L D   D I F F E R E N C E   G L O ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   v a n   R a a n   A F J ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 8 2 - 1 ;   v a n   V u g h t   F . A . ,   2 0 1 1 ,   U   M U L T I R A N K   D E S I G N   T ;   W a t e r s   J L ,   2 0 1 2 ,   G E O F O R U M ,   V 4 3 ,   p A 1 ,   D O I   1 0 . 1 0 1 6 / j . g e o f o r u m . 2 0 1 2 . 0 5 . 0 0 1 ;   Y o n e z a w a   A ,   2 0 0 7 ,   H I G H   E D U C ,   V 5 4 ,   P 4 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 6 - 9 0 2 8 - 2 	 1 2 4 	 2 6 	 2 6 	 5 	 9 6 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 0 1 6 - 7 1 8 5 	 1 8 7 2 - 9 3 9 8 	 	 G E O F O R U M 	 G e o f o r u m 	 M A Y 	 2 0 1 3 	 4 6 	 	 	 	 	 	 4 5 	 5 9 	 	 1 0 . 1 0 1 6 / j . g e o f o r u m . 2 0 1 2 . 1 2 . 0 1 4 	 	 1 5 	 G e o g r a p h y 	 G e o g r a p h y 	 1 2 5 M Q 	 W O S : 0 0 0 3 1 7 5 4 4 3 0 0 0 0 6 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   R o s a t i ,   F 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   R o s a t i ,   F r a n c e s c o 	 	 	 T h e   i m p o r t a n c e   o f   a c c o u n t i n g   f o r   t h e   n u m b e r   o f   c o - a u t h o r s   a n d   t h e i r   o r d e r   w h e n   a s s e s s i n g   r e s e a r c h   p e r f o r m a n c e   a t   t h e   i n d i v i d u a l   l e v e l   i n   t h e   l i f e   s c i e n c e s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   C o - a u t h o r s h i p ;   F r a c t i o n a l   c o u n t i n g ;   B i b l i o m e t r i c s ;   B i o l o g y ;   M e d i c i n e 	 R E S E A R C H   P R O D U C T I V I T Y ;   G - I N D E X ;   P U B L I C A T I O N S ;   C O A U T H O R S ;   P A T T E R N S ;   C R E D I T ;   I M P A C T 	 A c c u r a t e   m e a s u r e m e n t   o f   r e s e a r c h   p r o d u c t i v i t y   s h o u l d   t a k e   a c c o u n t   o f   b o t h   t h e   n u m b e r   o f   c o - a u t h o r s   o f   e v e r y   s c i e n t i f i c   w o r k   a n d   o f   t h e   d i f f e r e n t   c o n t r i b u t i o n s   o f   t h e   i n d i v i d u a l s .   F o r   r e s e a r c h e r s   i n   t h e   l i f e   s c i e n c e s ,   c o m m o n   p r a c t i c e   i s   t o   i n d i c a t e   s u c h   c o n t r i b u t i o n s   t h r o u g h   p o s i t i o n   i n   t h e   a u t h o r s   l i s t .   I n   t h i s   w o r k ,   w e   m e a s u r e   t h e   d i s t o r t i o n   i n t r o d u c e d   t o   b i b l i o m e t r i c   r a n k i n g   l i s t s   f o r   s c i e n t i f i c   p r o d u c t i v i t y   w h e n   t h e   n u m b e r   o f   c o - a u t h o r s   o r   t h e i r   p o s i t i o n   i n   t h e   l i s t   i s   i g n o r e d .   T h e   f i e l d   o f   o b s e r v a t i o n   c o n s i s t s   o f   a l l   I t a l i a n   u n i v e r s i t y   p r o f e s s o r s   w o r k i n g   i n   t h e   l i f e   s c i e n c e s ,   w i t h   s c i e n t i f i c   p r o d u c t i o n   e x a m i n e d   o v e r   t h e   p e r i o d   2 0 0 4 - 2 0 0 8 .   T h e   o u t c o m e s   o f   t h e   s t u d y   l e a d   t o   a   r e c o m m e n d a t i o n   a g a i n s t   u s i n g   i n d i c a t o r s   o r   e v a l u a t i o n   m e t h o d s   t h a t   i g n o r e   t h e   d i f f e r e n t   a u t h o r s '   c o n t r i b u t i o n s   t o   t h e   r e s e a r c h   r e s u l t s .   ( C )   2 0 1 2   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   R o s a t i ,   F r a n c e s c o ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 R o s a t i ,   F r a n c e s c o / C - 4 7 8 3 - 2 0 1 3 ;   D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 R o s a t i ,   F r a n c e s c o / 0 0 0 0 - 0 0 0 1 - 5 0 8 5 - 5 0 5 6 ;   D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 9 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 2 6 - 6 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B h a n d a r i   M ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 1 6 0 5 ;   C a r b o n e   V . ,   2 0 1 1 ,   1 1 0 6 0 1 1 4   A R X I V ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   E g g h e   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 6 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 4 5 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   H e   B ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 1 . 0 0 1 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L a u r a n c e   W F ,   2 0 0 6 ,   N A T U R E ,   V 4 4 2 ,   P 2 6 ,   D O I   1 0 . 1 0 3 8 / 4 4 2 0 2 6 d ;   L u k o v i t s   I ,   1 9 9 5 ,   S O C   I N D I C   R E S ,   V 3 6 ,   P 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 0 7 9 3 9 8 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   O p t h o f   T ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 2 . 0 0 3 ;   S c h r e i b e r   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 6 . 0 0 3 ;   S c h r e i b e r   M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 2 7 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 5 7 ;   T r u e b a   F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 1 8 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 7 9 2 . 0 9 3 6 2 . 3 f ;   V a n H o o y d o n k   G ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 9 4 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 9 4 4 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 1 ;   V e r h a g e n   J V ,   2 0 0 3 ,   N A T U R E ,   V 4 2 6 ,   P 6 0 2 ,   D O I   1 0 . 1 0 3 8 / 4 2 6 6 0 2 a ;   V i n k l e r   P ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 9 ,   P 6 0 2 ;   V i n k l e r   P ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 2 5 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 2 . 0 0 4 ;   W a n   J .   K . ,   2 0 0 8 ,   C O L L N E T ,   V 1 7 ;   Z U C K E R M A N   H A ,   1 9 6 8 ,   A M   J   S O C I O L ,   V 7 4 ,   P 2 7 6 ,   D O I   1 0 . 1 0 8 6 / 2 2 4 6 4 1 	 2 3 	 2 6 	 2 6 	 5 	 6 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 3 	 7 	 1 	 	 	 	 	 1 9 8 	 2 0 8 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 1 . 0 0 3 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 5 B G 	 W O S : 0 0 0 3 1 3 1 2 1 3 0 0 0 2 4 	 	 
 
 J 	 K a u r ,   J ;   R a d i c c h i ,   F ;   M e n c z e r ,   F 	 	 	 	 K a u r ,   J a s l e e n ;   R a d i c c h i ,   F i l i p p o ;   M e n c z e r ,   F i l i p p o 	 	 	 U n i v e r s a l i t y   o f   s c h o l a r l y   i m p a c t   m e t r i c s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I m p a c t   m e t r i c s ;   D i s c i p l i n e   b i a s ;   U n i v e r s a l i t y ;   B i b l i o m e t r i c s 	 S C I E N T I F I C   I M P A C T ;   S C I E N C E ;   I N D I C A T O R S ;   I N D E X 	 G i v e n   t h e   g r o w i n g   u s e   o f   i m p a c t   m e t r i c s   i n   t h e   e v a l u a t i o n   o f   s c h o l a r s ,   j o u r n a l s ,   a c a d e m i c   i n s t i t u t i o n s ,   a n d   e v e n   c o u n t r i e s ,   t h e r e   i s   a   c r i t i c a l   n e e d   f o r   m e a n s   t o   c o m p a r e   s c i e n t i f i c   i m p a c t   a c r o s s   d i s c i p l i n a r y   b o u n d a r i e s .   U n f o r t u n a t e l y ,   c i t a t i o n - b a s e d   m e t r i c s   a r e   s t r o n g l y   b i a s e d   b y   d i v e r s e   f i e l d   s i z e s   a n d   p u b l i c a t i o n   a n d   c i t a t i o n   p r a c t i c e s .   A s   a   r e s u l t ,   w e   h a v e   w i t n e s s e d   a n   e x p l o s i o n   i n   t h e   n u m b e r   o f   n e w l y   p r o p o s e d   m e t r i c s   t h a t   c l a i m   t o   b e   " u n i v e r s a l . "   H o w e v e r ,   t h e r e   i s   c u r r e n t l y   n o   w a y   t o   o b j e c t i v e l y   a s s e s s   w h e t h e r   a   n o r m a l i z e d   m e t r i c   c a n   a c t u a l l y   c o m p e n s a t e   f o r   d i s c i p l i n a r y   b i a s .   W e   i n t r o d u c e   a   n e w   m e t h o d   t o   a s s e s s   t h e   u n i v e r s a l i t y   o f   a n y   s c h o l a r l y   i m p a c t   m e t r i c ,   a n d   a p p l y   i t   t o   e v a l u a t e   a   n u m b e r   o f   e s t a b l i s h e d   m e t r i c s .   W e   a l s o   d e f i n e   a   v e r y   s i m p l e   n e w   m e t r i c   h ( s ) ,   w h i c h   p r o v e s   t o   b e   u n i v e r s a l ,   t h u s   a l l o w i n g   t o   c o m p a r e   t h e   i m p a c t   o f   s c h o l a r s   a c r o s s   s c i e n t i f i c   d i s c i p l i n e s .   T h e s e   r e s u l t s   m o v e   u s   c l o s e r   t o   a   f o r m a l   m e t h o d o l o g y   i n   t h e   m e a s u r e   o f   s c h o l a r l y   i m p a c t .   P u b l i s h e d   b y   E l s e v i e r   L t d . 	 [ K a u r ,   J a s l e e n ;   R a d i c c h i ,   F i l i p p o ;   M e n c z e r ,   F i l i p p o ]   I n d i a n a   U n i v ,   C t r   C o m p l e x   N e t w o r k s   &   S y s t   R e s ,   S c h   I n f o r m a t   &   C o m p ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 K a u r ,   J   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   C t r   C o m p l e x   N e t w o r k s   &   S y s t   R e s ,   S c h   I n f o r m a t   &   C o m p ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 j a k a u r @ u m a i l . i u . e d u 	 R a d i c c h i ,   F i l i p p o / B - 4 4 0 7 - 2 0 0 9 ;   	 M e n c z e r ,   F i l i p p o / 0 0 0 0 - 0 0 0 3 - 4 3 8 4 - 2 8 7 6 	 	 	 A b b o t t   A ,   2 0 1 0 ,   N A T U R E ,   V 4 6 5 ,   P 8 6 0 ,   D O I   1 0 . 1 0 3 8 / 4 6 5 8 6 0 a ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B o n e n   J . ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   p e 6 0 2 2 ;   B o r n m a n n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 1 - 1 ;   C o l w e l l   R . ,   2 0 1 2 ,   I N F O R M I N G   R E S   C H O I C E ;   D A V I S   P ,   1 9 8 4 ,   A M   E C O N   R E V ,   V 7 4 ,   P 2 2 5 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   M e n c z e r   F . ,   2 0 1 0 ,   P   W E B   S C I   C   E X T   F R O N ;   K a u r   J ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 4 3 2 3 5 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K i n n e y   A L ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 7 9 4 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 4 4 1 6 1 0 4 ;   L a n e   J ,   2 0 1 0 ,   N A T U R E ,   V 4 6 4 ,   P 4 8 8 ,   D O I   1 0 . 1 0 3 8 / 4 6 4 4 8 8 a ;   L e h m a n n   S ,   2 0 0 6 ,   N A T U R E ,   V 4 4 4 ,   P 1 0 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 4 1 0 0 3 a ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 9 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M a h m o u d   H M ,   2 0 0 9 ,   C H   C R C   T E X T   S T A T   S C I ,   V 7 6 ,   P 1 ;   M o e d   H F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 2 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R a d i c c h i   F ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 3 3 8 3 3 ;   R a d i c c h i   F ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 9 . 0 0 2 ;   R e d n e r   S ,   2 0 1 0 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 1 0 / 0 3 / L 0 3 0 0 5 ;   S c h r e i b e r   M ,   2 0 0 8 ,   N E W   J   P H Y S ,   V 1 0 ,   D O I   1 0 . 1 0 8 8 / 1 3 6 7 - 2 6 3 0 / 1 0 / 4 / 0 4 0 2 0 1 ;   S u n   X L ,   2 0 1 3 ,   S C I   R E P - U K ,   V 3 ,   D O I   1 0 . 1 0 3 8 / s r e p 0 1 0 6 9 ;   V a n   N o o r d e n   R ,   2 0 1 0 ,   N A T U R E ,   V 4 6 5 ,   P 8 6 4 ,   D O I   1 0 . 1 0 3 8 / 4 6 5 8 6 4 a ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 	 2 7 	 2 6 	 2 6 	 6 	 2 8 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 	 2 0 1 3 	 7 	 4 	 	 	 	 	 9 2 4 	 9 3 2 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 9 . 0 0 2 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 6 4 Z V 	 W O S : 0 0 0 3 2 7 9 2 0 4 0 0 0 1 7 	 	 
 
 J 	 W a n g ,   H J ;   H e ,   Q Q ;   L i u ,   X J ;   Z h u a n g ,   Y H ;   H o n g ,   S 	 	 	 	 W a n g ,   H a i j u n ;   H e ,   Q i n g q i n g ;   L i u ,   X i n g j i a n ;   Z h u a n g ,   Y a n h u a ;   H o n g ,   S o n g 	 	 	 G l o b a l   u r b a n i z a t i o n   r e s e a r c h   f r o m   1 9 9 1   t o   2 0 0 9 :   A   s y s t e m a t i c   r e s e a r c h   r e v i e w 	 L A N D S C A P E   A N D   U R B A N   P L A N N I N G 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 B i b l i o m e t r i c s ;   U r b a n i z a t i o n ;   U r b a n i z a t i o n   r a t e ;   R e s e a r c h   t r e n d s ;   C o r r e l a t i o n   a n a l y s i s 	 B I B L I O M E T R I C   A N A L Y S I S ;   R E S E A R C H   T R E N D S ;   P R O D U C T I V I T Y ;   I N D I C A T O R S ;   N E T W O R K S ;   J O U R N A L S ;   S C I E N C E 	 W e   p e r f o r m e d   a   b i b l i o m e t r i c   a n a l y s i s   o f   p u b l i s h e d   u r b a n i z a t i o n   r e s e a r c h   f r o m   1 9 9 1   t o   2 0 0 9 ,   b a s e d   o n   S C I   a n d   S S C I   d a t a b a s e .   O u r   a n a l y s i s   r e v e a l s   s c i e n t i f i c   o u t p u t s ,   s u b j e c t   c a t e g o r i e s   a n d   m a j o r   j o u r n a l s ,   i n t e r n a t i o n a l   c o l l a b o r a t i o n   a n d   g e o g r a p h i c   d i s t r i b u t i o n ,   a n d   t e m p o r a l   t r e n d s   i n   k e y w o r d s   u s a g e   i n   u r b a n i z a t i o n   s t u d i e s   a n d   d i s c u s s e s   t h e   r e l a t i o n s h i p s   b e t w e e n   u r b a n i z a t i o n   p a p e r s   a n d   u r b a n i z a t i o n   r a t e   a n d   o f f e r   a   s u b s t i t u t e   d e m o n s t r a t i o n   o f   r e s e a r c h   a d v a n c e m e n t s ,   w h i c h   m a y   b e   c o n s i d e r e d   a s   a   p o t e n t i a l   g u i d e   f o r   f u t u r e   r e s e a r c h .   T h e   g r o w t h   o f   a r t i c l e   o u t p u t s   h a s   e x p l o d e d   s i n c e   1 9 9 1 ,   a l o n g   w i t h   a n   i n c r e a s i n g   c o l l a b o r a t i o n   i n d e x ,   r e f e r e n c e s   a n d   c i t a t i o n s .   E n v i r o n m e n t a l   s c i e n c e s ,   e c o l o g y ,   e n v i r o n m e n t a l   s t u d i e s ,   g e o g r a p h y   a n d   u r b a n   s t u d i e s   w e r e   m o s t   f r e q u e n t l y   u s e d   s u b j e c t   c a t e g o r i e s   a n d   L a n d s c a p e   a n d   U r b a n   P l a n n i n g   w a s   t h e   m o s t   p r o d u c t i v e   j o u r n a l   i n   u r b a n i z a t i o n   s t u d i e s .   T h e   U n i t e d   S t a t e s   w a s   t h e   l a r g e s t   c o n t r i b u t o r   i n   g l o b a l   u r b a n i z a t i o n   r e s e a r c h ,   a s   t h e   U S A   p r o d u c e d   t h e   m o s t   i n d e p e n d e n t   a n d   c o l l a b o r a t i v e   p a p e r s .   T h e   g e o g r a p h i c   d i s t r i b u t i o n   o f   u r b a n i z a t i o n   a r t i c l e s   o v e r l a p p e d   q u i t e   w e l l   w i t h   r e g i o n s   w i t h   h i g h   e c o n o m i c   g r o w t h   i n   N o r t h   A m e r i c a ,   E u r o p e ,   a n d   P a c i f i c - A s i a .   A   k e y w o r d s   a n a l y s i s   f o u n d   t h e   U S A   a n d   C h i n a   w e r e   " h o t s p o t s " ,   c o n f i r m e d   l a n d - u s e ' s   s i g n i f i c a n t   p o s i t i o n   a n d   r e v e a l e d   k e e n   i n t e r e s t   i n   e c o l o g i c a l   a n d   e n v i r o n m e n t a l   i s s u e s   i n   u r b a n i z a t i o n   s t u d i e s .   I n   g e n e r a l ,   u r b a n i z a t i o n   r e s e a r c h   w a s   s t r o n g l y   c o r r e l a t e d   w i t h   t h e   u r b a n i z a t i o n   r a t e   a l t h o u g h   t h e r e   w e r e   d i f f e r e n t   p a t t e r n s   a n d   u n d e r l y i n g   p r o c e s s e s   a c r o s s   d i f f e r e n t   c o u n t r i e s .   T h i s   i s   t h e   f i r s t   s t u d y   t o   q u a n t i f y   g l o b a l   r e s e a r c h   t r e n d s   i n   u r b a n i z a t i o n .   O u r   s t u d y   r e v e a l s   p a t t e r n s   i n   s c i e n t i f i c   o u t p u t s   a n d   a c a d e m i c   c o l l a b o r a t i o n s   a n d   s e r v e s   a s   a n   a l t e r n a t i v e   w a y   o f   r e v e a l i n g   g l o b a l   r e s e a r c h   t r e n d s   i n   u r b a n i z a t i o n .   ( C )   2 0 1 1   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ W a n g ,   H a i j u n ;   H e ,   Q i n g q i n g ;   Z h u a n g ,   Y a n h u a ;   H o n g ,   S o n g ]   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 9 ,   P e o p l e s   R   C h i n a ;   [ L i u ,   X i n g j i a n ]   U n i v   C a m b r i d g e ,   D e p t   G e o g ,   C a m b r i d g e   C B 2   3 E N ,   E n g l a n d ;   [ L i u ,   X i n g j i a n ]   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   M O E   K e y   L a b   G I S ,   W u h a n   4 3 0 0 7 9 ,   P e o p l e s   R   C h i n a 	 H o n g ,   S   ( r e p r i n t   a u t h o r ) ,   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 9 ,   P e o p l e s   R   C h i n a . 	 l a n d g i s w h j @ 1 6 3 . c o m ;   4 2 0 4 7 2 2 4 6 @ q q . c o m ;   x l 3 0 6 @ c a m . a c . u k ;   Y a n h u a 5 2 1 0 @ s o h u . c o m ;   s o n g h o n g p k u @ 1 2 6 . c o m 	 	 	 N a t i o n a l   N a t u r a l   S c i e n c e   F o u n d a t i o n   o f   C h i n a   [ N S F C :   4 0 7 0 1 1 8 4 ,   4 0 8 7 1 1 7 9 ] ;   N a t i o n a l   H i g h - T e c h   R & D   P r o g r a m   o f   C h i n a   [ 2 0 0 9 A A 1 2 2 0 0 1 ,   2 0 1 1 A A 1 4 2 0 3 0 4 ] ;   F i t z w i l l i a m   C o l l e g e ,   U n i v e r s i t y   o f   C a m b r i d g e 	 T h e   a u t h o r s   a r e   t h a n k f u l   t o   P r o f .   Y u h - S h a n   H o   ( P e k i n g   U n i v e r s i t y ,   C h i n a )   f o r   h i s   p i o n e e r i n g   w o r k   i n   t h e   b i b l i o m e t r i c   m e t h o d s   t h a t   w e r e   e m p l o y e d   i n   t h i s   s t u d y .   T h i s   s t u d y   i s   s u p p o r t e d   b y   t h e   f u n d i n g   f r o m   N a t i o n a l   N a t u r a l   S c i e n c e   F o u n d a t i o n   o f   C h i n a   ( N S F C :   4 0 7 0 1 1 8 4 ;   4 0 8 7 1 1 7 9 ) .   T h e   t h i r d   a u t h o r   ( X L )   w o u l d   g r a t e f u l l y   a c k n o w l e d g e   f u n d i n g   s u p p o r t   f r o m   t h e   N a t i o n a l   H i g h - T e c h   R & D   P r o g r a m   o f   C h i n a   ( 2 0 0 9 A A 1 2 2 0 0 1 ;   2 0 1 1 A A 1 4 2 0 3 0 4 )   a n d   t h e   F i t z w i l l i a m   C o l l e g e   G r a d u a t e   S c h o l a r s h i p ,   U n i v e r s i t y   o f   C a m b r i d g e . 	 B a n e r j e e   T ,   2 0 1 1 ,   A S I A - P A C   J   C H E M   E N G ,   V 6 ,   P 6 4 ,   D O I   1 0 . 1 0 0 2 / a p j . 4 5 0 ;   B e n a v e n t   R A ,   2 0 0 4 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 3 ,   P 6 9 7 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h i u   W T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 1 5 2 3 - 1 ;   C h i u   W T ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 7 3 6 3 . 4 9 6 2 3 . 2 8 ;   C o h e n   B . ,   2 0 0 6 ,   T E C H N O L   S O C ,   V 2 8 ,   P 6 3 ,   D O I   D O I   1 0 . 1 0 1 6 / J . T E C H S 0 C . 2 0 0 5 . 1 0 . 0 0 5 ;   F a l a g a s   M E ,   2 0 0 6 ,   A C T A   T R O P ,   V 9 9 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . a c t a t r o p i c a . 2 0 0 6 . 0 7 . 0 1 0 ;   F u n g   J C H ,   2 0 0 5 ,   J   G E O P H Y S   R E S - A T M O S ,   V 1 1 0 ,   D O I   1 0 . 1 0 2 9 / 2 0 0 4 J D 0 0 5 1 0 5 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H s i e h   W H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 0 5 ;   K o p p e n   B ,   2 0 0 7 ,   G E O G R   Z ,   V 9 5 ,   P 2 1 1 ;   K u n z m a n n   K .   R . ,   2 0 0 7 ,   U R B A N   P L A N N I N G   O V E R S ,   V 3 ,   P 1 ;   L i   J F ,   2 0 0 9 ,   C R O A T   C H E M   A C T A ,   V 8 2 ,   P 6 9 5 ;   L i   T ,   2 0 0 8 ,   N E U R O S C I   L E T T ,   V 4 4 1 ,   P 2 4 8 ,   D O I   1 0 . 1 0 1 6 / j . n e u l e t . 2 0 0 8 . 0 6 . 0 4 4 ;   L i u   X J ,   2 0 1 1 ,   B I O D I V E R S   C O N S E R V ,   V 2 0 ,   P 8 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 1 0 - 9 9 8 1 - z ;   L o p e z - M u n o z   F ,   2 0 0 8 ,   E U R   C H I L D   A D O L E S   P S Y ,   V 1 7 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 7 8 7 - 0 0 8 - 0 6 8 0 - 1 ;   M a t t h i e s s e n   C W ,   2 0 1 0 ,   U R B A N   S T U D ,   V 4 7 ,   P 1 8 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 2 0 9 8 0 1 0 3 7 2 6 8 3 ;   M a t t h i e s s e n   C W ,   2 0 0 2 ,   U R B A N   S T U D ,   V 3 9 ,   P 9 0 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 0 2 2 0 1 2 8 3 7 2 ;   M e d v e d k o v   Y . ,   1 9 9 9 ,   P O P U L A T I O N   D U R E S S   G E ,   P 2 0 1 ;   M O R S E   R M ,   1 9 6 5 ,   L A T   A M   R E S   R E V ,   V 1 ,   P 3 5 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R a v a l l i o n   M ,   2 0 0 7 ,   P O P U L   D E V   R E V ,   V 3 3 ,   P 6 6 7 ;   S C H U B E R T   A ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 0 4 6 1 ;   T a r k o w s k i   S M ,   2 0 0 7 ,   E U R   J   P U B L I C   H E A L T H ,   V 1 7 ,   P 1 4 ,   D O I   1 0 . 1 0 9 3 / e u r p u b / c k m 0 6 5 ;   T i a n   Y G ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 0 . 0 0 1 ;   W a n g   K . ,   2 0 0 9 ,   L A N D S C A P E   U R B A N   P L A N ,   V 9 2 ,   P 1 8 7 ;   W a n g   M H ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 8 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 1 2 - 0 ;   W a n g   Y .   C . ,   2 0 0 7 ,   L A N D S C A P E   U R B A N   P L A N ,   V 8 1 ,   P 3 4 1 ;   W i l l e t t   P ,   2 0 0 8 ,   A S L I B   P R O C ,   V 6 0 ,   P 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 8 1 0 8 4 7 3 3 5 ;   W o r l d   B a n k ,   2 0 1 1 ,   W O R   B A N K   S T U D ,   P 1 ,   D O I   1 0 . 1 5 9 6 / 9 7 8 - 0 - 8 2 1 3 - 8 8 0 0 - 6 ;   X i e   S D ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 2 8 - 0 ;   Y e o m a n   F ,   2 0 0 5 ,   L A N D S C A P E   U R B A N   P L A N ,   V 7 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / j . l a n d u r b p l a n . 2 0 0 4 . 0 6 . 0 0 1 ;   Z h a n g   L ,   2 0 1 0 ,   E C O L   E N G ,   V 3 6 ,   P 9 7 3 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e n g . 2 0 1 0 . 0 4 . 0 2 9 ;   Z h a n g   W W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 6 3 - 0 	 3 5 	 2 6 	 3 4 	 9 	 1 5 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 9 - 2 0 4 6 	 1 8 7 2 - 6 0 6 2 	 	 L A N D S C A P E   U R B A N   P L A N 	 L a n d s c .   U r b a n   P l a n . 	 M A R   1 5 	 2 0 1 2 	 1 0 4 	 3 - 4 	 	 	 	 	 2 9 9 	 3 0 9 	 	 1 0 . 1 0 1 6 / j . l a n d u r b p l a n . 2 0 1 1 . 1 1 . 0 0 6 	 	 1 1 	 E c o l o g y ;   E n v i r o n m e n t a l   S t u d i e s ;   G e o g r a p h y ;   G e o g r a p h y ,   P h y s i c a l ;   U r b a n   S t u d i e s 	 E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y ;   G e o g r a p h y ;   P h y s i c a l   G e o g r a p h y ;   U r b a n   S t u d i e s 	 8 8 9 J M 	 W O S : 0 0 0 3 0 0 0 7 0 0 0 0 0 0 1 	 	 
 
 J 	 E v a n g e l o p o u l o s ,   N ;   Z h a n g ,   X N ;   P r y b u t o k ,   V R 	 	 	 	 E v a n g e l o p o u l o s ,   N i c h o l a s ;   Z h a n g ,   X i a o n i ;   P r y b u t o k ,   V i c t o r   R . 	 	 	 L a t e n t   S e m a n t i c   A n a l y s i s :   f i v e   m e t h o d o l o g i c a l   r e c o m m e n d a t i o n s 	 E U R O P E A N   J O U R N A L   O F   I N F O R M A T I O N   S Y S T E M S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t e x t   m i n i n g ;   a n a l y s i s   o f   t e x t u a l   d a t a ;   s i n g u l a r   v a l u e   d e c o m p o s i t i o n ;   c l u s t e r i n g ;   f a c t o r   a n a l y s i s 	 N O N N E G A T I V E   M A T R I X   F A C T O R I Z A T I O N ;   I N F O R M A T I O N - S Y S T E M S ;   U N S T R U C T U R E D   T E X T ;   S E L E C T I O N ;   A D O P T I O N ;   P R O F I L E ;   M O D E L ;   C A T E G O R I Z A T I O N ;   D I M E N S I O N A L I T Y ;   R E T R I E V A L 	 T h e   r e c e n t   i n f l u x   i n   g e n e r a t i o n ,   s t o r a g e ,   a n d   a v a i l a b i l i t y   o f   t e x t u a l   d a t a   p r e s e n t s   r e s e a r c h e r s   w i t h   t h e   c h a l l e n g e   o f   d e v e l o p i n g   s u i t a b l e   m e t h o d s   f o r   t h e i r   a n a l y s i s .   L a t e n t   S e m a n t i c   A n a l y s i s   ( L S A ) ,   a   m e m b e r   o f   a   f a m i l y   o f   m e t h o d o l o g i c a l   a p p r o a c h e s   t h a t   o f f e r s   a n   o p p o r t u n i t y   t o   a d d r e s s   t h i s   g a p   b y   d e s c r i b i n g   t h e   s e m a n t i c   c o n t e n t   i n   t e x t u a l   d a t a   a s   a   s e t   o f   v e c t o r s ,   w a s   p i o n e e r e d   b y   r e s e a r c h e r s   i n   p s y c h o l o g y ,   i n f o r m a t i o n   r e t r i e v a l ,   a n d   b i b l i o m e t r i c s .   L S A   i n v o l v e s   a   m a t r i x   o p e r a t i o n   c a l l e d   s i n g u l a r   v a l u e   d e c o m p o s i t i o n ,   a n   e x t e n s i o n   o f   p r i n c i p a l   c o m p o n e n t   a n a l y s i s .   L S A   g e n e r a t e s   l a t e n t   s e m a n t i c   d i m e n s i o n s   t h a t   a r e   e i t h e r   i n t e r p r e t e d ,   i f   t h e   r e s e a r c h e r ' s   p r i m a r y   i n t e r e s t   l i e s   w i t h   t h e   u n d e r s t a n d i n g   o f   t h e   t h e m a t i c   s t r u c t u r e   i n   t h e   t e x t u a l   d a t a ,   o r   u s e d   f o r   p u r p o s e s   o f   c l u s t e r i n g ,   c a t e g o r i z a t i o n ,   a n d   p r e d i c t i v e   m o d e l i n g ,   i f   t h e   i n t e r e s t   l i e s   w i t h   t h e   c o n v e r s i o n   o f   r a w   t e x t   i n t o   n u m e r i c a l   d a t a ,   a s   a   p r e c u r s o r   t o   s u b s e q u e n t   a n a l y s i s .   T h i s   p a p e r   r e v i e w s   f i v e   m e t h o d o l o g i c a l   i s s u e s   t h a t   n e e d   t o   b e   a d d r e s s e d   b y   t h e   r e s e a r c h e r   w h o   w i l l   e m b a r k   o n   L S A .   W e   e x a m i n e   t h e   d i l e m m a s ,   p r e s e n t   t h e   c h o i c e s ,   a n d   d i s c u s s   t h e   c o n s i d e r a t i o n s   u n d e r   w h i c h   g o o d   m e t h o d o l o g i c a l   d e c i s i o n s   a r e   m a d e .   W e   i l l u s t r a t e   t h e s e   i s s u e s   w i t h   t h e   h e l p   o f   f o u r   s m a l l   s t u d i e s ,   i n v o l v i n g   t h e   a n a l y s i s   o f   a b s t r a c t s   f o r   p a p e r s   p u b l i s h e d   i n   t h e   E u r o p e a n   J o u r n a l   o f   I n f o r m a t i o n   S y s t e m s .   E u r o p e a n   J o u r n a l   o f   I n f o r m a t i o n   S y s t e m s   ( 2 0 1 2 )   2 1 ,   7 0 - 8 6 .   d o i : 1 0 . 1 0 5 7 / e j i s . 2 0 1 0 . 6 1 ;   p u b l i s h e d   o n l i n e   2 1   D e c e m b e r   2 0 1 0 	 [ E v a n g e l o p o u l o s ,   N i c h o l a s ;   P r y b u t o k ,   V i c t o r   R . ]   U n i v   N   T e x a s ,   C o l l   B u s i n e s s ,   I n f o r m a t   T e c h n o l   &   D e c i s   S c i   D e p t ,   D e n t o n ,   T X   7 6 2 0 3   U S A ;   [ Z h a n g ,   X i a o n i ]   N o   K e n t u c k y   U n i v ,   D e p t   B u s i n e s s   I n f o r m a t ,   C o l l   I n f o r m a t ,   H i g h l a n d   H t s ,   K Y   U S A 	 E v a n g e l o p o u l o s ,   N   ( r e p r i n t   a u t h o r ) ,   U n i v   N   T e x a s ,   C o l l   B u s i n e s s ,   I n f o r m a t   T e c h n o l   &   D e c i s   S c i   D e p t ,   P O B   3 0 5 2 4 9 , B U S I   3 3 6 ,   D e n t o n ,   T X   7 6 2 0 3   U S A . 	 n i c k . e v a n g e l o p o u l o s @ u n t . e d u 	 	 E v a n g e l o p o u l o s ,   N i c h o l a s / 0 0 0 0 - 0 0 0 1 - 9 8 6 6 - 6 8 2 8 	 	 	 A b b a s i   A ,   2 0 0 8 ,   M I S   Q U A R T ,   V 3 2 ,   P 8 1 1 ;   M c D o n a l d   M .   P . ,   2 0 0 4 ,   W I L E Y   S E R I E S   P R O B A B I ;   B a j w a   I . S . ,   2 0 0 9 ,   E U R O P E A N   J   S C I   R E S ,   V 3 5 ,   P 2 2 ;   B a r r e t t   M I ,   1 9 9 9 ,   E U R   J   I N F O R M   S Y S T ,   V 8 ,   P 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 3 1 3 ;   B e r r y   M W ,   2 0 0 7 ,   C O M P U T   S T A T   D A T A   A N ,   V 5 2 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . c s d a . 2 0 0 6 . 1 1 . 0 0 6 ;   B l e i   D M ,   2 0 0 3 ,   J   M A C H   L E A R N   R E S ,   V 3 ,   P 9 9 3 ,   D O I   1 0 . 1 1 6 2 / j m l r . 2 0 0 3 . 3 . 4 - 5 . 9 9 3 ;   B o n d a r o u k   T V ,   2 0 0 6 ,   E U R   J   I N F O R M   S Y S T ,   V 1 5 ,   P 4 2 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 0 8 ;   B r a d f o r d   R . ,   2 0 0 8 ,   C I K M   0 8   P   1 7   A C M   C   I ,   P 1 5 3 ;   C H E W   P A ,   2 0 0 7 ,   P   1 3   A C M   S I G K D D   I N T ,   P 1 4 3 ,   D O I   1 0 . 1 1 4 5 / 1 2 8 1 1 9 2 . 1 2 8 1 2 1 1 ;   C h o   S Y ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 7 3 8 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 7 1 8 ;   C o u g e r   J D ,   1 9 9 4 ,   E U R   J   I N F O R M   S Y S T ,   V 3 ,   P 2 8 5 ,   D O I   1 0 . 1 0 5 7 / e j i s . 1 9 9 4 . 3 3 ;   C o u s s e m e n t   K ,   2 0 0 8 ,   D E C I S   S U P P O R T   S Y S T ,   V 4 4 ,   P 8 7 0 ,   D O I   1 0 . 1 0 1 6 / j . d s s . 2 0 0 7 . 1 0 . 0 1 0 ;   D a m   G ,   2 0 0 8 ,   B E H A V   R E S   M E T H O D S ,   V 4 0 ,   P 8 ,   D O I   1 0 . 3 7 5 8 / B R M . 4 0 . 1 . 8 ;   D a m s g a a r d   J ,   2 0 0 0 ,   E U R   J   I N F O R M   S Y S T ,   V 9 ,   P 1 7 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 3 6 8 ;   D E E R W E S T E R   S ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 3 9 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - 9 ;   D o x a s   I ,   2 0 1 0 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 7 ,   P 4 8 6 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 9 0 8 3 1 5 1 0 7 ;   D U M A I S   S T ,   1 9 9 1 ,   B E H A V   R E S   M E T H   I N S   C ,   V 2 3 ,   P 2 2 9 ,   D O I   1 0 . 3 7 5 8 / B F 0 3 2 0 3 3 7 0 ;   D u m a i s   S T ,   2 0 0 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 8 ,   P 1 8 9 ;   D u m a i s   S . ,   2 0 0 7 ,   H D B   L A T E N T   S E M A N T I C ,   P 2 9 3 ;   D w i v e d i   Y K ,   2 0 0 8 ,   E U R   J   I N F O R M   S Y S T ,   V 1 7 ,   P 6 7 8 ,   D O I   1 0 . 1 0 5 7 / e j i s . 2 0 0 8 . 5 7 ;   E f r o n   M ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 9 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 8 8 ;   F r a n z o s i   R . ,   2 0 0 4 ,   W O R D S   N U M B E R S   N A R R A T ;   G a l l i e r s   R D ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 2 0 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 6 2 ;   G h o s e   A ,   2 0 0 9 ,   M I S   Q U A R T ,   V 3 3 ,   P 2 6 3 ;   G r i f f i t h s   T L ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 2 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 7 5 2 1 0 1 ;   H A L E Y   D T ,   2 0 0 7 ,   P 2 2 ;   H a n   J . ,   2 0 0 6 ,   D A T A   M I N I N G   C O N C E P T S ;   H O V O R K A   D ,   2 0 0 9 ;   H o v o r k a   D S ,   2 0 0 6 ,   E U R   J   I N F O R M   S Y S T ,   V 1 5 ,   P 1 5 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 0 6 ;   H u   X . ,   2 0 0 7 ,   H D B   L A T E N T   S E M A N T I C ,   P 4 0 1 ;   H u s b a n d s   P ,   2 0 0 1 ,   C O M P U T A T I O N A L   I N F O R M A T I O N   R E T R I E V A L ,   P 1 4 5 ;   J e n s e n   T B ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 6 7 2 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 7 1 3 ;   J o h n s o n   R .   A . ,   2 0 0 7 ,   A P P L   M U L T I V A R I A T E   S T ;   K u e c h l e r   W L ,   2 0 0 7 ,   C O M M U N   A C M ,   V 5 0 ,   P 8 6 ,   D O I   1 0 . 1 1 4 5 / 1 2 9 0 9 5 8 . 1 2 9 0 9 6 7 ;   L a n d a u e r   T K ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 1 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 0 3 4 1 1 0 1 ;   L a n d a u e r   T .   K . ,   2 0 0 7 ,   H D B   L A T E N T   S E M A N T I C ,   P 3 ;   L a r s e n   K R ,   2 0 0 8 ,   D E C I S   S U P P O R T   S Y S T ,   V 4 5 ,   P 8 8 4 ,   D O I   1 0 . 1 0 1 6 / j . d s s . 2 0 0 8 . 0 2 . 0 0 9 ;   L a r s e n   K R ,   2 0 0 4 ,   S O C I O L   M E T H O D O L ,   V 3 4 ,   P 3 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 0 0 8 1 - 1 7 5 0 . 2 0 0 4 . 0 0 1 5 6 . x ;   L i f c h i t z   A ,   2 0 0 9 ,   B E H A V   R E S   M E T H O D S ,   V 4 1 ,   P 1 2 0 1 ,   D O I   1 0 . 3 7 5 8 / B R M . 4 1 . 4 . 1 2 0 1 ;   M a n n i n g   C . ,   2 0 0 8 ,   I N T R O   I N F O R M   R E T R I E V ;   M a r t i n   D . ,   2 0 0 7 ,   H D B   L A T E N T   S E M A N T I C ,   P 3 3 ;   M e r o n o - C e r d a n   A L ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 6 6 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 5 6 ;   M o o r e   G C ,   1 9 9 1 ,   I N F O R M   S Y S T   R E S ,   V 2 ,   P 1 9 2 ,   D O I   1 0 . 1 2 8 7 / i s r e . 2 . 3 . 1 9 2 ;   O r d   T J ,   2 0 0 5 ,   A N I M   B E H A V ,   V 6 9 ,   P 1 3 9 9 ,   D O I   1 0 . 1 0 1 6 / j . a n b e h a v . 2 0 0 4 . 0 8 . 0 2 0 ;   P a l v i a   P . ,   2 0 0 4 ,   C O M M U N I C A T I O N S   A I S ,   V 1 4 ,   P 2 4 ;   P a n t e l i   A ,   1 9 9 9 ,   E U R   J   I N F O R M   S Y S T ,   V 8 ,   P 1 7 0 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 3 2 6 ;   P A R K   L ,   2 0 0 9 ,   A C M   T r a n s a c t i o n s   o n   I n f o r m a t i o n   S y s t e m s ,   V 2 7 ,   P 8 ;   P e n u m a t s a   P ,   2 0 0 6 ,   I N T   J   A R T I F   I N T E L L   T ,   V 1 5 ,   P 7 6 7 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 2 1 3 0 0 6 0 0 2 9 3 X ;   P O R T E R   M F ,   1 9 8 0 ,   P R O G R A M - A U T O M   L I B R ,   V 1 4 ,   P 1 3 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 4 6 8 1 4 ;   S A L T O N   G ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 1 - 0 ;   S A L T O N   G ,   1 9 7 5 ,   C O M M U N   A C M ,   V 1 8 ,   P 6 1 3 ,   D O I   1 0 . 1 1 4 5 / 3 6 1 2 1 9 . 3 6 1 2 2 0 ;   S h a h n a z   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 4 . 1 1 . 0 0 5 ;   S i d o r o v a   A ,   2 0 0 8 ,   M I S   Q U A R T ,   V 3 2 ,   P 4 6 7 ;   S p o m e r   J .   E ,   2 0 0 9 ,   T H E S I S   C E N T R A L   C O N N E ;   S t e y v e r s   M . ,   2 0 0 7 ,   H D B   L A T E N T   S E M A N T I C ,   P 4 2 7 ;   T e h   Y W ,   2 0 0 6 ,   J   A M   S T A T   A S S O C ,   V 1 0 1 ,   P 1 5 6 6 ,   D O I   1 0 . 1 1 9 8 / 0 1 6 2 1 4 5 0 6 0 0 0 0 0 0 3 0 2 ;   V a l l e - L i s b o a   J C ,   2 0 0 7 ,   I N F O R M   S C I E N C E S ,   V 1 7 7 ,   P 4 1 2 2 ,   D O I   1 0 . 1 0 1 6 / j . i n s . 2 0 0 7 . 0 4 . 0 0 7 ;   W e b e r   R .   P . ,   1 9 9 0 ,   B A S I C   C O N T E N T   A N A L ;   W e i   C P ,   2 0 0 8 ,   D E C I S   S U P P O R T   S Y S T ,   V 4 5 ,   P 6 0 6 ,   D O I   1 0 . 1 0 1 6 / j . d s s . 2 0 0 7 . 0 7 . 0 0 8 ;   W e i   C . ,   2 0 0 8 ,   J   M A N A G E   I N F O R M   S Y S T ,   V 2 4 ,   P 2 6 9 ;   W i l l c o c k s   L ,   2 0 0 8 ,   E U R   J   I N F O R M   S Y S T ,   V 1 7 ,   P 1 6 3 ,   D O I   1 0 . 1 0 5 7 / e j i s . 2 0 0 8 . 9 ;   W i t t e n   I .   H . ,   2 0 0 5 ,   D A T A   M I N I N G   P R A C T I C A ;   Z h u   M ,   2 0 0 6 ,   C O M P U T   S T A T   D A T A   A N ,   V 5 1 ,   P 9 1 8 ,   D O I   1 0 . 1 0 1 6 / j . c s d a . 2 0 0 5 . 0 9 . 0 1 0 	 6 3 	 2 6 	 2 7 	 6 	 4 1 	 P A L G R A V E   M A C M I L L A N   L T D 	 B A S I N G S T O K E 	 B R U N E L   R D   B L D G ,   H O U N D M I L L S ,   B A S I N G S T O K E   R G 2 1   6 X S ,   H A N T S ,   E N G L A N D 	 0 9 6 0 - 0 8 5 X 	 	 	 E U R   J   I N F O R M   S Y S T 	 E u r .   J .   I n f o r m .   S y s t . 	 J A N 	 2 0 1 2 	 2 1 	 1 	 	 	 S I 	 	 7 0 	 8 6 	 	 1 0 . 1 0 5 7 / e j i s . 2 0 1 0 . 6 1 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 7 1 M V 	 W O S : 0 0 0 2 9 8 7 4 3 1 0 0 0 0 5 	 	 
 
 J 	 L v ,   P H ;   W a n g ,   G F ;   W a n ,   Y ;   L i u ,   J ;   L i u ,   Q ;   M a ,   F C 	 	 	 	 L v ,   P e n g   H u i ;   W a n g ,   G u i - F a n g ;   W a n ,   Y o n g ;   L i u ,   J i a ;   L i u ,   Q i n g ;   M a ,   F e i - c h e n g 	 	 	 B i b l i o m e t r i c   t r e n d   a n a l y s i s   o n   g l o b a l   g r a p h e n e   r e s e a r c h 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 G r a p h e n e ;   B i b l i o m e t r i c   a n a l y s i s ;   R e s e a r c h   t r e n d ;   C o - w o r d s ;   C o - a u t h o r s h i p ;   K n o w l e d g e   m a p p i n g 	 E P I T A X I A L   G R A P H E N E ;   C A R B O N - F I L M S ;   S C I E N C E 	 G r a p h e n e   i s   a   r i s i n g   s t a r   a s   o n e   o f   t h e   p r o m i s i n g   m a t e r i a l s   w i t h   m a n y   a p p l i c a t i o n s .   I t s   g l o b a l   l i t e r a t u r e   i n c r e a s e d   f a s t   i n   r e c e n t   y e a r s .   I n   t h i s   w o r k ,   b i b l i o m e t r i c   a n a l y s i s   a n d   k n o w l e d g e   v i s u a l i z a t i o n   t e c h n o l o g y   w e r e   a p p l i e d   t o   e v a l u a t e   g l o b a l   s c i e n t i f i c   p r o d u c t i o n   a n d   d e v e l o p i n g   t r e n d   o f   g r a p h e n e   r e s e a r c h .   T h e   d a t a   w e r e   c o l l e c t e d   f r o m   1 9 9 1   t o   2 0 1 0   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   d a t a b a s e ,   C o n f e r e n c e   P r o c e e d i n g   C i t a t i o n   I n d e x   d a t a b a s e   a n d   D e r w e n t   I n n o v a t i o n   I n d e x   d a t a b a s e   i n t e g r a t e d   b y   T h o m s o n   R e u t e r s .   T h e   p u b l i s h e d   p a p e r s   f r o m   d i f f e r e n t   s u b j e c t s ,   j o u r n a l s ,   a u t h o r s ,   c o u n t r i e s   a n d   k e y w o r d s   d i s t r i b u t e d   i n   s e v e r a l   a s p e c t s   o f   r e s e a r c h   t o p i c s   p r o v e d   t h a t   g r a p h e n e   r e s e a r c h   i n c r e a s e d   r a p i d l y   o v e r   p a s t   2 0   y e a r s   a n d   b o o s t e d   i n   r e c e n t   5   y e a r s .   T h e   d i s t i n c t i o n s   i n   k n o w l e d g e   m a p   s h o w   t h a t   t h e   c l u s t e r s   d i s t r i b u t e d   r e g u l a r l y   i n   k e y w o r d s   o f   a p p l i e d   p a t e n t s   i n   r e c e n t   5   y e a r s   d u e   t o   t h e   p o t e n t i a l   a p p l i c a t i o n s   o f   g r a p h e n e   r e s e a r c h   g r a d u a l l y   f o u n d .   T h e   a n a l y t i c a l   r e s u l t s   p r o v i d e d   s e v e r a l   k e y   f i n d i n g s   o f   b i b l i o m e t r i c s   t r e n d . 	 [ L v ,   P e n g   H u i ;   W a n g ,   G u i - F a n g ;   W a n ,   Y o n g ;   L i u ,   J i a ]   C h i n e s e   A c a d   S c i ,   W u h a n   D o c u m e n t a t   &   I n f o r m a t   C t r ,   W u h a n   4 3 0 0 7 1 ,   P e o p l e s   R   C h i n a ;   [ L i u ,   Q i n g ]   C h i n e s e   A c a d   S c i ,   B u r   P l a n n i n g   &   S t r a t e g y ,   B e i j i n g   1 0 0 8 6 4 ,   P e o p l e s   R   C h i n a ;   [ M a ,   F e i - c h e n g ]   W u h a n   U n i v ,   I n f o r m a t   R e s o u r c e   R e s   C t r ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a 	 L v ,   P H   ( r e p r i n t   a u t h o r ) ,   C h i n e s e   A c a d   S c i ,   W u h a n   D o c u m e n t a t   &   I n f o r m a t   C t r ,   W u h a n   4 3 0 0 7 1 ,   P e o p l e s   R   C h i n a . 	 p h @ n i m t e . a c . c n 	 L Y U ,   P e n g h u i / A - 6 8 6 4 - 2 0 1 3 	 L Y U ,   P e n g h u i / 0 0 0 0 - 0 0 0 2 - 7 5 4 2 - 4 5 9 1 	 C h i n e s e   A c a d e m y   o f   S c i e n c e s   [ 2 0 0 9 Q N R C 0 5 ] 	 T h i s   w o r k   i s   s u p p o r t e d   b y   t h e   k n o w l e d g e   i n n o v a t i o n   p r o g r a m   o f   t h e   C h i n e s e   A c a d e m y   o f   S c i e n c e s   ( N o .   2 0 0 9 Q N R C 0 5 ) .   T h e   a u t h o r s   a r e   g r a t e f u l   t o   L e i   C u i ,   X i n g f u   W a n g ,   H o n g y a n   Y a n g ,   J u n   Z h a n g   a n d   Y o n g h e n g   Z h o n g   f o r   t h e i r   h e l p f u l   d i s c u s s i o n s   a n d   s u g g e s t i o n s .   T h e   a u t h o r s   w o u l d   a l s o   l i k e   t o   t h a n k   t h e   c h i e f   e d i t o r   o f   S c i e n t o m e t r i c s   a n d   a n o n y m o u s   r e v i e w e r s   f o r   t h e i r   v a l u a b l e   c o m m e n t s . 	 B a r t h   A . ,   2 0 0 8 ,   G R A P H E N E   R I S I N G   S T A R ;   B e r g e r   C ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 2 ,   P 1 1 9 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 5 9 2 5 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   B U L L I S   K ,   2 0 0 9 ,   T R 1 0   G R A P H E N E   T R A N S I ;   C a p p e l l i   E ,   2 0 0 5 ,   T H I N   S O L I D   F I L M S ,   V 4 8 2 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / j . t s f . 2 0 0 4 . 1 1 . 1 9 3 ;   C A R E L   R S ,   1 9 9 3 ,   M E T H O D   I N F O R M   M E D ,   V 3 2 ,   P 1 9 5 ;   C h e n   W ,   2 0 0 7 ,   J   A M   C H E M   S O C ,   V 1 2 9 ,   P 1 0 4 1 8 ,   D O I   1 0 . 1 0 2 1 / j a 0 7 1 6 5 8 g ;   C h i u   W T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 1 5 2 3 - 1 ;   C i r a c i   S ,   2 0 0 4 ,   J   P H Y S - C O N D E N S   M A T ,   V 1 6 ,   p R 9 0 1 ,   D O I   1 0 . 1 0 8 8 / 0 9 5 3 - 8 9 8 4 / 1 6 / 2 9 / R 0 1 ;   C o o p e r   C ,   2 0 0 3 ,   S C I E N C E ,   V 2 9 9 ,   P 5 1 1 ;   E n a c h e s c u   C ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 4 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 4 6 5 0 6 9 8 7 ;   F a b a - P e r e z   C ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 6 2 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 4 . 0 8 0 3 6 . 7 3 ;   F e r n a n d e z - C a n o n   J M ,   2 0 0 2 ,   M O L   C E L L   B I O L ,   V 2 2 ,   P 4 9 4 3 ,   D O I   1 0 . 1 1 2 8 / M C B . 2 2 . 1 3 . 4 9 4 3 - 4 9 5 1 . 2 0 0 2 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G e i m   A K ,   2 0 0 7 ,   N A T   M A T E R ,   V 6 ,   P 1 8 3 ,   D O I   1 0 . 1 0 3 8 / n m a t 1 8 4 9 ;   H a s s   J ,   2 0 0 8 ,   P H Y S   R E V   L E T T ,   V 1 0 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 1 0 0 . 1 2 5 5 0 4 ;   H e   Q ,   1 9 9 9 ,   L I B R   T R E N D S ,   V 4 8 ,   P 1 3 3 ;   I l y i n   A M ,   2 0 1 0 ,   J   C O M P U T   T H E O R   N A N O S ,   V 7 ,   P 2 0 0 4 ,   D O I   1 0 . 1 1 6 6 / j c t n . 2 0 1 0 . 1 5 7 5 ;   K a t s n e l s o n   M I ,   2 0 0 6 ,   N A T   P H Y S ,   V 2 ,   P 6 2 0 ,   D O I   1 0 . 1 0 3 8 / n p h y s 3 8 4 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   M c C a n n   E ,   2 0 0 6 ,   P H Y S   R E V   L E T T ,   V 9 6 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 9 6 . 0 8 6 8 0 5 ;   * N O B ,   2 0 1 0 ,   2 0 1 0   N O B   P R I Z   P H Y S ;   N o v o s e l o v   K S ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 0 4 5 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 2 8 4 8 1 0 2 ;   N o v o s e l o v   K S ,   2 0 0 5 ,   N A T U R E ,   V 4 3 8 ,   P 1 9 7 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 4 2 3 3 ;   N o v o s e l o v   K S ,   2 0 0 4 ,   S C I E N C E ,   V 3 0 6 ,   P 6 6 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 0 2 8 9 6 ;   O d e g a r d   G M ,   2 0 0 2 ,   C O M P O S   S C I   T E C H N O L ,   V 6 2 ,   P 1 8 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 6 6 - 3 5 3 8 ( 0 2 ) 0 0 1 1 3 - 6 ;   R a j a g o p a l   P ,   2 0 0 2 ,   I N F O R M   M A N A G E - A M S T E R ,   V 4 0 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 2 0 6 ( 0 1 ) 0 0 1 3 5 - 5 ;   S e n   D ,   2 0 1 0 ,   S M A L L ,   V 6 ,   P 1 1 0 8 ,   D O I   1 0 . 1 0 0 2 / s m l l . 2 0 1 0 0 0 0 9 7 ;   S t a n d l e y   B ,   2 0 0 8 ,   N A N O   L E T T ,   V 8 ,   P 3 3 4 5 ,   D O I   1 0 . 1 0 2 1 / n l 8 0 1 7 7 4 a ;   S u   H N ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 5 9 - 8 ;   T u n g   V C ,   2 0 0 9 ,   N A N O   L E T T ,   V 9 ,   P 1 9 4 9 ,   D O I   1 0 . 1 0 2 1 / n l 9 0 0 1 5 2 5 ;   W A L L A C E   P R ,   1 9 4 7 ,   P H Y S   R E V ,   V 7 1 ,   P 6 2 2 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v . 7 1 . 6 2 2 ;   W i l k   G D ,   2 0 0 1 ,   J   A P P L   P H Y S ,   V 8 9 ,   P 5 2 4 3 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 3 6 1 0 6 5 ;   Z h a n g   Y B ,   2 0 0 5 ,   N A T U R E ,   V 4 3 8 ,   P 2 0 1 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 4 2 3 5 ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   S C I E N C E ,   V 3 2 6 ,   P 1 6 0 0 	 3 5 	 2 6 	 2 7 	 1 2 	 1 3 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A U G 	 2 0 1 1 	 8 8 	 2 	 	 	 	 	 3 9 9 	 4 1 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 8 6 - x 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 5 E O 	 W O S : 0 0 0 2 9 2 2 1 0 4 0 0 0 0 5 	 	 
 
 J 	 P o n t i l l e ,   D ;   T o r n y ,   D 	 	 	 	 P o n t i l l e ,   D a v i d ;   T o r n y ,   D i d i e r 	 	 	 T h e   c o n t r o v e r s i a l   p o l i c i e s   o f   j o u r n a l   r a t i n g s :   e v a l u a t i n g   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s 	 R E S E A R C H   E V A L U A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 R E S E A R C H   P E R F O R M A N C E ;   C I T A T I O N - R E P O R T S ;   I M P A C T   F A C T O R S ;   Q U A L I T Y ;   R A N K I N G S ;   T O P ;   P U B L I C A T I O N S ;   I N D I C A T O R S ;   M A N A G E M E N T ;   E C O N O M I C S 	 I n   a   g r o w i n g   n u m b e r   o f   c o u n t r i e s ,   g o v e r n m e n t s   a n d   p u b l i c   a g e n c i e s   s e e k   t o   s y s t e m a t i c a l l y   a s s e s s   t h e   s c i e n t i f i c   o u t p u t s   o f   t h e i r   u n i v e r s i t i e s   a n d   r e s e a r c h   i n s t i t u t i o n s .   B i b l i o m e t r i c s   i n d i c a t o r s   a n d   p e e r   r e v i e w   a r e   r e g u l a r l y   u s e d   f o r   t h i s   p u r p o s e ,   a n d   t h e i r   a d v a n t a g e s   a n d   b i a s e s   a r e   d i s c u s s e d   i n   a   w i d e   r a n g e   o f   l i t e r a t u r e .   T h i s   a r t i c l e   e x a m i n e s   h o w   t h r e e   d i f f e r e n t   n a t i o n a l   o r g a n i s a t i o n s   p r o d u c e   j o u r n a l   r a t i n g s   a s   a n   a l t e r n a t i v e   a s s e s s m e n t   t o o l ,   w h i c h   i s   p a r t i c u l a r l y   t a r g e t e d   f o r   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s .   A f t e r   s e t t i n g   o u t   t h e   o r g a n i s a t i o n a l   c o n t e x t   i n   w h i c h   t h e s e   j o u r n a l   r a t i n g s   e m e r g e d ,   t h e   a n a l y s i s   h i g h l i g h t s   t h e   m a i n   s t e p s   o f   t h e i r   p r o d u c t i o n ,   t h e   c r i t i c i s m   t h e y   r e c e i v e d   a f t e r   p u b l i c a t i o n ,   e s p e c i a l l y   f r o m   j o u r n a l s ,   a n d   t h e   c h a n g e s   m a d e   d u r i n g   t h e   e n s u i n g   r e v i s i o n   p r o c e s s .   T h e   p a r t i c u l a r   t e n s i o n s   o f   a   t o o l   d e s i g n e d   a s   b o t h   a   p o l i t i c a l   i n s t r u m e n t   a n d   a   s c i e n t i f i c   a p p a r a t u s   a r e   a l s o   d i s c u s s e d . 	 [ T o r n y ,   D i d i e r ]   I N R A ,   R i T M E   U R   1 3 2 3 ,   F - 9 4 2 0 5   I v r y ,   F r a n c e ;   [ P o n t i l l e ,   D a v i d ]   C N R S ,   E H E S S ,   I I A C ,   U M R   8 1 7 7 ,   F - 7 5 0 0 6   P a r i s ,   F r a n c e 	 T o r n y ,   D   ( r e p r i n t   a u t h o r ) ,   I N R A ,   R i T M E   U R   1 3 2 3 ,   6 5   B l v d   B r a n d e b o u r g ,   F - 9 4 2 0 5   I v r y ,   F r a n c e . 	 p o n - t i l l e @ e h e s s . f r ;   t o r n y @ i v r y . i n r a . f r 	 	 T o r n y ,   D i d i e r / 0 0 0 0 - 0 0 0 1 - 6 6 6 1 - 9 6 8 0 	 	 	 A b e l s o n   P ,   2 0 0 9 ,   E C O N   P A P E R S ,   V 2 8 ,   P 1 7 6 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 5 9 - 3 4 4 1 . 2 0 0 9 . 0 0 0 2 0 . X ;   A D L E R   R ,   2 0 0 8 ,   4 1   I N T   M A T H   U N ;   * A E R E S   G E N L I S T ,   2 0 0 8 ,   A R G   A C C   F U L L   J   L I S T ;   * A E R E S   H I S T P H I L O S C ,   2 0 0 9 ,   A R G   A C   H I S T   P H I L   S C I ;   * A E R E S   P A Y L I S T ,   2 0 0 9 ,   A R G   A C   P S Y C H   E T H   E R G ;   * A E R E S   P E T ,   2 0 0 8 ,   P O R   R E T R   C O M P   D E F   L I ;   * A E R E S   S C I P O L I S T ,   2 0 0 8 ,   A R G   A C C   P O L   S C I   J   L I ;   * A E R E S   S O C I O D E M O L I ,   2 0 0 9 ,   A R G   A C C   S O C   D E M   J   L I ;   A L E X A N D E R   J K ,   2 0 0 7 ,   J   E D   B U S I N E S S ,   V 8 3 ,   P 3 2 1 ;   * A R C   T I E R S ,   2 0 0 8 ,   T I E R   A U S T R   R A N K   J ;   A u r a n e n   O ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 8 2 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 3 . 0 0 3 ;   B a z e r m a n   C h a r l e s ,   1 9 8 8 ,   S H A P I N G   W R I T T E N   K N O W ;   B E R R Y   M ,   1 9 8 3 ,   U N E   T E C H N O L O G I E   I N V I ;   B o l l e n   J ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 8 0 3 ;   B o w k e r   G e o f f r e y   C . ,   1 9 9 9 ,   S O R T I N G   T H I N G S   O U T   C ;   B R I A T T E   F ,   2 0 0 8 ,   C O M P A R A I S O N   I N T E R C L A ,   V 1 0 0 ,   P 5 1 ;   B r i n n   T ,   2 0 0 0 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 8 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 9 ) 0 0 0 4 8 - 1 ;   B u t l e r   L ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 3 8 9 ;   B U T L E R   L ,   2 0 0 1 ,   P O L I T I C A L   S T U D I E S   R E ,   V 7 ,   P 3 ;   B U T L E R   L i n d a ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 8 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 7 ;   C a m p a n a r i o   J M ,   1 9 9 8 ,   S C I   C O M M U N ,   V 1 9 ,   P 1 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 9 8 0 1 9 0 0 3 0 0 2 ;   C A S T L E S   I N ,   1 9 9 3 ,   A U S T R   S T A N D A R D   R E S   C ;   C h a r l t o n   B   G ,   2 0 0 7 ,   S C I   P U B L   P O L I C Y ,   V 3 4 ,   P 5 5 5 ,   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 7 X 2 5 4 4 1 3 ;   C O L E   S ,   1 9 8 3 ,   A M   J   S O C I O L ,   V 8 9 ,   P 1 1 1 ,   D O I   1 0 . 1 0 8 6 / 2 2 7 8 3 5 ;   * D E S T ,   2 0 0 6 ,   Q U A L   M E T R   S E P   2 0 0 6 ;   * D E S T ,   2 0 0 5 ,   A R C   S U P P   P A P   A S S   R E S ;   D o n o v a n   C ,   2 0 0 5 ,   P U B L I C   A D M I N ,   V 8 3 ,   P 5 9 7 ,   D O I   1 0 . 1 1 1 1 / j . 0 0 3 3 - 3 2 9 8 . 2 0 0 5 . 0 0 4 6 4 . x ;   D o n o v a n   C . ,   2 0 0 5 ,   R E V   C U R R E N T   A U S T R   I N ;   * E P A T ,   2 0 0 8 ,   E D   P H I L O S   T H E O R Y ,   V 4 0 ;   * E R I H ,   2 0 1 0 ,   2 0 0 8 2 0 0 9   E R I H ;   * E R I H ,   2 0 0 8 ,   R E P L   C R I T ;   * E R I H   E X P A N E L S ,   2 0 0 8 ,   E X P   P A N   P R O C   M E T H   S E ;   * E R I H   F A Q ,   2 0 0 8 ,   F R E Q   A S K   Q U E S T ;   * E R I H   R E V S U M G U I D E ,   2 0 0 7 ,   R E V   E R I H   S U M M   G U I D ;   * E R I H   S U M G G U I D E ,   2 0 0 7 ,   S U M M   G U I D ;   E s p e l a n d   W N ,   2 0 0 7 ,   A M   J   S O C I O L ,   V 1 1 3 ,   P 1 ,   D O I   1 0 . 1 0 8 6 / 5 1 7 8 9 7 ;   F I S H E R   J G ,   2 0 0 8 ,   J   I N F O R M   S Y S T E M S ,   V 2 5 ,   P 5 ;   G A R F I E L D   E ,   1 9 7 0 ,   C U R R   C O N T E N T S ,   V 1 8 ,   P 1 0 6 ;   G i m e n e z - T o l e d o   E ,   2 0 0 9 ,   R E S   E V A L U A T ,   V 1 8 ,   P 2 0 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 9 X 4 7 1 9 8 6 ;   G I N N E N E Z T O L E D O   E ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 1 3 7 ;   G l a s e r   J ,   2 0 0 4 ,   J   S O C I O L ,   V 4 0 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 1 4 4 0 7 8 3 3 0 4 0 4 6 3 7 0 ;   G L A S E R   J ,   2 0 0 5 ,   R E S   E V A L U A T ,   V 1 1 ,   P 1 4 1 ;   G r u p p   H ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 7 5 ;   H A I N G E   G ,   2 0 0 8 ,   A U S T R A L I A N             0 8 1 2 ;   H i x   S . ,   2 0 0 4 ,   P O L I T I C A L   S T U D I E S   R E ,   V 2 ,   P 2 9 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 8 - 9 2 9 9 . 2 0 0 4 . 0 0 0 1 1 . x ;   H o g l e r   R ,   2 0 0 9 ,   M A N A G E   C O M M U N   Q ,   V 2 3 ,   P 1 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 3 3 1 8 9 0 3 3 5 4 1 9 ;   K a l a i t z i d a k i s   P ,   1 9 9 9 ,   E U R   E C O N   R E V ,   V 4 3 ,   P 1 1 5 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 4 - 2 9 2 1 ( 9 9 ) 0 0 0 1 9 - 7 ;   K R I T I K A   F ,   2 0 0 9 ,   K R I T I K A ,   V 1 0 ,   P 1 ;   L A B A N D   D N ,   1 9 8 5 ,   C A N   J   E C O N ,   V 1 8 ,   P 9 0 4 ,   D O I   1 0 . 2 3 0 7 / 1 3 5 1 0 0 ;   L a m o n t   M . ,   2 0 0 9 ,   P R O F E S S O R S   T H I N K   I N S ;   L E E   F S ,   2 0 0 6 ,   J   E C O N ,   V 3 ,   P 1 ;   L e e   F .   S . ,   2 0 0 8 ,   H O R I Z O N ,   V 1 6 ,   P 2 4 1 ,   D O I   1 0 . 1 1 0 8 / 1 0 7 4 8 1 2 0 8 1 0 9 1 2 5 6 5 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 2 4 ;   M a c d o n a l d   S ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 7 0 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 7 7 4 1 9 ;   M a g r i   M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 2 3 5 ;   M a i e r   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 5 - 0 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M e r l l i e   D ,   2 0 0 9 ,   R E V   P H I L O S   F R   E T R A N G ,   V 1 3 4 ,   P 9 1 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M o e d   H F ,   2 0 0 2 ,   L I B R   T R E N D S ,   V 5 0 ,   P 4 9 8 ;   M o e d   H . ,   2 0 0 7 ,   S C I   P U B L   P O L I C Y ,   V 3 4 ,   P 5 7 5 ,   D O I   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 7 X 2 5 5 1 7 9 ;   M o u s s a   S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 0 . 0 0 1 ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   N i s o n g e r   T E ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 6 5 9 2 9 0 2 6 ;   N o r r i s   M ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 1 ;   P I C A R D   E ,   2 0 0 8 ,   C O M P T E R E N D U   R E U N I O N ;   P o n s - N o v e l l   J ,   2 0 1 0 ,   A P P L   E C O N ,   V 4 2 ,   P 6 8 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 0 3 6 8 4 0 7 0 1 7 2 0 8 0 4 ;   P O N T I L L E   D ,   2 0 1 0 ,   R E V   Q U I   C O M P T E N T   R E V ,   V 8 ;   P o w e r   M . ,   1 9 9 7 ,   A U D I T   S O C   R I T U A L S   V E ;   * R H M C ,   2 0 0 8 ,   R E V   H I S T   M O D   C O N T   2 0 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S i n g h   G ,   2 0 0 7 ,   J   M A N A G E   I N Q U I R Y ,   V 1 6 ,   P 3 1 9 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 7 3 0 5 8 9 4 ;   S o l a r i   A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 6 0 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 0 2 0 2 9 6 1 ;   S t a r b u c k   W H ,   2 0 0 5 ,   O R G A N   S C I ,   V 1 6 ,   P 1 8 0 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 0 4 0 . 0 1 0 7 ;   S v a n t e s s o n   D . ,   2 0 0 9 ,   L E G A L   S T U D I E S ,   V 2 9 ,   P 6 7 8 ;   S v e n s s o n   G ,   2 0 0 6 ,   E U R   J   M A R K E T I N G ,   V 4 0 ,   P 1 1 5 3 ,   D O I   1 0 . 1 1 0 8 / 0 3 0 9 0 5 6 0 6 1 0 7 0 2 7 4 0 ;   T h o m a s   P R ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 0 5 0 ;   V a n   N o o r d e n   R ,   2 0 1 0 ,   N A T U R E ,   V 4 6 5 ,   P 8 6 4 ,   D O I   1 0 . 1 0 3 8 / 4 6 5 8 6 4 a ;   W a g n e r   A .   B ,   2 0 0 9 ,   I S S U E S   S C I   T E C H N O L O G ,   V 5 7 ;   W h i t e   H D ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 0 8 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 4 5 ;   W O U T E R S   P ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ,   V 3 ;   Z U C K E R M A N   H ,   1 9 7 1 ,   M I N E R V A ,   V 9 ,   P 6 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 5 5 3 1 8 8 ;   2 0 0 9 ,   T I M E S   H I G H E R   E D   0 1 2 2 ;   2 0 0 8 ,   A N N   H S S ,   V 6 ,   P 1 ;   2 0 0 8 ,   T I M E S   H I G H E R   E D   0 8 2 8 ;   2 0 0 8 ,   T I M E S   H I G H E R   E D   0 1 0 4 	 8 6 	 2 6 	 2 7 	 6 	 3 7 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 0 9 5 8 - 2 0 2 9 	 1 4 7 1 - 5 4 4 9 	 	 R E S   E V A L U A T 	 R e s .   E v a l u a t . 	 D E C 	 2 0 1 0 	 1 9 	 5 	 	 	 	 	 3 4 7 	 3 6 0 	 	 1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 1 0 X 1 2 8 0 9 1 9 1 2 5 0 8 8 9 	 	 1 4 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 2 9 O A 	 W O S : 0 0 0 2 8 7 9 5 8 9 0 0 0 0 4 	 	 
 
 J 	 L i u ,   X H ;   Y u ,   S ;   J a n s s e n s ,   F ;   G l a n z e l ,   W ;   M o r e a u ,   Y ;   D e   M o o r ,   B 	 	 	 	 L i u ,   X i n h a i ;   Y u ,   S h i ;   J a n s s e n s ,   F r i z o ;   G l a n z e l ,   W o l f g a n g ;   M o r e a u ,   Y v e s ;   D e   M o o r ,   B a r t 	 	 	 W e i g h t e d   H y b r i d   C l u s t e r i n g   b y   C o m b i n i n g   T e x t   M i n i n g   a n d   B i b l i o m e t r i c s   o n   a   L a r g e - S c a l e   J o u r n a l   D a t a b a s e 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I N F O R M A T I O N - S C I E N C E ;   C O M B I N E D   C O C I T A T I O N ;   W O R D   A N A L Y S I S ;   P A R T I T I O N S ;   D O C U M E N T S ;   C O N S E N S U S 	 W e   p r o p o s e   a   n e w   h y b r i d   c l u s t e r i n g   f r a m e w o r k   t o   i n c o r p o r a t e   t e x t   m i n i n g   w i t h   b i b l i o m e t r i c s   i n   j o u r n a l   s e t   a n a l y s i s .   T h e   f r a m e w o r k   i n t e g r a t e s   t w o   d i f f e r e n t   a p p r o a c h e s :   c l u s t e r i n g   e n s e m b l e   a n d   k e r n e l - f u s i o n   c l u s t e r i n g .   T o   i m p r o v e   t h e   f l e x i b i l i t y   a n d   t h e   e f f i c i e n c y   o f   p r o c e s s i n g   l a r g e - s c a l e   d a t a ,   w e   p r o p o s e   a n   i n f o r m a t i o n - b a s e d   w e i g h t i n g   s c h e m e   t o   l e v e r a g e   t h e   e f f e c t   o f   m u l t i p l e   d a t a   s o u r c e s   i n   h y b r i d   c l u s t e r i n g .   T h r e e   d i f f e r e n t   a l g o r i t h m s   a r e   e x t e n d e d   b y   t h e   p r o p o s e d   w e i g h t i n g   s c h e m e   a n d   t h e y   a r e   e m p l o y e d   o n   a   l a r g e   j o u r n a l   s e t   r e t r i e v e d   f r o m   t h e   W e b   o f   S c i e n c e   ( W o S )   d a t a b a s e .   T h e   c l u s t e r i n g   p e r f o r m a n c e   o f   t h e   p r o p o s e d   a l g o r i t h m s   i s   s y s t e m a t i c a l l y   e v a l u a t e d   u s i n g   m u l t i p l e   e v a l u a t i o n   m e t h o d s ,   a n d   t h e y   w e r e   c r o s s - c o m p a r e d   w i t h   a l t e r n a t i v e   m e t h o d s .   E x p e r i m e n t a l   r e s u l t s   d e m o n s t r a t e   t h a t   t h e   p r o p o s e d   w e i g h t e d   h y b r i d   c l u s t e r i n g   s t r a t e g y   i s   s u p e r i o r   t o   o t h e r   m e t h o d s   i n   c l u s t e r i n g   p e r f o r m a n c e   a n d   e f f i c i e n c y .   T h e   p r o p o s e d   a p p r o a c h   a l s o   p r o v i d e s   a   m o r e   r e f i n e d   s t r u c t u r a l   m a p p i n g   o f   j o u r n a l   s e t s ,   w h i c h   i s   u s e f u l   f o r   m o n i t o r i n g   a n d   d e t e c t i n g   n e w   t r e n d s   i n   d i f f e r e n t   s c i e n t i f i c   f i e l d s . 	 [ L i u ,   X i n h a i ;   Y u ,   S h i ;   J a n s s e n s ,   F r i z o ;   M o r e a u ,   Y v e s ;   D e   M o o r ,   B a r t ]   K a t h o l i e k e   U n i v   L e u v e n ,   E S A T   S C D ,   B - 3 0 0 1   L e u v e n ,   B e l g i u m ;   [ L i u ,   X i n h a i ]   W u h a n   U n i v   S c i   &   T e c h n o l ,   C o l l   I n f o r m a t   S c i   &   E n g n ,   W u h a n   4 3 0 0 8 1 ,   H u b e i ,   P e o p l e s   R   C h i n a ;   [ G l a n z e l ,   W o l f g a n g ]   K a t h o l i e k e   U n i v   L e u v e n ,   C t r   R & D   M o n i t o r i n g ,   D e p t   M a n a g e r i a l   E c o n   S t r a t e g y   &   I n n o v a t ,   B - 3 0 0 0   L e u v e n ,   B e l g i u m ;   [ G l a n z e l ,   W o l f g a n g ]   H u n g a r i a n   A c a d   S c i ,   I R P S ,   B u d a p e s t ,   H u n g a r y 	 L i u ,   X H   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   E S A T   S C D ,   K a s t e e l p k   A r e n b e r g   1 0 ,   B - 3 0 0 1   L e u v e n ,   B e l g i u m . 	 X i n h a i . l i u @ e s a t . k u l e u v e n . b e ;   S h i . Y u @ e s a t . k u l e u v e n . b e ;   F r i z o . J a n s s e n s @ e s a t . k u l e u v e n . b e ;   W o l f g a n g . G l a n z e l @ e c o n . k u l e u v e n . b e ;   Y v e s . M o r e a u @ e s a t . k u l e u v e n . b e ;   B a r t . D e M o o r @ e s a t . k u l e u v e n . b e 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 C h i n a   S c h o l a r s h i p   C o u n c i l   ( C S C )   [ 2 0 0 6 1 5 3 0 0 5 ] ;   E n g i n e e r i n g   R e s e a r c h   C e n t e r   o f   M e t a l l u r g i c a l   A u t o m a t i o n   a n d   M e a s u r e m e n t   T e c h n o l o g y ,   M i n i s t r y   o f   E d u c a t i o n ,   H u b e i ,   C h i n a   [ 4 3 0 0 8 1 ] ;   R e s e a r c h   C o u n c i l   K U L :   G O A   A M B i o R I C S   [ C o E   E F / 0 5 / 0 0 7 ] ;   F l e m i s h   G o v e r n m e n t 	 X i n h a i   L i u   a n d   S h i   Y u   m a d e   e q u a l   c o n t r i b u t i o n s   t o   t h i s   a r t i c l e .   T h e   a u t h o r s   w o u l d   l i k e   t o   t h a n k   P r o f e s s o r   B l a i s e   C r o n i n   a n d   t h e   a n o n y m o u s   r e v i e w e r s   f o r   f r u i t f u l   c o m m e n t s .   T h e   a u t h o r s   a l s o   g i v e   t h a n k s   t o   M r .   T u n d e   ( A d e s h o l a )   A d e f i o y e   a n d   M r .   E r n e s t o   I a c u c c i   f o r   t h e i r   p r o o f r e a d i n g   a n d   a c k n o w l e d g e   s u p p o r t   f r o m   t h e   C h i n a   S c h o l a r s h i p   C o u n c i l   ( C S C   N o .   2 0 0 6 1 5 3 0 0 5 ) ,   E n g i n e e r i n g   R e s e a r c h   C e n t e r   o f   M e t a l l u r g i c a l   A u t o m a t i o n   a n d   M e a s u r e m e n t   T e c h n o l o g y ,   M i n i s t r y   o f   E d u c a t i o n ,   4 3 0 0 8 1 ,   H u b e i ,   C h i n a ;   R e s e a r c h   C o u n c i l   K U L :   G O A   A M B i o R I C S ,   C o E   E F / 0 5 / 0 0 7   S y m B i o S y s ,   P R O M E T A ,   s e v e r a l   P h D / p o s t d o c   a n d   F e l l o w   G r a n t s ;   F l e m i s h   G o v e r n m e n t :   S t e u n p u n t   O & O   I n d i c a t o r e n ;   F W O :   P h D / p o s t d o c   G r a n t s ,   P r o j e c t s   G . 0 2 4 1 . 0 4   ( F u n c t i o n a l   G e n o m i c s ) ,   G . 0 4 9 9 . 0 4   ( S t a t i s t i c s ) ,   G . 0 2 3 2 . 0 5   ( C a r d i o v a s c u l a r ) ,   G . 0 3 1 8 . 0 5   ( s u b f u n c t i o n a l i z a t i o n ) ,   G . 0 5 5 3 .   0 6   ( V i t a m i n e D ) ,   G . 0 3 0 2 . 0 7   ( S V M / K e r n e l ) ,   r e s e a r c h   c o m m u n i t i e s   ( I C C o S ,   A N M M M ,   M L D M ) ;   I W T :   P h D   G r a n t s ,   G B O U - M c K n o w - E   ( K n o w l e d g e   m a n a g e m e n t   a l g o r i t h m s ) ,   G B O U - A N A   ( b i o s e n s o r s ) ,   T A D - B i o S c o p e - I T ,   S i l i c o s ;   S B O - B i o F r a m e ,   S B O - M o K a ,   T B M E n d o m e t r i o s i s ,   T B M - I O T A 3 ,   O   &   O - D s q u a r e ;   B e l g i a n   F e d e r a l   S c i e n c e   P o l i c y   O f f i c e :   I U A P   P 6 / 2 5   ( B i o M a G N e t ,   B i o i n f o r m a t i c s a n d   M o d e l i n g :   f r o m   G e n o m e s   t o   N e t w o r k s ,   2 0 0 7 - 2 0 1 1 ) ;   E U - R T D :   E R N S I :   E u r o p e a n   R e s e a r c h   N e t w o r k   o n   S y s t e m   I d e n t i f i c a t i o n ; F P 6 - N o E   B i o p a t t e r n ;   F P 6 - I P   e - T u m o u r s ,   F P 6 - M C - E S T   B i o p t r a i n ,   F P 6 - S T R E P   S t r o k e m a p .   E U - R T D :   E R N S I :   E u r o p e a n   R e s e a r c h   N e t w o r k   o n   S y s t e m   I d e n t i f i c a t i o n ; F P 6 - N o E   B i o p a t t e r n ;   F P 6 - I P   e - T u m o u r s ,   F P 6 - M C - E S T   B i o p t r a i n ,   F P 6 - S T R E P   S t r o k e m a p . 	 A y a d   H G ,   2 0 0 8 ,   I E E E   T   P A T T E R N   A N A L ,   V 3 0 ,   P 1 6 0 ,   D O I   1 0 . 1 1 0 9 / T P A M I . 2 0 0 7 . 1 1 3 8 ;   B a t a g e l j   V . ,   2 0 0 3 ,   G R A P H   D R A W I N G   S O F T W A ,   V 2 2 6 5 ,   P 7 7 ;   B i c k e l   S . ,   2 0 0 4 ,   P   4   I E E E   I N T   C   D A T   M ,   P 1 9 ,   D O I   D O I   1 0 . 1 1 0 9 / I C D M . 2 0 0 4 . 1 0 0 9 5 ;   B o y a c k   K W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 0 3 - 5 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   d e   M o y a - A n e g o n   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 6 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 8 3 ;   E f r o n   B ,   1 9 9 3 ,   I N T R O   B O O T S T R A P ;   F r e d   A L N ,   2 0 0 5 ,   I E E E   T   P A T T E R N   A N A L ,   V 2 7 ,   P 8 3 5 ,   D O I   1 0 . 1 1 0 9 / T P A M I . 2 0 0 5 . 1 1 3 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 7 8 8 0 4 0 8 7 ;   G l e n i s s o n   P ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 5 4 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 1 ;   G o s p o d n e t i c   O ,   2 0 0 5 ,   L U C E N E   A C T I O N ;   H e   X ,   2 0 0 2 ,   C O M P U T   S T A T   D A T A   A N ,   V 4 1 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 9 4 7 3 ( 0 2 ) 0 0 0 7 0 - 1 ;   H U B E R T   L ,   1 9 8 5 ,   J   C L A S S I F ,   V 2 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 9 0 8 0 7 5 ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J a n s s e n s   F . ,   2 0 0 7 ,   T H E S I S   K A T H O L I E K E   U ;   J a n s s e n s   F ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 6 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 0 2 - 7 ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   J a n s s e n s   F ,   2 0 0 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 5 ,   P 6 8 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 9 . 0 6 . 0 0 3 ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 6 0 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 2 2 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 7 ;   L i u   X X ,   2 0 0 9 ,   P R O C E E D I N G S   O F   T H E   T H I R D   I N T E R N A T I O N A L   W O R K S H O P   O N   M A T R I X   A N A L Y S I S   A N D   A P P L I C A T I O N S ,   V O L   2 ,   P 4 9 ;   M a r s h a k o v a   I . ,   1 9 7 3 ,   N A U C H N O   T E K H N I C H E S K A ,   V 2 ,   P 3 ;   M i r k i n   B ,   2 0 0 1 ,   M A C H   L E A R N ,   V 4 5 ,   P 2 1 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 9 2 4 9 2 0 7 3 9 ;   M o d h a   D .   S . ,   2 0 0 0 ,   P   1 1   A C M   C   H Y P   H Y P   S ,   P 1 4 3 ,   D O I   1 0 . 1 1 4 5 / 3 3 6 2 9 6 . 3 3 6 3 5 1 ;   N e w m a n   M E J ,   2 0 0 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 3 ,   P 8 5 7 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 6 0 1 6 0 2 1 0 3 ;   R O U S S E E U W   P J ,   1 9 8 7 ,   J   C O M P U T   A P P L   M A T H ,   V 2 0 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 0 4 2 7 ( 8 7 ) 9 0 1 2 5 - 7 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S t r e h l   A . ,   2 0 0 3 ,   J o u r n a l   o f   M a c h i n e   L e a r n i n g   R e s e a r c h ,   V 3 ,   P 5 8 3 ,   D O I   1 0 . 1 1 6 2 / 1 5 3 2 4 4 3 0 3 3 2 1 8 9 7 7 3 5 ;   T o p c h y   A ,   2 0 0 5 ,   I E E E   T   P A T T E R N   A N A L ,   V 2 7 ,   P 1 8 6 6 ,   D O I   1 0 . 1 1 0 9 / T P A M I . 2 0 0 5 . 2 3 7 ;   W A N G   Y ,   2 0 0 2 ,   P   1 1   I N T   C   I N F   K N O W L ,   P 4 9 0 ;   Z I T T   M ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 2 	 3 4 	 2 6 	 2 6 	 0 	 5 1 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U N 	 2 0 1 0 	 6 1 	 6 	 	 	 	 	 1 1 0 5 	 1 1 1 9 	 	 1 0 . 1 0 0 2 / a s i . 2 1 3 1 2 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 9 9 E F 	 W O S : 0 0 0 2 7 7 8 9 2 6 0 0 0 0 3 	 	 
 
 J 	 K u r t z ,   M J ;   B o l l e n ,   J 	 	 	 	 K u r t z ,   M i c h a e l   J . ;   B o l l e n ,   J o h a n 	 	 	 U s a g e   B i b l i o m e t r i c s 	 A N N U A L   R E V I E W   O F   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 A S T R O P H Y S I C S   D A T A   S Y S T E M ;   E L E C T R O N I C   J O U R N A L   U S A G E ;   O P E N - A C C E S S   A R T I C L E S ;   C I T A T I O N   A N A L Y S I S ;   H A L F - L I F E ;   I N F O R M A T I O N - R E T R I E V A L ;   S C I E N T I F I C   W O R K F L O W S ;   D I G I T A L   L I B R A R Y ;   S C I E N C E   P O L I C Y ;   S E A R C H   P R O C E S S 	 	 [ K u r t z ,   M i c h a e l   J . ]   H a r v a r d   S m i t h s o n i a n   C t r   A s t r o p h y s ,   C a m b r i d g e ,   M A   0 2 1 3 8   U S A ;   [ B o l l e n ,   J o h a n ]   L o s   A l a m o s   N a t l   L a b ,   R e s   L i b ,   D i g i t a l   L i b   R e s   &   P r o t o t y p i n g   T e a m ,   L o s   A l a m o s ,   N M   U S A 	 K u r t z ,   M J   ( r e p r i n t   a u t h o r ) ,   H a r v a r d   S m i t h s o n i a n   C t r   A s t r o p h y s ,   6 0   G a r d e n   S t ,   C a m b r i d g e ,   M A   0 2 1 3 8   U S A . 	 k u r t z @ c f a . h a r v a r d . e d u ;   j b o l l e n @ l a n l . g o v 	 K U R T Z ,   M i c h a e l   / B - 3 8 9 0 - 2 0 0 9 ;   	 K u r t z ,   M i c h a e l / 0 0 0 0 - 0 0 0 2 - 6 9 4 9 - 0 0 9 0 	 N A S A   [ N C C 5 - 1 8 9 ] ;   A n d r e w   W .   M e l l o n   F o u n d a t i o n ;   D i g i t a l   L i b r a r y   R e s e a r c h   a n d   P r o t o t y p i n g   T e a m   a t   t h e   R e s e a r c h   L i b r a r y   o f   t h e   L o s   A l a m o s   N a t i o n a l   L a b o r a t o r y 	 M i c h a e l   K u r t z   w o u l d   l i k e   t o   a c k n o w l e d g e   t h e   l o n g   t e r m   c o l l a b o r a t i o n   w i t h   t h e   A s t r o p h y s i c s   D a t a   S y s t e m   ( A D S )   g r o u p   a t   t h e   S m i t h s o n i a n   A s t r o p h y s i c a l   O b s e r v a t o r y ,   e s p e c i a l l y   G u e n t h e r   E i c h h o r n ,   A l b e r t o   A c c o m a z z i ,   a n d   E d w i n   H e n n e k e n .   T h e   A D S   i s   s u p p o r t e d   b y   N A S A   g r a n t   N C C 5 - 1 8 9 .   J o h a n   B o l l e n   w o u l d   l i k e   t o   t h a n k   H e r b e r t   V a n   d e   S o m p e l   a n d   t h e   D i g i t a l   L i b r a r y   R e s e a r c h   a n d   P r o t o t y p i n g   T e a m   a t   t h e   R e s e a r c h   L i b r a r y   o f   t h e   L o s   A l a m o s   N a t i o n a l   L a b o r a t o r y   f o r   t h e i r   s u p p o r t   i n   d e v e l o p i n g   m a n y   o f   t h e   i d e a s   a n d   m u c h   o f   t h e   r e s e a r c h   p r e s e n t e d   i n   t h i s   p a p e r .   T h e   A n d r e w   W .   M e l l o n   F o u n d a t i o n   s u p p o r t e d   t h e   M E S U R   p r o j e c t   t o   d e v e l o p   u s a g e - b a s e d   i m p a c t   m e t r i c s   f r o m   2 0 0 6   t o   2 0 0 8 . 	 A b t   H A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 0 7 - 8 ;   A c c o m a z z i   A ,   2 0 0 0 ,   A S T R O N   A S T R O P H Y S   S U P ,   V 1 4 3 ,   P 8 5 ,   D O I   1 0 . 1 0 5 1 / a a s : 2 0 0 0 1 7 2 ;   A g g a r w a l   C .   C . ,   1 9 9 8 ,   I E E E   D A T A   E N G   B ,   V 2 1 ,   P 2 3 ;   B a l d i   S ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 4 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B e k a e r t   J . ,   2 0 0 5 ,   S   E N S   L O N G   T E R M   P R E S ;   B e n s m a n   S J ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 7 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 2 2 . a b s ;   B e r t o t   J C ,   1 9 9 7 ,   G O V   I N F O R M   Q ,   V 1 4 ,   P 3 7 3 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 6 2 4 X ( 9 7 ) 9 0 0 3 4 - 4 ;   B l e c i c   D D ,   2 0 0 7 ,   C O L L   R E S   L I B R ,   V 6 8 ,   P 2 6 ;   B o l l e n   J ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 4 ;   B o l l e n   J . ,   2 0 0 6 ,   P   6   A C M   I E E E   C S   J O I N ,   P 2 9 8 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 1 7 5 3 . 1 1 4 1 8 2 1 ;   B o l l e n   J ,   2 0 0 3 ,   D   L I B   M A G A Z I N E ,   V 9 ;   B o l l e n   J ,   2 0 0 8 ,   P   8   A C M   I E E E   C S   J O I N ,   P 2 3 1 ,   D O I   [ 1 0 . 1 1 4 5 / 1 3 7 8 8 8 9 . 1 3 7 8 9 2 8 ,   D O I   1 0 . 1 1 4 5 / 1 3 7 8 8 8 9 . 1 3 7 8 9 2 8 ] ;   B o l l e n   J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 6 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 2 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 5 1 - 8 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B o l l e n   J ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 8 0 3 ;   B o l l e n   J ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 6 0 2 2 ;   B o n i t z   M ,   1 9 9 7 ,   L I B R I ,   V 4 7 ,   P 2 0 6 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 7 . 4 7 . 4 . 2 0 6 ;   B o r g m a n   C L ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 5 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 7 ) 4 7 : 7 < 5 6 8 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - S ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   B o r n e r   K ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 5 3 7 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 1 9 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   B o y a c k   K W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 6 6 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B R O A D U S   R N ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 ;   B r o a d u s   R .   N . ,   1 9 7 7 ,   A D V   L I B R A R I A N S H I P ,   V 7 ,   P 2 9 9 ;   B r o d y   T . ,   2 0 0 7 ,   C T W A T C H   Q ,   V 3 ,   P 4 2 ;   B r o d y   T ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 0 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 7 3 ;   B R O O K E S   B C ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 3 2 0 ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C a s t e l l a n o   C ,   2 0 0 9 ,   R E V   M O D   P H Y S ,   V 8 1 ,   P 5 9 1 ,   D O I   1 0 . 1 1 0 3 / R e v M o d P h y s . 8 1 . 5 9 1 ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   C O O P E R   M D ,   1 9 9 4 ,   L I B R   Q U A R T ,   V 6 4 ,   P 3 8 6 ;   C r a i g   I D ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 4 . 0 0 1 ;   C r o n i n   B ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 0 5 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   D a r m o n i   S J ,   2 0 0 2 ,   J   M E D   L I B R   A S S O C ,   V 9 0 ,   P 3 2 3 ;   D a v i s   P M ,   2 0 0 8 ,   B R I T   M E D   J ,   V 3 3 7 ,   D O I   1 0 . 1 1 3 6 / b m j . a 5 6 8 ;   D a v i s   P M ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 2 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 6 1   - 8 ;   D a v i s   P M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 4 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 5 ;   D a v i s   P M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 5 ;   D a v i s   P M ,   2 0 0 2 ,   C O L L   R E S   L I B R ,   V 6 3 ,   P 4 8 4 ;   D r o t t   M C ,   2 0 0 6 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 0 ,   P 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 4 0 0 1 1 0 ;   D u y   J ,   2 0 0 6 ,   J   A C A D   L I B R ,   V 3 2 ,   P 5 1 2 ,   D O I   1 0 . 1 0 1 6 / j . a c a l i b . 2 0 0 6 . 0 5 . 0 0 5 ;   E a s o n   K ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 4 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 0 3 > 3 . 0 . C O ; 2 - 8 ;   E i c h h o r n   G ,   2 0 0 0 ,   A S T R O N   A S T R O P H Y S   S U P ,   V 1 4 3 ,   P 6 1 ,   D O I   1 0 . 1 0 5 1 / a a s : 2 0 0 0 1 7 1 ;   E y s e n b a c h   G . ,   2 0 0 8 ,   B R I T   M E D   J   E   L E T T ,   V 3 3 7 ;   E y s e n b a c h   G ,   2 0 0 6 ,   P L O S   B I O L ,   V 4 ,   P 6 9 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 4 0 1 5 7 ;   F o r t u n a t o   S ,   2 0 0 7 ,   P H Y S   R E V   L E T T ,   V 9 9 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 9 9 . 1 3 8 7 0 1 ;   F o w l e r   D .   C . ,   2 0 0 7 ,   U S A G E   S T A T   E   S E R I A L S ;   F r e i r e   J ,   2 0 0 6 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 1 4 5 ,   P 1 0 ;   G A L V I N   T J ,   1 9 7 7 ,   L I B R   J ,   V 1 0 2 ,   P 2 3 1 7 ;   G A R D N E R   W ,   1 9 9 0 ,   P S Y C H O L   S C I ,   V 1 ,   P 3 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 2 8 0 . 1 9 9 0 . t b 0 0 2 3 3 . x ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r g o u r i   Y . ,   2 0 0 8 ,   A V A N T A G E   C I T A T I O N S   A ;   G E O R G A K O P O U L O S   D ,   1 9 9 5 ,   D I S T R I B   P A R A L L E L   D A T ,   V 3 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 2 7 7 6 4 3 ;   G i n s p a r g   P . ,   1 9 9 4 ,   C o m p u t e r s   i n   P h y s i c s ,   V 8 ,   P 3 9 0 ;   G i n s p a r g   P ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 3 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 8 2 5 3 1 0 0 ;   G i n s p a r g   P . ,   2 0 0 1 ,   E L E C T   P U B L I S H I N G   S C I ,   P 9 9 ;   G i n s p a r g   P . ,   2 0 0 7 ,   C T W A T C H   Q ,   V 3 ,   P 1 1 ;   G O L D B E R G   D ,   1 9 9 2 ,   C O M M U N   A C M ,   V 3 5 ,   P 6 1 ,   D O I   1 0 . 1 1 4 5 / 1 3 8 8 5 9 . 1 3 8 8 6 7 ;   G o s n e l l   C F ,   1 9 4 4 ,   C O L L   R E S   L I B R ,   V 5 ,   P 1 1 5 ;   G r a n t   C S ,   2 0 0 0 ,   A S T R O N   A S T R O P H Y S   S U P ,   V 1 4 3 ,   P 1 1 1 ,   D O I   1 0 . 1 0 5 1 / a a s : 2 0 0 0 1 7 3 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H a j j e m   C . ,   2 0 0 5 ,   I E E E   D A T A   E N G   B ,   V 2 8 ,   P 3 9 ;   H a j j e m   C . ,   2 0 0 5 ,   O P E N   A C C E S S   C I T A T I O N ;   H A R N A D   S ,   1 9 9 0 ,   P S Y C H O L   S C I ,   V 1 ,   P 3 4 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 2 8 0 . 1 9 9 0 . t b 0 0 2 3 4 . x ;   H a r n a d   S . ,   2 0 0 6 ,   S E L F   A R C H   I M P A C T   A D V ;   H a r n a d   S . ,   2 0 0 7 ,   T H E R E S   N O   A C C E S S   P R O ;   H a r n a d   S . ,   2 0 0 7 ,   C R A I G   A L S   R E V   S T U D I E ;   H a r n a d   S . ,   2 0 0 5 ,   O A   I M P A C T   A D V A N T A G E ;   H a m a d   S . ,   2 0 0 4 ,   D   L I B ,   V 1 0 ;   H a m a d   S . ,   2 0 0 7 ,   O P E N   A C C E S S   C I T A T I O N ;   H a r n a d   S . ,   2 0 0 6 ,   S P E C I A L   C A S E   A S T R O N O ;   H a r n a d   S . ,   2 0 0 7 ,   C I T A T I O N   A D V A N T A G E   O ;   H a r n a d   S . ,   2 0 0 8 ,   B R I T   M E D   J   E   L E T T ,   V 3 3 7 ;   H e   D Q ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 7 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 6 0 - 7 ;   H e e r   J . ,   2 0 0 2 ,   P   C   H U M   F A C T   C O M P   S Y ,   P 2 4 3 ;   H e n n e k e n   E .   A . ,   2 0 0 6 ,   J   E L E C T   P U B L I S H I N G ,   V 9 ,   D O I   [ 1 0 . 3 9 9 8 / 3 3 3 6 4 5 1 . 0 0 0 9 . 2 0 2 ,   D O I   1 0 . 3 9 9 8 / 3 3 3 6 4 5 1 . 0 0 0 9 . 2 0 2 ] ;   H e n n e k e n   E A ,   2 0 0 7 ,   L E A R N   P U B L ,   V 2 0 ,   P 1 6 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 7 7 7 9 4 9 0 6 6 1 ;   H e n n e k e n   E A ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 1 0 . 0 0 1 ;   H i d e r   P ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 3 5 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 5 8 1 1 ;   H o o d   W W ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 0 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 6 6 ;   H u n t i n g t o n   P ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 8 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 8 3 ;   J a m a l i   H R ,   2 0 0 5 ,   A S L I B   P R O C ,   V 5 7 ,   P 5 5 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 5 1 0 6 3 4 2 7 1 ;   J a n s e n   B J ,   2 0 0 6 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 8 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 6 . 0 6 . 0 0 5 ;   J a n s e n   B J ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 9 0 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 4 . 0 4 . 0 1 7 ;   K a p l a n   N R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 3 2 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 4 < 3 2 4 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - B ;   K i n g   D . ,   2 0 0 6 ,   D   L I B   M A G A Z I N E ,   V 1 2 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K i n g   D W ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 4 2 3 ;   K i n g   D W ,   1 9 8 1 ,   S C I   J   U S   T H E I R   P R O D U ;   K r a u s e   J ,   2 0 0 7 ,   C E R N O P E N 2 0 0 7 0 1 4 ;   K U R T Z   M J ,   1 9 9 3 ,   A S T R   S O C   P ,   V 5 2 ,   P 1 3 2 ;   K u r t z   M J ,   2 0 0 0 ,   A S T R O N   A S T R O P H Y S   S U P ,   V 1 4 3 ,   P 4 1 ,   D O I   1 0 . 1 0 5 1 / a a s : 2 0 0 0 1 7 0 ;   K u r t z   M J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 9 5 ;   K u r t z   M J ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 9 5 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 0 ;   K u r t z   M J ,   2 0 0 2 ,   P   S O C   P H O T O - O P T   I N S ,   V 4 8 4 7 ,   P 2 3 8 ,   D O I   1 0 . 1 1 1 7 / 1 2 . 4 6 0 4 3 8 ;   K u r t z   M J ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 9 6 ;   K u r t z   M .   J . ,   2 0 0 7 ,   A S T R O P H Y S I C A L   J ,   V 7 0 9 ;   K u r t z   M .   J . ,   1 9 9 7 ,   B   A M   A S T R O N O M I C A L   S O ,   V 2 9 ,   P 1 2 3 6 ;   K u r t z   M .   J . ,   1 9 9 6 ,   B   A M   A S T R O N O M I C A L   S O ,   V 2 8 ,   P 1 2 8 1 ;   K u r t z   M .   J . ,   1 9 9 2 ,   A S T R O N O M Y   L A R G E   D A T A ,   P 8 5 ;   K u r t z   M .   J . ,   2 0 0 4 ,   N A T   P O L   O P   A C C   O A   P R ;   K u r t z   M .   J . ,   2 0 0 3 ,   B A A S ,   V 3 5 ,   P 1 2 4 1 ;   L a d w i g   J P ,   2 0 0 5 ,   C O L L   R E S   L I B R ,   V 6 6 ,   P 5 2 7 ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L e y d e s d o r f f   L . ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 8 9 - 3 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 0 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 4 ;   L I N E   M B ,   1 9 7 5 ,   C O L L   R E S   L I B R ,   V 3 6 ,   P 3 9 3 ;   L I N E   M B ,   1 9 9 3 ,   L I B R   T R E N D S ,   V 4 1 ,   P 6 6 5 ;   L I U   M X ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 3 7 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 2 0 ;   L u d a s c h e r   B ,   2 0 0 5 ,   S I G M O D   R E C O R D ,   V 3 4 ,   P 3 ;   L u t h e r   J . ,   2 0 0 0 ,   W H I T E   P A P E R   E L E C T   J ;   M A C R O B E R T S   M H ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 3 0 5 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - I ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   M a y r   P ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 1 2 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 5 9 4 0 ;   M c D o n a l d   J D ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 3 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 2 0 ;   M e a d o w s   J ,   2 0 0 5 ,   I N T E R L E N D   D O C   S U P P L Y ,   V 3 3 ,   P 9 0 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 1 0 5 0 6 0 2 6 2 8 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M o b a s h e r   B . ,   2 0 0 1 ,   P   3   I N T   W O R K S H   W E B   I ,   P 9 ;   M o e d   H F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 0 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 6 3 ;   M o e d   H F ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 0 0 ;   M o e d   H F ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 3 8 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 7 5 ;   M o y a - A n e g o n   F . ,   2 0 0 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 8 ,   P 2 1 6 7 ,   D O I   D O I   1 0 . 1 0 0 2 / A S I . 2 0 6 8 3 ;   N i c h o l a s   D ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 4 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 4 ;   N o r r i s   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 9 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 9 8 ;   P a n   E . ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ,   P 2 9 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 0 2 n 0 1 _ 0 3 ;   P A R K E R   R H ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 1 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 3 0 3 0 4 ;   P e t e r s   T ,   2 0 0 2 ,   N E W   L I B   W O R L D ,   V 1 0 3 ,   P 3 9 ,   D O I   1 0 . 1 1 0 8 / 0 3 0 7 4 8 0 0 2 1 0 4 1 5 0 5 0 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P i r o l l i   P .   L .   T . ,   1 9 9 9 ,   W o r l d   W i d e   W e b ,   V 2 ,   P 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 2 8 8 4 0 3 8 2 3 ;   P R I C E   D J D ,   1 9 6 5 ,   N A T U R E ,   V 2 0 6 ,   P 2 3 3 ,   D O I   1 0 . 1 0 3 8 / 2 0 6 2 3 3 a 0 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   R I C E   B A ,   1 9 7 9 ,   S E R I A L S   L I B R ,   V 4 ,   P 3 5 ;   R o d r i g u e z   M A ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   7 T H   A C M / I E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P 2 7 8 ,   D O I   1 0 . 1 1 4 5 / 1 2 5 5 1 7 5 . 1 2 5 5 2 2 9 ;   R o s v a l l   M ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 1 1 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 6 8 5 1 1 0 5 ;   R o w l a n d s   I ,   2 0 0 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 9 ,   P 3 6 9 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 7 . 0 3 . 0 0 5 ;   R o w l a n d s   I ,   2 0 0 7 ,   A S L I B   P R O C ,   V 5 9 ,   P 2 2 2 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 7 1 0 7 5 2 0 2 5 ;   S a k a   A ,   2 0 0 7 ,   I E E E   I N T   C O N F   I N F   V I ,   P 4 5 3 ;   S C A L E S   P A ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 1 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 2 ;   S H A P I R O   F R ,   2 0 0 6 ,   Y A L E   B O O K   Q U O T A T I O N S ;   S h e p h e r d   P . T . ,   2 0 0 7 ,   S E R I A L S ,   V 2 0 ,   P 1 1 7 ,   D O I   1 0 . 1 6 2 9 / 2 0 1 1 7 ;   S i n g h   V . ,   2 0 0 7 ,   A R X I V   C O M P U T E R   S C I ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S t a n k u s   T o n y ,   1 9 8 2 ,   C O L L E C T I O N   M A N A G E M E N ,   V 4 ,   P 9 5 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 0 4 n 0 1 _ 0 7 ;   S z a l a y   A ,   2 0 0 6 ,   N A T U R E ,   V 4 4 0 ,   P 4 1 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 0 4 1 3 a ;   S z a l a y   A ,   2 0 0 1 ,   S C I E N C E ,   V 2 9 3 ,   P 2 0 3 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 3 . 5 5 3 7 . 2 0 3 7 ;   T e n o p i r   C ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 7 8 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 6 7 ;   T e n o p i r   C . ,   2 0 0 7 ,   U S A G E   S T A T   E   S E R I A L S ,   P 5 9 ;   T o n t a   Y A ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 8 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 1 4 ;   T r i m b l e   V ,   2 0 0 7 ,   S P A C E   S C I   R E V ,   V 1 3 2 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 2 1 4 - 0 0 7 - 9 2 2 4 - 0 ;   T r i m b l e   V ,   2 0 0 6 ,   P U B L   A S T R O N   S O C   P A C ,   V 1 1 8 ,   P 9 4 7 ,   D O I   1 0 . 1 0 8 6 / 5 0 6 1 5 7 ;   T s a y   M Y ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 2 8 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 2 8 3 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - I ;   T s a y   M Y ,   1 9 9 8 ,   B   M E D   L I B R   A S S O C ,   V 8 6 ,   P 3 1 ;   V a n   d e   S o m p e l   H e r b e r t ,   2 0 0 3 ,   D   L I B   M A G A Z I N E ,   V 9 ;   B e i t - A r i e   O . ,   2 0 0 1 ,   D   L I B   M A G A Z I N E ,   V 7 ;   W a l t e r   P L ,   1 9 9 6 ,   B   M E D   L I B R   A S S O C ,   V 8 4 ,   P 4 6 1 ;   W a n g   P L ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 5 3 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   Y o r k   D G ,   2 0 0 0 ,   A S T R O N   J ,   V 1 2 0 ,   P 1 5 7 9 ,   D O I   1 0 . 1 0 8 6 / 3 0 1 5 1 3 	 1 7 0 	 2 6 	 2 6 	 7 	 4 9 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 0 0 6 6 - 4 2 0 0 	 	 	 A N N U   R E V   I N F O R M   S C I 	 A n n u .   R e v .   I n f o r m .   S c i .   T e c h n o l . 	 	 2 0 1 0 	 4 4 	 	 	 	 	 	 3 	 6 4 	 	 	 	 6 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 1 8 X K 	 W O S : 0 0 0 2 9 4 7 8 9 8 0 0 0 0 2 	 	 
 
 J 	 S m i t h ,   D R ;   H a z e l t o n ,   M 	 	 	 	 S m i t h ,   D e r e k   R . ;   H a z e l t o n ,   M i c h a e l 	 	 	 B i b l i o m e t r i c s ,   c i t a t i o n   i n d e x i n g ,   a n d   t h e   j o u r n a l s   o f   n u r s i n g 	 N U R S I N G   &   H E A L T H   S C I E N C E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   i n d e x i n g ;   i m p a c t   f a c t o r s ;   n u r s i n g   r e s e a r c h ;   p u b l i s h i n g 	 I M P A C T   F A C T O R S ;   E P I S T E M I C   O R I G I N S ;   A L L I E D   H E A L T H ;   S C I E N C E ;   N U R S E S ;   E D U C A T I O N ;   R E T H I N K I N G ;   E V O L U T I O N ;   M O D E L S ;   T R E N D S 	 B i b l i o m e t r i c   r e s e a r c h   h a s   r i s e n   i n   p o p u l a r i t y   d u r i n g   r e c e n t   y e a r s   a n d   a n   i n c r e a s i n g   n u m b e r   o f   i n v e s t i g a t i o n s   n o w   h a v e   e x a m i n e d   t h e   n u r s i n g   l i t e r a t u r e .   O u r   a r t i c l e   p r o v i d e s   a   c o m p r e h e n s i v e   o v e r v i e w   o f   c i t a t i o n - b a s e d   r e s e a r c h   i n   t h e   n u r s i n g   p r o f e s s i o n ,   a s   w e l l   a s   a   d i s c u s s i o n   o f   b i b l i o m e t r i c s ,   j o u r n a l   i m p a c t   f a c t o r s ,   a n d   i n t e r n a t i o n a l   p u b l i s h i n g   t r e n d s .   T h e   d e b a t e   o n   e v i d e n c e - b a s e d   p r a c t i c e   a n d   i t s   p o t e n t i a l   i n f l u e n c e   a n d   r e l e v a n c e   f o r   n u r s i n g   s c h o l a r s   i s   a l s o   c o v e r e d .   A l t h o u g h   j o u r n a l   p e r f o r m a n c e   i n d i c a t o r s   a r e ,   n o   d o u b t ,   i m p o r t a n t   f o r   t h e   c o n t e m p o r a r y   n u r s i n g   a c a d e m i c ,   i t   i s   t h e   c o r e   r e s e a r c h   s k i l l s   a n d   a t t r i b u t e s   t h a t   n u r s i n g   s c h o l a r s ,   a c a d e m i c s ,   a n d   e d u c a t o r s   w i l l   n e e d   t o   c o n s i d e r   m o r e   c a r e f u l l y   i n   f u t u r e   i f   t h e   n e x t   g e n e r a t i o n   o f   p r o f e s s i o n a l   n u r s e   r e s e a r c h e r s   i s   t o   t r u l y   f l o u r i s h . 	 [ S m i t h ,   D e r e k   R . ]   U n i v   N e w c a s t l e ,   F a c   H l t h ,   S c h   H l t h   S c i ,   W o r k C o v e r   N e w   S   W a l e s   R e s   C t r   E x c e l l e n c e ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a ;   [ H a z e l t o n ,   M i c h a e l ]   U n i v   N e w c a s t l e ,   F a c   H l t h ,   S c h   N u r s i n g   &   M i d w i f e r y ,   N e w c a s t l e ,   N S W   2 3 0 8 ,   A u s t r a l i a 	 S m i t h ,   D R   ( r e p r i n t   a u t h o r ) ,   U n i v   N e w c a s t l e ,   F a c   H l t h ,   S c h   H l t h   S c i ,   W o r k C o v e r   N e w   S   W a l e s   R e s   C t r   E x c e l l e n c e ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a . 	 d e r e k . s m i t h @ n e w c a s t l e . e d u . a u 	 S m i t h ,   D e r e k / F - 4 8 4 4 - 2 0 1 0 ;   H A Z E L T O N ,   M I C H A E L / G - 7 4 4 0 - 2 0 1 3 ;   	 S m i t h ,   D e r e k / 0 0 0 0 - 0 0 0 2 - 8 2 0 2 - 2 5 2 3 	 	 	 A l l e n   M a r g a r e t   P e g ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 4 3 ;   A l l e n   M P ,   2 0 0 6 ,   J   M E D   L I B R   A S S O C ,   V 9 4 ,   P 2 0 6 ;   A l l i s o n   M e l o d y   M ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 7 4 ;   A l p i   K r i s t i n e   M ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 1 0 7 ;   A l p i   K r i s t i n e   M ,   2 0 0 7 ,   J   M e d   L i b r   A s s o c ,   V 9 5 ,   p e 6 ;   A t k i n s   J ,   1 9 9 0 ,   A A O H N   J ,   V 3 8 ,   P 5 6 0 ;   B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B E A T T Y   W K ,   1 9 5 9 ,   N U R S   O U T L O O K ,   V 7 ,   P 5 6 9 ;   B e c k s t e a d   J W ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r t s u . 2 0 0 4 . 0 9 . 0 2 1 ;   B i n g e r   J   L ,   1 9 7 9 ,   N u r s e   E d u c ,   V 4 ,   P 1 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 2 2 3 - 1 9 7 9 0 5 0 0 0 - 0 0 0 0 4 ;   B j o r n   A ,   2 0 0 8 ,   I N T   N U R S   R E V ,   V 5 5 ,   P 2 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 6 1 1 . x ;   B o r b a s i   S ,   2 0 0 2 ,   J   A D V   N U R S ,   V 3 8 ,   P 4 8 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 2 . 0 2 2 1 0 . x ;   B R E N N E R   S H ,   1 9 8 9 ,   B   M E D   L I B R   A S S O C ,   V 7 7 ,   P 3 6 6 ;   B u r n h a m   J u d y ,   1 9 9 3 ,   M e d i c a l   R e f e r e n c e   S e r v i c e s   Q u a r t e r l y ,   V 1 2 ,   P 4 5 ,   D O I   1 0 . 1 3 0 0 / J 1 1 5 V 1 2 N 0 3 _ 0 4 ;   C a r r o l l - J o h n s o n   R o s e   M a r y ,   2 0 0 4 ,   I n t   J   N u r s   T e r m i n o l   C l a s s i f ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 4 - 6 1 8 X . 2 0 0 4 . t b 0 0 0 0 6 . x ;   C e c i l   R ,   2 0 0 6 ,   J   C L I N   N U R S ,   V 1 5 ,   P 3 9 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 0 2 . 2 0 0 6 . 0 1 3 5 3 . x ;   C o p p   L   A ,   1 9 8 8 ,   J   P r o f   N u r s ,   V 4 ,   P 3 9 3 ,   D O I   1 0 . 1 0 1 6 / S 8 7 5 5 - 7 2 2 3 ( 8 8 ) 8 0 0 8 2 - 6 ;   D I C E N S O   A ,   2 0 0 0 ,   E V I D   B A S E D   N U R S ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 3 6 / e b n . 3 . 1 . 7 ;   D o r n i k   E ,   2 0 0 5 ,   N U R S   E D U C   T O D A Y ,   V 2 5 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / j . n e d t . 2 0 0 5 . 0 1 . 0 0 5 ;   D o y l e   A ,   1 9 3 3 ,   A M   J   N U R S ,   V 3 3 ,   P 7 6 5 ,   D O I   1 0 . 2 3 0 7 / 3 4 1 1 7 5 8 ;   E s t a b r o o k s   C A ,   2 0 0 4 ,   N U R S   R E S ,   V 5 3 ,   P 2 9 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 4 0 9 0 0 0 - 0 0 0 0 3 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F I S H E L   C ,   1 9 9 0 ,   B   M E D   L I B R   A S S O C ,   V 7 8 ,   P 7 2 ;   F r i e d m a n   Y e l e n a ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 4 9 ;   G a l g a n s k i   C a r o l   J ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 8 7 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E . ,   1 9 8 4 ,   E S S A Y S   I N F O R M   S C I ,   V 7 ,   P 3 3 6 ;   G a r f i e l d   E ,   2 0 0 7 ,   I N T   M I C R O B I O L ,   V 1 0 ,   P 6 5 ,   D O I   1 0 . 2 4 3 6 / 2 0 . 1 5 0 1 . 0 1 . 1 0 ;   H u a n g   Y a - L i ,   2 0 0 6 ,   J   N u r s   R e s ,   V 1 4 ,   P 7 5 ;   I r o n s i d e   P M ,   2 0 0 7 ,   J   G E R O N T O L   N U R S ,   V 3 3 ,   P 3 ;   I r o n s i d e   P M ,   2 0 0 7 ,   J   N U R S   E D U C ,   V 4 6 ,   P 9 9 ;   J a i r a t h   N ,   2 0 0 7 ,   N U R S   R E S ,   V 5 6 ,   P 3 6 7 ,   D O I   1 0 . 1 0 9 7 / 0 1 . N N R . 0 0 0 0 2 9 9 8 4 7 . 4 4 8 0 6 . 1 a ;   J O H N S O N   E D ,   1 9 8 9 ,   B   M E D   L I B R   A S S O C ,   V 7 7 ,   P 1 7 6 ;   J O H N S O N   M B ,   1 9 9 0 ,   R E S   N U R S   H E A L T H ,   V 1 3 ,   P 1 2 9 ,   D O I   1 0 . 1 0 0 2 / n u r . 4 7 7 0 1 3 0 2 0 9 ;   J O H N S O N   M N ,   1 9 7 5 ,   I N T   N U R S   R E V ,   V 2 2 ,   P 1 4 7 ;   J o h n s t o n e   M J ,   2 0 0 7 ,   I N T   N U R S   R E V ,   V 5 4 ,   P 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 5 2 7 . x ;   K i n g   T L ,   2 0 0 8 ,   J   M I D W I F E R Y   W O M   H E A L ,   V 5 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j m w h . 2 0 0 7 . 1 1 . 0 1 0 ;   L o k   C K W ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 4 ,   P 2 2 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 8 . x ;   M A R S T O N   M V ,   1 9 7 0 ,   N U R S   R E S ,   V 1 9 ,   P 3 1 2 ;   M A R S T O N S C O T T   M V ,   1 9 8 5 ,   B E H A V   S C I ,   V 4 6 ,   P 2 0 ;   M A R S T O N S C O T T   M V ,   1 9 8 4 ,   C U R R   C O N T E N T S ,   V 4 ,   P 3 6 4 ;   M c K i b b o n   K a t h l e e n   A n n ,   2 0 0 4 ,   B M C   M e d   I n f o r m   D e c i s   M a k ,   V 4 ,   P 1 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 4 - 1 1 ;   M e a d o w s   J ,   2 0 0 5 ,   I N T E R L E N D   D O C   S U P P L Y ,   V 3 3 ,   P 9 0 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 1 0 5 0 6 0 2 6 2 8 ;   M e l b y   C a r o l y n   S ,   2 0 0 6 ,   N u r s   H e a l t h   S c i ,   V 8 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 6 . 0 0 2 6 8 . x ;   M e l b y   C a r o l y n   S ,   2 0 0 5 ,   N u r s   H e a l t h   S c i ,   V 7 ,   P 2 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 5 . 0 0 2 5 0 . x ;   M u r p h y   S h a r o n   C ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 1 4 3 ;   O ' N e i l l   A L ,   2 0 0 0 ,   N U R S   R E S ,   V 4 9 ,   P 2 2 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 0 0 7 0 0 0 - 0 0 0 0 6 ;   O e r m a n n   M a r i l y n   H ,   2 0 0 7 ,   P e d i a t r   N u r s ,   V 3 3 ,   P 3 8 7 ;   O e r m a n n   M H ,   2 0 0 8 ,   I N T   J   N U R S   S T U D ,   V 4 5 ,   P 5 8 0 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 6 . 1 0 . 0 0 5 ;   O e r m a n n   M H ,   2 0 0 8 ,   J   C L I N   N U R S ,   V 1 7 ,   P 1 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 0 2 . 2 0 0 7 . 0 1 9 7 5 . x ;   P a r d o   C ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 5 ,   P 9 3 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 9 3 1 . x ;   R o b i n s o n   J J A ,   2 0 0 7 ,   I N T   N U R S   R E V ,   V 5 4 ,   P 2 0 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 5 9 3 . x ;   S c h l o m a n   B F ,   1 9 9 9 ,   B   M E D   L I B R   A S S O C ,   V 8 7 ,   P 2 7 6 ;   S c h l o m a n   B F ,   1 9 9 7 ,   B   M E D   L I B R   A S S O C ,   V 8 5 ,   P 2 7 1 ;   S C H N E I D E R   Z ,   2 0 0 7 ,   N U R S I N G   M I D W I F E R Y   R E ,   P 3 ;   S e a t o n   H e l e n   J ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 8 0 ;   S h a m s   M a r i e - L i s e   A n t o u n ,   2 0 0 7 ,   J   M e d   L i b r   A s s o c ,   V 9 5 ,   p e 1 ;   S k i n n e r   K ,   1 9 8 9 ,   J   C o n t i n   E d u c   N u r s ,   V 2 0 ,   P 1 7 0 ;   S m i t h   D R ,   2 0 0 8 ,   O C C U P   M E D - O X F O R D ,   V 5 8 ,   P 8 0 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / k q m 1 5 4 ;   S m i t h   D R ,   2 0 0 8 ,   C O N T A C T   D E R M A T I T I S ,   V 5 8 ,   P 1 9 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 5 3 6 . 2 0 0 8 . 0 1 3 3 0 . x ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 3 0 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 3 0 ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 1 7 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 1 7 ;   S m i t h   J P ,   1 9 9 6 ,   J   A D V   N U R S ,   V 2 4 ,   P 1 ;   S m i t h   R ,   2 0 0 6 ,   I N T   J   E P I D E M I O L ,   V 3 5 ,   P 1 1 2 9 ,   D O I   1 0 . 1 0 9 3 / i j e / d y l 1 9 1 ;   S p a s s e r   M a r k   A ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 1 3 7 ;   S t y l e s   M   M ,   1 9 7 8 ,   I m a g e   ( I N ) ,   V 1 0 ,   P 2 8 ;   T a y l o r   M a r y   K ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 1 2 8 ;   T a y l o r   M a r y   K ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 6 5 ;   T e s t a   J ,   2 0 0 6 ,   I N T   M I C R O B I O L ,   V 9 ,   P 1 3 5 ;   T h o m p s o n   D a v i d   R ,   2 0 0 3 ,   N u r s   I n q ,   V 1 0 ,   P 1 4 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 8 0 0 . 2 0 0 3 . 0 0 1 7 5 . x ;   T I L L Y   S ,   2 0 0 5 ,   P S Y C H I A T   M E N T A L   H L T H ;   T r a y n o r   M ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 4 ,   P 2 1 2 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 7 . x ;   U r q u h a r t   C ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 5 . 1 0 . 0 0 2 ;   V a z   D ,   1 9 8 6 ,   J   C o n t i n   E d u c   N u r s ,   V 1 7 ,   P 2 2 ;   W H I T E   J ,   2 0 0 0 ,   C O N T E X T S   N U R S I N G ,   P 1 ,   D O I   1 0 . 1 1 0 9 / C L E O E . 2 0 0 0 . 9 1 0 0 9 6 ;   W i l k e s   L e s l e y ,   2 0 0 2 ,   A u s t   J   A d v   N u r s ,   V 1 9 ,   P 1 5 	 7 7 	 2 6 	 2 7 	 3 	 1 6 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 4 4 1 - 0 7 4 5 	 	 	 N U R S   H E A L T H   S C I 	 N u r s .   H e a l t h   S c i . 	 D E C 	 2 0 0 8 	 1 0 	 4 	 	 	 	 	 2 6 0 	 2 6 5 	 	 1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 8 . 0 0 4 1 4 . x 	 	 6 	 N u r s i n g 	 N u r s i n g 	 3 6 9 C W 	 W O S : 0 0 0 2 6 0 6 7 2 1 0 0 0 0 6 	 1 9 1 2 8 3 0 1 	 
 
 J 	 K a r l s s o n ,   S ;   S r e b o t n j a k ,   T ;   G o n z a l e s ,   P 	 	 	 	 K a r l s s o n ,   S y l v i a ;   S r e b o t n j a k ,   T a n j a ;   G o n z a l e s ,   P a t r i c i a 	 	 	 U n d e r s t a n d i n g   t h e   N o r t h - S o u t h   k n o w l e d g e   d i v i d e   a n d   i t s   i m p l i c a t i o n s   f o r   p o l i c y :   a   q u a n t i t a t i v e   a n a l y s i s   o f   t h e   g e n e r a t i o n   o f   s c i e n t i f i c   k n o w l e d g e   i n   t h e   e n v i r o n m e n t a l   s c i e n c e s 	 E N V I R O N M E N T A L   S C I E N C E   &   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e n v i r o n m e n t a l   s c i e n c e ;   k n o w l e d g e   d i v i d e ;   b i b l i o m e t r i c s   e c o - c l i m a t i c   z o n e s ;   e n v i r o n m e n t a l   p o l i c y 	 D E V E L O P I N G - C O U N T R I E S ;   P E R S P E C T I V E ;   I N F O R M A T I O N ;   I M P A C T 	 T h e   p a p e r   i n v e s t i g a t e s   t h e   s c i e n t i f i c   k n o w l e d g e   d i v i d e   i n   t h e   e n v i r o n m e n t a l   s c i e n c e s   b e t w e e n   d e v e l o p e d   a n d   d e v e l o p i n g   c o u n t r i e s   a n d   e x p l o r e s   t h e   i m p l i c a t i o n s   a n d   i m p a c t s   o n   b o t h   s c i e n c e   a n d   p o l i c y r n a k i n g .   Q u a n t i t a t i v e   d a t a   a n a l y s i s   o f   m o r e   t h a n   6 4 0 0   s c i e n t i f i c   p a p e r s   p u b l i s h e d   i n   1 9 9 3 - 2 0 0 3   y i e l d   e v i d e n c e   f o r   a   g r o w i n g   d i v i d e   i n   a u t h o r s h i p ,   p u b l i c a t i o n   r a t e s ,   a n d   l o c a t i o n   o f   s c i e n t i f i c   r e s e a r c h   i n   n i n e   e n v i r o n m e n t a l   j o u r n a l s   w i t h   h i g h   i m p a c t   f a c t o r   r a t i n g s .   I n   a d d i t i o n   t o   t h i s   s e v e r e   i m b a l a n c e   i n   p u b l i c a t i o n   r a t e s   b e t w e e n   d e v e l o p e d   a n d   d e v e l o p i n g   c o u n t r i e s ,   w e   a l s o   f i n d   a   r e s e a r c h   b i a s   t o w a r d   c e r t a i n   e c o - c l i m a t i c   z o n e s .   M o r e   t h a n   8 0 %   o f   p a p e r s   a r e   p u b l i s h e d   i n   a n d   a b o u t   t e m p e r a t e   a n d   c o l d   e c o - c l i m a t i c   z o n e s .   O n l y   1 3 %   o f   t h e   p a p e r s   i n   o u r   s t u d y   a r e   b a s e d   o n   r e s e a r c h   i n   t h e   d r y   s u b - t r o p i c a l   a n d   t r o p i c a l   z o n e s ,   a l t h o u g h   t h e s e   e c o - c l i m a t i c   z o n e s   a c c o u n t   f o r   m o r e   t h a n   5 2 %   o f   t h e   w o r l d ' s   l a n d   a r e a .   B a s e d   o n   t h e s e   r e s u l t s ,   w e   d i s c u s s   h o w   t h e   l i m i t e d   e m p i r i c a l   s o u r c e   a n d   f o c u s   o f   e n v i r o n m e n t a l   r e s e a r c h   u n d e r m i n e   t h e   c l a i m s   o f   u n i v e r s a l i t y   o f   e n v i r o n m e n t a l   s c i e n c e   a n d   w h a t   c o n s e q u e n c e s   t h i s   m a y   h a v e   o n   p o l i c y m a k i n g   p r o c e s s e s   a t   d i f f e r e n t   l e v e l s .   F i n a l l y ,   w e   b r i e f l y   e x p l o r e   s o m e   s h o r t -   a n d   l o n g - t e r m   s t r a t e g i e s   t o   a d d r e s s   t h e   k n o w l e d g e   d i v i d e .   ( c )   2 0 0 7   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 Y a l e   U n i v ,   Y a l e   S c h   F o r e s t r y   &   E n v i r o n m   S t u d i e s ,   N e w   H a v e n ,   C T   0 6 5 1 1   U S A ;   T u r k u   S c h   E c o n   &   B u s i n e s s   A d m ,   F i n l a n d   F u t u r e s   R e s   C t r ,   T a m p e r e   3 3 5 0 0 ,   F i n l a n d ;   Y a l e   U n i v ,   O f f   D e v ,   N e w   H a v e n ,   C T   0 6 5 1 1   U S A 	 S r e b o t n j a k ,   T   ( r e p r i n t   a u t h o r ) ,   Y a l e   U n i v ,   Y a l e   S c h   F o r e s t r y   &   E n v i r o n m   S t u d i e s ,   N e w   H a v e n ,   C T   0 6 5 1 1   U S A . 	 T a n j a . S r e b o t n j a k @ Y a l e . e d u 	 K a r l s s o n - V i n k h u y z e n ,   S y l v i a / C - 4 8 8 9 - 2 0 0 9 	 K a r l s s o n - V i n k h u y z e n ,   S y l v i a / 0 0 0 0 - 0 0 0 1 - 7 6 3 2 - 8 5 4 5 	 	 	 S h a r m a   A . ,   1 9 9 9 ,   G R E E N   P O L I T I C S ;   A n n a n   K ,   2 0 0 3 ,   S C I E N C E ,   V 2 9 9 ,   P 1 4 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 9 . 5 6 1 2 . 1 4 8 5 ;   A r u n a c h a l a m   S ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 4 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 9 9 4 2 3 2 9 2 7 ;   B A L D A C C I   E ,   2 0 0 4 ,   S O C I A L   S P E N D I N G   H U M A ;   B A L D A C C I   E ,   2 0 0 5 ,   F I N A N   D E V ,   V 4 2 ;   B O U R D E A U   P ,   1 9 8 9 ,   E C O T O X I C O L O G Y   C L I M A T ;   B R A C O N I E R   H ,   1 9 9 8 ,   E S S A Y S   R   D   G R O W T H ;   * C O M M   D E V   C O U N T R   G ,   1 9 9 2 ,   E A R T H S   S A K   R E P   C O M M ;   C o u l o m b e   S . ,   2 0 0 4 ,   L I T E R A C Y   S C O R E S   H U M A ;   D o r e   J C ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 5 8 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 8 ) 4 7 : 8 < 5 8 8 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - P ;   * E N C   B R I T ,   2 0 0 6 ,   E N C   B R I T   O N L   2 0 0 6 ;   E s t y   D .   C . ,   2 0 0 5 ,   E N V   S U S T A I N A B I L I T Y   I ;   F O R E R O P I N E D A   C ,   2 0 0 2 ,   I N T   J   S O C I A L   S C I ,   V 1 7 1 ,   P 1 2 9 ;   F O R E S T   J J ,   2 0 0 3 ,   4 4   A N N   I S A   C O N V   P O R T ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 6 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 5 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G r a h a m   L .   R . ,   1 9 8 1 ,   S C I   V A L U E S ;   G u p t a   J . ,   2 0 0 0 ,   I N T   J   S U S T   D E V   W O R L D ,   V 3 ,   P 1 1 5 ,   D O I   1 0 . 1 5 0 4 / I J S D . 2 0 0 0 . 0 0 1 5 2 7 ;   G U T M A N   P ,   1 9 9 4 ,   S O C   N A T U R   R E S O U R ,   V 7 ,   P 3 8 9 ,   D O I   1 0 . 1 0 8 0 / 0 8 9 4 1 9 2 9 4 0 9 3 8 0 8 7 4 ;   H A S S A N   M H A ,   2 0 0 1 ,   S C I E N C E ,   V 2 9 2 ;   H o l m g r e n   M ,   2 0 0 4 ,   P L O S   B I O L ,   V 2 ,   P 1 0 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 2 0 0 0 1 ;   H o o d   W W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 8 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 2 . 4 7 1 1 5 . c 6 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   * I N T   D E V   R E S   C T R ,   1 9 9 1 ,   S C I   R E V ,   V 1 6 ,   P 3 3 7 ;   H a m p s o n   O . ,   1 9 9 6 ,   E A R T H L Y   G O O D S   E N V   C H ,   P 1 7 3 ;   K a n d l i k a r   M ,   1 9 9 9 ,   G L O B A L   E N V I R O N   C H A N G ,   V 9 ,   P 1 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 3 7 8 0 ( 9 8 ) 0 0 0 3 3 - 8 ;   K A R L S S O N   S ,   2 0 0 2 ,   G L O B A L   E N V   G O V   O P T I O ;   K a r l s s o n   S .   I . ,   2 0 0 4 ,   I n t e r n a t i o n a l   E n v i r o n m e n t a l   A g r e e m e n t s :   P o l i t i c s ,   L a w   a n d   E c o n o m i c s ,   V 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / B : I N E A . 0 0 0 0 0 4 0 4 2 0 . 6 1 8 8 3 . 7 d ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   L a c h e r   T E ,   1 9 9 7 ,   E N V I R O N   T O X I C O L   C H E M ,   V 1 6 ,   P 1 0 0 ,   D O I   1 0 . 1 8 9 7 / 1 5 5 1 - 5 0 2 8 ( 1 9 9 7 ) 0 1 6 < 0 1 0 0 : T E S A N > 2 . 3 . C O ; 2 ;   M C L E O N   R ,   1 9 8 1 ,   S C I   C O L O N I A L I S M   C R O S ,   P 2 1 7 ;   P a t e l   V ,   2 0 0 1 ,   B R I T   J   P S Y C H I A T ,   V 1 7 8 ,   P 4 0 6 ,   D O I   1 0 . 1 1 9 2 / b j p . 1 7 8 . 5 . 4 0 6 ;   P o m e r o y   D . ,   1 9 8 6 ,   T R O P I C A L   E C O L O G Y ;   S e g u i n   B ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 2 ,   P 1 6 0 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 6 3 2 5 ;   S E R A G E L D I N   I ,   1 9 9 8 ,   O R G   K N O W L E D G E   E N V   S O ,   P 4 3 ;   S h i l s   E ,   1 9 8 8 ,   C T R   I D E A S   I ,   P 2 5 0 ;   S h i l s   E .   A . ,   1 9 7 2 ,   I N T E L L E C T U A L S   P O W E R S ;   S H R A D E R F R E C H E T T . K S ,   1 9 9 1 ,   R I C K   R A T I O N A L I T Y   P H I ;   S t e i n b e r g   P .   F . ,   2 0 0 1 ,   T R A N S N A T I O N A L   R E L A T I ;   * T H O M P S   C O R P ,   2 0 0 5 ,   J   C I T   R E P ;   T o m l i n s o n   M ,   2 0 0 3 ,   I N F   M E N T A L   H L T H   J ,   V 2 4 ,   P 5 4 7 ,   D O I   1 0 . 1 0 0 2 / i m h j . 1 0 0 7 8 ;   * U N   S Y S T   W I D   E A R T H ,   2 0 0 6 ,   I N T   E X P   M   I N F   D E C   M A ;   * U N S D ,   2 0 0 6 ,   C O U N T R   A R   C O D   A B B R   U ;   U z u n   A ,   2 0 0 2 ,   I N T   I N F   L I B R   R E V ,   V 3 4 ,   P 2 1 ,   D O I   1 0 . 1 0 0 6 / i i l r . 2 0 0 2 . 0 1 8 2 ;   W a t e s   J . ,   2 0 0 5 ,   J   E U R   E N V   P L A N N   L A W ,   V 2 ;   W e s t h o l m   G . ,   2 0 0 4 ,   W O R L D   S C I ,   V 2 ,   P 2 ;   * W I K   C O N T R ,   2 0 0 6 ,   L I S T   C O U N T R   E N G L   O F F ;   * W I P O ,   2 0 0 6 ,   W O R L D   I N T   P R O P   O R G   2 ;   W o r l d   B a n k ,   2 0 0 5 ,   W O R L D   D E V   I N D   2 0 0 5 ;   Y e a r l e y   S . ,   1 9 9 6 ,   S O C I O L O G Y   E N V   G L O B A L 	 5 0 	 2 6 	 2 6 	 0 	 8 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 1 4 6 2 - 9 0 1 1 	 	 	 E N V I R O N   S C I   P O L I C Y 	 E n v i r o n .   S c i .   P o l i c y 	 N O V - D E C 	 2 0 0 7 	 1 0 	 7 - 8 	 	 	 	 	 6 6 8 	 6 8 4 	 	 1 0 . 1 0 1 6 / j . e n v s c i . 2 0 0 7 . 0 4 . 0 0 1 	 	 1 7 	 E n v i r o n m e n t a l   S c i e n c e s 	 E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y 	 2 3 6 L Z 	 W O S : 0 0 0 2 5 1 3 0 5 8 0 0 0 0 8 	 	 
 
 J 	 K o s t o f f ,   R N ;   B r i g g s ,   M B ;   R u s h e n b e r g ,   R L ;   B o w l e s ,   C A ;   P e c h t ,   M ;   J o h n s o n ,   D ;   B h a t t a c h a r y a ,   S ;   I c e n h o u r ,   A S ;   N i k o d y m ,   K ;   B a r t h ,   R B ;   D o d b e l e ,   S 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   B r i g g s ,   M i c h a e l   B . ;   R u s h e n b e r g ,   R o b e r t   L . ;   B o w l e s ,   C h r i s t i n e   A . ;   P e c h t ,   M i c h a e l ;   J o h n s o n ,   D u s t i n ;   B h a t t a c h a r y a ,   S u j i t ;   I c e n h o u r ,   A l a n   S . ;   N i k o d y m ,   K i m b e r l y ;   B a r t h ,   R y a n   B . ;   D o d b e l e ,   S i m h a 	 	 	 C o m p a r i s o n s   o f   t h e   s t r u c t u r e   a n d   i n f r a s t r u c t u r e   o f   C h i n e s e   a n d   I n d i a n   S c i e n c e   a n d   T e c h n o l o g y 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I n d i a ;   C h i n a ;   s c i e n c e   a n d   t e c h n o l o g y ;   t e c h n o l o g y   a s s e s s m e n t ;   r e s e a r c h   e v a l u a t i o n ;   t e x t   m i n i n g ;   b i b l i o m e t r i c s ;   c o m p u t a t i o n a l   l i n g u i s t i c s ;   c l u s t e r i n g ;   m e t r i c s 	 	 A   c o m p a r i s o n   w a s   m a d e   o f   t h e   r e s e a r c h   o u t p u t   l i t e r a t u r e s   o f   I n d i a   a n d   C h i n a .   B o t h   b i b l i o m e t r i c   a n d   c o m p u t a t i o n a l   l i n g u i s t i c s   a p p r o a c h e s   w e r e   u s e d   i n   t h e   c o m p a r i s o n .   C h i n a   h a s   r a p i d l y   o u t p a c e d   I n d i a   i n   b o t h   v o l u m e   a n d   c i t a t i o n   p e r f o r m a n c e   o f   p u b l i c a t i o n s .   C h i n a ' s   r a p i d   p u b l i c a t i o n   g r o w t h   r a t e   o v e r   t h e   p a s t   t w o   d e c a d e s   i s   c o n t i n u i n g ,   w h i l e   I n d i a ' s   i s   r e - s t a r t i n g   a f t e r   a   r e l a t i v e l y   d o r m a n t   p e r i o d   o f   a l m o s t   t w o   d e c a d e s .   P u b l i s h e d   b y   E l s e v i e r   I n c . 	 [ K o s t o f f ,   R o n a l d   N . ;   J o h n s o n ,   D u s t i n ;   I c e n h o u r ,   A l a n   S . ;   N i k o d y m ,   K i m b e r l y ;   D o d b e l e ,   S i m h a ]   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   [ B r i g g s ,   M i c h a e l   B . ]   M a r i n e   C o r p s   W a r f i g h t i n g   L a b ,   Q u a n t i c o ,   V A   2 2 1 3 4   U S A ;   [ R u s h e n b e r g ,   R o b e r t   L . ;   B o w l e s ,   C h r i s t i n e   A . ;   B a r t h ,   R y a n   B . ]   L L C ,   D D L   O M N I   E n g n ,   M c l e a n ,   V A   2 2 1 0 2   U S A ;   [ P e c h t ,   M i c h a e l ]   U n i v   M a r y l a n d ,   C o l l e g e   P k ,   M D   2 0 7 4 2   U S A ;   [ B h a t t a c h a r y a ,   S u j i t ]   N a t l   I n s t   S c i   T e c h n o l   &   D e v   S t u d i e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 P e c h t ,   M i c h a e l / 0 0 0 0 - 0 0 0 3 - 1 1 2 6 - 8 6 6 2 ;   I c e n h o u r ,   A l a n / 0 0 0 0 - 0 0 0 2 - 0 0 9 5 - 7 0 1 9 	 	 	 	 0 	 2 6 	 2 7 	 0 	 1 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 7 	 7 4 	 9 	 	 	 	 	 1 6 0 9 	 1 6 3 0 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 7 	 	 2 2 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 4 7 K Q 	 W O S : 0 0 0 2 5 2 0 7 8 2 0 0 0 0 4 	 	 
 
 J 	 H o l d e n ,   G ;   R o s e n b e r g ,   G ;   B a r k e r ,   K ;   O n g h e n a ,   P 	 	 	 	 H o l d e n ,   G a r y ;   R o s e n b e r g ,   G a r y ;   B a r k e r ,   K a t h l e e n ;   O n g h e n a ,   P a t r i c k 	 	 	 A n   a s s e s s m e n t   o f   t h e   p r e d i c t i v e   v a l i d i t y   o f   i m p a c t   f a c t o r   s c o r e s :   I m p l i c a t i o n s   f o r   a c a d e m i c   e m p l o y m e n t   d e c i s i o n s   i n   s o c i a l   w o r k 	 R E S E A R C H   O N   S O C I A L   W O R K   P R A C T I C E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 s c i e n t i f i c   c o m m u n i c a t i o n ;   d e c i s i o n   m a k i n g ;   p e r s o n n e l   p r o m o t i o n ;   p e r s o n n e l   s e l e c t i o n ;   t e a c h e r   t e n u r e ;   e d u c a t i o n a l   p e r s o n n e l ;   o c c u p a t i o n a l   t e n u r e ;   c a r e e r   d e v e l o p m e n t ;   h i g h e r   e d u c a t i o n ;   c i t a t i o n   a n a l y s i s ;   i m p a c t   f a c t o r   s c o r e s ;   v a l i d i t y ;   f a c u l t y ;   h i r i n g ;   r e a p p o i n t m e n t ;   s o c i a l   w o r k   e d u c a t i o n 	 E D I T O R I A L - B O A R D   M E M B E R S ;   C I T A T I O N   A N A L Y S I S ;   J O U R N A L   I M P A C T ;   B I B L I O M E T R I C   A N A L Y S I S ;   M U L T I P L E   A U T H O R S H I P ;   P O L I C Y   D I G E S T ;   S C I E N C E ;   Q U A L I T Y ;   P U B L I C A T I O N ;   A R T I C L E S 	 O b j e c t i v e :   B i b l i o m e t r i c s   i s   a   m e t h o d   o f   e x a m i n i n g   s c h o l a r l y   c o m m u n i c a t i o n s .   C o n c e r n s   r e g a r d i n g   t h e   u s e   o f   b i b l i o m e t r i c s   i n   g e n e r a l ,   a n d   t h e   i m p a c t   f a c t o r   s c o r e   ( I F S )   i n   p a r t i c u l a r   h a v e   b e e n   d i s c u s s e d   a c r o s s   d i s c i p l i n e s   i n c l u d i n g   s o c i a l   w o r k .   A l t h o u g h   t h e r e   a r e   f r e q u e n t   m e n t i o n s   i n   t h e   l i t e r a t u r e   o f   t h e   I F S   a s   a n   i n d i c a t o r   o f   t h e   i m p a c t   o r   q u a l i t y   o f   s c h o l a r s '   w o r k ,   l i t t l e   e m p i r i c a l   w o r k   h a s   b e e n   p u b l i s h e d   r e g a r d i n g   t h e   v a l i d i t y   o f   s u c h   u s e .   M e t h o d :   A   p r o p o r t i o n a t e ,   s t r a t i f i e d ,   r a n d o m   s a m p l e ,   o f   n   =   3 2 3   a r t i c l e s   w a s   s e l e c t e d   f r o m   1 7   W e b   o f   S c i e n c e   l i s t e d   s o c i a l   w o r k   j o u r n a l s   p u b l i s h e d   d u r i n g   t h e   1 9 9 2   t o   1 9 9 4   p e r i o d .   R e s u l t s :   T h e   r e l a t i o n s h i p   b e t w e e n   j o u r n a l s '   I F S s   a n d   t h e   a c t u a l   i m p a c t   o f   a r t i c l e s   p u b l i s h e d   i n   t h o s e   j o u r n a l s   ( p r e d i c t i v e   v a l i d i t y )   w a s   r   =   . 4 1   ( s h o r t   t e r m )   a n d   r   =   . 4 2   ( l o n g   t e r m ) .   C o n c l u s i o n :   T h e   p r a c t i c e   o f   u s i n g   t h e   I F S   a s   a   p r o x y   i n d i c a t o r   o f   a r t i c l e   i m p a c t   m e r i t s   s i g n i f i c a n t   c o n c e r n   a s   w e l l   a s   f u r t h e r   e m p i r i c a l   i n v e s t i g a t i o n . 	 N Y U ,   S c h   S o c i a l   W o r k ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A ;   C U N Y ,   M t   S i n a i   S c h   M e d ,   N e w   Y o r k ,   N Y   1 0 0 2 1   U S A ;   C U N Y   M e d g a r   E v e r s   C o l l ,   N e w   Y o r k ,   N Y   U S A ;   K a t h o l i e k e   U n i v   L e u v e n ,   B - 3 0 0 0   L o u v a i n ,   B e l g i u m 	 H o l d e n ,   G   ( r e p r i n t   a u t h o r ) ,   N Y U ,   S c h   S o c i a l   W o r k ,   R o o m   4 0 7 , M C   6 1 1 2 , 1   W a s h i n g t o n   S q   N ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A . 	 g a r y . h o l d e n @ n y u . e d u 	 H o l d e n ,   G a r y / A - 2 2 9 0 - 2 0 0 8 ;   	 H o l d e n ,   G a r y / 0 0 0 0 - 0 0 0 2 - 7 2 2 7 - 3 6 5 2 	 	 	 A B B A S I   K ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ;   A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A R O N O W I T Z   S ,   2 0 0 1 ,   K N O W L E D G E   F A C T O R Y   D I ;   B A K E R   D R ,   1 9 9 1 ,   J   S O C   W O R K   E D U C ,   V 2 7 ,   P 4 1 ;   B A K E R   D R ,   1 9 9 0 ,   S O C   W O R K   R E S   A B S T R ,   V 2 6 ,   P 3 ;   B a l a r a m   P ,   2 0 0 0 ,   C U R R   S C I   I N D I A ,   V 7 8 ,   P 1 1 7 7 ;   B a r k e r   K . ,   1 9 9 5 ,   C H A N G I N G   E M P L O Y M E N T ,   P 3 1 ,   D O I   1 0 . 1 0 3 7 / 1 0 1 8 5 - 0 0 2 ;   K o h o u t   J . ,   2 0 0 3 ,   P O R T A B L E   M E N T O R   E X P E ,   P 3 0 9 ;   B A R K E R   K ,   2 0 0 3 ,   S   1 9   E D I T I O N   E N C Y   S O ,   P 9 ;   B A R K E R   K ,   1 9 9 8 ,   C O N T I N G E N T   W O R K   A M   E ,   P 3 0 6 ;   B a r k e r   K . ,   1 9 9 8 ,   C O N T I N G E N T   W O R K   A M   E ,   P 1 9 5 ;   B a r k e r   K . ,   1 9 9 8 ,   C O N T I N G E N T   W O R K   A M   E ,   P 1 ;   B A R K E R   K ,   2 0 0 1 ,   C H I   T R I B                 1 2 2 1 ,   P 1 2 ;   B e c k   U . ,   2 0 0 0 ,   B R A V E   N E W   W O R L D   W O R K ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   D e l   F a v e r o   M . ,   2 0 0 2 ,   N E W   D I R E C T I O N S   I   R E S ,   V 2 0 0 2 ,   P 1 9 ;   B u r g a n   M ,   1 9 9 8 ,   A C A D E M E ,   V 8 4 ,   P 2 ;   C A M P L I N G   J ,   1 9 9 3 ,   J   S O C   P O L I C Y ,   V 2 2 ,   P 9 9 ;   C A M P L I N G   J ,   1 9 9 2 ,   J   S O C   P O L I C Y ,   V 2 1 ,   P 9 9 ;   C H R I S T E N S O N   J A ,   1 9 8 5 ,   S O C   S C I   Q U A R T ,   V 6 6 ,   P 9 6 4 ;   C N A A N   R A ,   1 9 9 4 ,   J   S O C   W O R K   E D U C ,   V 3 0 ,   P 1 8 5 ;   C o h e n   J ,   1 9 8 8 ,   S T A T   P O W E R   A N A L   B E H A ;   C O L E   J ,   1 9 7 1 ,   A M   S O C I O L ,   V 6 ,   P 2 3 ;   C O L E   J R ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 8 1 ;   C o l q u h o u n   D ,   2 0 0 3 ,   N A T U R E ,   V 4 2 3 ,   P 4 7 9 ,   D O I   1 0 . 1 0 3 8 / 4 2 3 4 7 9 a ;   D a h w a n   S .   M . ,   2 0 0 4 ,   C U R R E N T   S C I ,   V 8 6 ,   P 1 1 9 4 ;   D e c k e r   O ,   2 0 0 4 ,   S O Z   P R A V E N T I V   M E D ,   V 4 9 ,   P 1 0 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 3 8 - 0 0 3 - 2 1 0 8 - 5 ;   F a s s o u l a k i   A ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 5 3 ;   F a v a   G A ,   2 0 0 0 ,   P S Y C H O T H E R   P S Y C H O S O M ,   V 6 9 ,   P 2 8 5 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 1 2 4 0 9 ;   F i n k e l s t e i n   M .   J . ,   1 9 9 8 ,   N E W   A C A D   G E N E R A T I O N ;   F r a n k   M ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 ;   F U R R   L A ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 8 ;   G a r f i e l d   E ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 9 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 9 6 2 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - X ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 8 3 ,   C U R R   C O N T E N T S ,   V 4 5 ,   P 5 ;   G a r f i e l d   E . ,   2 0 0 3 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 3 ,   P 3 6 3 ;   G a s t e l   B ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 4 1 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   H a n s e n   H B ,   1 9 9 7 ,   C L I N   P H Y S I O L ,   V 1 7 ,   P 4 0 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 2 8 1 . 1 9 9 7 . 0 4 5 4 5 . x ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 2 9 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 9 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 1 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 6 7 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 3 ;   H O W A R D   M O ,   1 9 9 2 ,   J   S T U D   A L C O H O L ,   V 5 3 ,   P 4 2 7 ;   H U T C H E S O N   P ,   1 9 9 7 ,   N E A   H I G H E R   E D   J     F A L ,   P 8 9 ;   * I S I ,   2 0 0 3 ,   J   C I T   R E P ;   * I S I ,   2 0 0 4 ,   J   C I T   R E P ;   K a t z   J .   S y l v a n ,   1 9 9 9 ,   B I B L I O M E T R I C   I N D I C A T ;   K I R K   S A ,   1 9 8 4 ,   J   S O C I A L   S E R V I C E   R E S ,   V 7 ,   P 5 9 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 0 7 n 0 3 _ 0 5 ;   K o s t o f f   R N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 1 9 2 0 1 7 2 ;   K O S T O F F   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 ;   K R E U G E R   L W ,   1 9 9 3 ,   J   S O C   W O R K   E D U C ,   V 2 9 ,   P 2 4 0 ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   L i n a r d i   P M ,   1 9 9 6 ,   B R A Z   J   M E D   B I O L   R E S ,   V 2 9 ,   P 5 5 5 ;   L I N D S E Y   D ,   1 9 7 6 ,   A M   P S Y C H O L ,   V 3 1 ,   P 7 9 9 ;   L I N D S E Y   D ,   1 9 9 2 ,   S O C   S E R V   R E V ,   V 6 6 ,   P 2 9 5 ;   L I N D S E Y   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 2 ;   L I N D S E Y   D ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 8 ;   L I N D S E Y   D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 4 ;   L i n d s e y   D . ,   1 9 7 8 ,   S C I   P U B L I C A T I O N   S Y S T ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M a c R o b e r t s   M H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 7 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 7 4 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - U ;   M E I T T U N E N   J ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 3 7 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o n a s t e r s k y   R i c h a r d ,   2 0 0 5 ,   C H R O N   H I G H E R   E D U C ,   V 5 8 ,   p A 1 2 ;   M O N A S T E R S K Y   R ,   2 0 0 5 ,   C H R O N   H I G H E R   E D U C ,   V 5 2 ,   p A 1 7 ;   O R O M A N E R   M ,   1 9 7 4 ,   S O C   S C I   I N F O R M ,   V 1 4 ,   P 1 4 7 ;   O U W E H A N D   A ,   2 0 0 2 ,   P O W E R   C A L C U L A T O R ;   P A R D E C K   J T ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 4 8 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 0 5 ;   P a r d e c k   J T ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 8 6 ;   P A R D E C K   J T ,   1 9 9 1 ,   P S Y C H O L   R E P ,   V 6 8 ,   P 5 2 3 ;   P A R D E C K   J T ,   1 9 9 5 ,   R E S   S O C I A L   W O R K   P R A C ,   V 5 ,   P 2 2 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 5 0 0 5 0 0 2 0 6 ;   P h e l a n   T J ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 7 2 ;   P L O M P   R ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 3 4 6 ;   P O R T E R   A L ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 5 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 7 ;   R h o a d e s   G a r y ,   1 9 9 8 ,   M A N A G E D   P R O F E S S I O N A L ;   R h o a d s   R A ,   2 0 0 5 ,   J   H I G H   E D U C ,   V 7 6 ,   P 2 4 3 ,   D O I   1 0 . 1 3 5 3 / j h e . 2 0 0 5 . 0 0 2 2 ;   R o s e n b e r g   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 3 5 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 2 ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   * S A S   I   I N C ,   2 0 0 3 ,   S A S   9   1   W I N D   C O M P   P R ;   S C H W A R Z   G ,   1 9 7 8 ,   A N N   S T A T ,   V 6 ,   P 4 6 1 ,   D O I   1 0 . 1 2 1 4 / a o s / 1 1 7 6 3 4 4 1 3 6 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e i p e l   M M O ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 7 9 ;   S e l l e r s   S L ,   2 0 0 4 ,   J   S O C   W O R K   E D U C ,   V 4 0 ,   P 1 4 3 ;   S e v i n c   A ,   2 0 0 4 ,   S W I S S   M E D   W K L Y ,   V 1 3 4 ,   P 4 1 0 ;   S l a u g h t e r   S ,   1 9 9 7 ,   A C A D   C A P I T A L I S M   P O L I ;   S m i t h   R ,   1 9 9 8 ,   B R I T   M E D   J ,   V 3 1 6 ,   P 1 0 3 6 ;   S m i t h   R . ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 6 1 ;   S N I J D E R S   T A B ,   1 9 9 4 ,   S O C I O L   M E T H O D   R E S ,   V 2 2 ,   P 3 4 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 9 1 2 4 1 9 4 0 2 2 0 0 3 0 0 4 ;   S n i j d e r s   T o m   A .   B ,   1 9 9 9 ,   M U L T I L E V E L   A N A L   I N T R ;   T h y e r   B A ,   2 0 0 4 ,   J   S O C   W O R K   E D U C ,   V 4 0 ,   P 3 6 1 ;   U R B A N I A K   G C ,   2 0 0 5 ,   R E S   R A N D O M I Z E R ;   W E A L E   A R ,   2 0 0 4 ,   B M C   M E D   R E S   M E T H O D O L ,   P 4 ;   W e i g e l   R J ,   2 0 0 4 ,   J   A M   C O L L   S U R G E O N S ,   V 1 9 9 ,   P 3 0 0 ,   D O I   1 0 . 1 0 1 6 / j . j a m c o l l s u r g . 2 0 0 4 . 0 3 . 0 2 3 ;   W h i t e h o u s e   G ,   2 0 0 1 ,   B R I T   J   R A D I O L ,   V 7 4 ,   P 1 ;   Z w a h l e n   M ,   2 0 0 4 ,   S O Z   P R A V E N T I V   M E D ,   V 4 9 ,   P 1 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 3 8 - 0 0 3 - 0 0 3 3 - 2 ;   Z W A H L E N   M ,   2 0 0 4 ,   S O Z I A L   P R A V E N T I V M E D I ,   V 4 9 ,   P 1 ;   [ A n o n y m o u s ] ,   2 0 0 4 ,   S T A T   P A C K A G E   S O C I A L ;   1 9 9 9 ,   S C I   W A T C H ,   V 1 0 ,   P 1 ;   2 0 0 5 ,   T E N U R E   M O D I F I C A T I O N S ,   P 3 ;   2 0 0 4 ,   J   C A N C ,   V 4 0 ,   P 9 1 9 	 1 0 3 	 2 6 	 2 6 	 2 	 1 0 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0   U S A 	 1 0 4 9 - 7 3 1 5 	 	 	 R E S   S O C I A L   W O R K   P R A C 	 R e s .   S o c .   W o r k .   P r a c t . 	 N O V 	 2 0 0 6 	 1 6 	 6 	 	 	 	 	 6 1 3 	 6 2 4 	 	 1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 6 2 9 2 5 7 0 	 	 1 2 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 0 9 4 Z Y 	 W O S : 0 0 0 2 4 1 2 7 9 2 0 0 0 0 6 	 	 
 
 J 	 E y s e n b a c h ,   G 	 	 	 	 E y s e n b a c h ,   G u n t h e r 	 	 	 T h e   o p e n   a c c e s s   a d v a n t a g e 	 J O U R N A L   O F   M E D I C A L   I N T E R N E T   R E S E A R C H 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 k n o w l e d g e   t r a n s l a t i o n ;   o p e n   a c c e s s ;   b i b l i o m e t r i c s ;   o p e n   s o u r c e 	 	 A   s t u d y   p u b l i s h e d   t o d a y   i n   P L o S   B i o l o g y   p r o v i d e s   r o b u s t   e v i d e n c e   t h a t   o p e n - a c c e s s   a r t i c l e s   a r e   m o r e   i m m e d i a t e l y   r e c o g n i z e d   a n d   c i t e d   t h a n   n o n - O A   a r t i c l e s .   T h i s   e d i t o r i a l   p r o v i d e s   s o m e   a d d i t i o n a l   f o l l o w   u p   d a t a   f r o m   t h e   m o s t   r e c e n t   a n a l y s i s   o f   t h e   s a m e   c o h o r t   i n   A p r i l   2 0 0 6 ,   1 7   t o   2 1   m o n t h s   a f t e r   p u b l i c a t i o n .   T h e s e   d a t a   s u g g e s t   t h a t   t h e   c i t a t i o n   g a p   b e t w e e n   o p e n   a c c e s s   a n d   n o n - o p e n   a c c e s s   p a p e r s   c o n t i n u e s   t o   w i d e n .   I   c o n c l u d e   w i t h   t h e   o b s e r v a t i o n   t h a t   t h e   " o p e n   a c c e s s   a d v a n t a g e "   h a s   a t   l e a s t   t h r e e   c o m p o n e n t s :   ( 1 )   a   c i t a t i o n   c o u n t   a d v a n t a g e   ( a s   a   m e t r i c   f o r   k n o w l e d g e   u p t a k e   w i t h i n   t h e   s c i e n t i f i c   c o m m u n i t y ) ,   ( 2 )   a n   e n d   u s e r   u p t a k e   a d v a n t a g e ,   a n d   ( 3 )   a   c r o s s - d i s c i p l i n e   f e r t i l i z a t i o n   a d v a n t a g e .   M o r e   r e s e a r c h   i s   n e e d e d ,   a n d   J M I R   i s   i n v i t i n g   r e s e a r c h   o n   a l l   a s p e c t s   o f   o p e n   a c c e s s .   A s   t h e   a d v a n t a g e s   f o r   p u b l i s h i n g   o p e n   a c c e s s   f r o m   a   r e s e a r c h e r s '   p o i n t   o f   v i e w   b e c o m e   i n c r e a s i n g l y   c l e a r ,   q u e s t i o n s   a r o u n d   t h e   s u s t a i n a b i l i t y   o f   o p e n   a c c e s s   j o u m a l s   r e m a i n .   T h i s   j o u r n a l   i s   a   l i v i n g   e x a m p l e   t h a t   " l e a n   p u b l i s h i n g "   m o d e l s   c a n   c r e a t e   s u c c e s s f u l   o p e n   a c c e s s   j o u r n a l s .   O p e n   s o u r c e   t o o l s   w h i c h   h a v e   b e e n   d e v e l o p e d   b y   t h e   P u b l i c   K n o w l e d g e   P r o j e c t   a t   t h e   U n i v e r s i t y   o f   B r i t i s h   C o l u m b i a   w i t h   c o n t r i b u t i o n s   f r o m   t h e   E p u b l i s h i n g   &   O p e n   A c c e s s   g r o u p   a t   t h e   C e n t r e   f o r   G l o b a l   e H e a l t h   I n n o v a t i o n   i n   T o r o n t o   a r e   a n   a l t e r n a t i v e   t o   h o s t i n g   j o u m a l s   o n   c o m m e r c i a l   o p e n   a c c e s s   p u b l i s h e r   s i t e s . 	 U n i v   T o r o n t o ,   C t r   G l o b a l   e H l t h   I n n o v a t ,   T o r o n t o ,   O N   M 5 G   2 C 4 ,   C a n a d a ;   U n i v   T o r o n t o ,   H l t h   N e t w o r k ,   T o r o n t o ,   O N   M 5 G   2 C 4 ,   C a n a d a 	 E y s e n b a c h ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   T o r o n t o ,   C t r   G l o b a l   e H l t h   I n n o v a t ,   1 9 0   E l i z a b e t h   S t ,   T o r o n t o ,   O N   M 5 G   2 C 4 ,   C a n a d a . 	 g e y s e n b a @ u h n r e s . u t o r o n t o . c a 	 	 E y s e n b a c h ,   G u n t h e r / 0 0 0 0 - 0 0 0 1 - 6 4 7 9 - 5 3 3 0 	 	 	 A r o n s o n   J K ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 0 ,   P 7 5 9 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 3 0 . 7 4 9 4 . 7 5 9 ;   B L A C K M A N   S ,   B I O M E D C E N T R A L   F A C E S ;   D o u w   K ,   2 0 0 3 ,   J   M E D   I N T E R N E T   R E S ,   V 5 ,   D O I   1 0 . 2 1 9 6 / j m i r . 5 . 1 . e 6 ;   E y s e n b a c h   G ,   2 0 0 0 ,   C U R R   O P I N   I M M U N O L ,   V 1 2 ,   P 4 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 2 - 7 9 1 5 ( 0 0 ) 0 0 1 2 7 - 8 ;   E y s e n b a c h   G ,   2 0 0 6 ,   P L O S   B I O L ,   V 4 ,   P 6 9 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 4 0 1 5 7 ;   E y s e n b a c h   G ,   1 9 9 9 ,   J   M E D   I N T E R N E T   R E S ,   V 1 ,   D O I   1 0 . 2 1 9 6 / j m i r . 1 . 2 . e 9 ;   H A R N A D   S ,   O P E N   A C C E S S   I M P A C T   A ;   M a c C a l l u m   C J ,   2 0 0 6 ,   P L O S   B I O L ,   V 4 ,   P 6 6 1 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 4 0 1 7 6 ;   W I L L I N S K Y   J ,   2 0 0 3 ,   E D   P O L I C Y   A N A L   A R C H I ,   V 1 1 ;   W I L L I N S K Y   J ,   I N   P R E S S   L I B   H I   T E C H 	 1 0 	 2 6 	 2 7 	 2 	 2 1 	 J O U R N A L   O F   M E D I C A L   I N T E R N E T   R E S E A R C H 	 T O R O N T O 	 T O R O N T O   G E N E R A L   H O S P I T A L ,   R   F R A S E R   E L L I O T T   B L D G ,   4 T H   F L ,   R   4 S 4 3 5 ,   1 9 0   E L I Z A B E T H   S T ,   T O R O N T O ,   O N   M 5 G   2 C 4 ,   C A N A D A 	 1 4 3 8 - 8 8 7 1 	 	 	 J   M E D   I N T E R N E T   R E S 	 J .   M e d .   I n t e r n e t   R e s . 	 	 2 0 0 6 	 8 	 2 	 	 	 	 	 	 	 e 8 	 1 0 . 2 1 9 6 / j m i r . 8 . 2 . e 8 	 	 9 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 0 7 3 R B 	 W O S : 0 0 0 2 3 9 7 5 9 2 0 0 0 0 1 	 1 6 8 6 7 9 7 1 	 
 
 J 	 U z u n ,   A 	 	 	 	 U z u n ,   A 	 	 	 L i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e   r e s e a r c h   i n   d e v e l o p i n g   c o u n t r i e s   a n d   E a s t e r n   E u r o p e a n   c o u n t r i e s :   A   b r i e f   b i b l i o m e t r i c   p e r s p e c t i v e 	 I N T E R N A T I O N A L   I N F O R M A T I O N   &   L I B R A R Y   R E V I E W 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 P H Y S I C S   P U B L I C A T I O N S ;   S O C I A L - S C I E N C E S ;   L A T I N - A M E R I C A ;   C O L L A B O R A T I O N ;   A S T R O N O M E R S 	 W e   e x a m i n e d   a   s e t   o f   2 1   c o r e   j o u r n a l s   i n   t h e   f i e l d   o f   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e   ( L I S )   f r o m   1 9 8 0 - 1 9 9 9   f o r   a r t i c l e s   w i t h   e i t h e r   p r i n c i p a l   o r   c o - a u t h o r s   f r o m   d e v e l o p i n g   c o u n t r i e s   ( D C s )   a n d   t h e   f o r m e r l y ,   s o c i a l i s t   E a s t e r n   E u r o p e a n   c o u n t r i e s   ( E E C s ) .   W e   f o u n d   t h a t   o n l y   8 2 6   ( 7 . 9 % )   o f   a   t o t a l   o f   1 0 4 0 0   a r t i c l e s   p u b l i s h e d   i n   2 1   j o u r n a l s   a r e   f r o m   D C s   o r   E E C s ,   T h e   n u m b e r s   o f   a r t i c l e s   w i t h   a u t h o r s   F r o n t   C h i n a ,   S a u d i   A r a b i a ,   T u r k e y ,   B o t s w a n a ,   G h a n a ,   K u w a i t ,   a n d   T a i w a n   c o n s i d e r a b l y   i n c r e a s e d   a n d   t h o s e   o f   I n d i a ,   N i g e r i a ,   P a k i s t a n ,   B r a z i l ,   a n d   P o l a n d   d e c r e a s e d .   U s i n g   a   b i b l i o m e t r i c   i n d i c a t o r   w e   f o u n d   t h a t   a m o n g   t h e   c o u n t r i e s   w i t h   d e c l i n i n g   t r e n d s   i n   t h e   n u m b e r s   o f   a r t i c l e s ,   L I S   r e s e a r c h   i s   r e c e i v i n g   h i g h   p r i o r i t y   i n   N i g e r i a   a n d   P a k i s t a n   w h e r e a s   a m o n g   t h e   c o u n t r i e s   w i t h   i n c r e a s i n g   t r e n d s   i n   a r t i c l e s ,   i t   i s   r e c e i v i n g   l o w   p r i o r i t y   i n   C h i n a ,   T u r k e y   a n d   T a i w a n .   A   ' c o - w o r d '   a n a l y s i s   b a s e d   o n   t h e   k e y   w o r d s   a n d   t h e m a t i c   n o u n -   p h r a s e s   i n   t h e   t i t l e s   a n d   a b s t r a c t s   o f   a   s a m p l e   o f   1 0 2   a r t i c l e s   p u b l i s h e d   i n   1 9 9 6   t o   1 9 9 9   i n d i c a t e d   t h a t   b i b l i o m e t r i c s   i s   t h e   m o s t   f r e q u e n t   t o p i c   i n   L I S   r e s e a r c h   i n   m a j o r   D C s   a n d   E E C s .   I n f o r m a t i o n   r e t r i e v a l ,   i n f o r m a t i o n   n e e d   a n d   i n f o r m a t i o n   u s e   i s   a m o n g   t h e   t o p i c s   o f   r e l a t i v e l y   h i g h   i n t e r e s t   f o r   t h e   r e s e a r c h e r s   w o r k i n g   i n   D C s   i n   A s i a   a n d   A f r i c a .   ( C )   2 0 0 2   P u b l i s h e d   b y   E l s e v i e r   S c i e n c e   L t d . 	 M i d d l e   E   T e c h   U n i v ,   D e p t   P h y s ,   T R - 0 6 5 3 1   A n k a r a ,   T u r k e y 	 U z u n ,   A   ( r e p r i n t   a u t h o r ) ,   M i d d l e   E   T e c h   U n i v ,   D e p t   P h y s ,   T R - 0 6 5 3 1   A n k a r a ,   T u r k e y . 	 	 	 	 	 	 B A R R E   R ,   1 9 8 7 ,   S C I   T E C H N O L O G Y   S T U D I ,   V 5 ,   P 3 2 ;   D H R U V   R ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 2 9 5 ;   F R A M E   J   D ,   1 9 7 7 ,   I n t e r c i e n c i a ,   V 2 ,   P 1 4 3 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 2 ;   G o n g   Y T ,   1 9 9 6 ,   J   I N F O R M   S C I ,   V 2 2 ,   P 4 6 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 6 0 2 2 0 0 6 0 8 ;   G U P T A   B M ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 8 ,   P 3 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 5 0 ;   H I L D R U N   K ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 4 5 5 ;   L O M I N I T Z   L ,   1 9 8 7 ,   S O C   S T U D   S C I ,   V 1 7 ,   P 1 1 5 ;   M a j i d   S ,   2 0 0 0 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 2 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 9 9 ) 0 0 0 5 1 - 1 ;   M e n g   G J ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 5 2 ;   N A R V A E Z B E R T H E L E M O T   N ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 1 7 1 ;   P A O   M L ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 9 6 - I ;   P r u t h i   S . ,   1 9 9 3 ,   J   S C I   I N D   R E S   I N D I A ,   V 5 3 ,   P 8 4 0 ;   S C H U B E R T   A ,   1 9 8 6 ,   C Z E C H   J   P H Y S ,   V 3 6 ,   P 1 2 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 5 9 9 7 4 4 ;   U z u n   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 9 2 ;   U Z U N   A ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 6 ;   U z u n   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 1 9 ;   U z u n   A ,   1 9 9 8 ,   I N T   I N F   L I B R   R E V ,   V 3 0 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 6 / i i l r . 1 9 9 8 . 0 0 9 3 ;   U Z U N   A ,   2 0 0 1 ,   R E G   W O R L D   R E N   E N   C   1 ,   P 3 8 5 ;   W H I T E   J C ,   1 9 9 2 ,   P U B L   A S T R O N   S O C   P A C ,   V 1 0 4 ,   P 4 7 2 ,   D O I   1 0 . 1 0 8 6 / 1 3 3 0 1 9 	 2 0 	 2 6 	 2 6 	 1 	 2 9 	 A C A D E M I C   P R E S S   L T D   E L S E V I E R   S C I E N C E   L T D 	 L O N D O N 	 2 4 - 2 8   O V A L   R D ,   L O N D O N   N W 1   7 D X ,   E N G L A N D 	 1 0 5 7 - 2 3 1 7 	 	 	 I N T   I N F   L I B R   R E V 	 I n t .   I n f .   L i b r .   R e v . 	 M A R 	 2 0 0 2 	 3 4 	 1 	 	 	 	 	 2 1 	 3 3 	 	 1 0 . 1 0 0 6 / i i l r . 2 0 0 2 . 0 1 8 2 	 	 1 3 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 6 4 V Q 	 W O S : 0 0 0 1 7 6 3 3 4 6 0 0 0 0 2 	 	 
 
 J 	 S c h o e p f l i n ,   U ;   G l a n z e l ,   W 	 	 	 	 S c h o e p f l i n ,   U ;   G l a n z e l ,   W 	 	 	 T w o   d e c a d e s   o f   " s c i e n t o m e t r i c s "   -   A n   i n t e r d i s c i p l i n a r y   f i e l d   r e p r e s e n t e d   b y   i t s   l e a d i n g   j o u r n a l 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N C E S 	 T h e   d e v e l o p m e n t   o f   t h e   f i e l d   o f   b i b l i o m e t r i c   a n d   s c i e n t o m e t r i c   r e s e a r c h   i s   a n a l y s e d   b y   q u a n t i t a t i v e   m e t h o d s   t o   a n s w e r   t h e   f o l l o w i n g   q u e s t i o n s :   ( 1 )   I s   b i b l i o m e t r i c s   e v o l v i n g   f r o m   a   s o f t   s c i e n c e   f i e l d   t o w a r d s   r a t h e r   h a r d   ( s o c i a l )   s c i e n c e s   ( S c h u b e r t - M a c z e l k a   h y p o t h e s i s ) ?   ( 2 )   C a n   b i b l i o m e t r i c s   b e   c h a r a c t e r i s e d   a s   a   s o c i a l   s c i e n c e   f i e l d   w i t h   s t a b l e   c h a r a c t e r i s t i c s   ( W o u t e r s - L e y d e s d o r f f   h y p o t h e s i s ) ?   ( 3 )   I s   b i b l i o m e t r i c s   a   h e t e r o g e n e o u s   f i e l d .   t h e   s u b - d i s c i p l i n e s   o f   w h i c h   h a v e   t h e i r   o w n   c h a r a c t e r i s t i c s ?   A r e   t h e s e   s u b - d i s c i p l i n e s   m o r e   a n d   m o r e   c o n s o l i d a t i n g ,   a n d   a r e   p r e d o m i n a n t   s u b - d i s c i p l i n e s   i m p r e s s i n g   t h e i r   o w n   c h a r a c t e r i s t i c s   u p o n   t h e   w h o l e   f i e l d   ( G l a n z e l - S c h o e p f l i n   h y p o t h e s i s ) ?   T h e   P r i c e   I n d e x   p e r   p a p e r ,   t h e   p e r c e n t a g e   o f   r e f e r e n c e s   t o   s e r i a l s ,   t h e   m e a n   r e f e r e n c e s   a g e ,   a n d   t h e   m e a n   r e f e r e n c e   r a t e   a r e   c a l c u l a t e d   b a s e d   o n   a l l   a r t i c l e s   a n d   t h e i r   r e s p e c t i v e   r e f e r e n c e s   i n   S c i e n t o m e t r i c s   i n   1 9 8 0 ,   1 9 8 9 ,   a n d   1 9 9 7 .   T h e   a r t i c l e s   a r e   c l a s s i f i e d   i n   s i x   c a t e g o r i e s .   T h e   f i n d i n g s   s u g g e s t ,   t h a t   t h e   f i e l d   i s   i n   f a c t   h e t e r o g e n e o u s ,   a n d   e a c h   s u b - d i s c i p l i n e   h a s   i t s   o w n   c h a r a c t e r i s t i c s .   W h i l e   t h e   c o n t r i b u t i o n   o f   t h e s e   s u b - d i s c i p l i n e s   i n   S c i e n t o m e t r i c s   w a s   s t i l l   w e l l - b a l a n c e d   i n   1 9 8 0 ,   p a p e r s   d e a l i n g   w i t h   c a s e   s t u d i e s   a n d   m e t h o d o l o g y   b e c a m e   d o m i n a n t   b y   1 9 9 7 . 	 M a x   P l a n c k   I n s t   H i s t   S c i ,   D - 1 0 1 1 7   B e r l i n ,   G e r m a n y ;   R e s   A s s o c   S c i   C o m m u n   &   I n f o r m a t   E V ,   F r a n k f u r t ,   G e r m a n y ;   H u n g a r i a n   A c a d   S c i ,   B i b l i o m e t r   S e r v ,   L i b ,   B u d a p e s t ,   H u n g a r y 	 S c h o e p f l i n ,   U   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   I n s t   H i s t   S c i ,   W i l h e l m s t r   4 4 ,   D - 1 0 1 1 7   B e r l i n ,   G e r m a n y . 	 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 E g g h e   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 5 6 4 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 7 ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   G l a n z e l   W . ,   1 9 9 5 ,   P   5   B I E N N   C   I N T   S O C ,   P 1 7 7 ;   M O E D   H F ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 6 ;   P r i c e   D . J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 1 ;   S C H U B E R T   A ,   1 9 9 3 ,   S O C   S T U D   S C I ,   V 2 3 ,   P 5 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 9 3 0 2 3 0 0 3 0 0 7 ;   W O U T E R S   P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 5 6 0 	 8 	 2 6 	 3 0 	 2 	 2 9 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 S P U I B O U L E V A R D   5 0 ,   P O   B O X   1 7 ,   3 3 0 0   A A   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 0 1 	 5 0 	 2 	 	 	 	 	 3 0 1 	 3 1 2 	 	 1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 1 4 K E 	 W O S : 0 0 0 1 6 7 6 6 4 9 0 0 0 0 7 	 	 
 
 J 	 O C O N N O R ,   D O ;   V O O S ,   H 	 	 	 	 O C O N N O R ,   D O ;   V O O S ,   H 	 	 	 E M P I R I C A L   L A W S ,   T H E O R Y   C O N S T R U C T I O N   A N D   B I B L I O M E T R I C S 	 L I B R A R Y   T R E N D S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 O C O N N O R ,   D O   ( r e p r i n t   a u t h o r ) ,   R U T G E R S   S T A T E   U N I V ,   G R A D   S C H   L I B   &   I N F O R M A T   S T U D I E S ,   N E W   B R U N S W I C K ,   N J   0 8 9 0 3   U S A . 	 	 	 	 	 	 B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B r o a d u s   R .   N . ,   1 9 7 7 ,   A D V   L I B R A R I A N S H I P ,   V 7 ,   P 2 9 9 ;   B R O O K E S   B C ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 2 6 ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C A R N A P   R ,   1 9 6 6 ,   P H I L O S   F   P H Y S I C S ,   P 2 2 8 ;   d e   S o l l a   P r i c e   D . ,   1 9 7 6 ,   J   A S I S ,   V 2 7 ,   P 2 9 2 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R V E Y   W .   D . ,   1 9 7 9 ,   C O M M U N I C A T I O N   E S S E N C ;   H I L L   B M ,   1 9 7 4 ,   J   A M   S T A T   A S S O C ,   V 6 9 ,   P 1 0 2 5 ;   H I L L   B M ,   1 9 7 0 ,   J   A M   S T A T   A S S O C ,   V 6 5 ,   P 1 2 3 0 ;   H J E R P P E   R ,   1 9 8 0 ,   B I B L I O   B I B L I O M E T R I C S ;   L I N D S E Y   D ,   1 9 7 8 ,   S C I   P U B L I C A T I O N   S Y S T ,   P 8 9 ;   L I N E   M B ,   1 9 7 5 ,   C O L L   R E S   L I B R ,   V 3 6 ,   P 3 9 3 ;   L i n e   M .   B . ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ,   P 3 1 3 ;   M C G R A T H   W E ,   1 9 8 0 ,   C O L L E C T I O N   D E V   L I B R A ,   P 3 7 3 ;   M e a d o w s   A .   J . ,   1 9 7 4 ,   C O M M U N I C A T I O N   S C I ;   M E R T O N   R K ,   1 9 7 3 ,   S O C   S C I   T H E O R E T I C A L ;   M I S C H E L   W ,   1 9 7 3 ,   P S Y C H O L   R E V ,   V 8 0 ,   P 2 5 2 ,   D O I   1 0 . 1 0 3 7 / h 0 0 3 5 0 0 2 ;   M O L L   J K ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ,   P 1 9 5 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 0 2 n 0 3 _ 0 1 ;   N A R I N   F ,   1 9 7 6 ,   P B 2 5 2 3 3 9 ;   N A R I N   F ,   1 9 7 7 ,   A N N   R E V   I N F O R M A T I O N ,   V 1 2 ,   P 4 5 ;   N i c h o l a s   D . ,   1 9 7 8 ,   L I T   B I B L I O M E T R I C S ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P R I T C H A R D ,   S T A T I S T I C A L   B I B L I O ,   P 3 4 9 ;   P R I T C H A R D   A ,   1 8 7 4 ,   B I B L I O M E T R I C S   B I B L I O ,   V 1 ;   P R I T C H A R D   A M ,   U N P U B L I S H E D ;   R A I S I G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 5 0 ;   R A I S I N G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 6 1 ;   R A P O P O R T   A ,   1 9 7 8 ,   I N T   E N C Y   S T A T I S T I C S ,   P 8 5 1 ;   S I M O N   H R ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 3 ;   S W A N S O N   D R ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 1 2 8 ;   Z u c k e r m a n   H . ,   1 9 7 7 ,   S C I   E L I T E   N O B E L   L A U R 	 3 4 	 2 6 	 2 6 	 0 	 1 	 G S L I S   P U B L I C A T I O N S 	 C H A M P A I G N 	 5 0 1   E   D A N I E L   S T ,   C H A M P A I G N ,   I L   6 1 8 2 0 - 6 2 1 1 	 0 0 2 4 - 2 5 9 4 	 	 	 L I B R   T R E N D S 	 L i b r .   T r e n d s 	 	 1 9 8 1 	 3 0 	 1 	 	 	 	 	 9 	 2 0 	 	 	 	 1 2 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 M R 6 3 3 	 W O S : A 1 9 8 1 M R 6 3 3 0 0 0 0 3 	 	 
 
 J 	 D i d e g a h ,   F ;   T h e l w a l l ,   M 	 	 	 	 D i d e g a h ,   F e r e s h t e h ;   T h e l w a l l ,   M i k e 	 	 	 D e t e r m i n a n t s   o f   r e s e a r c h   c i t a t i o n   i m p a c t   i n   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s 	 R E S E A R C H   P E R F O R M A N C E ;   P S Y C H O L O G Y   J O U R N A L S ;   S C I E N T I F I C - R E S E A R C H ;   C I T E R   M O T I V A T I O N S ;   C O - A U T H O R S H I P ;   C O U N T S ;   P U B L I C A T I O N ;   A R T I C L E S ;   S C I E N C E ;   Q U A L I T Y 	 T h i s   s t u d y   i n v e s t i g a t e s   a   r a n g e   o f   m e t r i c s   a v a i l a b l e   w h e n   a   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y   a r t i c l e   i s   p u b l i s h e d   t o   s e e   w h i c h   m e t r i c s   c o r r e l a t e   m o r e   w i t h   t h e   n u m b e r   o f   c i t a t i o n s   t o   t h e   a r t i c l e .   I t   a l s o   i n t r o d u c e s   t h e   d e g r e e   o f   i n t e r n a t i o n a l i t y   o f   j o u r n a l s   a n d   r e f e r e n c e s   a s   n e w   m e t r i c s   f o r   t h i s   p u r p o s e .   T h e   j o u r n a l   i m p a c t   f a c t o r ;   t h e   i m p a c t   o f   r e f e r e n c e s ;   t h e   i n t e r n a t i o n a l i t y   o f   a u t h o r s ,   j o u r n a l s ,   a n d   r e f e r e n c e s ;   a n d   t h e   n u m b e r   o f   a u t h o r s ,   i n s t i t u t i o n s ,   a n d   r e f e r e n c e s   w e r e   a l l   c a l c u l a t e d   f o r   p a p e r s   p u b l i s h e d   i n   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y   j o u r n a l s   i n   t h e   W e b   o f   S c i e n c e   f r o m   2 0 0 7   t o   2 0 0 9 .   U s i n g   a   z e r o - i n f l a t e d   n e g a t i v e   b i n o m i a l   r e g r e s s i o n   m o d e l   o n   t h e   d a t a   s e t ,   t h e   i m p a c t   f a c t o r   o f   t h e   p u b l i s h i n g   j o u r n a l   a n d   t h e   c i t a t i o n   i m p a c t   o f   t h e   c i t e d   r e f e r e n c e s   w e r e   f o u n d   t o   b e   t h e   m o s t   e f f e c t i v e   d e t e r m i n a n t s   o f   c i t a t i o n   c o u n t s   i n   a l l   f o u r   t i m e   p e r i o d s .   I n   t h e   e n t i r e   2 0 0 7   t o   2 0 0 9   p e r i o d ,   a p a r t   f r o m   j o u r n a l   i n t e r n a t i o n a l i t y   a n d   a u t h o r   n u m b e r s   a n d   i n t e r n a t i o n a l i t y ,   a l l   o t h e r   p r e d i c t o r   v a r i a b l e s   h a d   s i g n i f i c a n t   e f f e c t s   o n   c i t a t i o n   c o u n t s . 	 [ D i d e g a h ,   F e r e s h t e h ;   T h e l w a l l ,   M i k e ]   W o l v e r h a m p t o n   U n i v ,   S c h   T e c h n o l ,   S t a t   C y b e r m e t r   R e s   G r p ,   W o l v e r h a m p t o n   W V 1   1 L Y ,   W   M i d l a n d s ,   E n g l a n d 	 D i d e g a h ,   F   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   T e c h n o l ,   S t a t   C y b e r m e t r   R e s   G r p ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 L Y ,   W   M i d l a n d s ,   E n g l a n d . 	 f . d i d e g a h @ w l v . a c . u k ;   m t h e l w a l l @ w l v . a c . u k 	 	 	 	 	 A k s n e s   D W ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 6 4 5 ;   A m i n   M . ,   2 0 0 0 ,   P E R S P E C T I V E S   P U B L I S H ,   V 1 ,   P 1 ;   B A I R D   L M ,   1 9 9 4 ,   J   I N F O R M   S C I ,   V 2 0 ,   P 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 4 0 2 0 0 0 1 0 2 ;   B h a n d a r i   M ,   2 0 0 7 ,   C A N   J   S U R G ,   V 5 0 ,   P 1 1 9 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 1 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 3 1 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 8 . 0 0 4 ;   B o r s u k   R .   M . ,   2 0 0 9 ,   O P E N   E C O L O G Y   J ,   V 2 ,   P 2 5 ,   D O I   D O I   1 0 . 2 1 7 4 / 1 8 7 4 2 1 3 0 0 0 9 0 2 0 1 0 0 2 5 ;   B o y a c k   K .   W . ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ,   V 1 ,   P 3 3 5 ;   B R A U N   T ,   1 9 8 3 ,   T A L A N T A ,   V 3 0 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 9 - 9 1 4 0 ( 8 3 ) 8 0 0 4 3 - 5 ;   B r i c e   L J ,   2 0 0 4 ,   M E D   E D U C ,   V 3 8 ,   P 9 6 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 9 2 3 . 2 0 0 4 . 0 1 6 0 8 . x ;   B R O O K S   T A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 4 ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 4 0 2 ;   B u e l a - C a s a l   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 5 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 4 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   C a m e r o n   C .   A . ,   2 0 0 1 ,   C O M P A N I O N   T H E O R E T I C A ;   C a s e   D O ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 7 < 6 3 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - H ;   C h e n   C M ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 9 4 ;   C o l e   J .   R . ,   1 9 7 1 ,   A M   S O C I O L O G I S T ,   V 6 ,   P 2 3 ;   G A R F I E L D   E ,   1 9 6 5 ,   S T A T   A S S O C   M E T H O D   M ,   V 1 9 6 4 ,   P 1 8 9 ;   G a z n i   A . ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 2 5 1 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 6 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 5 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 1 3 2 1 7 2 3 ;   H a s l a m   N ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 9 2 - 8 ;   H e   T W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 6 7 - y ;   H i l b e   J .   M . ,   2 0 0 7 ,   N E G A T I V E   B I N O M I A L   R E ;   H u a n g   C ,   2 0 1 1 ,   J   T E C H N O L   T R A N S F E R ,   V 3 6 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 9 - 9 1 4 9 - 8 ;   K a t z   J S ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 5 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 9 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K o s t o f f   R N ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 5 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 5 7 3 - 7 ;   K u l k a r n i   A V ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 4 0 3 ;   L a n c h o - B a r r a n t e s   B S ,   2 0 1 0 ,   J   I N F   S C I ,   V 3 6 ,   P 3 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 0 3 6 6 0 7 7 ;   L A W A N I   S M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 4 ;   L e i m u   R ,   2 0 0 5 ,   B I O S C I E N C E ,   V 5 5 ,   P 4 3 8 ,   D O I   1 0 . 1 6 4 1 / 0 0 0 6 - 3 5 6 8 ( 2 0 0 5 ) 0 5 5 [ 0 4 3 8 : D S C I T I ] 2 . 0 . C O ; 2 ;   L e i m u   R ,   2 0 0 5 ,   T R E N D S   E C O L   E V O L ,   V 2 0 ,   P 2 8 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 4 . 1 0 . 0 1 0 ;   L e v i t t   J M ,   2 0 1 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 7 ,   P 3 0 0 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 1 0 . 0 9 . 0 0 5 ;   L o k k e r   C ,   2 0 0 8 ,   B R I T   M E D   J ,   V 3 3 6 ,   P 6 5 5 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 9 4 8 2 . 5 2 6 7 1 3 . B E ;   L o n g   S . ,   1 9 9 7 ,   R E G R E S S I O N   M O D E L S   C A ;   L o v a g l i a   M .   J . ,   1 9 8 9 ,   A N N   M   S O C   S O C   S T U D   S ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M O E D   H F ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 6 ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   N a r i n   F ,   1 9 9 0 ,   1 2 9 0 0   E U R   O F F   O F F   P U ;   P a t t e r s o n   M S ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 6 4 - 1 ;   P e r s s o n   O ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 0 7 - 0 ;   P E T E R S   H P F ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 9 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Q ;   R e y - R o c h a   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 9 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 3 3 0 1 . 0 1 3 2 9 . 7 a ;   S c h m o c h   U ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 1 8 - 5 ;   S H A D I S H   W R ,   1 9 9 5 ,   S O C   S T U D   S C I ,   V 2 5 ,   P 4 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 5 0 2 5 0 0 3 0 0 3 ;   S o o r y a m o o r t h y   R ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 2 1 2 6 - z ;   v a n   D a l e n   H P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 8 - 5 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 4 2 3 ;   V i e i r a   E S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 6 . 0 0 2 ;   V I N K L E R   P ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 9 ;   V U O N G   Q H ,   1 9 8 9 ,   E C O N O M E T R I C A ,   V 5 7 ,   P 3 0 7 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 2 5 5 7 ;   W a l t e r s   G D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 6 6 - 1 ;   W e b s t e r   G D ,   2 0 0 9 ,   E V O L   P S Y C H O L ,   V 7 ,   P 3 4 8 ;   W i l l i s   D L ,   2 0 1 1 ,   B J U   I N T ,   V 1 0 7 ,   P 1 8 7 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 4 - 4 1 0 X . 2 0 1 0 . 1 0 0 2 8 . x ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   Y u e   W . ,   2 0 0 4 ,   T H E S I S   U   N E W   S   W A L E S ;   Z i t t   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 2 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 8 2 	 6 2 	 2 5 	 2 5 	 2 	 4 2 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A Y 	 2 0 1 3 	 6 4 	 5 	 	 	 	 	 1 0 5 5 	 1 0 6 4 	 	 1 0 . 1 0 0 2 / a s i . 2 2 8 0 6 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 3 8 G E 	 W O S : 0 0 0 3 2 5 9 3 0 6 0 0 0 1 4 	 	 
 
 J 	 A b r i z a h ,   A ;   Z a i n a b ,   A N ;   K i r a n ,   K ;   R a j ,   R G 	 	 	 	 A b r i z a h ,   A . ;   Z a i n a b ,   A .   N . ;   K i r a n ,   K . ;   R a j ,   R .   G . 	 	 	 L I S   j o u r n a l s   s c i e n t i f i c   i m p a c t   a n d   s u b j e c t   c a t e g o r i z a t i o n :   a   c o m p a r i s o n   b e t w e e n   W e b   o f   S c i e n c e   a n d   S c o p u s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 J o u r n a l   s t u d i e s ;   J o u r n a l   i m p a c t ;   J o u r n a l   r a n k i n g ;   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ;   B i b l i o m e t r i c s ;   R a n k   n o r m a l i z e d   i m p a c t   f a c t o r 	 D I F F U S I O N   F A C T O R S ;   O F - S C I E N C E ;   C I T A T I O N ;   I N F O R M A T I O N ;   R A N K I N G ;   L I B R A R Y ;   I N D E X ;   I S I 	 T h e   s t u d y   c o m p a r e s   t h e   c o v e r a g e ,   r a n k i n g ,   i m p a c t   a n d   s u b j e c t   c a t e g o r i z a t i o n   o f   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e   j o u r n a l s ,   s p e c i f i c a l l y ,   7 9   t i t l e s   b a s e d   o n   d a t a   f r o m   W e b   o f   S c i e n c e   ( W o S )   a n d   1 2 8   t i t l e s   f r o m   S c o p u s .   C o m p a r i s o n s   w e r e   m a d e   b a s e d   o n   p r e s t i g e   f a c t o r   s c o r e s   r e p o r t e d   i n   2 0 1 0   J o u r n a l   C i t a t i o n   R e p o r t s   a n d   S C I m a g o   J o u r n a l   R a n k   2 0 1 0   a n d   n o t i n g   t h e   c h a n g e   i n   r a n k i n g   w h e n   t h e   d i f f e r e n c e s   a r e   c a l c u l a t e d .   T h e   r a n k   n o r m a l i z e d   i m p a c t   f a c t o r   a n d   t h e   L i b r a r y   o f   C o n g r e s s   C l a s s i f i c a t i o n   S y s t e m   w e r e   u s e d   t o   c o m p a r e   i m p a c t   r a n k i n g s   a n d   s u b j e c t   c a t e g o r i z a t i o n .   T h e r e   w a s   h i g h   d e g r e e   o f   s i m i l a r i t y   i n   r a n k   n o r m a l i z e d   i m p a c t   f a c t o r   o f   t i t l e s   i n   b o t h   W o S   a n d   S c o p u s   d a t a b a s e s .   T h e   s e a r c h e s   f o u n d   1 6 2   j o u r n a l s ,   w i t h   4 5   j o u r n a l s   a p p e a r i n g   i n   b o t h   d a t a b a s e s .   T h e   r a n k i n g s   o b t a i n e d   f o r   n o r m a l i z e d   i m p a c t   s c o r e s   c o n f i r m   h i g h e r   i m p a c t   s c o r e s   f o r   t i t l e s   c o v e r e d   i n   S c o p u s   b e c a u s e   o f   i t s   l a r g e r   c o v e r a g e   o f   t i t l e s .   T h e r e   w a s   m i s m a t c h   o f   s u b j e c t   c a t e g o r i z a t i o n   a m o n g   3 4   j o u r n a l   t i t l e s   i n   b o t h   d a t a b a s e s   a n d   2 2   o f   t h e   t i t l e s   w e r e   n o t   c l a s s i f i e d   u n d e r   Z   s u b j e c t   h e a d i n g s   i n   t h e   L i b r a r y   o f   C o n g r e s s   c a t a l o g u e .   T h e   r e s u l t s   r e v e a l e d   t h e   c h a n g e s   i n   j o u r n a l   t i t l e   r a n k i n g s   w h e n   n o r m a l i z e d ,   a n d   t h e   c a t e g o r i z a t i o n   o f   s o m e   j o u r n a l   t i t l e s   i n   t h e s e   d a t a b a s e s   m i g h t   b e   i n c o r r e c t . 	 [ A b r i z a h ,   A . ;   Z a i n a b ,   A .   N . ;   K i r a n ,   K . ]   U n i v   M a l a y a ,   F a c   C o m p   S c i   &   I n f o r m a t   T e c h n o l ,   D e p t   L i b   &   I n f o r m a t   S c i ,   K u a l a   L u m p u r ,   M a l a y s i a ;   [ A b r i z a h ,   A . ;   Z a i n a b ,   A .   N . ]   M i n i s t   H i g h e r   E d u c ,   M a l a y s i a n   C i t a t   C t r ,   P u t r a j a y a ,   M a l a y s i a ;   [ R a j ,   R .   G . ]   U n i v   M a l a y a ,   F a c   C o m p   S c i   &   I n f o r m a t   T e c h n o l ,   D e p t   A r t i f i c i a l   I n t e l l i g e n c e ,   K u a l a   L u m p u r ,   M a l a y s i a 	 A b r i z a h ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   M a l a y a ,   F a c   C o m p   S c i   &   I n f o r m a t   T e c h n o l ,   D e p t   L i b   &   I n f o r m a t   S c i ,   K u a l a   L u m p u r ,   M a l a y s i a . 	 a b r i z a h @ u m . e d u . m y ;   z a i n a b @ u m . e d u . m y ;   k i r a n @ u m . e d u . m y ;   r a m _ p r i m e @ f s k t m . u m . e d u . m y 	 a b d u l l a h ,   a b r i z a h / B - 8 1 2 5 - 2 0 1 0 ;   R a j ,   R a m   G o p a l / B - 3 3 9 9 - 2 0 1 0 ;   Z a i n a b ,   A . N . / B - 5 2 4 2 - 2 0 1 0 ;   Z a i n a b ,   A .   N . / K - 3 7 0 4 - 2 0 1 3 ;   K i r a n ,   K a u r / B - 8 7 9 3 - 2 0 1 0 ;   M D   S A B R I ,   M A S   I D A Y U / B - 8 9 5 7 - 2 0 1 0 ;   	 R a j ,   R a m   G o p a l / 0 0 0 0 - 0 0 0 2 - 8 6 2 7 - 1 1 1 3 ;   K i r a n ,   K a u r / 0 0 0 0 - 0 0 0 3 - 3 0 2 1 - 2 5 7 6 ;   M D   S A B R I ,   M A S   I D A Y U / 0 0 0 0 - 0 0 0 1 - 9 5 0 9 - 6 8 5 8 ;   A b d u l l a h ,   A b r i z a h / 0 0 0 0 - 0 0 0 2 - 8 2 2 4 - 5 2 6 8 	 M i n i s t r y   o f   H i g h e r   E d u c a t i o n   M a l a y s i a   ( H I R - M O H E )   U M . C / H I R / M O H E / F C S I T / 1 1 	 W e   a c k n o w l e d g e   f u n d i n g   r e c e i v e d   f r o m   t h e   M i n i s t r y   o f   H i g h e r   E d u c a t i o n   M a l a y s i a   ( H I R - M O H E )   U M . C / H I R / M O H E / F C S I T / 1 1 ,   w h i c h   m a d e   i t   p o s s i b l e   t o   u n d e r t a k e   t h i s   r e s e a r c h . 	 A m i n   M . ,   2 0 0 0 ,   P E R S P E C T I V E S   P U B L I S H ,   V 1 ,   P 1 ;   B e r g s t r o m   C . ,   2 0 0 7 ,   C O L L   R E S   L I B   N E W S ,   V 6 8 ,   P 3 1 4 ;   C h u n g   H K ,   2 0 0 7 ,   J   A C A D   L I B R ,   V 3 3 ,   P 3 9 3 ,   D O I   1 0 . 1 0 1 6 / j . a c a l i b . 2 0 0 7 . 0 1 . 0 1 6 ;   D e   M o y a - A n e g o n   F ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 1 - 4 ;   D e l l a   S a l a   S ,   2 0 0 9 ,   C O R T E X ,   V 4 5 ,   P 9 1 1 ,   D O I   1 0 . 1 0 1 6 / j . c o r t e x . 2 0 0 9 . 0 4 . 0 0 2 ;   D o m b r o w s k i   T . ,   1 9 8 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 1 0 ,   P 1 7 5 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 1 0 n 0 3 _ 1 4 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F r a n d s e n   T F ,   2 0 0 6 ,   J   D O C ,   V 6 2 ,   P 5 8 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 6 1 0 6 4 2 0 4 8 ;   G a r c i a   J A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 0 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 8 9 ;   G a r f i e l d   E . ,   2 0 0 5 ,   I N T   C   P E E R   R E V   B I O M ;   G a r f i e l d   E . ,   1 9 9 9 ,   C A N A D I A N   M E D   A S S   J ,   V 1 6 1 ,   P 1 ;   G a v e l   Y ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 6 5 9 5 8 ;   G o m e z - N u n e z   A J ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 7 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 8 5 - 8 ;   G o n z a l e z - P e r e i r a   B ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 2 ;   H a d d o w   G . ,   2 0 0 9 ,   A U S T R   A C A D   R E S   L I B ,   V 4 0 ,   P 1 7 ;   H a r z i n g   A . W . ,   2 0 1 0 ,   W O R K I N G   I S I   D A T A   B E W ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K a t z   J .   S . ,   1 9 9 5 ,   C L A S S I F I C A T I O N   I N T E R ,   P 1 0 5 ;   L e y d e s d o r f f   L ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 3 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 5 0 ;   L o p e z - I l l e s c a s   C ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 8 . 0 0 1 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   M e h o   L I ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 4 9 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 6 5 ;   M o e d   H F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 2 ;   N g   S .   L . ,   2 0 0 3 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 8 ,   P 4 5 ;   P u d o v k i n   A I ,   2 0 0 4 ,   P   A S I S T   A N N U ,   V 4 1 ,   P 5 0 7 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 4 1 0 1 5 9 ;   R a j   R G ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 7 5 - z ;   R o w l a n d s   I ,   2 0 0 2 ,   A S L I B   P R O C ,   V 5 4 ,   P 7 7 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 2 1 0 4 3 5 2 1 1 ;   S c h l o e g l   C ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 1 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 7 0 ;   S o m b a t s o m p o p   N ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 6 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 5 0 ;   T a h a i   A ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 2 7 9 ;   T s a y   M Y ,   1 9 9 8 ,   B   M E D   L I B R   A S S O C ,   V 8 6 ,   P 3 1 ;   W a g n e r   A . B . ,   2 0 0 9 ,   I S S U E S   S C I   T E C H N O L O G 	 3 2 	 2 5 	 2 5 	 3 	 1 3 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 3 	 9 4 	 2 	 	 	 	 	 7 2 1 	 7 4 0 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 1 3 - 7 	 	 2 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 7 2 Z A 	 W O S : 0 0 0 3 1 3 7 1 1 5 0 0 0 1 7 	 	 
 
 J 	 S h a f i q u e ,   M 	 	 	 	 S h a f i q u e ,   M u h a m m a d 	 	 	 T h i n k i n g   i n s i d e   t h e   b o x ?   I n t e l l e c t u a l   s t r u c t u r e   o f   t h e   k n o w l e d g e   b a s e   o f   i n n o v a t i o n   r e s e a r c h   ( 1 9 8 8 - 2 0 0 8 ) 	 S T R A T E G I C   M A N A G E M E N T   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i n n o v a t i o n ;   m u l t i d i s c i p l i n a r i t y ;   k n o w l e d g e   c o n v e r g e n c e ;   a b s o r p t i v e   c a p a c i t y ;   c r e a t i v e   c a p a c i t y 	 S T R A T E G I C - M A N A G E M E N T ;   C I T A T I O N   A N A L Y S I S ;   S C I E N T I F I C   L I T E R A T U R E S ;   C O C I T A T I O N   A N A L Y S I S ;   A U T H O R   C O C I T A T I O N ;   S C I E N C E ;   B I B L I O M E T R I C S ;   T E C H N O L O G Y ;   D O C U M E N T S ;   M O V E M E N T S 	 I n n o v a t i o n   i s   b e c o m i n g   i n c r e a s i n g l y   p o p u l a r   a s   a   c o n c e p t   a s   w e l l   a s   a   f i e l d   o f   r e s e a r c h .   A s   a   f i e l d ,   i t   h a s   a c c u m u l a t e d   a   s i g n i f i c a n t   a m o u n t   o f   s c i e n t i f i c   k n o w l e d g e .   B a s e d   o n   b i b l i o m e t r i c   d a t a   f r o m   f o u r   m a j o r   s o c i a l   s c i e n c e   d i s c i p l i n e s e c o n o m i c s ,   s o c i o l o g y ,   p s y c h o l o g y ,   a n d   m a n a g e m e n t t h i s   s t u d y   p r e s e n t s   a   g l o b a l   v i e w   o f   t h e   f i e l d   b y   c o m b i n i n g   l o n g i t u d i n a l   a n d   s t r u c t u r a l   p e r s p e c t i v e s .   I t   i d e n t i f i e s   m a j o r   r e s e a r c h   t r a d i t i o n s   i n   t h e   f i e l d ,   d e t e r m i n e s   t h e   c o n t e n t   a n d   d i s c i p l i n a r y   c o m p o s i t i o n   o f   e a c h   t r a d i t i o n ,   a n d   m a p s   t h e   c h a n g e s   i n   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   t h e   f i e l d   o v e r   t i m e .   T h e   s t u d y   s u g g e s t s   t h a t   i n n o v a t i o n   r e s e a r c h   i s   b e c o m i n g   i n c r e a s i n g l y   c o m p a r t m e n t a l i z e d   b e t w e e n   e c o n o m i c s   a n d   m a n a g e m e n t   d i s c i p l i n e s   a n d   e a c h   s e g m e n t   i s   b e c o m i n g   i n c r e a s i n g l y   s e l f - c o n t a i n e d .   A   s t r a t e g y   a l o n g   w i t h   a   f r a m e w o r k   i s   s u g g e s t e d   f o r   m a k i n g   r e s e a r c h   c o n t r i b u t i o n   t o   t h e   f i e l d .   C o p y r i g h t   ( c )   2 0 1 2   J o h n   W i l e y   &   S o n s ,   L t d . 	 U n i t e d   N a t i o n s   U n i v ,   U N U   M E R I T ,   N L - 6 2 1 1   T C   M a a s t r i c h t ,   N e t h e r l a n d s 	 S h a f i q u e ,   M   ( r e p r i n t   a u t h o r ) ,   U n i t e d   N a t i o n s   U n i v ,   U N U   M E R I T ,   K e i z e r   K a r e l p l   1 9 ,   N L - 6 2 1 1   T C   M a a s t r i c h t ,   N e t h e r l a n d s . 	 S h a f i q u e @ m e r i t . u n u . e d u 	 	 	 	 	 A c e d o   F J ,   2 0 0 6 ,   S T R A T E G I C   M A N A G E   J ,   V 2 7 ,   P 6 2 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 5 3 2 ;   A g a r w a l   R ,   2 0 0 7 ,   A C A D   M A N A G E   J ,   V 5 0 ,   P 1 3 0 4 ;   A L T M A N   D G ,   1 9 9 5 ,   H E A L T H   P S Y C H O L ,   V 1 4 ,   P 5 2 6 ,   D O I   1 0 . 1 0 3 7 / 0 2 7 8 - 6 1 3 3 . 1 4 . 6 . 5 2 6 ;   A n d e r s o n   N ,   2 0 0 4 ,   J   O R G A N   B E H A V ,   V 2 5 ,   P 1 4 7 ,   D O I   1 0 . 1 0 0 2 / j o b . 2 3 6 ;   B a r a b a s i   A L ,   2 0 0 3 ,   S C I   A M ,   V 2 8 8 ,   P 6 0 ;   B a r g h   J A ,   2 0 0 4 ,   A N N U   R E V   P S Y C H O L ,   V 5 5 ,   P 5 7 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . p s y c h . 5 5 . 0 9 0 9 0 2 . 1 4 1 9 2 2 ;   B o r g m a n   C h r i s t i n e   L . ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 2 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 6 0 1 0 2 ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   C O T T R I L L   C A ,   1 9 8 9 ,   K N O W L E D G E ,   V 1 1 ,   P 1 8 1 ;   C o w a n   R . ,   1 9 9 7 ,   I N D   C O R P   C H A N G E ,   V 6 ,   P 5 9 5 ,   D O I   D O I   1 0 . 1 0 9 3 / I C C / 6 . 3 . 5 9 5 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   M r v a r   A . ,   2 0 0 5 ,   E X P L O R A T O R Y   S O C I A L   N ;   D I M A G G I O   P J ,   1 9 9 5 ,   A D M I N   S C I   Q U A R T ,   V 4 0 ,   P 3 9 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 7 9 0 ;   E i g e n f a c t o r   P r o j e c t ,   2 0 0 9 ,   R A N K   M A P P   S C I   K N O W L ;   F a g e r b e r g   J ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 1 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 2 . 0 0 6 ;   F o r t u n a t o   S ,   2 0 1 0 ,   P H Y S   R E P ,   V 4 8 6 ,   P 7 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s r e p . 2 0 0 9 . 1 1 . 0 0 2 ;   F r a b l e   D E S ,   1 9 9 7 ,   A N N U   R E V   P S Y C H O L ,   V 4 8 ,   P 1 3 9 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . p s y c h . 4 8 . 1 . 1 3 9 ;   F R E E M A N   C ,   1 9 9 4 ,   C A M B R I D G E   J   E C O N ,   V 1 8 ,   P 4 6 3 ;   F r i c k e l   S ,   2 0 0 5 ,   A M   S O C I O L   R E V ,   V 7 0 ,   P 2 0 4 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G o p a l a k r i s h n a n   S ,   1 9 9 7 ,   J   M A N A G E M E N T   S C I ,   V 2 5 ,   P 1 5 ;   G R E E N E   W . H . ,   1 9 9 0 ,   E C O N O M E T R I C   A N A L ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   H a m b r i c k   D C ,   2 0 0 8 ,   A C A D   M A N A G E   R E V ,   V 3 3 ,   P 3 2 ;   H a u s e r   J R ,   2 0 0 6 ,   M A R K E T   S C I ,   V 2 5 ,   P 6 8 7 ,   D O I   1 0 . 1 2 8 7 / m k s c . 1 0 5 0 . 0 1 4 4 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   J e f f e r s o n   T . ,   1 9 7 2 ,   L I F E   S E L E C T E D   W R I T I N ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   L a t h a m   G P ,   2 0 0 5 ,   A N N U   R E V   P S Y C H O L ,   V 5 6 ,   P 4 8 5 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . p s y c h . 5 5 . 0 9 0 9 0 2 . 1 4 2 1 0 5 ;   L a t o u r   B ,   1 9 8 7 ,   S C I   A C T I O N   F O L L O W   S C ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 4 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M e r t o n   R .   K . ,   1 9 7 2 ,   A M   J   S O C I O L ,   V 7 7 ,   P 9 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M U M F O R D   M D ,   1 9 8 8 ,   P S Y C H O L   B U L L ,   V 1 0 3 ,   P 2 7 ,   D O I   1 0 . 1 0 3 7 / 0 0 3 3 - 2 9 0 9 . 1 0 3 . 1 . 2 7 ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   N u n n a l l y   J ,   1 9 7 8 ,   P S Y C H O M E T R I C   T H E O R Y ;   P a l a c i o s - H u e r t a   I ,   2 0 0 4 ,   E C O N O M E T R I C A ,   V 7 2 ,   P 9 6 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 2 6 2 . 2 0 0 4 . 0 0 5 1 9 . x ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   P i l k i n g t o n   A ,   2 0 0 9 ,   J   O P E R   M A N A G ,   V 2 7 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 8 . 0 8 . 0 0 1 ;   P o r t e r   M . E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V A N T A G ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R O S E N B E R G   N ,   1 9 6 3 ,   J   E C O N   H I S T ,   V 2 3 ,   P 4 1 4 ;   S c h u m p e t e r   J . A . ,   1 9 4 2 ,   C A P I T A L I S M   S O C I A L I S M ;   S c h u m p e t e r   J . A . ,   1 9 3 4 ,   T H E O R Y   E C   D E V   I N Q U I R ;   S M A L L   H ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   T a b a h   A . ,   2 0 0 1 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 4 9 ;   T U S H M A N   M L ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 4 8 ;   W e i c k   K E ,   1 9 9 9 ,   A N N U   R E V   P S Y C H O L ,   V 5 0 ,   P 3 6 1 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . p s y c h . 5 0 . 1 . 3 6 1 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l l i a m s o n   O E ,   1 9 8 5 ,   E C   I   C A P I T A L I S M ;   W O L F E   R A ,   1 9 9 4 ,   J   M A N A G E   S T U D ,   V 3 1 ,   P 4 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 1 9 9 4 . t b 0 0 6 2 4 . x ;   Y i n   R K ,   1 9 9 4 ,   C A S E   S T U D Y   R E S   D E S I G 	 6 2 	 2 5 	 2 5 	 1 4 	 1 6 1 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 0 1 4 3 - 2 0 9 5 	 1 0 9 7 - 0 2 6 6 	 	 S T R A T E G I C   M A N A G E   J 	 S t r a t e g .   M a n a g e .   J . 	 J A N 	 2 0 1 3 	 3 4 	 1 	 	 	 	 	 6 2 	 9 3 	 	 1 0 . 1 0 0 2 / s m j . 2 0 0 2 	 	 3 2 	 B u s i n e s s ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 0 4 7 Q P 	 W O S : 0 0 0 3 1 1 8 5 5 9 0 0 0 0 4 	 	 
 
 J 	 Q u i g l e y ,   M R ;   H o l l i d a y ,   E B ;   F u l l e r ,   C D ;   C h o i ,   M ;   T h o m a s ,   C R 	 	 	 	 Q u i g l e y ,   M a t t h e w   R . ;   H o l l i d a y ,   E m m a   B . ;   F u l l e r ,   C l i f t o n   D . ;   C h o i ,   M e h e e ;   T h o m a s ,   C h a r l e s   R . ,   J r . 	 	 	 D i s t r i b u t i o n   o f   t h e   h - I n d e x   i n   R a d i a t i o n   O n c o l o g y   C o n f o r m s   t o   a   V a r i a t i o n   o f   P o w e r   L a w :   I m p l i c a t i o n s   f o r   A s s e s s i n g   A c a d e m i c   P r o d u c t i v i t y 	 J O U R N A L   O F   C A N C E R   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   R a d i a t i o n   o n c o l o g y ;   P r o d u c t i v i t y 	 R A N K ;   R A D I O L O G Y ;   C I T A T I O N S 	 L e a d e r s   o f   a c a d e m i c   i n s t i t u t i o n s   e v a l u a t e   a c a d e m i c   p r o d u c t i v i t y   w h e n   d e c i d i n g   t o   h i r e ,   p r o m o t e ,   o r   a w a r d   r e s o u r c e s .   T h i s   s t u d y   e x a m i n e d   t h e   d i s t r i b u t i o n   o f   t h e   h - i n d e x ,   a n   a s s e s s m e n t   o f   a c a d e m i c   s t a n d i n g ,   a m o n g   r a d i a t i o n   o n c o l o g i s t s .   T h e   a u t h o r s   c o l l e c t e d   h - i n d i c e s   f o r   8 2 6   U S   a c a d e m i c   r a d i a t i o n   o n c o l o g i s t s   f r o m   a   c o m m e r c i a l   b i b l i o g r a p h i c   d a t a b a s e   ( S C O P U S ,   E l s e v i e r   B . V . ,   N L ) .   T h e n ,   l o g a r i t h m i c   t r a n s f o r m a t i o n   w a s   p e r f o r m e d   o n   h - i n d i c e s   a n d   r a n k e d   h - i n d i c e s ,   a n d   r e s u l t s   w e r e   c o m p a r e d   t o   e s t i m a t e s   o f   a   p o w e r   l a w   d i s t r i b u t i o n .   T h e   h - i n d e x   f r e q u e n c y   d i s t r i b u t i o n   c o n f o r m e d   t o   b o t h   t h e   l o g - l i n e a r   v a r i a t i o n   o f   a   p o w e r   l a w   ( r   ( 2 )   =   . 9 9 )   a n d   t h e   b e t a   d i s t r i b u t i o n   w i t h   t h e   s a m e   f i t t i n g   e x p o n e n t s   a s   p r e v i o u s l y   d e s c r i b e d   i n   a   p o w e r   l a w   a n a l y s i s   o f   t h e   p r o d u c t i v i t y   o f   n e u r o s u r g e o n s .   W i t h i n   r a d i a t i o n   o n c o l o g y ,   a s   i n   n e u r o s u r g e r y ,   t h e r e   a r e   e x c e e d i n g l y   m o r e   f a c u l t y   w i t h   a n   h - i n d e x   o f   1 - 2 .   T h e   d i s t r i b u t i o n   f i t t i n g   t h e   s a m e   v a r i a t i o n   o f   a   p o w e r   l a w   w i t h i n   t w o   f i e l d s   s u g g e s t s   a p p l i c a b i l i t y   t o   o t h e r   a r e a s   o f   a c a d e m i a . 	 [ F u l l e r ,   C l i f t o n   D . ;   C h o i ,   M e h e e ;   T h o m a s ,   C h a r l e s   R . ,   J r . ]   O r e g o n   H l t h   &   S c i   U n i v ,   D e p t   R a d i a t   M e d ,   K n i g h t   C a n c   I n s t ,   P o r t l a n d ,   O R   9 7 2 3 9   U S A ;   [ F u l l e r ,   C l i f t o n   D . ]   U n i v   T e x a s   M D   A n d e r s o n   C a n c   C t r ,   D e p t   R a d i a t   O n c o l ,   H o u s t o n ,   T X   7 7 0 3 0   U S A ;   [ H o l l i d a y ,   E m m a   B . ]   U n i v   T e x a s   H l t h   S c i   C t r   S a n   A n t o n i o ,   D e p t   I n t e r n a l   M e d ,   S a n   A n t o n i o ,   T X   7 8 2 2 9   U S A ;   [ Q u i g l e y ,   M a t t h e w   R . ]   D r e x e l   U n i v ,   C o l l   M e d ,   D e p t   N e u r o s u r g ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 T h o m a s ,   C R   ( r e p r i n t   a u t h o r ) ,   O r e g o n   H l t h   &   S c i   U n i v ,   D e p t   R a d i a t   M e d ,   K n i g h t   C a n c   I n s t ,   3 1 8 1   S W   S a m   J a c k s o n   P k   R d , K P V 4 ,   P o r t l a n d ,   O R   9 7 2 3 9   U S A . 	 t h o m a s c h @ o h s u . e d u 	 	 	 	 	 B a l d o c k   C ,   2 0 0 8 ,   A U S T R A L A S   P H Y S   E N G   S ,   V 3 1 ,   p X I ;   B a r t n e c k   C ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 0 6 - 5 ;   B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B o r n m a n n   L ,   2 0 0 9 ,   E M B O   R E P ,   V 1 0 ,   P 2 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 0 8 . 2 3 3 ;   B u t s o n   M J ,   2 0 1 0 ,   A U S T R A L A S   P H Y S   E N G   S ,   V 3 3 ,   P 2 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 3 2 4 6 - 0 1 0 - 0 0 3 8 - 0 ;   C h o i   M ,   2 0 0 9 ,   I N T   J   R A D I A T   O N C O L ,   V 7 4 ,   P 1 7 2 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 ;   H e a l y   N A ,   2 0 1 1 ,   B R E A S T   C A N C E R   R E S   T R ,   V 1 2 7 ,   P 8 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 4 9 - 0 1 1 - 1 4 3 6 - z ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H u n t   G E ,   2 0 1 0 ,   H A R V A R D   R E V   P S Y C H I A T ,   V 1 8 ,   P 2 0 7 ,   D O I   1 0 . 3 1 0 9 / 1 0 6 7 3 2 2 9 . 2 0 1 0 . 4 9 3 7 4 2 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K u l a s e g a r a h   J ,   2 0 1 0 ,   E U R   A R C H   O T O - R H I N O - L ,   V 2 6 7 ,   P 4 5 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 0 5 - 0 0 9 - 1 0 0 9 - 5 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M a n s i l l a   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 1 . 0 0 1 ;   M a r t i n e z - M e k l e r   G ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 7 9 1 ;   M u l l i n s   M E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 5 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 5 . 0 0 5 ;   P o y n a r d   T ,   2 0 1 1 ,   C L I N   R E S   H E P A T O L   G A S ,   V 3 5 ,   P 3 7 5 ,   D O I   1 0 . 1 0 1 6 / j . c l i n r e . 2 0 1 1 . 0 2 . 0 1 4 ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   S p e a r m a n   C M ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 9 2 9 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ;   Z h a n g   C T ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 5 4 2 9 	 2 0 	 2 5 	 2 5 	 1 	 1 5 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 8 8 5 - 8 1 9 5 	 	 	 J   C A N C E R   E D U C 	 J .   C a n c e r   E d u c . 	 J U N 	 2 0 1 2 	 2 7 	 3 	 	 	 	 	 4 6 3 	 4 6 6 	 	 1 0 . 1 0 0 7 / s 1 3 1 8 7 - 0 1 2 - 0 3 6 3 - y 	 	 4 	 O n c o l o g y ;   E d u c a t i o n ,   S c i e n t i f i c   D i s c i p l i n e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 O n c o l o g y ;   E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 0 0 3 Z Q 	 W O S : 0 0 0 3 0 8 6 5 0 3 0 0 0 1 2 	 2 2 5 4 4 5 3 7 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 A s s e s s i n g   t h e   v a r y i n g   l e v e l   o f   i m p a c t   m e a s u r e m e n t   a c c u r a c y   a s   a   f u n c t i o n   o f   t h e   c i t a t i o n   w i n d o w   l e n g t h 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   S c i e n t i f i c   i m p a c t ;   C i t a t i o n   w i n d o w ;   P e e r   r e v i e w ;   B i b l i o m e t r i c s ;   I t a l y 	 B I B L I O M E T R I C   I N D I C A T O R S ;   S C I E N C E ;   C O U N T S ;   T O O L 	 W i t h   t h e   p a s s a g e   o f   m o r e   t i m e   f r o m   t h e   o r i g i n a l   d a t e   o f   p u b l i c a t i o n ,   t h e   m e a s u r e   o f   t h e   i m p a c t   o f   s c i e n t i f i c   w o r k s   u s i n g   s u b s e q u e n t   c i t a t i o n   c o u n t s   b e c o m e s   m o r e   a c c u r a t e .   H o w e v e r   t h e   m e a s u r e m e n t   o f   i n d i v i d u a l   a n d   o r g a n i z a t i o n a l   r e s e a r c h   p r o d u c t i v i t y   s h o u l d   i d e a l l y   r e f e r   t o   a   p e r i o d   w i t h   c l o s i n g   d a t e   j u s t   p r i o r   t o   t h e   e v a l u a t i o n   e x e r c i s e .   T h e r e f o r e   i t   i s   n e c e s s a r y   t o   c o m p r o m i s e   b e t w e e n   a c c u r a c y   a n d   t i m e l i n e s s .   T h i s   w o r k   a t t e m p t s   t o   p r o v i d e   a n   o r d e r   o f   m a g n i t u d e   f o r   t h e   e r r o r   i n   m e a s u r e m e n t   t h a t   o c c u r s   w i t h   d e c r e a s i n g   t h e   t i m e   l a p s e   b e t w e e n   d a t e   o f   p u b l i c a t i o n   a n d   c i t a t i o n   c o u n t .   T h e   a n a l y s i s   i s   c o n d u c t e d   b y   s c i e n t i f i c   d i s c i p l i n e   o n   t h e   b a s i s   o f   p u b l i c a t i o n s   i n d e x e d   i n   t h e   T h o m s o n   R e u t e r s   I t a l i a n   N a t i o n a l   C i t a t i o n   R e p o r t .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 ;   A d a m s   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 5 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 8 - 9 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   A l t h o u s e   B .   M . ,   2 0 0 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 2 7 ;   B O R M A N N   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 8 3 ;   B O R N M A N N   L ,   2 0 0 8 ,   H U M A N   A R C H I T E C T U R E   J ,   V 4 ,   P 2 3 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   F r a n c e s c h e t   M ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 7 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 2 . 0 0 2 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 7 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 1 . 3 0 7 0 0 . e a ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   H O R R O B I N   D F ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 4 3 8 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o x h a m   H . ,   1 9 9 2 ,   S C I   T E C H N O L O G Y   P O L I C ,   P 7 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   R E A L E   E ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 6 ,   P 2 1 6 ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   R O U S S E A U   R ,   1 9 8 8 ,   P   1   I N T   C   B I B L   T H E O R ,   P 2 4 9 ;   S t r i n g e r   M J ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 1 6 8 3 ;   v a n   D a l e n   H P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 4 8 - 5 	 2 1 	 2 5 	 2 5 	 3 	 2 7 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 1 	 5 	 4 	 	 	 	 	 6 5 9 	 6 6 7 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 4 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 4 1 P I 	 W O S : 0 0 0 2 9 6 5 2 4 2 0 0 0 1 6 	 	 
 
 J 	 P a g e l ,   P S ;   H u d e t z ,   J A 	 	 	 	 P a g e l ,   P .   S . ;   H u d e t z ,   J .   A . 	 	 	 B i b l i o m e t r i c   a n a l y s i s   o f   a n a e s t h e s i a   j o u r n a l   e d i t o r i a l   b o a r d   m e m b e r s :   c o r r e l a t i o n   b e t w e e n   j o u r n a l   i m p a c t   f a c t o r   a n d   t h e   m e d i a n   h - i n d e x   o f   i t s   b o a r d   m e m b e r s 	 B R I T I S H   J O U R N A L   O F   A N A E S T H E S I A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a c a d e m i c   a n a e s t h e s i a ;   b i b l i o m e t r i c s ;   h - i n d e x ;   i m p a c t   f a c t o r ;   p e r f o r m a n c e   m e a s u r e s 	 S E L F - C I T A T I O N S ;   P O W E R 	 B a c k g r o u n d .   h - i n d e x   i s   u s e f u l   f o r   q u a n t i f y i n g   s c h o l a r l y   a c t i v i t y   i n   m e d i c i n e ,   b u t   t h i s   s t a t i s t i c   h a s   n o t   b e e n   e x t e n s i v e l y   a p p l i e d   a s   a   m e a s u r e   o f   p r o d u c t i v i t y   i n   a n a e s t h e s i a .   W e   c o n d u c t e d   a   b i b l i o m e t r i c   a n a l y s i s   o f   h - i n d e x   i n   e d i t o r i a l   b o a r d   m e m b e r s   a n d   t e s t e d   t h e   h y p o t h e s i s   t h a t   e d i t o r i a l   b o a r d   m e m b e r s   o f   a n a e s t h e s i a   j o u r n a l s   w i t h   h i g h e r   i m p a c t   f a c t o r s   ( I F s )   h a v e   h i g h e r   h - i n d i c e s .   M e t h o d s .   T e n   o f   1 9   j o u r n a l s   w i t h   2 0 0 9   I F > 1   w e r e   r a n d o m l y   c h o s e n   f r o m   J o u r n a l   C i t a t i o n   R e p o r t s   ( R ) .   B o a r d   m e m b e r s   w e r e   i d e n t i f i e d   u s i n g   e a c h   j o u r n a l ' s   w e b s i t e .   P u b l i c a t i o n s ,   c i t a t i o n s ,   c i t a t i o n s   p e r   p u b l i c a t i o n ,   a n d   h - i n d e x   f o r   e a c h   m e m b e r   w e r e   o b t a i n e d   u s i n g   S c o p u s   ( R ) .   R e s u l t s .   F o u r   h u n d r e d   a n d   t w e n t y - t h r e e   i n d i v i d u a l s   f i l l e d   4 8 1   a n a e s t h e s i a   e d i t o r i a l   b o a r d   p o s i t i o n s .   T h e   m e d i a n   h - i n d e x   o f   a l l   e d i t o r i a l   b o a r d   m e m b e r s   w a s   1 4 .   B o a r d   m e m b e r s   p u b l i s h e d   7 5   p a p e r s   ( m e d i a n )   w i t h   1 0 0 6   c i t a t i o n s   a n d   1 3   c i t a t i o n s   p e r   p u b l i c a t i o n .   M e m b e r s   s e r v i n g   o n   j o u r n a l s   w i t h   I F   g r e a t e r   t h a n   m e d i a n   h a d   s i g n i f i c a n t l y   ( P < 0 . 0 5 ;   W i l c o x o n ' s   r a n k - s u m   t e s t )   g r e a t e r   m e d i a n   h - i n d e x ,   c i t a t i o n s ,   a n d   c i t a t i o n s   p e r   p u b l i c a t i o n   t h a n   t h o s e   a t   j o u r n a l s   w i t h   I F   l e s s   t h a n   m e d i a n .   A   s i g n i f i c a n t   c o r r e l a t i o n   b e t w e e n   t h e   m e d i a n   h - i n d e x   o f   a   j o u r n a l ' s   e d i t o r i a l   b o a r d   m e m b e r s   a n d   i t s   I F   ( h - i n d e x   3 . 0 1 x I F + 6 . 8 5 ;   r ( 2 ) = 0 . 4 5 2 ;   P = 0 . 0 3 3 )   w a s   o b s e r v e d   f o r   t h e   1 0   j o u r n a l s   e x a m i n e d .   B o a r d   m e m b e r s   o f   s u b s p e c i a l i t y - s p e c i f i c   j o u r n a l s   h a d   b i b l i o m e t r i c   i n d i c e s   t h a t   w e r e   l e s s   t h a n   t h o s e   a t   g e n e r a l   j o u r n a l s .   T h e   h - i n d e x   w a s   g r e a t e r   i n   i n d i v i d u a l s   s e r v i n g   m o r e   t h a n   o n e   j o u r n a l .   E u r o p e a n   e d i t o r i a l   b o a r d   m e m b e r s   h a d   h i g h e r   h - i n d e x   v a l u e s   t h a n   t h e i r   A m e r i c a n   c o l l e a g u e s .   C o n c l u s i o n s .   T h e   r e s u l t s   s u g g e s t   t h a t   e d i t o r i a l   b o a r d   m e m b e r s   o f   a n a e s t h e s i a   j o u r n a l s   w i t h   h i g h e r   I F s   h a v e   h i g h e r   h - i n d i c e s . 	 [ P a g e l ,   P .   S . ;   H u d e t z ,   J .   A . ]   C l e m e n t   J   Z a b l o c k i   V e t   A f f a i r s   M e d   C t r ,   A n e s t h e s i a   S e r v ,   M i l w a u k e e ,   W I   5 3 2 9 5   U S A 	 P a g e l ,   P S   ( r e p r i n t   a u t h o r ) ,   C l e m e n t   J   Z a b l o c k i   V e t   A f f a i r s   M e d   C t r ,   A n e s t h e s i a   S e r v ,   5 0 0 0   W   N a t l   A v e ,   M i l w a u k e e ,   W I   5 3 2 9 5   U S A . 	 p s p a g e l @ m c w . e d u 	 	 	 	 	 B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   C a s t i l l o   M ,   2 0 1 0 ,   A M   J   N E U R O R A D I O L ,   V 3 1 ,   P 7 8 3 ,   D O I   1 0 . 3 1 7 4 / a j n r . A 1 8 8 8 ;   D o d s o n   M V ,   2 0 0 9 ,   B I O C H E M   B I O P H   R E S   C O ,   V 3 8 7 ,   P 6 2 5 ,   D O I   1 0 . 1 0 1 6 / j . b b r c . 2 0 0 9 . 0 7 . 0 9 1 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   F a l a g a s   M E ,   2 0 0 6 ,   F A S E B   J ,   V 2 0 ,   P 1 0 3 9 ,   D O I   1 0 . 1 0 9 6 / f j . 0 6 - 0 6 0 3 u f m ;   F a s s o u l a k i   A ,   2 0 0 2 ,   A C T A   A N A E S T H   S C A N D ,   V 4 6 ,   P 9 0 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 2 . 4 6 0 7 2 3 . x ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   F a s s o u l a k i   A ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 5 3 ;   F u l l e r   C l i f t o n   D ,   2 0 0 9 ,   J   A m   C o l l   R a d i o l ,   V 6 ,   P 1 1 2 ,   D O I   1 0 . 1 0 1 6 / j . j a c r . 2 0 0 8 . 0 7 . 0 0 4 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J e a n g   K T ,   2 0 0 7 ,   R E T R O V I R O L O G Y ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 4 6 9 0 - 4 - 4 2 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M i s h r a   D C ,   2 0 0 8 ,   N A T U R E ,   V 4 5 1 ,   P 2 4 4 ,   D O I   1 0 . 1 0 3 8 / 4 5 1 2 4 4 a ;   O ' L e a r y   J D ,   2 0 1 0 ,   C A N   J   A N A E S T H ,   V 5 7 ,   P 5 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 2 6 3 0 - 0 1 0 - 9 2 9 2 - 6 ;   P a t s o p o u l o s   N A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 3 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 3 . 1 9 . 2 3 6 2 ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 ;   S I M O N S   K ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 2 ,   P 1 9 1 ;   S p e a r m a n   C M ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 9 2 9 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ;   S y p s a   V ,   2 0 0 9 ,   B M C   M E D   R E S   M E T H O D O L ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 9 - 3 3 ;   T h o m p s o n   D F ,   2 0 0 9 ,   A M   J   P H A R M   E D U C ,   V 7 3 ;   v a n   H a s e l e n   R ,   2 0 0 7 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 7 . 1 0 . 0 0 4 ;   W e n d l   M C ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 b ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   N A T U R E ,   V 4 3 5 ,   P 1 0 0 3 	 2 7 	 2 5 	 2 5 	 1 	 1 6 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 0 0 0 7 - 0 9 1 2 	 	 	 B R I T   J   A N A E S T H 	 B r .   J .   A n a e s t h . 	 S E P 	 2 0 1 1 	 1 0 7 	 3 	 	 	 	 	 3 5 7 	 3 6 1 	 	 1 0 . 1 0 9 3 / b j a / a e r 1 9 1 	 	 5 	 A n e s t h e s i o l o g y 	 A n e s t h e s i o l o g y 	 8 0 7 O W 	 W O S : 0 0 0 2 9 3 9 1 0 4 0 0 0 1 0 	 2 1 7 0 0 6 1 4 	 
 
 J 	 R o s a s ,   S R ;   K a g a n ,   J M ;   S c h o u t e n ,   J T ;   S l a c k ,   P A ;   T r o c h i m ,   W M K 	 	 	 	 R o s a s ,   S c o t t   R . ;   K a g a n ,   J o n a t h a n   M . ;   S c h o u t e n ,   J e f f r e y   T . ;   S l a c k ,   P e r r y   A . ;   T r o c h i m ,   W i l l i a m   M .   K . 	 	 	 E v a l u a t i n g   R e s e a r c h   a n d   I m p a c t :   A   B i b l i o m e t r i c   A n a l y s i s   o f   R e s e a r c h   b y   t h e   N I H / N I A I D   H I V / A I D S   C l i n i c a l   T r i a l s   N e t w o r k s 	 P L O S   O N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 A I D S   L I T E R A T U R E ;   L A T I N - A M E R I C A ;   C I T A T I O N ;   M E T R I C S ;   A F R I C A ;   O U T P U T 	 E v a l u a t i v e   b i b l i o m e t r i c s   u s e s   a d v a n c e d   t e c h n i q u e s   t o   a s s e s s   t h e   i m p a c t   o f   s c h o l a r l y   w o r k   i n   t h e   c o n t e x t   o f   o t h e r   s c i e n t i f i c   w o r k   a n d   u s u a l l y   c o m p a r e s   t h e   r e l a t i v e   s c i e n t i f i c   c o n t r i b u t i o n s   o f   r e s e a r c h   g r o u p s   o r   i n s t i t u t i o n s .   U s i n g   p u b l i c a t i o n s   f r o m   t h e   N a t i o n a l   I n s t i t u t e   o f   A l l e r g y   a n d   I n f e c t i o u s   D i s e a s e s   ( N I A I D )   H I V / A I D S   e x t r a m u r a l   c l i n i c a l   t r i a l s   n e t w o r k s ,   w e   a s s e s s e d   t h e   p r e s e n c e ,   p e r f o r m a n c e ,   a n d   i m p a c t   o f   p a p e r s   p u b l i s h e d   i n   2 0 0 6 - 2 0 0 8 .   T h r o u g h   t h i s   a p p r o a c h ,   w e   s o u g h t   t o   e x p a n d   t r a d i t i o n a l   b i b l i o m e t r i c   a n a l y s e s   b e y o n d   c i t a t i o n   c o u n t s   t o   i n c l u d e   n o r m a t i v e   c o m p a r i s o n s   a c r o s s   j o u r n a l s   a n d   f i e l d s ,   v i s u a l i z a t i o n   o f   c o - a u t h o r s h i p   a c r o s s   t h e   n e t w o r k s ,   a n d   a s s e s s   t h e   i n c l u s i o n   o f   p u b l i c a t i o n s   i n   r e v i e w s   a n d   s y n t h e s e s .   S p e c i f i c a l l y ,   w e   e x a m i n e d   t h e   r e s e a r c h   o u t p u t   o f   t h e   n e t w o r k s   i n   t e r m s   o f   t h e   a )   p r e s e n c e   o f   p a p e r s   i n   t h e   s c i e n t i f i c   j o u r n a l   h i e r a r c h y   r a n k e d   o n   t h e   b a s i s   o f   j o u r n a l   i n f l u e n c e   m e a s u r e s ,   b )   p e r f o r m a n c e   o f   p u b l i c a t i o n s   o n   t r a d i t i o n a l   b i b l i o m e t r i c   m e a s u r e s ,   a n d   c )   i m p a c t   o f   p u b l i c a t i o n s   i n   c o m p a r i s o n s   w i t h   s i m i l a r   p u b l i c a t i o n s   w o r l d w i d e ,   a d j u s t e d   f o r   j o u r n a l s   a n d   f i e l d s .   W e   a l s o   e x a m i n e d   c o l l a b o r a t i o n   a n d   i n t e r d i s c i p l i n a r i t y   a c r o s s   t h e   i n i t i a t i v e ,   t h r o u g h   n e t w o r k   a n a l y s i s   a n d   m o d e l i n g   o f   c o - a u t h o r s h i p   p a t t e r n s .   F i n a l l y ,   w e   e x p l o r e d   t h e   u p t a k e   o f   n e t w o r k   p r o d u c e d   p u b l i c a t i o n s   i n   r e s e a r c h   r e v i e w s   a n d   s y n t h e s e s .   O v e r a l l ,   t h e   r e s u l t s   s u g g e s t   t h e   n e t w o r k s   a r e   p r o d u c i n g   h i g h l y   r e c o g n i z e d   w o r k ,   e n g a g i n g   i n   e x t e n s i v e   i n t e r d i s c i p l i n a r y   c o l l a b o r a t i o n s ,   a n d   h a v i n g   a n   i m p a c t   a c r o s s   s e v e r a l   a r e a s   o f   H I V - r e l a t e d   s c i e n c e .   T h e   s t r e n g t h s   a n d   l i m i t a t i o n s   o f   t h e   a p p r o a c h   f o r   e v a l u a t i o n   a n d   m o n i t o r i n g   r e s e a r c h   i n i t i a t i v e s   a r e   d i s c u s s e d . 	 [ R o s a s ,   S c o t t   R . ;   S l a c k ,   P e r r y   A . ]   C o n c e p t   S y s t   I n c ,   I t h a c a ,   N Y   U S A ;   [ K a g a n ,   J o n a t h a n   M . ]   N I A I D ,   D i v   C l i n   R e s ,   N I H ,   B e t h e s d a ,   M D   2 0 8 9 2   U S A ;   [ S c h o u t e n ,   J e f f r e y   T . ]   F r e d   H u t c h i n s o n   C a n c   R e s   C t r ,   H I V   A I D S   N e t w o r k   C o o r d i n a t   P r o j e c t ,   S e a t t l e ,   W A   9 8 1 0 4   U S A ;   [ T r o c h i m ,   W i l l i a m   M .   K . ]   C o r n e l l   U n i v ,   D e p t   P o l i c y   A n a l   &   M a n a g e m e n t ,   I t h a c a ,   N Y   U S A 	 R o s a s ,   S R   ( r e p r i n t   a u t h o r ) ,   C o n c e p t   S y s t   I n c ,   I t h a c a ,   N Y   U S A . 	 s r o s a s @ c o n c e p t s y s t e m s . c o m 	 	 	 N a t i o n a l   I n s t i t u t e   o f   A l l e r g y   &   I n f e c t i o u s   D i s e a s e s   ( N I A I D )   [ N 0 1 - A I - 5 0 0 2 2 ] ;   N a t i o n a l   C e n t e r   f o r   R e s e a r c h   R e s o u r c e s   ( N C R R )   [ U L 1 - R R - 0 2 4 9 9 6 ] ;   N I A I D   [ U 0 1   A I 0 6 8 6 1 4 ,   U 0 1 A I 0 6 8 6 3 6 ,   U 0 1 A I 0 6 8 6 1 9 ,   U 0 1 A I 0 6 8 6 3 2 ,   U 0 1 A I 0 6 8 6 4 1 ,   U 0 1 A I 0 6 8 6 3 3 ] ;   N C R R   a r e   c o m p o n e n t s   o f   t h e   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   D e p a r t m e n t   o f   H e a l t h   a n d   H u m a n   S e r v i c e s ,   U n i t e d   S t a t e s   G o v e r n m e n t 	 T h i s   w o r k   w a s   s u p p o r t e d ,   i n   p a r t ,   b y   C o n t r a c t   N o .   N 0 1 - A I - 5 0 0 2 2 ,   " H I V   C l i n i c a l   R e s e a r c h   S u p p o r t ' '   f r o m   t h e   N a t i o n a l   I n s t i t u t e   o f   A l l e r g y   &   I n f e c t i o u s   D i s e a s e s   ( N I A I D ) ,   i n   p a r t   b y   G r a n t   N o .   U L 1 - R R - 0 2 4 9 9 6 ,   f r o m   t h e   N a t i o n a l   C e n t e r   f o r   R e s e a r c h   R e s o u r c e s   ( N C R R )   a n d   i n   p a r t   b y   g r a n t s   U 0 1   A I 0 6 8 6 1 4 ,   U 0 1 A I 0 6 8 6 3 6 ,   U 0 1 A I 0 6 8 6 1 9 ,   U 0 1 A I 0 6 8 6 3 2 ,   U 0 1 A I 0 6 8 6 4 1 ,   a n d   U 0 1 A I 0 6 8 6 3 3   ( N I A I D ) .   N I A I D   a n d   N C R R   a r e   c o m p o n e n t s   o f   t h e   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   D e p a r t m e n t   o f   H e a l t h   a n d   H u m a n   S e r v i c e s ,   U n i t e d   S t a t e s   G o v e r n m e n t .   N o   a d d i t i o n a l   e x t e r n a l   f u n d i n g   w a s   r e c e i v e d   f o r   t h i s   s t u d y .   T h e s e   f u n d e r s   h a d   n o   r o l e   i n   s t u d y   d e s i g n ,   d a t a   c o l l e c t i o n   a n d   a n a l y s i s ,   d e c i s i o n   t o   p u b l i s h ,   o r   p r e p a r a t i o n   o f   t h e   m a n u s c r i p t .   S R R   a n d   P A S   a r e   e m p l o y e d   b y   C o n c e p t   S y s t e m s ,   I n c   a n d   W M K T   i s   a   c o - o w n e r   o f   t h e   c o m p a n y .   A l l   t h r e e   s e r v e d   a s   c o n s u l t a n t s   t o   N I A I D   a n d   c o n t r i b u t e d   t o   t h e   s t u d y   d e s i g n ,   a n a l y s i s ,   a n d   m a n u s c r i p t   p r e p a r a t i o n . 	 A l t h o u s e   B M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 3 6 ;   A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   B e r g s t r o m   C T ,   2 0 0 8 ,   J   N E U R O S C I ,   V 2 8 ,   P 1 1 4 3 3 ,   D O I   1 0 . 1 5 2 3 / J N E U R O S C I . 0 0 0 3 - 0 8 . 2 0 0 8 ;   B I E R B A U M   E G ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 5 3 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 8 ) 4 6 : 7 < 5 3 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - C ;   C a m p b e l l   D ,   2 0 1 0 ,   A M   J   E V A L ,   V 3 1 ,   P 6 6 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 8 2 1 4 0 0 9 3 5 4 7 7 4 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C o z z e n s   S E ,   1 9 9 7 ,   E V A L   P R O G R A M   P L A N N ,   V 2 0 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 7 1 8 9 ( 9 6 ) 0 0 0 3 8 - 9 ;   F A L A G A S   M E ,   2 0 0 6 ,   A I D S   R E S   H U M   R E T R O V ,   V 2 2 ,   P 1 1 1 9 ;   F r a n k s   A L ,   2 0 0 6 ,   A M   J   P R E V   M E D ,   V 3 0 ,   P 2 1 1 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 0 5 . 1 0 . 0 2 5 ;   G r a n t   J ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 1 1 0 7 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 4 2 . 1 1 0 7 ;   G r e e n   L A ,   2 0 0 5 ,   J   A M   B O A R D   F A M   P R A C T ,   V 1 8 ,   P 5 4 1 ;   H A Y N E S   R B ,   1 9 8 3 ,   A R C H   I N T E R N   M E D ,   V 1 4 3 ,   P 1 9 7 1 ,   D O I   1 0 . 1 0 0 1 / a r c h i n t e . 1 4 3 . 1 0 . 1 9 7 1 ;   H A Y N E S   R B ,   1 9 9 0 ,   A N N   I N T E R N   M E D ,   V 1 1 3 ,   P 7 2 4 ;   H i c k s   D ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 7 8 ;   I o a n n i d i s   J P A ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 2 7 7 8 ;   K a g a n   J o n a t h a n   M ,   2 0 0 9 ,   H e a l t h   R e s   P o l i c y   S y s t ,   V 7 ,   P 1 2 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 8 - 4 5 0 5 - 7 - 1 2 ;   K a v a c i c   N . ,   2 0 0 4 ,   C A N A D I A N   M E D I C A L   A S S ,   V 1 7 0 ,   P 1 9 2 9 ;   K I N G   D ,   2 0 0 8 ,   I N F O R M   S E R V I C E S   U S E ,   V 2 8 ,   P 2 1 5 ;   K o s k i n e n   J ,   2 0 0 8 ,   N O R D   J   P S Y C H I A T ,   V 6 2 ,   P 1 3 6 ,   D O I   1 0 . 1 0 8 0 / 0 8 0 3 9 4 8 0 8 0 1 9 6 1 6 6 7 ;   L E E U W E N   T A ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 1 8 3 ;   L e n f a n t   C ,   2 0 0 3 ,   N E W   E N G L   J   M E D ,   V 3 4 9 ,   P 8 6 8 ,   D O I   1 0 . 1 0 5 6 / N E J M s a 0 3 5 5 0 7 ;   M a c i a s - C h a p u l a   C A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 0 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 7 4 2 3 0 8 4 3 ;   M a c i a s - C h a p u l a   C A ,   2 0 0 0 ,   B   M E D   L I B R   A S S O C ,   V 8 8 ,   P 5 6 ;   M a c i a s - C h a p u l a   C A ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 5 ;   M a c i a s - C h a p u l a   C A ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 2 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N O Y O N S   E C M ,   2 0 0 3 ,   M A P P I N G   E X C E L L E N C E   1 ;   N O Y O N S   E C M ,   2 0 0 3 ,   M A P P I N G   E X C E L L E N C E   2 ;   O n y a n c h a   O B ,   2 0 0 4 ,   L I B   I N F O R M   S C I   R E S ,   V 2 4 ,   P 4 4 3 ;   O n y a n c h a   O B ,   2 0 0 8 ,   A J A R - A F R   J   A I D S   R E S ,   V 7 ,   P 5 5 ,   D O I   1 0 . 2 9 8 9 / A J A R . 2 0 0 8 . 7 . 1 . 7 . 4 3 5 ;   P a t r a   S K ,   2 0 0 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 9 ,   P 1 2 4 ,   D O I   1 0 . 1 0 1 6 / j . l i s r . 2 0 0 6 . 0 8 . 0 1 0 ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   R o s v a l l   M ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 1 1 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 6 8 5 1 1 0 5 ;   S E N G U P T A   I N ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 6 0 ;   S M A L L   H ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 2 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 2 5 ;   S M A L L   H ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 4 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 6 ;   S m i t h   K ,   2 0 0 5 ,   M A T H   C O M P U T   S I M U L A T ,   V 6 9 ,   P 1 7 7 ,   D O I   1 0 . 1 0 1 6 / j . m a t c o m . 2 0 0 5 . 0 2 . 0 2 7 ;   S T R O T M A N N   A ,   2 0 0 9 ,   P   A M   S O C   I N F O R M   S C I ;   T R O C H I M   W M ,   2 0 0 7 ,   A M   J   E V A L ,   V 2 9 ,   P 8 ;   U t h m a n   O l a l e k a n   A ,   2 0 0 8 ,   B M C   I n f e c t   D i s ,   V 8 ,   P 1 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 3 3 4 - 8 - 1 9 ;   V a n   L e e u w e n   T N ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 9 3 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 2 7 5 2 9 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   V a n   R a a n   A . ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 8 ,   P 8 1 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 1 ;   W I E N G A R T   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 	 4 6 	 2 5 	 2 6 	 2 	 4 0 	 P U B L I C   L I B R A R Y   S C I E N C E 	 S A N   F R A N C I S C O 	 1 1 6 0   B A T T E R Y   S T R E E T ,   S T E   1 0 0 ,   S A N   F R A N C I S C O ,   C A   9 4 1 1 1   U S A 	 1 9 3 2 - 6 2 0 3 	 	 	 P L O S   O N E 	 P L o S   O n e 	 M A R   4 	 2 0 1 1 	 6 	 3 	 	 	 	 	 	 	 e 1 7 4 2 8 	 1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 7 4 2 8 	 	 1 2 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 7 3 0 H X 	 W O S : 0 0 0 2 8 8 0 2 5 5 0 0 0 1 3 	 2 1 3 9 4 1 9 8 	 
 
 J 	 L a n c h o - B a r r a n t e s ,   B S ;   G u e r r e r o - B o t e ,   V P ;   M o y a - A n e g o n ,   F 	 	 	 	 L a n c h o - B a r r a n t e s ,   B a r b a r a   S . ;   G u e r r e r o - B o t e ,   V i c e n t e   P . ;   M o y a - A n e g o n ,   F e l i x 	 	 	 W h a t   l i e s   b e h i n d   t h e   a v e r a g e s   a n d   s i g n i f i c a n c e   o f   c i t a t i o n   i n d i c a t o r s   i n   d i f f e r e n t   d i s c i p l i n e s ? 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   i n d i c a t o r s ;   s c i e n t i f i c   i n d i c a t o r s 	 S O C I A L - S C I E N C E S ;   B O O K S ;   S C H O L A R S H I P ;   H U M A N I T I E S ;   S O C I O L O G Y ;   C A R E E R S ;   P R I N T 	 T h e   l i m i t a t i o n s   o f   c i t a t i o n - b a s e d   i n d i c a t o r s   i n c l u d e   a   l a c k   o f   c o v e r a g e ,   n o   n o r m a l i z a t i o n   w i t h   r e s p e c t   t o   t h e   l e n g t h   o f   r e f e r e n c e   l i s t s   ( w i t h   a   p o t e n t i a l   b i a s   i n   f a v o u r   o f   r e v i e w s ) ,   a n d   d i f f e r e n t   c i t a t i o n   h a b i t s .   A s   a   c o n s e q u e n c e ,   t h e   d i s t r i b u t i o n s   o f   t h e   i n d i c a t o r s   a r e   n o t   c o m p a r a b l e   a c r o s s   d i f f e r e n t   d i s c i p l i n e s .   H e r e   w e   s h o w   t h a t   t h e   m o s t   p o p u l a r   j o u r n a l   c i t a t i o n   i n d i c a t o r s   u s e d   i n   q u a l i t y   a s s e s s m e n t   -   t h e   j o u r n a l   i m p a c t   f a c t o r s   o f   T h o m s o n   S c i e n t i f i c   a n d   t h e   s c i e n t i f i c   j o u r n a l   r a n k i n g s   o f   S c o p u s   -   a r e   s t r o n g l y   c o r r e l a t e d   w i t h   t h e   p r o p o r t i o n   o f   w i t h i n - d a t a b a s e   r e f e r e n c e s ,   a n d   e v e n   m o r e   s o   w i t h   t h e   n u m b e r   o f   w i t h i n - d a t a b a s e   r e c e n t   r e f e r e n c e s   p e r   p a p e r .   N o   s i g n i f i c a n t   c o r r e l a t i o n s   w e r e   f o u n d   w i t h   o t h e r   b i b l i o m e t r i c   m a g n i t u d e s .   W e   a n t i c i p a t e   t h a t   t h e s e   r e s u l t s   w i l l   b e   a   s t a r t i n g   p o i n t   f o r   m o r e   s o p h i s t i c a t e d   i n d i c a t o r   m o d e l s   t h a t   t a k e   t h i s   d e p e n d e n c e   i n t o   a c c o u n t ,   a n d   f o r   t h e   d e s i g n   o f   s t r a t e g i e s   a i m e d   a t   e x t e n d i n g   s u c h   b i b l i o m e t r i c   d a t a b a s e s   a s   T h o m s o n   S c i e n t i f i c ' s   S c i e n c e   C i t a t i o n   I n d e x   o r   E l s e v i e r ' s   S c o p u s   t o   i m p r o v e   t h e i r   c a p a c i t y   t o   e v a l u a t e   a l l   s c i e n c e s . 	 [ G u e r r e r o - B o t e ,   V i c e n t e   P . ]   U n i v   E x t r e m a d u r a ,   D e p t   I n f o r m a c   &   C o m u n i c a c ,   G r p   S c i m a g o ,   E - 0 6 0 7 1   B a d a j o z ,   S p a i n ;   [ M o y a - A n e g o n ,   F e l i x ]   C S I C ,   C C H S ,   I P P ,   G r p   S c i m a g o ,   M a d r i d ,   S p a i n 	 G u e r r e r o - B o t e ,   V P   ( r e p r i n t   a u t h o r ) ,   U n i v   E x t r e m a d u r a ,   D e p t   I n f o r m a c   &   C o m u n i c a c ,   G r p   S c i m a g o ,   E - 0 6 0 7 1   B a d a j o z ,   S p a i n . 	 g u e r r e r o @ u n e x . e s 	 J i m e n e z - F a n j u l ,   N o e l i a / G - 1 2 5 3 - 2 0 1 0 ;   M o y a   A n e g o n ,   F e l i x / C - 4 0 0 4 - 2 0 0 9 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / E - 7 5 4 6 - 2 0 1 6 ;   L a n c h o   B a r r a n t e s ,   B a r b a r a   S a n d r a / I - 9 3 5 6 - 2 0 1 6 	 M o y a   A n e g o n ,   F e l i x / 0 0 0 0 - 0 0 0 2 - 0 2 5 5 - 8 6 2 8 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / 0 0 0 0 - 0 0 0 3 - 4 8 2 1 - 9 7 6 8 ;   L a n c h o   B a r r a n t e s ,   B a r b a r a   S a n d r a / 0 0 0 0 - 0 0 0 1 - 9 9 9 4 - 8 8 8 6 	 J u n t a   d e   E x t r e m a d u r a   -   C o n s e j e r i a   d e   E d u c a c i o n   C i e n c i a   a n d   T e c n o l o g i a ;   F o n d o   S o c i a l   E u r o p e o   [ P R I 0 6 A 2 0 0 ] ;   P l a n   N a c i o n a l   d e   I n v e s t i g a c i o n   C i e n t i f i c a ,   D e s a r r o l l o   e   I n n o v a c i o n   T e c n o l o g i c a   [ 2 0 0 8 - 2 0 1 1 ] ;   F o n d o   E u r o p e o   d e   D e s a r r o l l o   R e g i o n a l   ( F E D E R )   [ T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 1 ,   T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 2 ] 	 T h i s   w o r k   w a s   f i n a n c e d   b y   t h e   J u n t a   d e   E x t r e m a d u r a   -   C o n s e j e r i a   d e   E d u c a c i o n   C i e n c i a   a n d   T e c n o l o g i a   a n d   t h e   F o n d o   S o c i a l   E u r o p e o   a s   p a r t   o f   r e s e a r c h   p r o j e c t   P R I 0 6 A 2 0 0 ,   a n d   b y   t h e   P l a n   N a c i o n a l   d e   I n v e s t i g a c i o n   C i e n t i f i c a ,   D e s a r r o l l o   e   I n n o v a c i o n   T e c n o l o g i c a   2 0 0 8 - 2 0 1 1   a n d   t h e   F o n d o   E u r o p e o   d e   D e s a r r o l l o   R e g i o n a l   ( F E D E R )   a s   p a r t   o f   r e s e a r c h   p r o j e c t s   T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 1   a n d   T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 2 . 	 A l t h o u s e   B .   M . ,   2 0 0 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 2 7 ;   B R A U N   T ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ;   B R O A D U S   R N ,   1 9 7 1 ,   I N T   S O C   S C I   J ,   V 2 3 ,   P 2 3 6 ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 4 0 2 ;   C L E M E N S   E S ,   1 9 9 5 ,   A M   J   S O C I O L ,   V 1 0 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 8 6 / 2 3 0 7 3 0 ;   C r o n i n   B ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 2 6 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 0 ;   F I L I P P O   D ,   2 0 0 2 ,   E S T A D O   C I E N C I A ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 2 ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   G O N Z A L E Z P E R E I R A   B ,   2 0 0 9 ,   S J R   I N D I C A T O R   U N P U B ;   G r u p o   S C I m a g o ,   2 0 0 6 ,   P R O F   I N F O R M ,   V 1 5 ,   P 1 4 4 ;   G u e r r e r o - B o t e   V P ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 2 - 3 ;   H a r g e n s   L L ,   2 0 0 0 ,   A M   S O C I O L   R E V ,   V 6 5 ,   P 8 4 6 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 1 6 ;   K y v i k   S ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 7 5 4 2 3 4 8 2 ;   L e w i s o n   G ,   2 0 0 1 ,   R E S   E V A L U A T ,   V 1 0 ,   P 8 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 1 7 8 1 7 7 7 0 5 1 ;   G o l d s t o n e   R .   L . ,   J   A M   S O C   I N   I N   P R E S S ;   L i n d h o l m R o m a n t s c h u k   Y ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 3 8 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 7 2 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M O E D   H F ,   2 0 0 9 ,   M E A S U R I N G   C O N T   U N P U B ;   M o y a - A n e g o n   F . ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 5 3 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 1 1 9 2 - 0 0 7 - 1 6 8 1 - 4 ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 3 ;   N o c k   D A ,   2 0 0 1 ,   C A N   J   S O C I O L ,   V 2 6 ,   P 4 6 9 ,   D O I   1 0 . 2 3 0 7 / 3 3 4 1 8 9 7 ;   D e   S o l l a   P r i c e   D . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ;   S M A L L   H G ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 4 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 1 ;   T h o m p s o n   J W ,   2 0 0 2 ,   L I B R I ,   V 5 2 ,   P 1 2 1 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 2 . 1 2 1 	 2 7 	 2 5 	 2 5 	 0 	 3 6 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F   S C I 	 J .   I n f .   S c i . 	 J U N 	 2 0 1 0 	 3 6 	 3 	 	 	 	 	 3 7 1 	 3 8 2 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 0 3 6 6 0 7 7 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 0 1 T Z 	 W O S : 0 0 0 2 7 8 0 8 8 9 0 0 0 0 6 	 	 
 
 J 	 N o r r i s ,   M ;   O p p e n h e i m ,   C 	 	 	 	 N o r r i s ,   M i c h a e l ;   O p p e n h e i m ,   C h a r l e s 	 	 	 T h e   h - i n d e x :   a   b r o a d   r e v i e w   o f   a   n e w   b i b l i o m e t r i c   i n d i c a t o r 	 J O U R N A L   O F   D O C U M E N T A T I O N 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 I n f o r m a t i o n   s t u d i e s ;   I n d e x i n g ;   I n f o r m a t i o n   r e s e a r c h 	 A S S E S S M E N T   E X E R C I S E   R A T I N G S ;   S C I E N T I F I C - R E S E A R C H   O U T P U T ;   H I R S C H - T Y P E   I N D E X E S ;   W E B - O F - S C I E N C E ;   E G G H E S   G - I N D E X ;   G O O G L E   S C H O L A R ;   C I T A T I O N   C O U N T S ;   I N F O R M A T I O N - S C I E N C E ;   S E L F - C I T A T I O N ;   R - I N D E X 	 P u r p o s e   -   T h i s   r e v i e w   a i m s   t o   s h o w ,   b r o a d l y ,   h o w   t h e   h - i n d e x   h a s   b e c o m e   a   s u b j e c t   o f   w i d e s p r e a d   d e b a t e ,   h o w   i t   h a s   s p a w n e d   m a n y   v a r i a n t s   a n d   d i v e r s e   a p p l i c a t i o n s   s i n c e   f i r s t   i n t r o d u c e d   i n   2 0 0 5   a n d   s o m e   o f   t h e   i s s u e s   i n   i t s   u s e .   D e s i g n / m e t h o d o l o g y / a p p r o a c h   -   T h e   r e v i e w   d r e w   o n   a   r a n g e   o f   m a t e r i a l   p u b l i s h e d   i n   1 9 9 0   o r   s o   s o u r c e s   p u b l i s h e d   s i n c e   2 0 0 5 .   F r o m   t h e s e   s o u r c e s ,   a   n u m b e r   o f   t h e m e s   w e r e   i d e n t i f i e d   a n d   d i s c u s s e d   r a n g i n g   f r o m   t h e   h - i n d e x ' s   a d v a n t a g e s   t o   w h i c h   c i t a t i o n   d a t a b a s e   m i g h t   b e   s e l e c t e d   f o r   i t s   c a l c u l a t i o n .   F i n d i n g s   -   T h e   a n a l y s i s   s h o w s   h o w   t h e   h - i n d e x   h a s   q u i c k l y   e s t a b l i s h e d   i t s e l f   a s   a   m a j o r   s u b j e c t   o f   i n t e r e s t   i n   t h e   f i e l d   o f   b i b l i o m e t r i c s .   S t u d y   o f   t h e   i n d e x   r a n g e s   f r o m   i t s   m a t h e m a t i c a l   u n d e r p i n n i n g   t o   a   r a n g e   o f   v a r i a n t s   p e r c e i v e d   t o   a d d r e s s   t h e   i n d e x e s '   s h o r t c o m i n g s .   T h e   r e v i e w   i l l u s t r a t e s   h o w   w i d e l y   t h e   i n d e x   h a s   b e e n   a p p l i e d   b u t   a l s o   h o w   c a r e   m u s t   b e   t a k e n   i n   i t s   a p p l i c a t i o n .   O r i g i n a l i t y / v a l u e   -   T h e   u s e   o f   b i b l i o m e t r i c   i n d i c a t o r s   t o   m e a s u r e   r e s e a r c h   p e r f o r m a n c e   c o n t i n u e s ,   w i t h   t h e   h - i n d e x   a s   i t s   l a t e s t   a d d i t i o n .   T h e   u s e   o f   t h e   h - i n d e x ,   i t s   v a r i a n t s   a n d   m a n y   a p p l i c a t i o n s   t o   w h i c h   i t   h a s   b e e n   p u t   a r e   s t i l l   a t   t h e   e x p l o r a t o r y   s t a g e .   T h e   r e v i e w   s h o w s   t h e   b r e a d t h   a n d   d i v e r s i t y   o f   t h i s   r e s e a r c h   a n d   t h e   n e e d   t o   v e r i f y   t h e   v e r a c i t y   o f   t h e   h - i n d e x   b y   m o r e   s t u d i e s . 	 [ N o r r i s ,   M i c h a e l ;   O p p e n h e i m ,   C h a r l e s ]   U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h ,   L e i c s ,   E n g l a n d 	 O p p e n h e i m ,   C   ( r e p r i n t   a u t h o r ) ,   U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h ,   L e i c s ,   E n g l a n d . 	 c . o p p e n h e i m @ l b o r o . a c . u k 	 	 N o r r i s ,   M i c h a e l / 0 0 0 0 - 0 0 0 3 - 1 4 4 3 - 6 3 2 6 	 	 	 A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   A n d e r s o n   T R ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 5 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 7 1 - 2 ;   A n t o n a k i s   J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 2 ;   B A D O R   P ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 6 5 ;   B A I R D   L M ,   1 9 9 4 ,   J   I N F O R M   S C I ,   V 2 0 ,   P 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 4 0 2 0 0 0 1 0 2 ;   B a l l   P ,   2 0 0 5 ,   N A T U R E ,   V 4 3 6 ,   P 9 0 0 ,   D O I   1 0 . 1 0 3 8 / 4 3 6 9 0 0 a ;   B a n k s   M G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 6 - 5 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 5 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 8 0 - z ;   B a r - I l a n   J . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 3 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   B o r n m a n n   L . ,   2 0 0 9 ,   E U R O P E A N   J   O R G A N I C   C ,   V 1 0 ,   P 1 4 7 1 ;   B o r n m a n n   L ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 4 9 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 3 1 9 1 6 6 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 6 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B o r n m a n n   L ,   2 0 0 9 ,   E M B O   R E P ,   V 1 0 ,   P 2 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 0 8 . 2 3 3 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B r i t t a i n   J M ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 2 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 0 0 2 6 0 0 4 0 7 ;   C o s t a s   R ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 9 7 - 0 ;   C o s t a s   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 2 . 0 0 1 ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   C s a j b o k   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 9 - 9 ;   d a   L u z   M P ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 6 4 - 9 ;   E g g h e   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 2 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 9 ;   E g g h e   L . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 8 ;   E g g h e   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 6 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 4 5 ;   E g g h e   L ,   2 0 0 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 4 ,   P 7 7 0 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 7 . 0 5 . 0 0 3 ;   E g g h e   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 4 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 7 3 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 3 - 8 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E g g h e   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 4 4 ;   E g g h e   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 6 8 - 5 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   G l a n z e l   W ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 0 4 - x ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 1 5 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 1 2 ;   G L A N Z E L   W ,   2 0 0 6 ,   O P P O R T U N I T I E S   L I M I T A ;   G l a n z e l   W . ,   2 0 0 5 ,   I S S I   N E W S L E T T E R ,   V 1 ,   P 1 5 ;   G l a n z e l   W ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 8 9 - 0 ;   G u a n   J C ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 5 4 ;   H a r z i n g   A W ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 5 3 ;   H a r z i n g   A .   W . ,   2 0 0 7 ,   R E F L E C T I O N S   H   I N D E X ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I g l e s i a s   J E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 0 5 - x ;   J a c s o   P ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 5 2 4 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 9 7 4 0 3 ;   J a c s o   P ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 6 ,   P 7 8 4 ;   J a c s o   P ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 4 3 7 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 8 9 7 1 8 ;   J a c s o   P ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 2 6 6 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 7 9 8 7 2 ;   J a c s o   P ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 6 7 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 9 1 4 0 4 3 ;   J a r v e l i n   K ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 4 7 ;   J i n   B . ,   2 0 0 7 ,   I S S I   N E W S L E T T E R ,   V 3 ,   P 6 ;   J i n   B H ,   2 0 0 7 ,   C H I N E S E   S C I   B U L L ,   V 5 2 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ;   K A L Y A N E   V L ,   2 0 0 4 ,   M A L A Y S   J   L I B R   I N F   S C ,   V 9 ,   P 8 1 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K o s m u l s k i   M . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 4 ;   L i u   Y X ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 1 5 - 1 ;   M e h o   L I ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 7 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 7 4 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N e u h a u s   C ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 1 9 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 5 8 0 1 0 ;   N o r r i s   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 7 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 7 3 4 ;   O P P E N H E I M   C ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 0 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 0 ;   P r a t h a p   G ,   2 0 0 6 ,   C U R R   S C I   I N D I A ,   V 9 1 ,   P 1 4 3 9 ;   R e s e a r c h   I n f o r m a t i o n   N e t w o r k ,   2 0 0 9 ,   E   J   T H E I R   U S   V A L   I M P ;   R O U S S E A U   R ,   N E W   D E V   R E L A T E D   H I R S ;   R o u s s e a u   R ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 3 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 1 ;   R o u s s e a u   R ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 9 0 ;   R o u s s e a u   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 5 . 0 0 1 ;   R o u s s e a u   R ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 3 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 2 8 ;   S a a d   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 2 - 9 ;   S a n d e r s o n   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 1 8 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 7 1 ;   S c h r e i b e r   M ,   2 0 0 7 ,   E P L - E U R O P H Y S   L E T T ,   V 7 8 ,   D O I   1 0 . 1 2 0 9 / 0 2 9 5 - 5 0 7 5 / 7 8 / 3 0 0 0 2 ;   S c h r e i b e r   M . ,   2 0 0 8 ,   N E W   J   P H Y S ,   V 1 0 ;   S c h r e i b e r   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 5 6 ;   S c h r e i b e r   M ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 8 6 - 6 ;   S c h u b e r t   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 1 1 2 - x ;   S c h u b e r t   A ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 5 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 2 0 8 - 3 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   S Y M O N D S   M R E ,   2 0 0 6 ,   P L O S   O N E ,   V 1 ;   v a n   E c k   N J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 9 . 0 0 4 ;   v a n   L e e u w e n   T ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 5 7 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 3 1 9 1 7 5 ;   V a n c l a y   J K ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 2 ;   V a n c l a y   J K ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 5 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 6 ;   V A N R A A N   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 9 1 ;   V i n k l e r   P ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 4 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 7 2 1 6 5 ;   W A N   J ,   P U R E   H   I N D E X   C A L C U L A ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 2 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 2 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 9 . 0 0 1 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   M A T H   S O C   S C I ,   V 5 6 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t h s o c s c i . 2 0 0 8 . 0 3 . 0 0 1 ;   W U   Q ,   2 0 0 8 ,   W   I N D E X   S I G N I F I C A N T 	 9 4 	 2 5 	 2 5 	 7 	 4 7 	 E M E R A L D   G R O U P   P U B L I S H I N G   L I M I T E D 	 B I N G L E Y 	 H O W A R D   H O U S E ,   W A G O N   L A N E ,   B I N G L E Y   B D 1 6   1 W A ,   W   Y O R K S H I R E ,   E N G L A N D 	 0 0 2 2 - 0 4 1 8 	 	 	 J   D O C 	 J .   D o c . 	 	 2 0 1 0 	 6 6 	 5 	 	 	 	 	 6 8 1 	 7 0 5 	 	 1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 1 0 1 1 0 6 6 7 9 0 	 	 2 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 7 1 Q X 	 W O S : 0 0 0 2 8 3 5 2 4 9 0 0 0 0 5 	 	 
 
 J 	 D i n g ,   Y ;   J a c o b ,   E K ;   Z h a n g ,   Z X ;   F o o ,   S ;   Y a n ,   E ;   G e o r g e ,   N L ;   G u o ,   L J 	 	 	 	 D i n g ,   Y i n g ;   J a c o b ,   E l i n   K . ;   Z h a n g ,   Z h i x i o n g ;   F o o ,   S c h u b e r t ;   Y a n ,   E r j i a ;   G e o r g e ,   N i c o l a s   L . ;   G u o ,   L i j i a n g 	 	 	 P e r s p e c t i v e s   o n   S o c i a l   T a g g i n g 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 S o c i a l   t a g g i n g   i s   o n e   o f   t h e   m a j o r   p h e n o m e n a   t r a n s f o r m i n g   t h e   W o r l d   W i d e   W e b   f r o m   a   s t a t i c   p l a t f o r m   i n t o   a n   a c t i v e l y   s h a r e d   i n f o r m a t i o n   s p a c e .   T h i s   p a p e r   a d d r e s s e s   v a r i o u s   a s p e c t s   o f   s o c i a l   t a g g i n g ,   i n c l u d i n g   d i f f e r e n t   v i e w s   o n   t h e   n a t u r e   o f   s o c i a l   t a g g i n g ,   h o w   t o   m a k e   u s e   o f   s o c i a l   t a g s ,   a n d   h o w   t o   b r i d g e   s o c i a l   t a g g i n g   w i t h   o t h e r   W e b   f u n c t i o n a l i t i e s ;   i t   d i s c u s s e s   t h e   u s e   o f   f a c e t s   t o   f a c i l i t a t e   b r o w s i n g   a n d   s e a r c h i n g   o f   t a g g i n g   d a t a ;   a n d   i t   p r e s e n t s   a n   a n a l o g y   b e t w e e n   b i b l i o m e t r i c s   a n d   t a g o m e t r i c s ,   a r g u i n g   t h a t   e s t a b l i s h e d   b i b l i o m e t r i c   m e t h o d o l o g i e s   c a n   b e   a p p l i e d   t o   a n a l y z e   t a g g i n g   b e h a v i o r   o n   t h e   W e b .   B a s e d   o n   t h e   U p p e r   T a g   O n t o l o g y   ( U T O ) ,   a   W e b   c r a w l e r   w a s   b u i l t   t o   h a r v e s t   t a g   d a t a   f r o m   D e l i c i o u s ,   F l i c k r ,   a n d   Y o u T u b e   i n   S e p t e m b e r   2 0 0 7 .   I n   t o t a l ,   1 . 8   m i l l i o n   o b j e c t s ,   i n c l u d i n g   b o o k m a r k s ,   p h o t o s ,   a n d   v i d e o s ,   3 . 1   m i l l i o n   t a g g e r s ,   a n d   1 2 . 1   m i l l i o n   t a g s   w e r e   c o l l e c t e d   a n d   a n a l y z e d .   S o m e   t a g g i n g   p a t t e r n s   a n d   v a r i a t i o n s   a r e   i d e n t i f i e d   a n d   d i s c u s s e d . 	 [ D i n g ,   Y i n g ;   J a c o b ,   E l i n   K . ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A ;   [ Z h a n g ,   Z h i x i o n g ]   L i b   C h i n e s e   A c a d   S c i ,   B e i j i n g ,   P e o p l e s   R   C h i n a ;   [ F o o ,   S c h u b e r t ]   N a n y a n g   T e c h n o l   U n i v ,   D i v   I n f o r m a t   S t u d i e s ,   S i n g a p o r e ,   S i n g a p o r e ;   [ Y a n ,   E r j i a ;   G e o r g e ,   N i c o l a s   L . ;   G u o ,   L i j i a n g ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 D i n g ,   Y   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   1 3 2 0   E   1 0 t h   S t ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 d i n g y i n g @ i n d i a n a . e d u ;   e j a c o b @ i n d i a n a . e d u ;   z h a n g z x @ m a i l . l a s . a c . c n ;   s f o o @ p m a i l . n t u . e d u . s g ;   e y a n @ i n d i a n a . e d u ;   n l g e o r g e @ i n d i a n a . e d u ;   l i j g u o @ i n d i a n a . e d u 	 Y a n ,   E r j i a / E - 7 8 8 7 - 2 0 1 1 	 Y a n ,   E r j i a / 0 0 0 0 - 0 0 0 2 - 0 3 6 5 - 9 3 4 0 	 	 	 A W A D   M ,   2 0 0 4 ,   P   1 6   I E E E   I N T   C   T O O L ,   P 6 3 3 ;   B e r n e r s - L e e   T ,   2 0 0 1 ,   S C I   A M ,   V 2 8 4 ,   P 3 4 ;   B L O O D   R ,   2 0 0 5 ,   R E B E C C A S   P O C K E T ;   B U T T E R F I E L D   S ,   2 0 0 4 ,   I   A M   S H A R I N G   T H I S   Y O ;   C O R T E S   C ,   1 9 9 5 ,   M A C H   L E A R N ,   V 2 0 ,   P 2 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 6 2 7 4 1 1 4 1 1 ;   D I N G   Y ,   2 0 0 9 ,   D   L I B ,   V 1 5 ;   D I N G   Y ,   U P P E R   T A G   O N T O   U N P U B ;   D u b i n k o   M . ,   2 0 0 6 ,   P   1 5   I N T   C   W O R L D   W I D ,   P 1 9 3 ,   D O I   1 0 . 1 1 4 5 / 1 1 3 5 7 7 7 . 1 1 3 5 8 1 0 ;   F o u n t o p o u l o s   G . ,   2 0 0 7 ,   T H E S I S   U   S O U T H A M P T O N ;   G r u b e r   T . ,   2 0 0 7 ,   I N T   J   S E M A N T I C   W E B   I ,   V 3 ;   H A M M O N D   T ,   2 0 0 5 ,   D   L I B   M A G A Z I N E ,   V 1 1 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H o s c h k a   P . ,   1 9 9 8 ,   A C M   S I G G R O U P   B ,   V 1 9 ,   P 5 ;   H o t h o   A n d r e a s ,   2 0 0 6 ,   S E M A N T I C   W E B   R E S   A P P ,   V 4 0 1 1 ;   K I M   H ,   2 0 0 8 ,   P   2   I N T   C   S E M   C O M P ,   P 3 1 5 ;   K i p p   M .   E . ,   2 0 0 6 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 1 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K o h o n e n   T . ,   1 9 8 9 ,   S E L F   O R G   A S S   M E M O R Y ;   L A W L E Y   L ,   2 0 0 5 ,   S O C I A L   C O N S E Q U E N C E S ;   L O S O W S K Y   A ,   2 0 0 4 ,   D O O R B E L L S   F L O R E N C E   P ;   M a r l o w   C . ,   2 0 0 6 ,   P   1 7   C   H Y P   H Y P ,   P 3 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 1 4 9 9 4 1 . 1 1 4 9 9 4 9 ;   M a t h e s   A ,   2 0 0 4 ,   F O L K S O N O M I E S   C O O P E R A ;   M e r h o l z   P . ,   2 0 0 4 ,   M E T A D A T A   M A S S E S ;   M i k a   P . ,   2 0 0 5 ,   P   4   I N T   S E M   W E B   C   I S ,   P 5 2 2 ;   M I L L E R   P ,   2 0 0 8 ,   C O M M U N I C A T I O N ;   P e l l e g   D . ,   2 0 0 0 ,   P   1 7   I N T   C   M A C H   L E A R ,   P 7 2 7 ;   P r i s s   U ,   2 0 0 6 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 0 ,   P 5 2 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 4 0 0 1 2 0 ;   S c h m i t z   C ,   2 0 0 6 ,   S T U D   C L A S S   D A T A   A N A L ,   P 2 6 1 ,   D O I   1 0 . 1 0 0 7 / 3 - 5 4 0 - 3 4 4 1 6 - 0 _ 2 8 ;   S C H V A N E V E L D T   R W ,   1 9 9 0 ,   S T U D I E S   K N O W L E D G E   O R ;   S h i r k y   C . ,   2 0 0 5 ,   O N T O L O G Y   I S   O V E R R A T E ;   S I N H A   R ,   2 0 0 5 ,   S O C I A L   A N A L   T A G G I N G ;   S u c h a n e k   F .   M . ,   2 0 0 8 ,   P   1 7   A C M   C   I N F   K N O W L ,   P 2 2 3 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 4 5 8 0 8 2 . 1 4 5 8 1 1 4 ;   S u r o w i e c k i   J ,   2 0 0 4 ,   W I S D O M   C R O W D S   W H Y   M A ;   W H I T E   H D ,   2 0 0 0 ,   P   I E E E   I N T   C   I N F   V I S ,   P 2 5 ;   W i l l e   R ,   1 9 8 2 ,   O R D E R E D   S E T S ,   P 4 4 5 ;   X u   Z . ,   2 0 0 6 ,   P   C O L L   W E B   T A G G   W O R K ;   Y U   H . ,   2 0 0 3 ,   P   9   A C M   S I G K D D   I N T   C ,   P 3 0 6 ,   D O I   [ 1 0 . 1 1 4 5 / 9 5 6 7 5 0 . 9 5 6 7 8 6 ,   D O I   1 0 . 1 1 4 5 / 9 5 6 7 5 0 . 9 5 6 7 8 6 ] 	 3 7 	 2 5 	 2 5 	 4 	 4 0 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 0 9 	 6 0 	 1 2 	 	 	 	 	 2 3 8 8 	 2 4 0 1 	 	 1 0 . 1 0 0 2 / a s i . 2 1 1 9 0 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 2 5 Z T 	 W O S : 0 0 0 2 7 2 2 5 7 8 0 0 0 0 2 	 	 
 
 J 	 B a n e y x ,   A 	 	 	 	 B a n e y x ,   A u d r e y 	 	 	 " P u b l i s h   o r   P e r i s h "   a s   c i t a t i o n   m e t r i c s   u s e d   t o   a n a l y z e   s c i e n t i f i c   o u t p u t   i n   t h e   h u m a n i t i e s :   I n t e r n a t i o n a l   c a s e   s t u d i e s   i n   e c o n o m i c s ,   g e o g r a p h y ,   s o c i a l   s c i e n c e s ,   p h i l o s o p h y ,   a n d   h i s t o r y 	 A R C H I V U M   I M M U N O L O G I A E   E T   T H E R A P I A E   E X P E R I M E N T A L I S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 W e b   o f   S c i e n c e ;   G o o g l e   S c h o l a r ;   c i t a t i o n   a n a l y s i s ;   b i b l i o m e t r i c s ;   r e s e a r c h   e v a l u a t i o n   i n   t h e   h u m a n i t i e s ;   P u b l i s h   o r   P e r i s h 	 W E B - O F - S C I E N C E ;   G O O G L E - S C H O L A R ;   I N D E X ;   S C O P U S 	 T r a d i t i o n a l l y ,   t h e   m o s t   c o m m o n l y   u s e d   s o u r c e   o f   b i b l i o m e t r i c   d a t a   i s   t h e   T h o m s o n   I S I   W e b   o f   K n o w l e d g e ,   i n   p a r t i c u l a r   t h e   ( S o c i a l )   S c i e n c e   C i t a t i o n   I n d e x   a n d   t h e   J o u r n a l   C i t a t i o n   R e p o r t s ,   w h i c h   p r o v i d e   t h e   y e a r l y   J o u r n a l   I m p a c t   F a c t o r s .   T h i s   d a t a b a s e   u s e d   f o r   t h e   e v a l u a t i o n   o f   r e s e a r c h e r s   i s   n o t   a d v a n t a g e o u s   i n   t h e   h u m a n i t i e s ,   m a i n l y   b e c a u s e   b o o k s ,   c o n f e r e n c e   p a p e r s ,   a n d   n o n - E n g l i s h   j o u r n a l s ,   w h i c h   a r e   a n   i m p o r t a n t   p a r t   o f   s c i e n t i f i c   a c t i v i t y ,   a r e   n o t   ( w e l l )   c o v e r e d .   T h i s   p a p e r   p r e s e n t s   t h e   u s e   o f   a n   a l t e r n a t i v e   s o u r c e   o f   d a t a ,   G o o g l e   S c h o l a r ,   a n d   i t s   b e n e f i t s   i n   c a l c u l a t i n g   c i t a t i o n   m e t r i c s   i n   t h e   h u m a n i t i e s .   B e c a u s e   o f   i t s   b r o a d e r   r a n g e   o f   d a t a   s o u r c e s ,   t h e   u s e   o f   G o o g l e   S c h o l a r   g e n e r a l l y   r e s u l t s   i n   m o r e   c o m p r e h e n s i v e   c i t a t i o n   c o v e r a g e   i n   t h e   h u m a n i t i e s .   T h i s   p r e s e n t a t i o n   c o m p a r e s   a n d   a n a l y z e s   s o m e   i n t e r n a t i o n a l   c a s e   s t u d i e s   w i t h   I S I   W e b   o f   K n o w l e d g e   a n d   G o o g l e   S c h o l a r .   T h e   f i e l d s   o f   e c o n o m i c s ,   g e o g r a p h y ,   s o c i a l   s c i e n c e s ,   p h i l o s o p h y ,   a n d   h i s t o r y   a r e   f o c u s e d   o n   t o   i l l u s t r a t e   t h e   d i f f e r e n c e s   o f   r e s u l t s   b e t w e e n   t h e s e   t w o   d a t a b a s e s .   T o   s e a r c h   f o r   r e l e v a n t   p u b l i c a t i o n s   i n   t h e   G o o g l e   S c h o l a r   d a t a b a s e ,   t h e   u s e   o f   " P u b l i s h   o r   P e r i s h "   a n d   o f   C l e a n P o P ,   w h i c h   t h e   a u t h o r   d e v e l o p e d   t o   c l e a n   t h e   r e s u l t s ,   a r e   c o m p a r e d . 	 [ B a n e y x ,   A u d r e y ]   I F R I S ,   P a r i s ,   F r a n c e 	 B a n e y x ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   P a r i s   E s t ,   I F R I S ,   M a r n e   L a   V a l l e e ,   F r a n c e . 	 b a n e y x @ i f r i s . o r g 	 	 	 	 	 B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B a u e r   K . ,   2 0 0 5 ,   D   L I B   M A G A Z I N E ,   V 1 1 ;   B o s m a n   J . ,   2 0 0 6 ,   S C O P U S   R E V I E W E D   C O M P ;   B R A N T L E Y   P ,   2 0 0 7 ,   S C I   D I R E C T L Y   G O O G L E ;   B u t l e r   D ,   2 0 0 4 ,   N A T U R E ,   V 4 3 2 ,   P 4 2 3 ,   D O I   1 0 . 1 0 3 8 / 4 3 2 4 2 3 a ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a c s o   P ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 3 7 ;   J a c s o   P ,   2 0 0 5 ,   O N L I N E   I N F O R M   R E V ,   V 2 9 ,   P 2 0 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 5 1 0 5 9 8 0 6 6 ;   J A C S O   P ,   2 0 0 5 ,   G O O G L E   S C H O L A R   B E T A ;   J A C S O   P ,   2 0 0 4 ,   G O O G L E   S C H O L A R   B E T A ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   M A Y R   P ,   2 0 0 7 ,   E X P L O R A T O R Y   S T U D Y   G O ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   P a u l y   D ,   2 0 0 5 ,   E T H I C S   S C I   E N V   P O L I T ,   V 2 0 0 5 ,   P 3 3 ;   R o t h   D L ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 3 1 	 1 8 	 2 5 	 2 7 	 3 	 3 0 	 B I R K H A U S E R   V E R L A G   A G 	 B A S E L 	 V I A D U K S T R A S S E   4 0 - 4 4 ,   P O   B O X   1 3 3 ,   C H - 4 0 1 0   B A S E L ,   S W I T Z E R L A N D 	 0 0 0 4 - 0 6 9 X 	 	 	 A R C H   I M M U N O L   T H E R   E X 	 A r c h .   I m m u n o l .   T h e r .   E x p . 	 D E C 	 2 0 0 8 	 5 6 	 6 	 	 	 	 	 3 6 3 	 3 7 1 	 	 1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 4 3 - 0 	 	 9 	 I m m u n o l o g y 	 I m m u n o l o g y 	 3 8 7 L Y 	 W O S : 0 0 0 2 6 1 9 5 4 9 0 0 0 0 3 	 1 9 0 4 3 6 7 0 	 
 
 J 	 M e n d e z - V a s q u e z ,   R I ;   S u n e n - P i n y o l ,   E ;   C e r v e l l o ,   R ;   C a m i ,   J 	 	 	 	 M e n d e z - V a s q u e z ,   R a u l   I s a a c ;   S u n e n - P i n y o l ,   E d u a r d ;   C e r v e l l o ,   R o s a ;   C a m i ,   J o r d i 	 	 	 B i b l i o m e t r i c   m a p   o f   S p a i n   1 9 9 6 - 2 0 0 4 :   b i o m e d i c i n e   a n d   h e a l t h   s c i e n c e 	 M E D I C I N A   C L I N I C A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b i o m e d i c a l   a n d   h e a l t h   s c i e n c e s   r e s e a r c h ;   r e s e a r c h   e v a l u a t i o n ;   S p a i n 	 S P A N I S H   S C I E N T I F I C   P R O D U C T I O N ;   C I T A T I O N - I N D E X 	 B A C K G R O U N D   A N D   O B J E C T I V E :   T h e   s t u d y   p r e s e n t s   t h e   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   S p a n i s h   s c i e n t i f i c   o u t p u t   i n   b i o m e d i c i n e   d u r i n g   1 9 9 6 - 2 0 0 4 .   T h i s   i s   t h e   l a s t   e d i t i o n   o f   a   s e r i e s   o f   b i b l i o m e t r i c   s t u d i e s   a i m e d   t o   c h a r a c t e r i z e   t h e   S p a n i s h   s c i e n t i f i c   p e r f o r m a n c e   i n   b i o m e d i c i n e .   M A T E R I A L   A N D   M E T H O D :   T h e   a n a l y s i s   w a s   r e s t r i c t e d   t o   c i t a b l e   d o c u m e n t s   f o r   w h i c h   s i m p l e   a n d   c o m p o s i t e   b i b l i o m e t r i c   i n d i c a t o r s   w e r e   o b t a i n e d   a t   d i f f e r e n t   a g g r e g a t i o n   l e v e l s :   f i e l d s ,   a u t o n o m o u s   r e g i o n s ,   i n s t i t u t i o n a l   s e c t o r s   a n d   r e s e a r c h   c e n t r e s .   T h e   d o c u m e n t s   w e r e   s e l e c t e d   a c c o r d i n g   t o   t h e   J o u r n a l   C i t a t i o n   R e p o r t s ,   a n d   w e r e   a s s i g n e d   t o   a f f i l i a t i o n   c e n t r e s   f o l l o w i n g   a n   i n t e g e r   c o u n t i n g   s c h e m e   a f t e r   a n   e x h a u s t i v e   n o r m a l i z a t i o n   o f   t h e   a f f i l i a t i o n   a d d r e s s e s .   R E S U L T S :   C o m p a r e d   t o   t h e   p e r i o d   1 9 9 4 - 2 0 0 2 ,   r e s e a r c h   a c t i v i t y   i n   b i o m e d i c i n e   g r e w   a s   m u c h   a s   S p a i n :   8 . 9 %   i n   t h e   n u m b e r   o f   d o c u m e n t s ;   2 2 . 5 %   c i t a t i o n s ;   1 2 . 5 %   c i t a t i o n   p e r   d o c u m e n t   a v e r a g e   a n d   2 7 . 2 %   i n t e r n a t i o n a l   c o o p e r a t i o n .   B e s i d e s ,   b i o m e d i c i e n   s h o w e d   t h e   h i g h e s t   c i t a t i o n   p e r   d o c u m e n t   a v e r a g e   c o m p a r e d   t o   o t h e r   m a j o r   f i e l d s .   I n t e r n a t i o n a l   c o o p e r a t i o n   i n   b i o m e d i c i n e   ( 2 7 . 2 % )   r e a c h e d   t h e   E u r o p e a n   a v e r a g e .   T h e   d o c u m e n t s   p u b l i s h e d   i n   i n t e r n a t i o n a l   c o o p e r a t i o n   a c c o u n t   f o r   t h e   h a l f   o f   c i t a t i o n s   t o   d o c u m e n t s   i n   b i o m e d i c i n e .   T h e   n u m b e r   o f   d o c u m e n t s   a n d   c i t a t i o n s   b e l o n g i n g   t o   t h e   c l i n i c   m e d i c i n e   s u b f i e l d   a n d   t o   t h e   h e a l t h   s e c t o r   s h o w e d   t h e   h i g h e s t   g r o w t h .   C O N C L U S I O N S :   I n   g e n e r a l ,   t h e s e   r e s u l t s   r e p r o d u c e   t h e   t e n d e n c i e s   d e s c r i b e d   i n   p r i o r   s t u d i e s .   T h e   d o c u m e n t s   i n   b i o m e d i c i n e   s h o w e d   a   h i g h l y   a s y m m e t r i c   d i s t r i b u t i o n   a m o n g   i n s t i t u t i o n a l   s e c t o r s ,   a u t o n o m o u s   r e g i o n s ,   s c i e n t i f i c   f i e l d s   a n d   r e s e a r c h   c e n t r e s .   T h e   r e m a r k a b l y   i n c r e a s e   i n   t h e   o u t p u t   o f   c l i n i c a l   m e d i c i n e   f i e l d   a n d   i n   t h e   h e a l t h   s e c t o r   c o u l d   b e   t h e   c o n s e q u e n c e   o f   i m p o r t a n t   s c i e n c e   p o l i c y   a c t i o n s   u n d e r t a k e n   i n   t h e s e   a r e a s   i n   t h e   l a s t   y e a r s . 	 [ M e n d e z - V a s q u e z ,   R a u l   I s a a c ;   S u n e n - P i n y o l ,   E d u a r d ;   C e r v e l l o ,   R o s a ;   C a m i ,   J o r d i ]   P a r c   R e c e r c a   B i o m e d   B a r c e l o n a ,   B a r c e l o n a   0 8 0 0 3 ,   S p a i n ;   [ M e n d e z - V a s q u e z ,   R a u l   I s a a c ;   S u n e n - P i n y o l ,   E d u a r d ]   A A T R M ,   B a r c e l o n a ,   S p a i n ;   [ M e n d e z - V a s q u e z ,   R a u l   I s a a c ;   C a m i ,   J o r d i ]   U P F ,   B a r c e l o n a ,   S p a i n ;   [ C e r v e l l o ,   R o s a ]   I n s t   M u n i c i p a l   I n v e s t   M e d ,   E - 0 8 0 0 3   B a r c e l o n a ,   S p a i n 	 C a m i ,   J   ( r e p r i n t   a u t h o r ) ,   P a r c   R e c e r c a   B i o m e d   B a r c e l o n a ,   D r   A i g u a d e r   8 8 ,   B a r c e l o n a   0 8 0 0 3 ,   S p a i n . 	 j c a m i @ p r b b . o r g 	 M e n d e z - V a s q u e z ,   R a u l / D - 5 8 0 0 - 2 0 1 3 ;   S u n e n   P i n y o l ,   E d u a r d / E - 8 6 4 4 - 2 0 1 5 	 M e n d e z - V a s q u e z ,   R a u l / 0 0 0 0 - 0 0 0 3 - 3 3 0 2 - 0 2 1 1 ;   	 	 	 A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   C a m i   J ,   2 0 0 5 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 4 ,   P 9 3 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 0 8 6 8 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 4 8 1 ;   C A M I   J ,   1 9 9 3 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 1 ,   P 7 2 1 ;   C A M I   J ,   1 9 9 4 ,   P R O D U C C I O N   C I E N T I F I C ;   G l a n z e l   W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 3 2 	 6 	 2 5 	 2 7 	 4 	 1 9 	 E D I C I O N E S   D O Y M A   S   A 	 B A R C E L O N A 	 T R A V   D E   G R A C I A   1 7 - 2 1 ,   0 8 0 2 1   B A R C E L O N A ,   S P A I N 	 0 0 2 5 - 7 7 5 3 	 	 	 M E D   C L I N - B A R C E L O N A 	 M e d .   C l i n . 	 M A R   1 	 2 0 0 8 	 1 3 0 	 7 	 	 	 	 	 2 4 6 	 2 5 3 	 	 	 	 8 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 2 7 2 E F 	 W O S : 0 0 0 2 5 3 8 4 2 0 0 0 0 0 2 	 1 8 3 5 5 4 2 4 	 
 
 J 	 R o w l a n d s ,   I ;   N i c h o l a s ,   D 	 	 	 	 R o w l a n d s ,   I a n ;   N i c h o l a s ,   D a v i d 	 	 	 T h e   m i s s i n g   l i n k :   j o u r n a l   u s a g e   m e t r i c s 	 A S L I B   P R O C E E D I N G S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s e r i a l s ;   q u a l i t y ;   m e a s u r e m e n t 	 L I B R A R Y 	 P u r p o s e   -   T h e   a i m   o f   t h i s   s h o r t   c o m m u n i c a t i o n   i s   t o   c o n t r i b u t e   t o   a   g r o w i n g   d e b a t e   a b o u t   h o w   w e   c a n   m e a s u r e   t h e   " q u a l i t y "   o f   j o u r n a l s .   M o r e   s p e c i f i c a l l y ,   t h e   p a p e r   a r g u e s   t h e   n e e d   f o r   a   n e w   r a n g e   o f   s t a n d a r d i z e d   i n d i c a t o r s   b a s e d   o n   r e a d e r   ( r a t h e r   t h a n   a u t h o r - f a c i n g )   m e t r i c s .   D e s i g n / m e t h o d o l o g y / a p p r o a c h   -   T h i s   i s   a   t h o u g h t   e x p e r i m e n t ,   o u t l i n i n g   t h e   k i n d s   o f   u s a g e   i n d i c a t o r s   t h a t   c o u l d   b e   d e v e l o p e d   a l o n g s i d e   t h e   t r a d i t i o n a l   I S I   m e a s u r e s   o f   i m p a c t ,   i m m e d i a c y   a n d   o b s o l e s c e n c e .   F i n d i n g s   -   T h e   t i m e   i s   r i p e   t o   d e v e l o p   a   s e t   o f   s t a n d a r d i s e d .   m e a s u r e s   o f   j o u r n a l   u s a g e   t h a t   a r e   a s   e a s y   t o   u n d e r s t a n d ,   a n d   a s   u n i v e r s a l l y   a c c e p t e d ,   a s   I S I ' s   c u r r e n t   c i t a t i o n - b a s e d   i n d i c a t o r s .   B y   l i n k i n g   a r t i c l e   p u b l i c a t i o n   y e a r   t o   f u l l   t e x t   d o w n l o a d s ,   t h i s   a r t i c l e   a r g u e s   t h a t   v e r y   c o n s i d e r a b l e   v a l u e   c o u l d   b e   e x t r a c t e d   f r o m   w h a t ,   i n   m a n y   c a s e s ,   i s   a l m o s t   u n i n t e r p r e t a b l e   d a t a .   P r a c t i c a l   i m p l i c a t i o n s   -   I n d i c a t o r s   i n   t h e   f o r m   p r o p o s e d   c o u l d   f i n d   a   w i d e   v a r i e t y   o f   a p p l i c a t i o n s ,   f r o m   h e l p i n g   l i b r a r i a n s   t o   a s s e s s   t h e   p o t e n t i a l   v a l u e - f o r - m o n e y   o f   b u n d l e d   j o u r n a l   d e a l s ,   t o   h e l p i n g   p o l i c y - m a k e r s   a n d   s c h o l a r l y   c o m m u n i c a t i o n   r e s e a r c h e r s   t o   b e t t e r   u n d e r s t a n d   t h e   d y n a m i c s   o f   k n o w l e d g e   d i f f u s i o n .   O r i g i n a l i t y / v a l u e   -   T h e   d e v e l o p m e n t   o f   s t a n d a r d i z e d   u s a g e   f a c t o r s   i n   t h e   f o r m   s u g g e s t e d   h e r e   w o u l d   r a d i c a l l y   s h i f t   t h e   c e n t r e   o f   g r a v i t y   i n   b i b l i o m e t r i c s   r e s e a r c h   f r o m   t h e   a u t h o r   t o   t h e   r e a d e r .   T h i s   r e m a i n s   l a r g e l y   u n e x p l o r e d   t e r r i t o r y . 	 U C L ,   S c h   L i b   A r c h i v e   &   I n f o r m a t   S t u d i e s ,   C I B E R ,   L o n d o n   W C 1 E   6 B T ,   E n g l a n d 	 R o w l a n d s ,   I   ( r e p r i n t   a u t h o r ) ,   U C L ,   S c h   L i b   A r c h i v e   &   I n f o r m a t   S t u d i e s ,   C I B E R ,   L o n d o n   W C 1 E   6 B T ,   E n g l a n d . 	 	 R o w l a n d s ,   I a n / A - 3 5 1 9 - 2 0 1 2 ;   N i c h o l a s ,   D a v i d / N - 8 2 7 6 - 2 0 1 4 ;   	 R o w l a n d s ,   I a n / 0 0 0 0 - 0 0 0 1 - 8 8 3 1 - 5 4 0 X ;   N i c h o l a s ,   D a v i d / 0 0 0 0 - 0 0 0 1 - 8 0 4 6 - 2 8 3 5 ;   R o w l a n d s ,   I a n / 0 0 0 0 - 0 0 0 2 - 0 6 3 4 - 3 3 7 6 	 	 	 A m i n   M . ,   2 0 0 0 ,   P E R S P E C T I V E S   P U B L I S H ,   V 1 ,   P 1 ;   D a r m o n i   S J ,   2 0 0 2 ,   J   M E D   L I B R   A S S O C ,   V 9 0 ,   P 3 2 3 ;   O b s t   O l i v e r ,   2 0 0 3 ,   H e a l t h   I n f o   L i b r   J ,   V 2 0 ,   P 2 2 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 7 1 - 1 8 4 2 . 2 0 0 3 . 0 0 4 1 9 . x ;   R o w l a n d s   I ,   2 0 0 5 ,   A S L I B   P R O C ,   V 5 7 ,   P 4 8 1 ,   D O I   1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 5 1 0 6 3 4 2 2 6 ;   T s a y   M Y ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 5 4 3 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 8 ;   W u l f f   J L ,   2 0 0 4 ,   J   M E D   L I B R   A S S O C ,   V 9 2 ,   P 3 1 5 	 6 	 2 5 	 2 5 	 1 	 8 	 E M E R A L D   G R O U P   P U B L I S H I N G   L I M I T E D 	 B I N G L E Y 	 H O W A R D   H O U S E ,   W A G O N   L A N E ,   B I N G L E Y   B D 1 6   1 W A ,   W   Y O R K S H I R E ,   E N G L A N D 	 0 0 0 1 - 2 5 3 X 	 	 	 A S L I B   P R O C 	 A s l i b   P r o c . 	 	 2 0 0 7 	 5 9 	 3 	 	 	 	 	 2 2 2 	 2 2 8 	 	 1 0 . 1 1 0 8 / 0 0 0 1 2 5 3 0 7 1 0 7 5 2 0 2 5 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 8 1 A C 	 W O S : 0 0 0 2 4 7 4 0 8 1 0 0 0 0 2 	 	 
 
 J 	 Z h a o ,   D Z 	 	 	 	 Z h a o ,   D Z 	 	 	 C h a l l e n g e s   o f   s c h o l a r l y   p u b l i c a t i o n s   o n   t h e   W e b   t o   t h e   e v a l u a t i o n   o f   s c i e n c e   -   A   c o m p a r i s o n   o f   a u t h o r   v i s i b i l i t y   o n   t h e   W e b   a n d   i n   p r i n t   j o u r n a l s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s c h o l a r l y   c o m m u n i c a t i o n ;   c i t a t i o n   a n a l y s i s ;   s c i e n c e   e v a l u a t i o n ;   W e b   p u b l i s h i n g ;   a u t h o r   v i s i b i l i t y 	 W O R L D - W I D E - W E B ;   C I T A T I O N   A N A L Y S I S ;   B I B L I O M E T R I C S ;   I N T E R N E T ;   I M P A C T ;   I N F O R M A T I O N ;   X M L 	 T h i s   a r t i c l e   r e v e a l s   d i f f e r e n t   p a t t e r n s   o f   s c h o l a r l y   c o m m u n i c a t i o n   i n   t h e   X M L   r e s e a r c h   f i e l d   o n   t h e   W e b   a n d   i n   p r i n t   j o u r n a l s   i n   t e r m s   o f   a u t h o r   v i s i b i l i t y ,   a n d   c h a l l e n g e s   t h e   c o m m o n   p r a c t i c e   o f   e x c l u s i v e l y   u s i n g   t h e   I S I ' s   d a t a b a s e s   t o   o b t a i n   c i t a t i o n   c o u n t s   a s   s c i e n t i f i c   p e r f o r m a n c e   i n d i c a t o r s .   R e s u l t s   f r o m   t h i s   s t u d y   d e m o n s t r a t e   b o t h   t h e   i m p o r t a n c e   a n d   t h e   f e a s i b i l i t y   o f   t h e   u s e   o f   m u l t i p l e   c i t a t i o n   d a t a   s o u r c e s   i n   c i t a t i o n   a n a l y s i s   s t u d i e s   o f   s c h o l a r l y   c o m m u n i c a t i o n ,   a n d   p r o v i d e   e v i d e n c e   f o r   a   d e v e l o p i n g   " t w o   t i e r "   s c h o l a r l y   c o m m u n i c a t i o n   s y s t e m .   ( c )   2 0 0 5   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   A l b e r t a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   E d m o n t o n ,   A B   T 6 H   1 J 5 ,   C a n a d a 	 Z h a o ,   D Z   ( r e p r i n t   a u t h o r ) ,   U n i v   A l b e r t a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   E d m o n t o n ,   A B   T 6 H   1 J 5 ,   C a n a d a . 	 d z h a o @ u a l b e r t a . c a 	 	 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B e r n e r s - L e e   T ,   2 0 0 1 ,   S C I   A M ,   V 2 8 4 ,   P 3 4 ;   B e r n e r s - L e e   T . ,   1 9 9 9 ,   W E A V I N G   W E B ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o s a k   J ,   1 9 9 9 ,   S C I   A M ,   V 2 8 0 ,   P 8 9 ;   B o s a k   J . ,   1 9 9 7 ,   X M L   J A V A   F U T U R E   W E B ;   C h a n   L . ,   2 0 0 4 ,   C A N A D I A N   J   C O M M U N I C A ,   V 2 9 ,   P 2 7 7 ;   [ A n o n y m o u s ] ,   1 9 9 9 ,   H Y P   W E B ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r o w   R . ,   2 0 0 2 ,   C A S E   I   R E P O S I T O R I E S ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   E G G H E   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S ,   P 1 9 9 0 ;   G o o d r u m   A A ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 6 6 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 4 7 - 9 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   H A R T E R   S P ,   1 9 9 6 ,   P   A S I S   M I D   M ,   P 2 9 9 ;   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ,   2 0 0 4 ,   I M P   O P   A C C   J   C I T   S T U ;   * I   S C I   I N F ,   2 0 0 4 ,   I S I   D A T   J   S E L   P R O C ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   L a w r e n c e   S ,   2 0 0 1 ,   N A T U R E ,   V 4 1 1 ,   P 5 2 1 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 7 9 1 5 1 ;   L A W R E N C E   S ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 7 ;   L I N D S E Y   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 2 ;   L U   S ,   1 9 9 9 ,   T H E S I S   U   C A L I F O R N I A ;   M c C a i n   K W ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 2 1 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 8 > 3 . 0 . C O ; 2 - Q ;   * O P   C I T   P R O J ,   2 0 0 1 ,   M I N   S O C   L I F   E P R I N T   A ;   P O U L T N E Y   R W ,   1 9 9 6 ,   E U R O P H Y S I C S   N E W S ,   V 2 7 ,   P 2 4 ;   R O U S S E A U   R ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ,   P 1 ;   T h e l w a l l   M ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 2 ;   [ A n o n y m o u s ] ,   2 0 0 0 ,   B I B L I O M E T R I C S   W O R L D ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   V a n H o o y d o n k   G ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 9 4 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 9 4 4 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 1 ;   W i l k i n s o n   D . ,   2 0 0 3 ,   J   I N F O R M A T I O N   S C I ,   V 2 9 ,   P 5 9 ;   [ A n o n y m o u s ] ,   1 9 9 7 ,   C I T A T I O N   P A T T E R N S   P H ;   Z H A O   D ,   2 0 0 4 ,   P   A S I S T   A N N U   M E E T ,   P 7 2 ;   Z H A O   D ,   2 0 0 4 ,   P   C A N   A S S   I N F   S C I   C A ;   Z h a o   D . ,   2 0 0 3 ,   T H E S I S   F L O R I D A   S T A T E ;   Z h a o   D Z ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 4 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 9 0 6 0 1 7 1 0 	 3 8 	 2 5 	 2 5 	 0 	 9 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 D E C 	 2 0 0 5 	 4 1 	 6 	 	 	 	 	 1 4 0 3 	 1 4 1 8 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 3 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 5 6 X E 	 W O S : 0 0 0 2 3 1 3 3 2 6 0 0 0 0 8 	 	 
 
 J 	 P e r i t z ,   B C ;   B a r - I l a n ,   J 	 	 	 	 P e r i t z ,   B C ;   B a r - I l a n ,   J 	 	 	 T h e   s o u r c e s   u s e d   b y   b i b l i o m e t r i c s - s c i e n t o m e t r i c s   a s   r e f l e c t e d   i n   r e f e r e n c e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N T I F I C   J O U R N A L S ;   C I T A T I O N   A N A L Y S I S ;   S E L F - C I T A T I O N ;   S C I E N C E ;   P A T T E R N S ;   D E C A D E S 	 T h e   a i m   o f   t h i s   s t u d y   w a s   t o   e x a m i n e   t h e   e x t e n t   t o   w h i c h   t h e   f i e l d   o f   b i b l i o m e t r i c s   a n d   s c i e n t o m e t r i c s   m a k e s   u s e   o f   s o u r c e s   o u t s i d e   t h e   f i e l d .   T h e   r e s e a r c h   w a s   c a r r i e d   o u t   b y   e x a m i n i n g   t h e   r e f e r e n c e s   o f   a r t i c l e s   p u b l i s h e d   i n   S c i e n t o m e t r i c s   i n   t h e   c o u r s e   o f   t w o   c a l e n d a r   y e a r s ,   1 9 9 0 ,   2 0 0 0 .   T h e   r e s u l t s   s h o w   t h a t   i n   2 0 0 0 ,   5 6 . 9 %   ( a n d   4 7 . 3 %   i n   1 9 9 0 )   o f   t h e   r e f e r e n c e s   o r i g i n a t e d   f r o m   t h r e e   f i e l d s :   s c i e n t o m e t r i c s   a n d   b i b l i o m e t r i c s ;   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e ;   a n d   t h e   s o c i o l o g y ,   h i s t o r y   a n d   p h i l o s o p h y   o f   s c i e n c e .   W h e n   c o m p a r i n g   t h e   t w o   p e r i o d s ,   t h e r e   i s   a l s o   a   c o n s i d e r a b l e   i n c r e a s e   i n   j o u r n a l   s e l f - c i t a t i o n   ( i . e . ,   r e f e r e n c e s   t o   t h e   j o u r n a l   S c i e n t o m e t r i c s )   a n d   i n   t h e   p e r c e n t a g e   o f   r e f e r e n c e s   t o   j o u r n a l s . 	 H e b r e w   U n i v   J e r u s a l e m ,   S c h   L i b   A r c h   &   I n f o r m a t   S t u d i e s ,   I L - 9 1 9 0 4   J e r u s a l e m ,   I s r a e l 	 P e r i t z ,   B C   ( r e p r i n t   a u t h o r ) ,   H e b r e w   U n i v   J e r u s a l e m ,   S c h   L i b   A r c h   &   I n f o r m a t   S t u d i e s ,   P O B   1 2 5 5 ,   I L - 9 1 9 0 4   J e r u s a l e m ,   I s r a e l . 	 	 B a r - I l a n ,   J u d i t / B - 3 4 5 2 - 2 0 0 9 	 B a r - I l a n ,   J u d i t / 0 0 0 0 - 0 0 0 2 - 8 7 9 6 - 5 2 4 8 	 	 	 A l - S a b b a g h   I .   A . ,   1 9 8 7 ,   T H E S I S   F L O R I D A   S T A T E ;   C R O N I N   B ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 3 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 2 8 3 1 5 3 9 0 0 1 6 0 0 6 0 6 ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   G l a n z e l   W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 0 2 ;   H e r u b e l   J P V ,   1 9 9 0 ,   C O L L E C T I O N   M A N A G E M E N ,   V 1 2 ,   P 5 7 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 1 2 n 0 3 _ 0 4 ;   L A W A N I   S M ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 1 3 ,   P 2 8 1 ;   L i p e t z   B A ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 9 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 9 9 4 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - U ;   M e y e r   T ,   1 9 9 6 ,   C O L L   R E S   L I B R ,   V 5 7 ,   P 2 3 ;   N A R I N   F ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 3 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 5 0 8 ;   N E E L E Y   J D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 8 ;   P E R I T Z   B C ,   1 9 8 4 ,   I N T   C L A S S I F ,   V 1 1 ,   P 8 7 ;   P E R I T Z   B C ,   1 9 8 9 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 1 6 5 ;   P e r i t z   B .   C . ,   1 9 8 1 ,   L I B R   R E S ,   V 3 ,   P 4 7 ;   P E R S S O N   O ,   B I B L I O M E T R I C   V I E W   S C ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   R o u s s e a u   R ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 5 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 9 3 ;   R o u s s e a u   R ,   1 9 9 7 ,   P   6   C   I N T   S O C   S C I   I N ,   P 3 7 1 ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S C H U B E R T   A ,   1 9 9 3 ,   S O C   S T U D   S C I ,   V 2 3 ,   P 5 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 9 3 0 2 3 0 0 3 0 0 7 ;   S n y d e r   H ,   1 9 9 8 ,   J   I N F O R M   S C I ,   V 2 4 ,   P 4 3 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 8 0 2 4 0 0 6 0 6 ;   T H O M P S O N   C E ,   1 9 8 9 ,   H A R D   S C I   S O F T   S C I   B I ;   V a n R a a n   A F J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 0 5 ;   W O U T E R S   P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 5 6 0 ;   2 0 0 0 ,   S I G M E T R I C S   D I S C U S S I O 	 2 5 	 2 5 	 2 6 	 3 	 1 6 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 2 	 5 4 	 2 	 	 	 	 	 2 6 9 	 2 8 4 	 	 1 0 . 1 0 2 3 / A : 1 0 1 6 0 1 8 0 1 3 0 9 6 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 6 6 F A 	 W O S : 0 0 0 1 7 6 4 1 5 3 0 0 0 0 8 	 	 
 
 J 	 T r a y n o r ,   M ;   R a f f e r t y ,   A M ;   L e w i s o n ,   G 	 	 	 	 T r a y n o r ,   M ;   R a f f e r t y ,   A M ;   L e w i s o n ,   G 	 	 	 E n d o g e n o u s   a n d   e x o g e n o u s   r e s e a r c h ?   F i n d i n g s   f r o m   a   b i b l i o m e t r i c   s t u d y   o f   U K   n u r s i n g   r e s e a r c h 	 J O U R N A L   O F   A D V A N C E D   N U R S I N G 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   j o u r n a l   e s t e e m ;   c i t a t i o n ;   n u r s i n g   r e s e a r c h ;   U n i t e d   K i n g d o m 	 E D U C A T I O N 	 A i m s   o f   t h e   s t u d y .   T h i s   p a p e r   u s e s   t h e   f i n d i n g s   o f   a   r e c e n t   b i b l i o m e t r i c   a n a l y s i s   o f   p u b l i s h e d   U K   n u r s i n g   r e s e a r c h   t o   a s k   w h e t h e r   t h e   f i e l d   i s   c h a r a c t e r i z e d   b y   a   f u n d a m e n t a l   s p l i t   b e t w e e n   t w o   u n d e r l y i n g   a r e a s   o f   r e s e a r c h   i n t e r e s t .   T h e s e   c a n   b e   t e r m e d   ' e n d o g e n o u s '   a n d   ' e x o g e n o u s ' ,   T h e   f o r m e r   t e r m   d e s c r i b e s   r e s e a r c h   w h i c h   t e n d s   t o   b e   c o n c e r n e d   w i t h   p r o b l e m s   a n d   i s s u e s   t o   d o   w i t h   n u r s i n g   a s   a   p r o f e s s i o n ;   t h e   l a t t e r   i s   c o n c e r n e d   w i t h   p r o b l e m s   a n d   i s s u e s   c e n t r i n g   a r o u n d   t h e   n u r s i n g   o f   p a t i e n t s .   D e s i g n / m e t h o d s .   P a p e r s   i n   t h e   W e l l c o m e   T r u s t ' s   R e s e a r c h   O u t p u t s   D a t a b a s e   ( R O D ) ,   a   d a t a b a s e   o f   U K   b i o m e d i c a l   r e s e a r c h ,   w e r e   a n a l y s e d .   N u r s i n g   p a p e r s   p u b l i s h e d   b e t w e e n   1 9 8 8   a n d   1 9 9 5   n u m b e r e d   1 8 4 5 ,   j u s t   l e s s   t h a n   1 %   o f   t h e   t o t a l   p a p e r s   i n   t h e   R O D .   R e s u l t s / f i n d i n g s .   A n a l y s i s   o f   t h e   s u b f i e l d   i d e n t i f i e d   c h a t   n u r s i n g   r e s e a r c h   w a s   a t y p i c a l   o f   b i o m e d i c a l   r e s e a r c h   a s   a   w h o l e   i n   a   n u m b e r   o f   w a y s .   O n e   d i f f e r e n c e   w a s   t h a t   u s u a l l y   i n   b i o m e d i c a l   r e s e a r c h   t h e r e   i s   a   g e n e r a l   c o r r e l a t i o n   b e t w e e n   n u m b e r s   o f   f u n d e r s   a c k n o w l e d g e d   o n   a   p a y e r ,   n u m b e r s   o f   a u t h o r s ,   a n d   e s t e e m   o f   t h e   j o u r n a l   i n   w h i c h   a   p a p e r   a p p e a r s .   I n   n u r s i n g   t h e r e   w a s ,   i f   a n y t h i n g ,   a   t e n d e n c y   f o r   h i g h l y   e s t e e m e d   p a p e r s   t o   h a v e   f e w e r   a u t h o r s   a n d   b e   l e s s   l i k e l y   t o   h a v e   a c k n o w l e d g e d   f u n d i n g .   H o w e v e r ,   t h e   a p p a r e n t l y   e n d o g e n o u s   a n d   e x o g e n o u s   p a p e r s   h a v e   q u i t e   d i f f e r e n t   c h a r a c t e r i s t i c s .   T h i s   p a p e r   e x p l o r e s   t h i s   a p p a r e n t   d i f f e r e n c e   a n d   p o s s i b l e   r e a s o n s   f o r   t h i s   d i f f e r e n c e   a n d   w i l l   b r i e f l y   c o m p a r e   n u r s i n g   r e s e a r c h   w i t h   s o m e   o t h e r   n e w l y   e m e r g i n g   s o c i a l   a n d   a c a d e m i c   g r o u p s .   C o n c l u s i o n s .   T h i n k i n g   o f   n u r s i n g   r e s e a r c h   o u t p u t s   i n   t h i s   w a y   c a n   p r o v i d e   i n s i g h t   i n t o   t h e   e x i s t e n c e   o f   d i f f e r e n t   r e w a r d   s y s t e m s   i n f l u e n c i n g   n u r s e   r e s e a r c h e r s .   H o w e v e r ,   i t   i s   i m p o s s i b l e   t o   d r a w   t o o   c o n f i d e n t   a   d i f f e r e n t i a t i o n   w i t h o u t   r e a d i n g   e a c h   i n d i v i d u a l   p a p e r   a n d   m a k i n g   j u d g e m e n t s   a b o u t   w h e t h e r   t h e y   a r e   ' e n d o g e n o u s '   o r   ' e x o g e n o u s ' ,   a   p r a c t i c e   g e n e r a l l y   b e y o n d   c h e   s c o p e   o f   b i b l i o m e t r i c   p r a c t i c e . 	 U n i v   L o n d o n   L o n d o n   S c h   H y g   &   T r o p   M e d ,   C t r   P o l i c y   N u r s i n g   R e s ,   L o n d o n   W C 1 E   7 H T ,   E n g l a n d ;   W e l l c o m e   T r u s t ,   P o l i c y   U n i t ,   L o n d o n ,   E n g l a n d 	 T r a y n o r ,   M   ( r e p r i n t   a u t h o r ) ,   U n i v   L o n d o n   L o n d o n   S c h   H y g   &   T r o p   M e d ,   C t r   P o l i c y   N u r s i n g   R e s ,   K e p p e l   S t ,   L o n d o n   W C 1 E   7 H T ,   E n g l a n d . 	 	 	 	 	 	 A N D E R S O N   J ,   1 9 9 4 ,   I N T   C O M P   R E S   O U T P U T S ;   B A L L   S J ,   1 9 9 4 ,   B R I T   J   E D U C   S T U D ,   V 4 2 ,   P 1 ;   B U L M E R   M ,   1 9 8 7 ,   S O C I A L   S C I   R E S   G O V   C ;   C h a r l e s   C .   M . ,   1 9 8 8 ,   I N T R O   E D   R E S ;   C h o d o r o w   N a n c y ,   1 9 7 8 ,   R E P R O D   M O T H E R I N G   P S Y ;   C I X O U S   H ,   1 9 9 3 ,   C R I T   I N Q U I R Y ,   V 1 9 ,   P 2 0 1 ,   D O I   1 0 . 1 0 8 6 / 4 4 8 6 7 1 ;   C o m m i t t e e   o n   N u r s i n g ,   1 9 7 2 ,   C M N D 5 1 1 5 ;   C R A I G   G ,   1 9 9 7 ,   Q U A L I T Y   1   A S S E S S M E N T ;   * C T R   P O L   N U R S   R E S ,   1 9 9 7 ,   A N N   R E P   C P N R ;   D a v i e s   P ,   1 9 9 9 ,   B R I T   J   E D U C   S T U D ,   V 4 7 ,   P 1 0 8 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 2 7 . 0 0 1 0 6 ;   D a w s o n   G ,   1 9 9 8 ,   M A P P I N G   L A N D S C A P E   N A ;   d e   B e a u v o i r   S ,   1 9 5 3 ,   2   S E X ;   E a g l e t o n   T . ,   1 9 8 3 ,   L I T   T H E O R Y   I N T R O ;   E R N S T   S ,   1 9 8 1 ,   O U R   O W N   H A N D S ;   F a w c e t t   J ,   1 9 8 4 ,   A N A L   E V A L U A T I O N   C O N C ;   F u l l e r   S   S ,   1 9 7 8 ,   N u r s   O u t l o o k ,   V 2 6 ,   P 7 0 0 ;   G i l l i g a n   C . ,   1 9 8 3 ,   D I F F E R E N T   V O I C E   P S Y C ;   G R A E F F   G ,   1 9 8 7 ,   P R O F E S S I N G   L I T   I   H I S ;   G r e e r   G e r m a i n e ,   1 9 7 1 ,   F E M A L E   E U N U C H ;   I R I G A R A Y   L ,   1 9 9 6 ,   C O N T I N E N T A L   P H I L O S   R ;   J O H N S O N   D E ,   1 9 7 4 ,   N U R S   R E S ,   V 2 3 ,   P 3 7 2 ;   J o h n s o n   T .   J . ,   1 9 7 2 ,   P R O F E S S I O N S   P O W E R ;   K R I S T E V A   J ,   1 9 9 6 ,   C O N T I N E N T A L   P H I L O S   R ,   P 3 7 8 ;   L a r s o n   M .   S . ,   1 9 7 7 ,   R I S E   P R O F E S S I O N A L I S M ;   L e w i s o n   G ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 3 ;   M a l e f i j t   A n n e m a r i e   D e   W a a l ,   1 9 7 4 ,   I M A G E S   M A N   H I S T   A N T H ;   M a s l o w   A .   H . ,   1 9 6 8 ,   P S Y C H O L   B E I N G ;   M e l e i s   A ,   1 9 8 5 ,   T H E O R E T I C A L   N U R S I N G ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   * N A T   A U D   O F F ,   1 9 9 2 ,   N U R S   E D   I M P L   P R O J   2 0 ;   P H I L L I P S   A ,   1 9 7 1 ,   O U R   B O D I E S   O U R S E L V E S ;   P O L L A R D   A ,   1 9 8 8 ,   S O C I O L O G Y   T E A C H I N G   N ,   P 5 4 ;   R A F F E R T Y   A M ,   2 0 0 0 ,   M E A S U R I N G   O U T P U T S   N U ;   R o g e r s   C . ,   1 9 6 1 ,   B E C O M I N G   P E R S O N ;   S a i d   E . ,   1 9 7 8 ,   O R I E N T A L I S M ;   S I L C O C K   P ,   1 9 9 4 ,   B R I T   J   E D U C   S T U D ,   V 4 2 ,   P 2 7 3 ,   D O I   1 0 . 2 3 0 7 / 3 1 2 1 8 8 6 ;   S T O D U L S K I   A H ,   1 9 9 5 ,   R C N   S T U D Y   U K   N U R S I N G ;   T R A Y N O R   M ,   1 9 9 8 ,   N U R S I N G   R E S   H I G H E R   E ;   U n i t e d   K i n g d o m   C e n t r a l   C o u n c i l   f o r   N u r s i n g   M i d w i f e r y   a n d   H e a l t h   V i s i t i n g ,   1 9 8 6 ,   P R O J   2 0 0 0   N E W   P R E P   P ;   W a t k i n   D ,   1 9 8 0 ,   R I S E   A R C H I T E C T U R A L   H ;   W a t s o n   J ,   1 9 8 1 ,   N u r s   O u t l o o k ,   V 2 9 ,   P 4 1 3 ;   W O O D S   P ,   1 9 8 8 ,   S O C I O L O G Y   T E A C H I N G   N 	 4 2 	 2 5 	 2 7 	 1 	 5 	 B L A C K W E L L   S C I E N C E   L T D 	 O X F O R D 	 P   O   B O X   8 8 ,   O S N E Y   M E A D ,   O X F O R D   O X 2   0 N E ,   O X O N ,   E N G L A N D 	 0 3 0 9 - 2 4 0 2 	 	 	 J   A D V   N U R S 	 J .   A d v .   N u r s . 	 A P R 	 2 0 0 1 	 3 4 	 2 	 	 	 	 	 2 1 2 	 2 2 2 	 	 1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 7 . x 	 	 1 1 	 N u r s i n g 	 N u r s i n g 	 4 2 9 X Y 	 W O S : 0 0 0 1 6 8 5 4 4 3 0 0 0 1 6 	 1 1 4 3 0 2 8 3 	 
 
 J 	 v a n   R a a n ,   A F J 	 	 	 	 v a n   R a a n ,   A F J 	 	 	 B i b l i o m e t r i c s   a n d   I n t e r n e t :   S o m e   o b s e r v a t i o n s   a n d   e x p e c t a t i o n s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N T I S T S ;   E R A 	 E l e c t r o n i c   p u b l i s h i n g   d e v e l o p m e n t s   a n d   n e w   i n f o r m a t i o n   t e c h n o l o g y   i n   g e n e r a l   w i l l   a f f e c t   t h e   m a i n   f u n c t i o n s   o f   s c i e n t i f i c   c o m m u n i c a t i o n .   M o s t   c h a n g e s   h o w e v e r   w i l l   b e   p r i m a r i l y   t e c h n o l o g i c a l   h u t   n o t   c o n c e p t u a l .   P u b l i c a t i o n   v i a   j o u r n a l s   o f   h i g h   r e p u t a t i o n   i s   i n   m o s t   f i e l d s   o f   s c i e n c e   c r u c i a l   t o   r e c e i v e   p r o f e s s i o n a l   r e c o g n i t i o n .   T h a t   w i l l   r e m a i n   s o   i n   t h e   " e l e c t r o n i c   e r a " .   A   m u c h   m o r e   r e v o l u t i o n a r y   c h a n g e   i n   s c i e n c e   w i l l   b e   t h e   i n c r e a s i n g   a v a i l a b i l i t y   a n d   s h a r i n g   o f   r e s e a r c h   d a t a . 	 L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   S W T S ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s 	 v a n   R a a n ,   A F J   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   S W T S ,   W a s s e n a a r s e w e g   5 2 , P O B   9 5 5 5 ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s . 	 	 	 	 	 	 E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   L a n g e r   J ,   2 0 0 0 ,   P H Y S   T O D A Y ,   V 5 3 ,   P 3 5 ,   D O I   1 0 . 1 0 6 3 / 1 . 1 3 1 0 1 1 9 ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   P O U L T N E Y   R W ,   1 9 9 6 ,   E U R O P H Y S I C S   N E W S ,   V 2 7 ,   P 2 4 ;   R O O S E N D A A L   H E ,   1 9 9 5 ,   R E S   E V A L U A T ,   V 5 ,   P 2 3 7 ;   R O O S E N D A A L   H E ,   1 9 9 6 ,   P   I N T   S U M M   S C H   D I G   L ;   v a n   R a a n   A F J ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 7 3 2 8 4 6 0 ;   v a n R a a n   A F J ,   1 9 9 7 ,   J   I N F O R M   S C I ,   V 2 3 ,   P 4 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 6 0 5 ;   V A N R A A N   A F J ,   2 0 0 0 ,   I N   P R E S S   C O M P E T I T I O N ;   V o s s   D ,   2 0 0 0 ,   S C I E N C E ,   V 2 8 9 ,   P 2 2 5 0 	 1 0 	 2 5 	 2 5 	 2 	 7 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 S P U I B O U L E V A R D   5 0 ,   P O   B O X   1 7 ,   3 3 0 0   A A   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 2 0 0 1 	 5 0 	 1 	 	 	 	 	 5 9 	 6 3 	 	 1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 	 	 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 0 5 Q M 	 W O S : 0 0 0 1 6 7 1 7 0 6 0 0 0 0 5 	 	 
 
 J 	 E o m ,   S B 	 	 	 	 E o m ,   S B 	 	 	 M a p p i n g   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   r e s e a r c h   i n   d e c i s i o n   s u p p o r t   s y s t e m s   t h r o u g h   a u t h o r   c o c i t a t i o n   a n a l y s i s   ( 1 9 7 1 - 1 9 9 3 ) 	 D E C I S I O N   S U P P O R T   S Y S T E M S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 d e c i s i o n   s u p p o r t   s y s t e m s ;   i n t e l l e c t u a l   s t r u c t u r e ;   b i b l i o m e t r i c s ;   c o c i t a t i o n   a n a l y s i s ;   f a c t o r   a n a l y s i s 	 M A N A G E M E N T   I N F O R M A T I O N - S Y S T E M S ;   C O - C I T A T I O N   A N A L Y S I S ;   D S S ;   M I S ;   R E P R E S E N T A T I O N ;   D I R E C T I O N S 	 T h i s   s t u d y   a p p l i e s   f a c t o r   a n a l y s i s   o f   a n   a u t h o r   c o c i t a t i o n   f r e q u e n c y   m a t r i x   d e r i v e d   f r o m   a   d a t a b a s e   f i l e   t h a t   c o n s i s t s   o f   a   t o t a l   o f   2 3 , 7 6 8   c i t e d   r e f e r e n c e   r e c o r d s   t a k e n   f r o m   9 4 4   c i t i n g   a r t i c l e s .   F a c t o r   a n a l y s i s   e x t r a c t e d   e l e v e n   f a c t o r s   c o n s i s t i n g   o f   s i x   m a j o r   a r e a s   o f   D S S   r e s e a r c h   ( g r o u p   D S S ,   f o u n d a t i o n s ,   m o d e l   m a n a g e m e n t ,   i n t e r f a c e   s y s t e m s ,   m u l t i c r i t e r i a   D S S ,   a n d   i m p l e m e n t a t i o n )   a n d   f i v e   c o n t r i b u t i n g   d i s c i p l i n e s   ( m u l t i p l e   c r i t e r i a   d e c i s i o n   m a k i n g ,   c o g n i t i v e   s c i e n c e ,   o r g a n i z a t i o n a l   s c i e n c e ,   a r t i f i c i a l   i n t e l l i g e n c e ,   a n d   s y s t e m s   s c i e n c e ) .   T h i s   r e s e a r c h   p r o v i d e s   h a r d   e v i d e n c e   t h a t   t h e   d e c i s i o n   s u p p o r t   s y s t e m   h a s   m a d e   m e a n i n g f u l   p r o g r e s s   o v e r   t h e   p a s t   t w o   d e c a d e s   a n d   i s   i n   t h e   p r o c e s s   o f   s o l i d i f y i n g   i t s   d o m a i n   a n d   d e m a r c a t i n g   i t s   r e f e r e n c e   d i s c i p l i n e s .   E s p e c i a l l y ,   m u c h   p r o g r e s s   h a s   b e e n   m a d e   i n   t h e   s u b a r e a s   o f   m o d e l   m a n a g e m e n t   s u c h   a s   r e p r e s e n t a t i o n ,   m o d e l   b a s e   p r o c e s s i n g ,   m o d e l   i n t e g r a t i o n ,   a n d   a r t i f i c i a l   i n t e l l i g e n c e   a p p l i c a t i o n   t o   m o d e l   m a n a g e m e n t   l e a d i n g   t o w a r d s   t h e   d e v e l o p m e n t   o f   a   t h e o r y   o f   m o d e l s .   T o   f a c i l i t a t e   t h e   t r a n s i t i o n   f r o m   t h e   p r e -   t o   p o s t - p a r a d i g m   p e r i o d   i n   D S S   r e s e a r c h ,   t h i s   s t u d y   h a s   c o m p l e t e d   i m p o r t a n t   g r o u n d w o r k . 	 	 S E   M I S S O U R I   S T A T E   U N I V ,   C O L L   B U S I N E S S   A D M ,   D E P T   M A N A G E M E N T ,   C A P E   G I R A R D E A U ,   M O   6 3 7 0 1   U S A . 	 	 	 	 	 	 A L A V I   M ,   1 9 9 2 ,   M I S   Q U A R T ,   V 1 6 ,   P 9 5 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 7 0 3 ;   B A S U   A ,   1 9 9 4 ,   I N F O R M   S Y S T   R E S ,   V 5 ,   P 1 9 5 ,   D O I   1 0 . 1 2 8 7 / i s r e . 5 . 3 . 1 9 5 ;   B E N B A S A T   I ,   1 9 9 3 ,   N A T O   A S I   S E R I E S   F ,   V 1 0 1 ,   P 3 8 3 ;   B E N B A S A T   I ,   1 9 9 3 ,   E F F E C T S   G R O U P   T A S K   C ;   B L A N N I N G   R W ,   1 9 8 3 ,   I N T E R F A C E S ,   V 1 3 ,   P 7 1 ,   D O I   1 0 . 1 2 8 7 / i n t e . 1 3 . 5 . 7 1 ;   B L A N N I N G   R W ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 1 9 - Y ;   C A T T E L L   R B ,   1 9 6 6 ,   M U L T I V A R   B E H A V   R E S ,   V 1 ,   P 2 4 5 ,   D O I   1 0 . 1 2 0 7 / s 1 5 3 2 7 9 0 6 m b r 0 1 0 2 _ 1 0 ;   C H A N G   A M ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 2 0 - 4 ;   C h u r c h m a n   C ,   1 9 6 8 ,   S Y S T E M S   A P P R O A C H ;   C H U R C H M A N   C W ,   1 9 6 5 ,   M A N A G E   S C I ,   V 1 1 ,   p B 6 9 ;   C h u r c h m a n   C .   W . ,   1 9 7 1 ,   D E S I G N   I N Q U I R I N G   S Y S ;   C O N N O L L Y   T ,   1 9 9 0 ,   M A N A G E   S C I ,   V 3 6 ,   P 6 8 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 6 . 6 . 6 8 9 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   C u s h i n g   B .   E . ,   1 9 9 0 ,   J o u r n a l   o f   I n f o r m a t i o n   S y s t e m s ,   V 4 ;   D A V I S   R ,   1 9 7 7 ,   A R T I F   I N T E L L ,   V 8 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 4 - 3 7 0 2 ( 7 7 ) 9 0 0 0 3 - 0 ;   D e n n i s   A R ,   1 9 9 1 ,   J   M A N A G E M E N T   I N F O R M A ,   V 7 ,   P 1 0 7 ;   D e n n i s   A . R . ,   1 9 9 3 ,   G R O U P   S U P P O R T   S Y S T E M ,   P 5 9 ;   D O L K   D R ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 2 2 - U ;   D Y E R   J S ,   1 9 9 2 ,   M A N A G E   S C I ,   V 3 8 ,   P 6 4 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 8 . 5 . 6 4 5 ;   E l a m   J .   J . ,   1 9 8 6 ,   D E C I S   S U P P O R T   S Y S T ,   P 2 3 9 ;   E o m   H .   B . ,   1 9 9 0 ,   D e c i s i o n   S u p p o r t   S y s t e m s ,   V 6 ,   P 2 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 0 ) 9 0 0 2 0 - R ;   E O M   H B ,   1 9 9 0 ,   E U R   J   O P E R   R E S ,   V 4 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 9 0 ) 9 0 0 0 8 - Y ;   E O M   H B ,   1 9 9 0 ,   I N T E R F A C E S ,   V 2 0 ,   P 6 5 ,   D O I   1 0 . 1 2 8 7 / i n t e . 2 0 . 3 . 6 5 ;   E o m   S .   B . ,   1 9 9 2 ,   H u m a n   S y s t e m s   M a n a g e m e n t ,   V 1 1 ,   P 1 3 7 ;   E O M   S B ,   1 9 9 4 ,   D A T A   B A S E ,   V 2 5 ,   P 3 5 ;   E O M   S B ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 5 5 - 8 ;   E O M   S B ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 1 0 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 0 3 - L ;   F A R H O O M A N D   A F ,   1 9 8 7 ,   D A T A   B A S E ,   V 1 8 ,   P 4 8 ;   G I N Z B E R G   M J ,   1 9 7 8 ,   M I S   Q ,   V 1 ,   P 3 9 ;   H a c k m a n   J .   R . ,   1 9 7 4 ,   D E C I S I O N   S C I ,   V 5 ,   P 4 5 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 7 4 . t b 0 0 6 3 1 . x ;   H a i r   J r   J F ,   1 9 8 7 ,   M U L T I V A R I A T E   D A T A   A N ;   H u r t   M .   E . ,   1 9 8 6 ,   P r o c e e d i n g s   o f   t h e   S e v e n t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   I n f o r m a t i o n   S y s t e m s ,   P 2 7 ;   I V E S   B ,   1 9 8 0 ,   M A N A G E   S C I ,   V 2 6 ,   P 9 1 0 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 6 . 9 . 9 1 0 ;   I v e s   B ,   1 9 8 2 ,   M I S   Q U A R T ,   V 6 ,   P 1 5 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 9 9 0 ;   J A R K E   M ,   1 9 8 7 ,   E U R   J   O P E R   R E S ,   V 3 1 ,   P 3 1 4 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 8 7 ) 9 0 0 4 1 - 5 ;   K a p l a n   A b r a h a m ,   1 9 6 4 ,   C O N D U C T   I N Q U I R Y ;   K e e n   P .   G .   W . ,   1 9 8 0 ,   1 S T   P   I N T   C   I N F   S Y S T ,   P 9 ;   K E R L I N G E R   F N ,   1 9 6 5 ,   F   B E H A V I O R A L   R E S ;   K o n s y n s k i   B .   R . ,   1 9 8 4 ,   J o u r n a l   o f   M a n a g e m e n t   I n f o r m a t i o n   S y s t e m s ,   V 1 ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   M A S O N   R O ,   1 9 6 9 ,   M A N A G E   S C I   B - A P P L ,   V 1 5 ,   p B 4 0 3 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M I T R O F F   I I ,   1 9 7 9 ,   M A N A G E   S C I ,   V 2 5 ,   P 5 8 3 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 5 . 6 . 5 8 3 ;   N A Y L O R   T H ,   1 9 8 2 ,   I N T E R F A C E S ,   V 1 2 ,   P 9 2 ,   D O I   1 0 . 1 2 8 7 / i n t e . 1 2 . 4 . 9 2 ;   N U N A M A K E R   J F ,   1 9 9 1 ,   C O M M U N   A C M ,   V 3 4 ,   P 4 0 ,   D O I   1 0 . 1 1 4 5 / 1 0 5 7 8 3 . 1 0 5 7 9 3 ;   O m a r   M .   H . ,   1 9 9 1 ,   I n t e r f a c e :   T h e   C o m p u t e r   E d u c a t i o n   Q u a r t e r l y ,   V 1 3 ,   P 1 8 ;   P i n s o n n e a u l t   A . ,   1 9 8 9 ,   D e c i s i o n   S u p p o r t   S y s t e m s ,   V 5 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 8 9 ) 9 0 0 0 7 - 9 ;   R E M U S   W E ,   1 9 8 6 ,   M I S   Q U A R T ,   V 1 0 ,   P 4 0 3 ;   S A N D E R S   G L ,   1 9 8 5 ,   M I S   Q U A R T ,   V 9 ,   P 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 2 7 5 ;   S A S ,   1 9 8 8 ,   S A S   S T A T   U S   G U I D   R E L ;   S C H N E Y M A N N   A ,   1 9 9 1 ,   I N T E R F A C E S ,   V 2 1 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / i n t e . 2 1 . 1 . 1 ;   S h o r t l i f f e   E H ,   1 9 7 6 ,   C O M P U T E R   B A S E D   M E D   C ;   S P R A G U E   R H ,   1 9 8 9 ,   D E C I S   S U P P O R T   S Y S T ,   P 4 0 3 ;   T A N   J K H ,   1 9 9 3 ,   D E C I S I O N   S C I ,   V 2 4 ,   P 1 6 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 3 . t b 0 0 4 6 8 . x ;   T E N G   J T C ,   1 9 9 0 ,   D A T A   B A S E ,   V 2 1 ,   P 1 ;   W H I T E   H D ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 0 ;   Z i g u r e s   I . ,   1 9 9 3 ,   G R O U P   S U P P O R T   S Y S T E M ,   P 1 1 2 ;   Z I O N T S   S ,   1 9 7 6 ,   M A N A G E   S C I ,   V 2 2 ,   P 6 5 2 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 2 . 6 . 6 5 2 	 6 0 	 2 5 	 2 6 	 5 	 2 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 7 - 9 2 3 6 	 1 8 7 3 - 5 7 9 7 	 	 D E C I S   S U P P O R T   S Y S T 	 D e c i s .   S u p p o r t   S y s t . 	 A P R 	 1 9 9 6 	 1 6 	 4 	 	 	 	 	 3 1 5 	 3 3 8 	 	 1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 5 ) 0 0 0 2 6 - 7 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e ;   C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 U G 9 8 3 	 W O S : A 1 9 9 6 U G 9 8 3 0 0 0 0 3 	 	 
 
 J 	 E l o y ,   J A ;   S v i d e r ,   P F ;   F o l b e ,   A J ;   S e t z e n ,   M ;   B a r e d e s ,   S 	 	 	 	 E l o y ,   J e a n   A n d e r s o n ;   S v i d e r ,   P e t e r   F . ;   F o l b e ,   A d a m   J . ;   S e t z e n ,   M i c h a e l ;   B a r e d e s ,   S o l y 	 	 	 A A O - H N S F   C O R E   G r a n t   A c q u i s i t i o n   I s   A s s o c i a t e d   w i t h   G r e a t e r   S c h o l a r l y   I m p a c t 	 O T O L A R Y N G O L O G Y - H E A D   A N D   N E C K   S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C O R E   g r a n t s ;   A A O - H N S F   C O R E   g r a n t s ;   s c h o l a r l y   p r o d u c t i v i t y ;   h - i n d e x ;   a c a d e m i c   p r o d u c t i v i t y ;   f a c u l t y   p r o d u c t i v i t y ;   o t o l a r y n g o l o g y   f a c u l t y   p r o d u c t i v i t y 	 C A R E E R - D E V E L O P M E N T   R E S O U R C E ;   H - I N D E X ;   S C I E N T I F I C   P R O D U C T I V I T Y ;   A C A D E M I C   O T O L A R Y N G O L O G Y ;   U N I T E D - S T A T E S ;   B I B L I O M E T R I C   A N A L Y S I S ;   C L I N I C I A N - E D U C A T O R S ;   G E N D E R   D I S P A R I T I E S ;   P R O M O T I O N   C R I T E R I A ;   A N E S T H E S I O L O G I S T S 	 O b j e c t i v e   T o   d e t e r m i n e   w h e t h e r   r e c e i v i n g   f u n d i n g   f r o m   t h e   A m e r i c a n   A c a d e m y   o f   O t o l a r y n g o l o g y H e a d   a n d   N e c k   S u r g e r y   F o u n d a t i o n   ( A A O - H N S F )   C e n t r a l i z e d   O t o l a r y n g o l o g y   R e s e a r c h   E f f o r t s   ( C O R E )   g r a n t   p r o g r a m   i s   a s s o c i a t e d   w i t h   c a r e e r   c h o i c e   ( i n   t e r m s   o f   p r a c t i c e   s e t t i n g )   a n d   s c h o l a r l y   i m p a c t .   S t u d y   D e s i g n   a n d   S e t t i n g   E x a m i n a t i o n   o f   b i b l i o m e t r i c s   a m o n g   a c a d e m i c   o t o l a r y n g o l o g i s t s ,   i n c l u d i n g   C O R E   g r a n t s   f u n d i n g   h i s t o r y .   M e t h o d s   A n   I n t e r n e t   s e a r c h   w a s   c o n d u c t e d   t o   d e t e r m i n e   t h e   c u r r e n t   p r a c t i c e   s e t t i n g   a n d ,   f o r   a c a d e m i c   o t o l a r y n g o l o g i s t s ,   a c a d e m i c   r a n k   o f   i n d i v i d u a l s   r e c e i v i n g   C O R E   g r a n t s   s i n c e   1 9 8 5 .   T h e   S c o p u s   d a t a b a s e   w a s   u s e d   t o   d e t e r m i n e   s c h o l a r l y   i m p a c t ,   a s   m e a s u r e d   b y   t h e   h - i n d e x ,   a n d   p u b l i c a t i o n   e x p e r i e n c e   ( i n   y e a r s )   o f   t h e s e   p r a c t i t i o n e r s   a l o n g   w i t h   a   c o n t r o l   c o h o r t   o f   n o n f u n d e d   a c a d e m i c   o t o l a r y n g o l o g i s t s .   R e s u l t s   O f   4 3 2   u n i q u e   i n d i v i d u a l s   r e c e i v i n g   C O R E   g r a n t   f u n d i n g   s i n c e   1 9 8 5 ,   4 4 . 4 %   a r e   c u r r e n t l y   a c a d e m i c i a n s .   T h i s   c o h o r t   h a d   a   h i g h e r   h - i n d e x   ( m e a n ,   1 1 . 9 ;   m e d i a n ,   1 0 ;   i n t e r q u a r t i l e   r a n g e   [ I Q R ] ,   6 - 1 8 )   t h a n   t h e i r   n o n - C O R E   g r a n t - f u n d e d   a c a d e m i c   p e e r s   ( m e a n ,   9 . 2 ;   m e d i a n ,   7 ;   I Q R ,   3 - 1 3 ;   P   =   . 0 0 2 )   a n d   c o l l e a g u e s   w h o   a r e   n o t   c u r r e n t l y   i n   a c a d e m i c   p r a c t i c e   ( m e a n ,   4 . 4 ;   m e d i a n ,   3 ;   I Q R ,   0 - 6 ;   P   <   . 0 0 1 ) .   C O R E   g r a n t - f u n d e d   a c a d e m i c   o t o l a r y n g o l o g i s t s   h a d   a   s t a t i s t i c a l l y   h i g h e r   s c h o l a r l y   i m p a c t   o n   c o n t r o l l i n g   f o r   a c a d e m i c   r a n k   a n d   a m o n g   p r a c t i t i o n e r s   w i t h   g r e a t e r   t h a n   1 0   y e a r s   o f   p u b l i c a t i o n   e x p e r i e n c e .   N o   s t a t i s t i c a l   d i f f e r e n c e s   i n   a c a d e m i c   p r o m o t i o n   p a t t e r n s   w e r e   n o t e d   b e t w e e n   t h o s e   w i t h   a n d   t h o s e   w i t h o u t   a   C O R E   g r a n t   f u n d i n g   h i s t o r y .   C o n c l u s i o n s   P r o c u r e m e n t   o f   a n   A A O - H N S F   C O R E   g r a n t   i s   a s s o c i a t e d   w i t h   g r e a t e r   s c h o l a r l y   i m p a c t ,   a s   m e a s u r e d   b y   t h e   h - i n d e x .   T h i s   r e l a t i o n s h i p   p e r s i s t s   a m o n g   p r a c t i t i o n e r s   w i t h   m o r e   t h a n   1 0   y e a r s   o f   p u b l i c a t i o n   e x p e r i e n c e ,   a s   w e l l   a s   u p o n   c o m p a r i s o n   o f   C O R E   g r a n t - f u n d e d   a n d   n o n - C O R E   g r a n t - f u n d e d   o t o l a r y n g o l o g i s t s   a t   a l l   a c a d e m i c   r a n k s .   P r a c t i t i o n e r s   a w a r d e d   t h e s e   g r a n t s   m a y   b e   m o r e   l i k e l y   t o   g o   i n t o   a n d   r e m a i n   i n   a c a d e m i c   p r a c t i c e . 	 [ E l o y ,   J e a n   A n d e r s o n ;   B a r e d e s ,   S o l y ]   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   D e p t   O t o l a r y n g o l   H e a d   &   N e c k   S u r g ,   N e w a r k ,   N J   0 7 1 0 3   U S A ;   [ E l o y ,   J e a n   A n d e r s o n ]   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   D e p t   N e u r o l   S u r g ,   N e w a r k ,   N J   0 7 1 0 3   U S A ;   [ E l o y ,   J e a n   A n d e r s o n ;   B a r e d e s ,   S o l y ]   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   C t r   S k u l l   B a s e   &   P i t u i t a r y   S u r g ,   N e w a r k ,   N J   0 7 1 0 3   U S A ;   [ S v i d e r ,   P e t e r   F . ;   F o l b e ,   A d a m   J . ]   W a y n e   S t a t e   U n i v ,   S c h   M e d ,   D e p t   O t o l a r y n g o l   H e a d   &   N e c k   S u r g ,   D e t r o i t ,   M I   U S A ;   [ S e t z e n ,   M i c h a e l ]   N   S h o r e   U n i v   H o s p ,   R h i n o l   S e c t ,   M a n h a s s e t ,   N Y   U S A ;   [ S e t z e n ,   M i c h a e l ]   N Y U ,   S c h   M e d ,   D e p t   O t o l a r y n g o l ,   N e w   Y o r k ,   N Y   U S A 	 E l o y ,   J A   ( r e p r i n t   a u t h o r ) ,   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   D e p t   O t o l a r y n g o l   H e a d   &   N e c k   S u r g ,   9 0   B e r g e n   S t , S u i t e   8 1 0 0 ,   N e w a r k ,   N J   0 7 1 0 3   U S A . 	 j e a n . a n d e r s o n . e l o y @ g m a i l . c o m 	 	 	 	 	 A t a s o y l u   A A ,   2 0 0 3 ,   J   G E N   I N T E R N   M E D ,   V 1 8 ,   P 7 1 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 5 - 1 4 9 7 . 2 0 0 3 . 1 0 4 2 5 . x ;   B e a s l e y   B W ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 8 ,   P 7 2 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 8 . 9 . 7 2 3 ;   B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B u r k e y   B B ,   2 0 1 1 ,   O T O L A R Y N G O L O G Y   H E A D ;   C A R R   P ,   1 9 9 2 ,   J   G E N   I N T E R N   M E D ,   V 7 ,   P 4 1 8 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 9 9 1 5 9 ;   C a s t i l l o   M ,   2 0 1 0 ,   A M   J   N E U R O R A D I O L ,   V 3 1 ,   P 7 8 3 ,   D O I   1 0 . 3 1 7 4 / a j n r . A 1 8 8 8 ;   C h a p m a n   T ,   2 0 1 2 ,   A C A D   R A D I O L ,   V 1 9 ,   P 1 1 9 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 1 . 0 9 . 0 1 3 ;   C o l a c o   M ,   2 0 1 3 ,   J   U R O L O G Y ,   V 1 9 0 ,   P 9 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j u r o . 2 0 1 3 . 0 2 . 3 1 8 6 ;   E l o y   J A ,   2 0 1 3 ,   J   N E U R O S U R G ;   E l o y   J A ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 8 6 5 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 4 0 3 9 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 9 ,   P 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 3 4 8 6 0 8 3 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 8 ,   P 7 6 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 3 4 8 1 9 4 3 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 8 ,   P 2 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 2 4 6 6 0 5 5 ;   E l o y   J A ,   2 0 1 2 ,   L A R Y N G O S C O P E ,   V 1 2 2 ,   P 2 6 9 0 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 7 4 9 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   G a r r i s o n   H H ,   2 0 1 3 ,   N I H   R E S   F U N D I N G   T R E N ;   G a s t e r   N ,   2 0 1 2 ,   B I O E S S A Y S ,   V 3 4 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / b i e s . 2 0 1 2 0 0 0 3 6 ;   H a l b a c h   O V U ,   2 0 1 1 ,   A N N   A N A T ,   V 1 9 3 ,   P 1 9 1 ,   D O I   1 0 . 1 0 1 6 / j . a a n a t . 2 0 1 1 . 0 3 . 0 1 1 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a c o b   B A ,   2 0 1 1 ,   J   P U B L I C   E C O N ,   V 9 5 ,   P 1 1 6 8 ,   D O I   1 0 . 1 0 1 6 / j . j p u b e c o . 2 0 1 1 . 0 5 . 0 0 5 ;   J a c o b   B A ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 8 6 4 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 4 . 0 0 3 ;   J o n e s   R S ,   2 0 0 4 ,   A N N   S U R G ,   V 2 4 0 ,   P 5 7 3 ,   D O I   1 0 . 1 0 9 7 / 0 1 . s l a . 0 0 0 0 1 4 0 7 4 2 . 2 2 6 4 3 . 0 b ;   K o   C Y ,   2 0 0 0 ,   J   S U R G   R E S ,   V 9 1 ,   P 5 ,   D O I   1 0 . 1 0 0 6 / j s r e . 2 0 0 0 . 5 8 5 5 ;   K o t c h e n   T A ,   2 0 0 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 1 ,   P 8 3 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 1 . 7 . 8 3 6 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M a n n   M ,   2 0 0 8 ,   A N N   S U R G ,   V 2 4 7 ,   P 2 1 7 ,   D O I   1 0 . 1 0 9 7 / S L A . 0 b 0 1 3 e 3 1 8 1 5 6 8 e 2 6 ;   O r a n d i   B J ,   2 0 1 1 ,   A M   J   S U R G ,   V 2 0 1 ,   P 2 6 0 ,   D O I   1 0 . 1 0 1 6 / j . a m j s u r g . 2 0 1 0 . 0 1 . 0 2 6 ;   P a g e l   P S ,   2 0 1 1 ,   A C T A   A N A E S T H   S C A N D ,   V 5 5 ,   P 1 0 8 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 9 - 6 5 7 6 . 2 0 1 1 . 0 2 5 0 8 . x ;   P a g e l   P S ,   2 0 1 1 ,   A N A E S T H E S I A ,   V 6 6 ,   P 8 7 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 1 1 . 0 6 8 6 0 . x ;   P a g e l   P S ,   2 0 1 1 ,   B R I T   J   A N A E S T H ,   V 1 0 7 ,   P 3 5 7 ,   D O I   1 0 . 1 0 9 3 / b j a / a e r 1 9 1 ;   P a g e l   P S ,   2 0 1 1 ,   J   C A R D I O T H O R   V A S C   A N ,   V 2 5 ,   P 7 6 1 ,   D O I   1 0 . 1 0 5 3 / j . j v c a . 2 0 1 1 . 0 3 . 0 0 3 ;   P a s h k o v a   A A ,   2 0 1 3 ,   A C T A   A N A E S T H   S C A N D ,   V 5 7 ,   P 1 0 5 8 ,   D O I   1 0 . 1 1 1 1 / a a s . 1 2 1 4 1 ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   R e e d   D A ,   2 0 1 1 ,   A C A D   M E D ,   V 8 6 ,   P 4 3 ,   D O I   1 0 . 1 0 9 7 / A C M . 0 b 0 1 3 e 3 1 8 1 f f 9 f f 2 ;   R e z e k   I ,   2 0 1 1 ,   A C A D   R A D I O L ,   V 1 8 ,   P 1 3 3 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 1 . 0 6 . 0 1 7 ;   R o s e n b e r g   T L ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 8 ,   P 5 8 2 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 3 4 7 7 3 5 3 ;   S a n f e y   H ,   2 0 1 2 ,   A M   J   S U R G ,   V 2 0 4 ,   P 1 3 0 ,   D O I   1 0 . 1 0 1 6 / j . a m j s u r g . 2 0 1 2 . 0 4 . 0 0 4 ;   S a n f e y   H ,   2 0 1 2 ,   A M   J   S U R G ,   V 2 0 4 ,   P 1 2 6 ,   D O I   1 0 . 1 0 1 6 / j . a m j s u r g . 2 0 1 2 . 0 4 . 0 0 1 ;   S a n f e y   H ,   2 0 1 0 ,   A M   J   S U R G ,   V 2 0 0 ,   P 5 5 4 ,   D O I   1 0 . 1 0 1 6 / j . a m j s u r g . 2 0 1 0 . 0 7 . 0 0 1 ;   S h a r m a   B ,   2 0 1 3 ,   S U R G E R Y ,   V 1 5 3 ,   P 4 9 3 ,   D O I   1 0 . 1 0 1 6 / j . s u r g . 2 0 1 2 . 0 9 . 0 0 6 ;   S u l i b u r k   J W ,   2 0 0 8 ,   A N N   S U R G ,   V 2 4 7 ,   P 7 4 1 ,   D O I   1 0 . 1 0 9 7 / S L A . 0 b 0 1 3 e 3 1 8 1 6 3 d 2 7 d ;   S v i d e r   P F ,   2 0 1 3 ,   A M   J   R H I N O L   A L L E R G Y ,   V 2 7 ,   p E 1 3 1 ,   D O I   1 0 . 2 5 0 0 / a j r a . 2 0 1 3 . 2 7 . 3 9 4 7 ;   S v i d e r   P F ,   2 0 1 3 ,   A M   J   O T O L A R Y N G ,   V 3 4 ,   P 4 6 4 ,   D O I   1 0 . 1 0 1 6 / j . a m j o t o . 2 0 1 3 . 0 4 . 0 0 3 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 8 8 4 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 9 5 1 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 1 8 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 6 5 9 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 5 6 9 ;   S v i d e r   P F ,   2 0 1 3 ,   O P H T H A L M O L O G Y ,   D O I   [ 1 0 . 1 0 1 6 / j . o p h t h a . 2 0 1 3 . 0 8 . 0 0 9 ,   D O I   1 0 . 1 0 1 6 / J . 0 P H T H A . 2 0 1 3 . 0 8 . 0 0 9 ] ;   S v i d e r   P F ,   J   N E U R O S U R G   I N   P R E S S ;   Z e r h o u n i   E A ,   2 0 0 7 ,   D E S K   N I H   D I R E C T O R   R E 	 5 0 	 2 4 	 2 4 	 0 	 7 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 0 1 9 4 - 5 9 9 8 	 1 0 9 7 - 6 8 1 7 	 	 O T O L A R Y N G   H E A D   N E C K 	 O t o l a r y n g o l .   H e a d   N e c k   S u r g . 	 J A N 	 2 0 1 4 	 1 5 0 	 1 	 	 	 	 	 5 3 	 6 0 	 	 1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 3 5 1 0 2 5 8 	 	 8 	 O t o r h i n o l a r y n g o l o g y ;   S u r g e r y 	 O t o r h i n o l a r y n g o l o g y ;   S u r g e r y 	 2 7 5 Q B 	 W O S : 0 0 0 3 2 8 6 9 0 8 0 0 0 0 9 	 2 4 3 5 7 3 9 5 	 
 
 J 	 A d e n l e ,   A A ;   H a s l a m ,   G E ;   L e e ,   L 	 	 	 	 A d e n l e ,   A d e m o l a   A . ;   H a s l a m ,   G a r e t h   E . ;   L e e ,   L i s a 	 	 	 G l o b a l   a s s e s s m e n t   o f   r e s e a r c h   a n d   d e v e l o p m e n t   f o r   a l g a e   b i o f u e l   p r o d u c t i o n   a n d   i t s   p o t e n t i a l   r o l e   f o r   s u s t a i n a b l e   d e v e l o p m e n t   i n   d e v e l o p i n g   c o u n t r i e s 	 E N E R G Y   P O L I C Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A l g a e   b i o f u e l s ;   B i b l i o m e t r i c s   a n a l y s i s ;   S u s t a i n a b l e   d e v e l o p m e n t 	 L I F E - C Y C L E   A S S E S S M E N T ;   C H L A M Y D O M O N A S - R E I N H A R D T I I ;   B I O D I E S E L   P R O D U C T I O N ;   M I C R O A L G A L   B I O F U E L S ;   L I Q U I D   B I O F U E L S ;   E N E R G Y ;   B I O E N E R G Y ;   J A T R O P H A ;   B E N E F I T S ;   E T H A N O L 	 T h e   p o s s i b i l i t y   o f   e c o n o m i c a l l y   d e r i v i n g   f u e l   f r o m   c u l t i v a t i n g   a l g a e   b i o m a s s   i s   a n   a t t r a c t i v e   a d d i t i o n   t o   t h e   r a n g e   o f   m e a s u r e s   t o   r e l i e v e   t h e   c u r r e n t   r e l i a n c e   o n   f o s s i l   f u e l s .   A l g a e   b i o f u e l s   a v o i d   s o m e   o f   t h e   p r e v i o u s   d r a w b a c k s   a s s o c i a t e d   w i t h   c r o p - b a s e d   b i o f u e l s   a s   t h e   a l g a e   d o   n o t   c o m p e t e   w i t h   f o o d   c r o p s .   T h e   f a v o u r a b l e   g r o w i n g   c o n d i t i o n s   f o u n d   i n   m a n y   d e v e l o p i n g   c o u n t r i e s   h a s   l e d   t o   a   g r e a t   d e a l   o f   s p e c u l a t i o n   a b o u t   t h e i r   p o t e n t i a l s   f o r   r e d u c i n g   o i l   i m p o r t s ,   s t i m u l a t i n g   r u r a l   e c o n o m i e s ,   a n d   e v e n   t a c k l i n g   h u n g e r   a n d   p o v e r t y .   B y   r e v i e w i n g   t h e   s t a t u s   o f   t h i s   t e c h n o l o g y   w e   s u g g e s t   t h a t   t h e   l a r g e   u n c e r t a i n t i e s   m a k e   i t   c u r r e n t l y   u n s u i t a b l e   a s   a   p r i o r i t y   f o r   m a n y   d e v e l o p i n g   c o u n t r i e s .   U s i n g   b i b l i o m e t r i c   a n d   p a t e n t   d a t a   a n a l y s i s ,   w e   i n d i c a t e   t h a t   m a n y   d e v e l o p i n g   c o u n t r i e s   l a c k   t h e   h u m a n   c a p i t a l   t o   d e v e l o p   t h e i r   o w n   a l g a e   i n d u s t r y   o r   a d e q u a t e l y   p r e p a r e   p o l i c i e s   t o   s u p p o r t   i m p o r t e d   t e c h n o l o g y .   A l s o ,   w e   d i s c u s s   t h e   p o t e n t i a l   o f   m o d e r n   b i o t e c h n o l o g y ,   e s p e c i a l l y   g e n e t i c   m o d i f i c a t i o n   ( G M )   t o   p r o d u c e   n e w   a l g a l   s t r a i n s   t h a t   a r e   e a s i e r   t o   h a r v e s t   a n d   y i e l d   m o r e   o i l .   C o n t r o v e r s y   s u r r o u n d i n g   t h e   u s e   o f   G M   a n d   w e a k   b i o s a f e t y   r e g u l a t o r y   s y s t e m   r e p r e s e n t s   a   s i g n i f i c a n t   c h a l l e n g e   t o   a d o p t i o n   o f   G M   t e c h n o l o g y   i n   d e v e l o p i n g   c o u n t r i e s .   A   r a n g e   o f   p o l i c y   m e a s u r e s   a r e   a l s o   s u g g e s t e d   t o   e n s u r e   t h a t   f u t u r e   p r o g r e s s   i n   a l g a e   b i o f u e l s   c a n   c o n t r i b u t e   t o   s u s t a i n a b l e   d e v e l o p m e n t .   ( C )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A d e n l e ,   A d e m o l a   A . ;   H a s l a m ,   G a r e t h   E . ;   L e e ,   L i s a ]   U n i t e d   N a t i o n s   U n i v ,   I n s t   A d v   S t u d i e s   U N U   I A S ,   I n t   O r g   C t r   P a c i f i c o   Y o k o h a m a   1   6 F ,   Y o k o h a m a ,   K a n a g a w a   2 2 0 8 5 0 2 ,   J a p a n 	 A d e n l e ,   A A   ( r e p r i n t   a u t h o r ) ,   U n i t e d   N a t i o n s   U n i v ,   I n s t   A d v   S t u d i e s   U N U   I A S ,   I n t   O r g   C t r   P a c i f i c o   Y o k o h a m a   1   6 F ,   1 - 1 - 1   M i n a t o   M i r a i   N i s h i   K u ,   Y o k o h a m a ,   K a n a g a w a   2 2 0 8 5 0 2 ,   J a p a n . 	 a d e n l e @ i a s . u n u . e d u 	 	 H a s l a m ,   G a r e t h / 0 0 0 0 - 0 0 0 2 - 1 8 5 0 - 3 4 0 2 	 	 	 A c h t e n   W M J ,   2 0 1 0 ,   J   A R I D   E N V I R O N ,   V 7 4 ,   P 1 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j a r i d e n v . 2 0 0 9 . 0 8 . 0 1 0 ;   A c k o m   E . K . ,   2 0 1 0 ,   T 3 9 P R 4 ;   A d e n l e   A . A . ,   2 0 1 1 ,   J   G E N E T I C   E N G   B I O T E C ,   V 9 ,   P 8 3 ;   A d e n l e   A .   A . ,   2 0 1 2 ,   B I O S A F E T Y ,   V 1 ,   P 1 ;   A m i g u n   B ,   2 0 0 8 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 2 ,   P 6 9 0 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 0 6 . 1 0 . 0 1 9 ;   A m i g u n   B ,   2 0 0 8 ,   E N E R G Y   S U S T A I N   D E V ,   V 1 2 ,   P 5 ;   A r e z k i   R . ,   2 0 1 2 ,   F I N A N C   D E V ,   P 4 6 ;   A s s m a n n   A . ,   2 0 1 1 ,   P O T E N T I A L   M I C R O A L G A E ;   B a i l i s   R ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 8 ,   P 9 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 0 6 8 8 1 ;   B e a l   C M ,   2 0 1 1 ,   B I O E N E R G   R E S ,   V 5 ,   P 3 4 1 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 2 1 5 5 - 0 1 1 - 9 1 2 8 - 4 ;   B e e r   L . ,   2 0 0 9 ,   C U R R E N T   O P I N I O N   B I O T ,   V 2 0 ,   P 2 5 4 ;   B r o o k e s   G . ,   2 0 1 0 ,   G M   C R O P S   G L O B A L   S O C I ,   P 1 9 9 6 ;   B r u t o n   T . ,   2 0 0 9 ,   R E V   P O T E N T I A L   M A R I N E ;   C a r r i q u i r y   M A ,   2 0 1 1 ,   E N E R G   P O L I C Y ,   V 3 9 ,   P 4 2 2 2 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 1 1 . 0 4 . 0 3 6 ;   C a s t i l l o   V M ,   1 9 9 7 ,   S O I L   S C I   S O C   A M   J ,   V 6 1 ,   P 1 1 1 6 ;   C B D ,   2 0 0 0 ,   C O N   B I O L   D I V   C A R T   P R ;   C h e n g   J J ,   2 0 1 1 ,   R E N E W   E N E R G ,   V 3 6 ,   P 3 5 4 1 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 1 1 . 0 4 . 0 3 1 ;   C h i s t i   Y ,   2 0 0 8 ,   T R E N D S   B I O T E C H N O L ,   V 2 6 ,   P 3 5 1 ,   D O I   1 0 . 1 0 1 6 / j . t i b t e c h . 2 0 0 8 . 0 4 . 0 0 2 ;   C h i s t i   Y ,   2 0 0 7 ,   B I O T E C H N O L   A D V ,   V 2 5 ,   P 2 9 4 ,   D O I   1 0 . 1 0 1 6 / j . b i o t e c h a d v . 2 0 0 7 . 0 2 . 0 0 1 ;   C I A ,   2 0 1 1 ,   W O R L D   F A C T B O O K ;   C l a r e n s   A F ,   2 0 1 0 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 4 ,   P 1 8 1 3 ,   D O I   1 0 . 1 0 2 1 / e s 9 0 2 8 3 8 n ;   C o h e n   J I ,   2 0 0 5 ,   N A T   B I O T E C H N O L ,   V 2 3 ,   P 2 7 ,   D O I   1 0 . 1 0 3 8 / n b t 0 1 0 5 - 2 7 ;   C o n w a y   G . ,   1 9 9 8 ,   D O U B L Y   G R E E N   R E V O L U T ;   C S I R ,   2 0 0 9 ,   C S I R   C O U N T   B E S T   A L G ;   D a r z i n s   A . ,   2 0 1 0 ,   T 3 6 T 2   I N T   E N   A G ;   D a y   A ,   2 0 1 1 ,   P L A N T   B I O T E C H N O L   J ,   V 9 ,   P 5 4 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 7 6 5 2 . 2 0 1 1 . 0 0 6 0 4 . x ;   D e m i r b a s   A ,   2 0 1 1 ,   E N E R G   C O N V E R S   M A N A G E ,   V 5 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / j . e n c o n m a n . 2 0 1 0 . 0 6 . 0 5 5 ;   D i t o m a s o   J M ,   2 0 1 0 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 4 ,   P 6 9 0 6 ,   D O I   1 0 . 1 0 2 1 / e s 1 0 0 6 4 0 y ;   E I A ,   2 0 1 0 ,   I N D   S T A T   A N ;   F A O ,   2 0 0 8 ,   S T A T   F O O D   A G R   B I O F   P ;   F A O ,   2 0 0 9 ,   S T A T   A G R   C O M M   M A R K   H ;   F A O ,   2 0 1 0 ,   A L G   B A S   B I O F   A P P L   C O ;   F A O / W H O ,   2 0 0 0 ,   S A F   A S P   G E N   M O D   F O O D ;   F a r g i o n e   J ,   2 0 0 8 ,   S C I E N C E ,   V 3 1 9 ,   P 1 2 3 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 2 7 4 7 ;   F E R G U S O N   J . ,   2 0 0 6 ,   G L O B A L   S H A D O W S   A F R I C ;   F e r n a n d e s   S D ,   2 0 0 7 ,   G L O B A L   B I O G E O C H E M   C Y ,   V 2 1 ,   D O I   1 0 . 1 0 2 9 / 2 0 0 6 G B 0 0 2 8 3 6 ;   G a l l a g h e r   K S ,   2 0 0 6 ,   E N E R G   P O L I C Y ,   V 3 4 ,   P 3 8 3 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 4 . 0 6 . 0 0 5 ;   G a o   Y . ,   2 0 1 1 ,   C H E M   C E N T R A L   J ,   V 6 ,   p S 1 ;   G A T T O   M ,   1 9 9 5 ,   E C O L   A P P L ,   V 5 ,   P 1 1 8 1 ;   G e r p e n   J .   V . ,   2 0 0 5 ,   F U E L   P R O C E S S   T E C H N O L ,   V 6 ,   P 1 0 9 7 ,   D O I   D O I   1 0 . 1 0 1 6 / J . F U P R O C . 2 0 0 4 . 1 1 . 0 0 5 ;   G o l d e n b e r g   S . ,   2 0 1 0 ,   A L G   S O L V   P E N T   J E T   F U ;   G r e e n s p a n   A . ,   2 0 0 5 ,   E C   F L E X I B I L I T Y ;   H a l l   C A S ,   2 0 0 9 ,   E N E R G I E S ,   V 2 ,   P 2 5 ,   D O I   1 0 . 3 3 9 0 / e n 2 0 1 0 0 0 2 5 ;   H a n o t u   J . ,   2 0 1 2 ,   B I O T E C H N O L O G Y   B I O E N G ;   H a v l i k   P . ,   2 0 1 0 ,   E N E R G Y   P O L I C Y ;   H i l l   J ,   2 0 0 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 3 ,   P 1 1 2 0 6 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 6 0 4 6 0 0 1 0 3 ;   H i r a n o   A ,   1 9 9 8 ,   C A T A L   T O D A Y ,   V 4 5 ,   P 3 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 0 - 5 8 6 1 ( 9 8 ) 0 0 2 7 5 - 2 ;   H u   Q ,   2 0 0 8 ,   P L A N T   J ,   V 5 4 ,   P 6 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 3 X . 2 0 0 8 . 0 3 4 9 2 . x ;   H u m p h r e y s   M . ,   2 0 0 7 ,   E S C A P I N G   R E S O U R C E   C U ;   H u n s b e r g e r   C ,   2 0 1 0 ,   J   P E A S A N T   S T U D ,   V 3 7 ,   P 9 3 9 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 6 6 1 5 0 . 2 0 1 0 . 5 1 2 4 6 5 ;   I E A ,   2 0 1 0 ,   S U S T   P R O D   2   G E N   B I O F ;   I E A ,   2 0 1 0 ,   W O R L D   E N   O U T L ,   P 2 0 1 0 ;   L E A ,   2 0 1 0 ,   C U R R   S T A T   P O T   A L G   B I ;   I n t e r g o v e r n m e n t a l   P a n e l   o n   C l i m a t e   C h a n g e   ( I P C C ) ,   2 0 0 7 ,   C O N T R I B U T I O N   W O R K I N G ;   J o h n s t o n e   N ,   2 0 1 0 ,   E N V I R O N   R E S O U R   E C O N ,   V 4 5 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 4 0 - 0 0 9 - 9 3 0 9 - 1 ;   J u m b e   C B L ,   2 0 0 9 ,   E N E R G   P O L I C Y ,   V 3 7 ,   P 4 9 8 0 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 9 . 0 6 . 0 6 4 ;   K a d a m   K L ,   2 0 0 2 ,   E N E R G Y ,   V 2 7 ,   P 9 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 5 4 4 2 ( 0 2 ) 0 0 0 2 5 - 7 ;   K a n t   P ,   2 0 1 1 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 5 ,   P 7 1 1 4 ,   D O I   [ 1 0 . 1 0 2 1 / e s 2 0 1 9 4 3 v ,   1 0 . 1 0 2 1 / e s 2 0 1 9 4 3 y ] ;   K a r e z k i   S . ,   2 0 0 6 ,   B I O E N E R G Y   A G R ;   K o v a c e v i c   V ,   2 0 1 0 ,   E N E R G   P O L I C Y ,   V 3 8 ,   P 5 7 4 9 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 1 0 . 0 5 . 0 2 5 ;   K u m a r   A ,   2 0 1 0 ,   T R E N D S   B I O T E C H N O L ,   V 2 8 ,   P 3 7 1 ,   D O I   1 0 . 1 0 1 6 / j . t i b t e c h . 2 0 1 0 . 0 4 . 0 0 4 ;   L a r d o n   L ,   2 0 0 9 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 3 ,   P 6 4 7 5 ,   D O I   1 0 . 1 0 2 1 / e s 9 0 0 7 0 5 j ;   L a r k u m   A W D ,   2 0 1 2 ,   T R E N D S   B I O T E C H N O L ,   V 3 0 ,   P 1 9 8 ,   D O I   1 0 . 1 0 1 6 / j . t i b t e c h . 2 0 1 1 . 1 1 . 0 0 3 ;   L e e   D H ,   2 0 1 1 ,   B I O R E S O U R C E   T E C H N O L ,   V 1 0 2 ,   P 4 3 ,   D O I   1 0 . 1 0 1 6 / j . b i o r t e c h . 2 0 1 0 . 0 6 . 0 3 4 ;   L e e   D ,   2 0 0 8 ,   B I O T E C H N O L   G E N E T   E N G ,   V 2 5 ,   P 3 3 1 ;   L u m b r e r a s   V ,   1 9 9 8 ,   P L A N T   J ,   V 1 4 ,   P 4 4 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 3 1 3 X . 1 9 9 8 . 0 0 1 4 5 . x ;   L u n q u i s t   T .   J . ,   2 0 1 0 ,   R E A L I S T I C   T E C H N O L O G Y ;   L u o   D X ,   2 0 1 0 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 4 ,   P 8 6 7 0 ,   D O I   1 0 . 1 0 2 1 / e s 1 0 0 7 5 7 7 ;   M a b e e   W .   E . ,   2 0 0 7 ,   D E P L   2   G E N   B I O F   T E C H ;   M a h a r a j h   D . ,   2 0 1 0 ,   C S I R   3   B I E N N   C   2 0 1 0 ,   P 1 1 ;   M a t a   T .   M . ,   2 0 1 0 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 4 ,   P 2 1 7 ;   M a r s h   G . ,   2 0 0 8 ,   R E N E W A B L E   E N E R G Y   F O C ,   V 9 ,   P 4 8 ,   D O I   D O I   1 0 . 1 0 1 6 / S 1 4 7 1 - 0 8 4 6 ( 0 8 ) 7 0 1 3 8 - 0 ;   M a t h e w s   J A ,   2 0 0 9 ,   B I O F U E L   B I O P R O D   B I O R ,   V 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 2 / b b b . 1 4 7 ;   M c K e n d r y   P ,   2 0 0 2 ,   B I O R E S O U R C E   T E C H N O L ,   V 8 3 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 0 - 8 5 2 4 ( 0 1 ) 0 0 1 1 8 - 3 ;   M e y e r   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 5 5 ;   M I N O W A   T ,   1 9 9 5 ,   F U E L ,   V 7 4 ,   P 1 7 3 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 2 3 6 1 ( 9 5 ) 8 0 0 0 1 - X ;   M i t c h e l l   D . ,   2 0 0 8 ,   N O T E   R I S I N G   F O O D   P R I ;   M u e l l e r   S .   A . ,   2 0 1 1 ,   B I O M A S S   B I O E N E R G ,   V 3 5 ,   P 1 6 3 2 ;   M u e l l e r   S A ,   2 0 1 1 ,   B I O M A S S   B I O E N E R G ,   V 3 5 ,   P 1 6 2 3 ,   D O I   1 0 . 1 0 1 6 / j . b i o m b i o e . 2 0 1 1 . 0 1 . 0 3 0 ;   M u o k   B .   O . ,   2 0 1 0 ,   E N V   S U I T A B I L I T Y   A G R O ;   M u r a k a m i   A ,   1 9 9 6 ,   B I O S C I   B I O T E C H   B I O C H ,   V 6 0 ,   P 1 ;   M u r p h y   C F ,   2 0 1 1 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 5 ,   P 5 8 6 1 ,   D O I   1 0 . 1 0 2 1 / e s 2 0 0 1 0 9 z ;   M u r p h y   D J ,   2 0 1 0 ,   E N V   D E V   S U S T A I N A B I L I ,   V 1 3 ,   P 1 7 9 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 0 6 6 8 - 0 1 0 - 9 2 5 5 - 7 ;   M u t a n d a   T . ,   2 0 1 0 ,   B I O R E S O U R C E   T E C H N O L ,   V 1 0 2 ,   P 5 7 ;   N a j a f i   G . ,   2 0 1 0 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 5 ,   P 3 8 7 0 ;   N i g a m   P S ,   2 0 1 1 ,   P R O G   E N E R G   C O M B U S T ,   V 3 7 ,   P 5 2 ,   D O I   1 0 . 1 0 1 6 / j . p e c s . 2 0 1 0 . 0 1 . 0 0 3 ;   N o r s k e r   N H ,   2 0 1 1 ,   B I O T E C H N O L   A D V ,   V 2 9 ,   P 2 4 ,   D O I   1 0 . 1 0 1 6 / j . b i o t e c h a d v . 2 0 1 0 . 0 8 . 0 0 5 ;   O w e n   M D K ,   2 0 0 5 ,   P E S T   M A N A G   S C I ,   V 6 1 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 2 / p s . 1 0 1 5 ;   P a r a y i l   G ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 9 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 1 0 6 - 3 ;   P e r e i r a   H ,   2 0 1 1 ,   B I O T E C H N O L   B I O F U E L S ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 7 5 4 - 6 8 3 4 - 4 - 6 1 ;   P i m e n t e l   D . ,   2 0 0 5 ,   N A T   R E S O U R   R E S ,   V 1 4 ,   P 6 5 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 1 0 5 3 - 0 0 5 - 4 6 7 9 - 8 ;   P o p e   J ,   2 0 0 4 ,   E N V I R O N   I M P A C T   A S S E S ,   V 2 4 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 6 / j . e i a r . 2 0 0 4 . 0 3 . 0 0 1 ;   Q i a m   M . ,   2 0 0 9 ,   A N N   R E V   R E S O U R C E   E C ,   V 1 ,   P 6 6 5 ;   R a d a k o v i t s   R ,   2 0 1 0 ,   E U K A R Y O T   C E L L ,   V 9 ,   P 4 8 6 ,   D O I   1 0 . 1 1 2 8 / E C . 0 0 3 6 4 - 0 9 ;   R a t h m a n n   R ,   2 0 1 0 ,   R E N E W   E N E R G ,   V 3 5 ,   P 1 4 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 0 9 . 0 2 . 0 2 5 ;   R i g b y   D ,   2 0 0 1 ,   A G R   S Y S T ,   V 6 8 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 8 - 5 2 1 X ( 0 0 ) 0 0 0 6 0 - 3 ;   R o u n d t a b l e   o n   S u s t a i n a b l e   B i o f u e l s ,   2 0 1 0 ,   R S B   G U I D   P R I N C   C R I T ;   R y a n   C . ,   2 0 0 9 ,   C U L T I V A T I N G   C L E A N   E N ;   S a c h s   J ,   2 0 0 7 ,   E S C A P I N G   R E S O U R C E   C U ,   P 1 7 3 ;   S c h e n k   P M ,   2 0 0 8 ,   B I O E N E R G   R E S ,   V 1 ,   P 2 0 ,   D O I   1 0 . 1 0 0 7 / s 1 2 1 5 5 - 0 0 8 - 9 0 0 8 - 8 ;   S c h m e r   M R ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 4 6 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 4 7 6 7 1 0 5 ;   S c o t t   S .   A . ,   2 0 1 0 ,   C U R R E N T   O P I N I O N   B I O T ,   P 2 1 ;   S h e e h a n   J . ,   1 9 9 8 ,   L O O K   B A C K   U S   D E P   E N E ;   S h i r v a n i   T ,   2 0 1 1 ,   E N E R G   E N V I R O N   S C I ,   V 4 ,   P 3 7 7 3 ,   D O I   1 0 . 1 0 3 9 / c 1 e e 0 1 7 9 1 h ;   S i m s   R E H ,   2 0 1 0 ,   B I O R E S O U R C E   T E C H N O L ,   V 1 0 1 ,   P 1 5 7 0 ,   D O I   1 0 . 1 0 1 6 / j . b i o r t e c h . 2 0 0 9 . 1 1 . 0 4 6 ;   S i m s   R .   E .   H . ,   2 0 0 3 ,   B I O M A S S   A G R   S U S T A I N A ,   P 9 1 ;   S i n g h   J ,   2 0 1 0 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 4 ,   P 2 5 9 6 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 1 0 . 0 6 . 0 1 4 ;   S i z o v a   I ,   2 0 0 1 ,   G E N E ,   V 2 7 7 ,   P 2 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 1 1 1 9 ( 0 1 ) 0 0 6 1 6 - 3 ;   S p o l a o r e   P ,   2 0 0 6 ,   J   B I O S C I   B I O E N G ,   V 1 0 1 ,   P 8 7 ,   D O I   1 0 . 1 2 6 3 / j b b . 1 0 1 . 8 7 ;   S t e p h e n s   E ,   2 0 1 0 ,   T R E N D S   P L A N T   S C I ,   V 1 5 ,   P 5 5 4 ,   D O I   1 0 . 1 0 1 6 / j . t p l a n t s . 2 0 1 0 . 0 6 . 0 0 3 ;   S t e p h e n s   E ,   2 0 1 0 ,   N A T   B I O T E C H N O L ,   V 2 8 ,   P 1 2 6 ,   D O I   1 0 . 1 0 3 8 / n b t 0 2 1 0 - 1 2 6 ;   T a k e s h i t a   T ,   2 0 1 1 ,   A P P L   E N E R G ,   V 8 8 ,   P 3 4 8 1 ,   D O I   1 0 . 1 0 1 6 / j . a p e n e r g y . 2 0 1 1 . 0 2 . 0 0 9 ;   T h u r m o n d   W . ,   2 0 1 1 ,   T O P   1 1   A L G A E   B I O F U E L ;   T r a x l e r   G . ,   2 0 0 6 ,   I n t e r n a t i o n a l   J o u r n a l   o f   T e c h n o l o g y   a n d   G l o b a l i s a t i o n ,   V 2 ;   U F R J ,   2 0 1 3 ,   P R O J ;   H a z e l l   P . ,   2 0 0 6 ,   B I O E N E R G Y   A G R ;   O o n k   H ,   2 0 0 6 ,   M I C R O A L G A E   B I O F I X A T I ;   W i c k e   B ,   2 0 1 1 ,   B I O M A S S   B I O E N E R G ,   V 3 5 ,   P 2 7 7 3 ,   D O I   1 0 . 1 0 1 6 / j . b i o m b i o e . 2 0 1 1 . 0 3 . 0 1 0 ;   W i g m o s t a   M S ,   2 0 1 1 ,   W A T E R   R E S O U R C E S   R E S ,   V 4 7 ;   W i j f f e l s   R H ,   2 0 1 0 ,   S C I E N C E ,   V 3 2 9 ,   P 7 9 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 8 9 0 0 3 ;   W o l d e - G e o r g i s   T . ,   2 0 0 9 ,   I N T   R E S   C T R   E N E R G Y   E ;   W o l f e n b a r g e r   L L ,   2 0 0 0 ,   S C I E N C E ,   V 2 9 0 ,   P 2 0 8 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 0 . 5 4 9 9 . 2 0 8 8 ;   Y e e   K F ,   2 0 0 9 ,   A P P L   E N E R G ,   V 8 6 ,   p S 1 8 9 ,   D O I   1 0 . 1 0 1 6 / j . a p e n e r g y . 2 0 0 9 . 0 4 . 0 1 4 ;   Y e r g i n   D ,   2 0 0 6 ,   F O R E I G N   A F F ,   V 8 5 ,   P 6 9 ,   D O I   1 0 . 2 3 0 7 / 2 0 0 3 1 9 1 2 ;   Z a s l a v s k a i a   L A ,   2 0 0 0 ,   J   P H Y C O L ,   V 3 6 ,   P 3 7 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 9 - 8 8 1 7 . 2 0 0 0 . 9 9 1 6 4 . x 	 1 2 5 	 2 4 	 2 4 	 7 	 8 4 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 3 0 1 - 4 2 1 5 	 1 8 7 3 - 6 7 7 7 	 	 E N E R G   P O L I C Y 	 E n e r g y   P o l i c y 	 O C T 	 2 0 1 3 	 6 1 	 	 	 	 	 	 1 8 2 	 1 9 5 	 	 1 0 . 1 0 1 6 / j . e n p o l . 2 0 1 3 . 0 5 . 0 8 8 	 	 1 4 	 E n e r g y   &   F u e l s ;   E n v i r o n m e n t a l   S c i e n c e s ;   E n v i r o n m e n t a l   S t u d i e s 	 E n e r g y   &   F u e l s ;   E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y 	 2 3 1 U I 	 W O S : 0 0 0 3 2 5 4 4 3 5 0 0 0 2 0 	 	 
 
 J 	 V a n c l a y ,   J K 	 	 	 	 V a n c l a y ,   J e r o m e   K . 	 	 	 A n   e v a l u a t i o n   o f   t h e   A u s t r a l i a n   R e s e a r c h   C o u n c i l ' s   j o u r n a l   r a n k i n g 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 E x c e l l e n c e   i n   R e s e a r c h   f o r   A u s t r a l i a   ( E R A ) ;   B i b l i o m e t r i c s ;   R e s e a r c h   e v a l u a t i o n 	 H - I N D E X ;   S C I E N T I F I C - R E S E A R C H ;   G O O G L E   S C H O L A R ;   P U B L I C A T I O N ;   Q U A L I T Y ;   I M P A C T ;   I N D I C A T O R S ;   E C O N O M I C S ;   S C O P U S 	 A s   p a r t   o f   i t s   p r o g r a m   o f   ' E x c e l l e n c e   i n   R e s e a r c h   f o r   A u s t r a l i a '   ( E R A ) ,   t h e   A u s t r a l i a n   R e s e a r c h   C o u n c i l   r a n k e d   j o u r n a l s   i n t o   f o u r   c a t e g o r i e s   ( A * ,   A ,   B ,   a n d   C )   i n   p r e p a r a t i o n   f o r   t h e i r   p e r f o r m a n c e   e v a l u a t i o n   o f   A u s t r a l i a n   u n i v e r s i t i e s .   T h e   r a n k i n g   i s   i m p o r t a n t   b e c a u s e   i t   l i k e l y   t o   h a v e   a   m a j o r   i m p a c t   o n   p u b l i c a t i o n   c h o i c e s   a n d   r e s e a r c h   d i s s e m i n a t i o n   i n   A u s t r a l i a .   T h e   r a n k i n g   i s   p r o b l e m a t i c   b e c a u s e   i t   i s   e v i d e n t   t h a t   s o m e   d i s c i p l i n e s   h a v e   b e e n   t r e a t e d   v e r y   d i f f e r e n t l y   t h a n   o t h e r s .   T h i s   p a p e r   r e v e a l s   w e a k n e s s e s   i n   t h e   E R A   j o u r n a l   r a n k i n g   a n d   h i g h l i g h t s   t h e   p o o r   c o r r e l a t i o n   b e t w e e n   E R A   r a n k i n g s   a n d   o t h e r   a c k n o w l e d g e d   m e t r i c s   o f   j o u r n a l   s t a n d i n g .   I t   h i g h l i g h t s   t h e   n e e d   f o r   a   r e a s o n a b l e   r e p r e s e n t a t i o n   o f   j o u r n a l s   r a n k e d   a s   A *   i n   e a c h   s c i e n t i f i c   d i s c i p l i n e .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 S o   C r o s s   U n i v ,   S c h   E n v i r o n m   S c i   &   M a n a g e m e n t ,   L i s m o r e ,   N S W   2 4 8 0 ,   A u s t r a l i a 	 V a n c l a y ,   J K   ( r e p r i n t   a u t h o r ) ,   S o   C r o s s   U n i v ,   S c h   E n v i r o n m   S c i   &   M a n a g e m e n t ,   P O B   1 5 7 ,   L i s m o r e ,   N S W   2 4 8 0 ,   A u s t r a l i a . 	 J V a n c l a y @ s c u . e d u . a u 	 V a n c l a y ,   J e r o m e / B - 9 2 6 6 - 2 0 0 9 	 V a n c l a y ,   J e r o m e / 0 0 0 0 - 0 0 0 2 - 5 6 3 9 - 5 4 8 1 	 	 	 A N D E R S O N   D L ,   2 0 0 9 ,   A G E N D A   J   P O L I C Y   A N A L ,   V 1 6 ,   P 7 ;   * A N Z S R C ,   2 0 1 0 ,   A U S T R   N Z   S T A N D   R E S   C ;   A T K I N S O N   R J ,   2 0 1 0 ,   H E R D S A   N E W S ,   V 3 2 ,   P 2 2 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B E A S L E Y   M R ,   2 0 1 0 ,   R E P O R T   I N V E S T I G A T I O N ,   P 1 2 9 ;   B o l l e n   J ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 8 0 3 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   B u t l e r   L ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 3 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 7 8 0 ;   B u t l e r   L ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 ;   B U T L E R   L i n d a ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 8 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 7 ;   B u t l e r   L . ,   2 0 0 5 ,   H D B   Q U A N T I T A T I V E   S C I ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 2 7 5 5 - 9 _ 1 8 ;   D o n o v a n   C ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 2 3 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 5 7 0 3 0 ;   F R I E D M A N   K ,   2 0 1 0 ,   D E S I G N   R E S   J   R A N K I N G ;   G e n o n i   P . ,   2 0 0 9 ,   A U S T R   H U M A N I T I E S   R E V ,   V 4 6 ,   P 7 ;   G o n z a l e z - P e r e i r a   B ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 2 ;   G r a h a m   L .   J . ,   2 0 0 8 ,   E D U C   P H I L O S   T H E O R Y ,   V 4 0 ,   P 8 1 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 9 - 5 8 1 2 . 2 0 0 8 . 0 0 4 7 8 . x ;   H a d d o w   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 4 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 9 8 - 4 ;   H a r z i n g   A W ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 5 3 ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H a s l a m   N ,   2 0 1 0 ,   A U S T   J   P S Y C H O L ,   V 6 2 ,   P 1 1 2 ,   D O I   1 0 . 1 0 8 0 / 0 0 0 4 9 5 3 0 9 0 3 3 3 4 4 8 9 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I m p e r i a l   J ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 2 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 6 5 - 4 ;   J a r w a l   S .   D . ,   2 0 0 9 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 3 1 ,   P 2 8 9 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 6 0 0 8 0 0 9 0 3 1 9 1 9 3 0 ;   L a m p   J W ,   2 0 0 9 ,   O N L I N E   I N F O R M   R E V ,   V 3 3 ,   P 8 2 7 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 9 1 0 9 8 5 7 4 7 ;   L A M P   J W ,   2 0 1 0 ,   1 2 0 3   D E S I G N   P R A C T I C E ;   M e h o   L I ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 7 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 7 4 ;   M o e d   H F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 1 . 0 0 2 ;   N o r r i s   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 2 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 1 . 0 0 1 ;   N o r t h c o t t   D ,   2 0 1 0 ,   A U S T   A C C O U N T   R E V ,   V 2 0 ,   P 3 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 8 3 5 - 2 5 6 1 . 2 0 1 0 . 0 0 0 7 9 . x ;   O s w a l d   A J ,   2 0 0 7 ,   E C O N O M I C A ,   V 7 4 ,   P 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 3 5 . 2 0 0 6 . 0 0 5 7 5 . x ;   P e t e r s   M .   A . ,   2 0 0 8 ,   E D U C   P H I L O S   T H E O R Y ,   V 4 0 ,   P 8 0 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 9 - 5 8 1 2 . 2 0 0 8 . 0 0 5 1 5 . x ;   * S C I I M A G O ,   2 0 1 0 ,   S C I M A G O   J   C O U N T R   R A N ;   S i n g h   G ,   2 0 0 7 ,   J   M A N A G E   I N Q U I R Y ,   V 1 6 ,   P 3 1 9 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 7 3 0 5 8 9 4 ;   S t a r b u c k   W H ,   2 0 0 5 ,   O R G A N   S C I ,   V 1 6 ,   P 1 8 0 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 0 4 0 . 0 1 0 7 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   V a n c l a y   J K ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 2 ;   V a n c l a y   J K ,   2 0 0 8 ,   F O R E S T   E C O L   M A N A G ,   V 2 5 6 ,   P 5 0 7 ,   D O I   1 0 . 1 0 1 6 / j . f o r e c o . 2 0 0 8 . 0 5 . 0 2 0 ;   2 0 1 0 ,   R A N K E D   J   L I S T   D E V ;   2 0 1 0 ,   R A N K E D   J   L I S T 	 4 0 	 2 4 	 2 4 	 2 	 1 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 A P R 	 2 0 1 1 	 5 	 2 	 	 	 	 	 2 6 5 	 2 7 4 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 2 . 0 0 1 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 3 2 A V 	 W O S : 0 0 0 2 8 8 1 5 4 7 0 0 0 0 3 	 	 
 
 J 	 P o n c e ,   F A ;   L o z a n o ,   A M 	 	 	 	 P o n c e ,   F r a n c i s c o   A . ;   L o z a n o ,   A n d r e s   M . 	 	 	 T h e   M o s t   C i t e d   W o r k s   i n   P a r k i n s o n ' s   D i s e a s e 	 M O V E M E N T   D I S O R D E R S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 P a r k i n s o n ' s   d i s e a s e ;   b i b l i o m e t r i c s ;   c l a s s i c s ;   i m p a c t 	 A L P H A - S Y N U C L E I N ;   S T I M U L A T I O N ;   M U T A T I O N ;   N U C L E U S 	 T h e   n u m b e r   o f   c i t a t i o n s   a   w o r k   h a s   r e c e i v e d   i s   a   m e a s u r e   o f   i t s   i m p a c t .   W e   i d e n t i f i e d   t h e   t o p   c i t e d   w o r k s   i n   P a r k i n s o n ' s   d i s e a s e .   A   W e b   o f   S c i e n c e   s e a r c h   w a s   p e r f o r m e d   f o r   a r t i c l e s   i n c l u d i n g   t h e   k e y w o r d   " P a r k i n s o n * ' '   i n   t h e   t i t l e   ( t h e   a s t e r i s k   w a s   i n c l u d e d   i n   t h e   s e a r c h   s t r i n g   a s   a   w i l d   c a r d   c h a r a c t e r ) .   A r t i c l e s   w i t h   m o r e   t h a n   4 0 0   c i t a t i o n s ,   t h e   t h r e s h o l d   t o   b e   c o n s i d e r e d   a   " c i t a t i o n   c l a s s i c , ' '   w e r e   i d e n t i f i e d   a n d   a n a l y z e d .   T h e   1 0 7   a r t i c l e s   i d e n t i f i e d   a p p e a r e d   i n   3 3   d i f f e r e n t   j o u r n a l s ,   w i t h   c l i n i c a l   a r t i c l e s   p r i m a r i l y   a p p e a r i n g   i n   t h e   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e   a n d   L a n c e t ,   a n d   s c i e n t i f i c   a r t i c l e s   p r i m a r i l y   i n   N a t u r e ,   S c i e n c e ,   a n d   t h e   P r o c e e d i n g s   o f   t h e   N a t i o n a l   A c a d e m y   o f   S c i e n c e s .   T h e r e   w e r e   5 2   l a b o r a t o r y   s t u d i e s ,   3 8   c l i n i c a l   s t u d i e s ,   1 2   r e v i e w   a r t i c l e s ,   a n d   5   c l a s s i f i c a t i o n s   o f   d i s e a s e .   T h e   c l i n i c a l   s t u d i e s   i n c l u d e d   e v a l u a t i o n   o f   m e d i c a l   a n d   s u r g i c a l   t h e r a p i e s ,   a n d   t h e   l a b o r a t o r y   s t u d i e s   i n c l u d e d   g e n e   d i s c o v e r y ,   m o l e c u l a r   b i o l o g y ,   a n d   c e l l u l a r   b i o l o g y ,   a s   w e l l   a s   a n i m a l   m o d e l s   a n d   n e u r o p a t h o l o g i c a l   s t u d - i e s .   H i g h   i m p a c t   t o p i c s   i n c l u d e d   d e e p   b r a i n   s t i m u l a t i o n ,   l e v o d o p a   t h e r a p y   a n d   r e l a t e d   a d v e r s e   e f f e c t s ,   M P T P - b a s e d   a n i m a l   s t u d i e s ,   d i s c o v e r y   a n d   e v a l u a t i o n   o f   g e n e t i c   m u t a t i o n s ,   a n d   p a t h o g e n e s i s   r e l a t e d   t o   o x i d a t i v e   d e g e n e r a t i o n .   M o r e   t h a n   h a l f   o f   t h e   a r t i c l e s   i d e n t i f i e d   i n   t h i s   s t u d y   h a v e   b e e n   p u b l i s h e d   i n   t h e   p a s t   2 0   y e a r s .   P r i o r   t o   1 9 9 0 ,   h i g h l y   c i t e d   a r t i c l e s   i n   P a r k i n s o n ' s   d i s e a s e   t e n d e d   t o   b e   t h o s e   t h a t   e v a l u a t e d   m e d i c a l   t h e r a p i e s   a n d   d e f i n e d   t h e   c l i n i c a l   a n d   n e u r o p a t h o l o g i c a l   c h a r a c t e r i s t i c s   o f   t h e   d i s e a s e .   S i n c e   1 9 9 0 ,   a   h i g h   p r o p o r t i o n   o f   t h e   c i t a t i o n   c l a s s i c s   a d d r e s s   t h e   g e n e t i c   c h a r a c t e r i z a t i o n   o f   a n d   s u r g i c a l   t r e a t m e n t s   f o r   t h e   d i s e a s e   s u g g e s t i n g   t h a t   t h e s e   a r e   t h e   m o s t   s i g n i f i c a n t   r e c e n t   d e v e l o p m e n t s   a n d   m a i n   d r i v e r s   o f   i m p a c t   i n   t h i s   f i e l d .   ( C )   2 0 1 0   M o v e m e n t   D i s o r d e r   S o c i e t y 	 [ L o z a n o ,   A n d r e s   M . ]   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a ;   [ P o n c e ,   F r a n c i s c o   A . ]   S t   J o s e p h s   H o s p ,   D i v   N e u r o l   S u r g ,   B a r r o w   N e u r o l   I n s t ,   P h o e n i x ,   A Z   U S A ;   [ P o n c e ,   F r a n c i s c o   A . ]   M e d   C t r ,   P h o e n i x ,   A Z   U S A 	 L o z a n o ,   A M   ( r e p r i n t   a u t h o r ) ,   U n i v   T o r o n t o ,   T o r o n t o   W e s t e r n   H o s p ,   D i v   N e u r o s u r g ,   3 9 9   B a t h u r s t   S t , W W   4 - 4 4 7 ,   T o r o n t o ,   O N   M 5 T   2 S 8 ,   C a n a d a . 	 l o z a n o @ u h n r e s . u t o r o n t o . c a 	 	 	 	 	 B e n a b i d   A L ,   1 9 9 6 ,   J   N E U R O S U R G ,   V 8 4 ,   P 2 0 3 ,   D O I   1 0 . 3 1 7 1 / j n s . 1 9 9 6 . 8 4 . 2 . 0 2 0 3 ;   B E N A B I D   A L ,   1 9 9 1 ,   L A N C E T ,   V 3 3 7 ,   P 4 0 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 1 ) 9 1 1 7 5 - T ;   B r a a k   H ,   2 0 0 3 ,   N E U R O B I O L   A G I N G ,   V 2 4 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 7 - 4 5 8 0 ( 0 2 ) 0 0 0 6 5 - 9 ;   F a h n   S . ,   1 9 8 7 ,   R E C E N T   D E V   P A R K I N S O N ,   P 2 9 3 ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H U G H E S   A J ,   1 9 9 2 ,   J   N E U R O L   N E U R O S U R   P S ,   V 5 5 ,   P 1 8 1 ,   D O I   1 0 . 1 1 3 6 / j n n p . 5 5 . 3 . 1 8 1 ;   I m a i   Y ,   2 0 0 1 ,   C E L L ,   V 1 0 5 ,   P 8 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 2 - 8 6 7 4 ( 0 1 ) 0 0 4 0 7 - X ;   K i t a d a   T ,   1 9 9 8 ,   N A T U R E ,   V 3 9 2 ,   P 6 0 5 ;   K r u g e r   R ,   1 9 9 8 ,   N A T   G E N E T ,   V 1 8 ,   P 1 0 6 ,   D O I   1 0 . 1 0 3 8 / n g 0 2 9 8 - 1 0 6 ;   P a r k i n s o n   J ,   2 0 0 2 ,   J   N E U R O P S Y C H   C L I N   N ,   V 1 4 ,   P 2 2 3 ,   D O I   1 0 . 1 1 7 6 / a p p i . n e u r o p s y c h . 1 4 . 2 . 2 2 3 ;   P o l y m e r o p o u l o s   M H ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 6 ,   P 2 0 4 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 6 . 5 3 2 1 . 2 0 4 5 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 4 4 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 3 . J N S 1 0 3 2 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 2 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 5 9 9 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 3 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 6 0 0 ;   S c h w a b   R . ,   1 9 6 9 ,   3   S   P A R K   D I S ;   S i n g l e t o n   A B ,   2 0 0 3 ,   S C I E N C E ,   V 3 0 2 ,   P 8 4 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 9 0 2 7 8 ;   Z h a n g   Y ,   2 0 0 0 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 7 ,   P 1 3 3 5 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 2 4 0 3 4 7 7 9 7 	 1 7 	 2 4 	 2 4 	 4 	 1 5 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 0 8 8 5 - 3 1 8 5 	 	 	 M O V E M E N T   D I S O R D 	 M o v .   D i s o r d . 	 F E B   1 5 	 2 0 1 1 	 2 6 	 3 	 	 	 	 	 3 8 0 	 3 9 0 	 	 1 0 . 1 0 0 2 / m d s . 2 3 4 4 5 	 	 1 1 	 C l i n i c a l   N e u r o l o g y 	 N e u r o s c i e n c e s   &   N e u r o l o g y 	 7 4 8 U U 	 W O S : 0 0 0 2 8 9 4 1 8 9 0 0 0 0 3 	 2 1 4 6 2 2 5 5 	 
 
 J 	 J a r v e n p a a ,   H M ;   M a k i n e n ,   S J ;   S e p p a n e n ,   M 	 	 	 	 J a r v e n p a a ,   H e i n i   M . ;   M a k i n e n ,   S a k u   J . ;   S e p p a n e n ,   M a r k o 	 	 	 P a t e n t   a n d   p u b l i s h i n g   a c t i v i t y   s e q u e n c e   o v e r   a   t e c h n o l o g y ' s   l i f e   c y c l e 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 E m e r g i n g   t e c h n o l o g y ;   T e c h n o l o g y   L i f e   C y c l e ;   D i f f u s i o n ;   P u b l i c a t i o n ;   P a t e n t s ;   M e d i a ;   S e q u e n c e 	 S C I E N C E - A N D - T E C H N O L O G Y ;   E M E R G I N G   T E C H N O L O G I E S ;   I N N O V A T I O N ;   I N F R A S T R U C T U R E ;   B I B L I O M E T R I C S ;   I N D I C A T O R S ;   S T A T I S T I C S 	 T h e   u s e   o f   m u l t i p l e   i n d i c a t o r s   i n   a n a l y z i n g   t e c h n o l o g i c a l   d e v e l o p m e n t s   a n d   e x p l o i t i n g   t h e   i n c r e a s i n g   a v a i l a b i l i t y   o f   i n f o r m a t i o n   h a s   b e e n   r e c o m m e n d e d   w i d e l y   i n   o r d e r   t o   d e c r e a s e   s y s t e m a t i c   b i a s e s   b e t w e e n   s i n g l e   m e a s u r e s .   O n e   o f   t h e   f e w   f r a m e w o r k s   t h a t   t a k e   m u l t i p l e   s o u r c e s   i n t o   a c c o u n t   i s   t h e   T e c h n o l o g y   L i f e   C y c l e   i n d i c a t o r s   t h a t   p r o v i d e   a   m e a s u r e   f o r   t h e   t o t a l i t y   o f   s o u r c e s   a v a i l a b l e   f o r   a n a l y s i s   a n d   t a k e   t h e i r   t i m e l i n e s s   i n t o   a c c o u n t ,   a l t h o u g h   t h e   l i n e a r   m o d e l   t h a t   t h e   f r a m e w o r k   r e p r e s e n t s   i s   o f t e n   q u e s t i o n e d .   T h e   a i m   o f   t h i s   p a p e r   i s   t o   p r o v i d e   b i b l i o m e t r i c   s t u d i e s   w i t h   i n s i g h t   i n t o   t h e   t i m e l y   r e l e v a n c e   o f   u s i n g   d i f f e r e n t   d a t a b a s e s .   T o   a s s e s s   t h e   r e p o r t i n g   s e q u e n c e   b e t w e e n   d i f f e r e n t   d a t a b a s e s ,   t h i s   p a p e r   m e a s u r e s   t h e   r e p o r t i n g   a c t i v i t y   o f   t h r e e   c a s e   t e c h n o l o g i e s   i n   d i f f e r e n t   d a t a b a s e s   a n d   a n a l y z e s   t h e   y e a r l y   r e p o r t i n g   v o l u m e s   o f   a   n u m b e r   o f   i t e m s   t h a t   m e n t i o n   t h e   t e c h n o l o g y   i n   t h e   d a t a b a s e s   a s   s u g g e s t e d   b y   t h e   T L C   i n d i c a t o r s .   T h e   r e s u l t s   o f   t h i s   p a p e r   s u g g e s t   t h a t ,   w h e n   s c i e n c e   i s   t h e   s o u r c e   o f   n e w   i d e a s   a n d   t h e   d r i v e r   f o r   t e c h n o l o g i c a l   d e v e l o p m e n t   a n d   i n n o v a t i o n s ,   c o m m u n i c a t i o n   c a n   h a p p e n   i n   t h e   o r d e r   s u g g e s t e d   b y   t h e   T L C   i n d i c a t o r s .   H o w e v e r ,   t h i s   m o d e l   d o e s   n o t   s e e m   t o   b e   a   g e n e r a l   m o d e l   f o r   d e t e c t i n g   a n d   f o r e c a s t i n g   a   t e c h n o l o g i c a l   l i f e   c y c l e .   I n   a d d i t i o n ,   t h e   r e s u l t s   o f   t h e   p a p e r   p o i n t   t o   t h e   p o s s i b i l i t y   o f   s t u d y i n g   n o n - l i n e a r   m o d e l s   o f   i n n o v a t i o n   a n d   c o n t e x t s   w h e r e   t h i s   t y p e   o f   d y n a m i c s   m i g h t   t a k e   p l a c e .   ( C )   2 0 1 0   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ J a r v e n p a a ,   H e i n i   M . ]   T a m p e r e   U n i v   T e c h n o l ,   C t r   I n n o v a t   &   T e c h n o l   R e s ,   D e p t   I n d   M a n a g e m e n t ,   F I N - 3 3 1 0 1   T a m p e r e ,   F i n l a n d 	 J a r v e n p a a ,   H M   ( r e p r i n t   a u t h o r ) ,   T a m p e r e   U n i v   T e c h n o l ,   C t r   I n n o v a t   &   T e c h n o l   R e s ,   D e p t   I n d   M a n a g e m e n t ,   F I N - 3 3 1 0 1   T a m p e r e ,   F i n l a n d . 	 h e i n i . j a r v e n p a a @ t u t . f i l 	 m a k i n e n ,   s a k u / G - 4 3 5 2 - 2 0 1 4 ;   S e p p a n e n ,   M a r k o / N - 9 6 5 9 - 2 0 1 4 	 S e p p a n e n ,   M a r k o / 0 0 0 0 - 0 0 0 3 - 2 1 0 6 - 9 5 2 8 	 	 	 A b r a h a m s o n   E ,   1 9 9 9 ,   A D M I N   S C I   Q U A R T ,   V 4 4 ,   P 7 0 8 ,   D O I   1 0 . 2 3 0 7 / 2 6 6 7 0 5 3 ;   A k a s a k i   I ,   2 0 0 7 ,   J   C R Y S T   G R O W T H ,   V 3 0 0 ,   P 2 ,   D O I   1 0 . 1 0 1 6 / j . j c r y s g r o . 2 0 0 6 . 1 0 . 2 5 9 ;   B a l c o n i   M ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 9 . 0 1 3 ;   B e n g i s u   M ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 9 . 0 0 1 ;   B E R G M A N   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 2 ;   C a r a c a   J ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 8 6 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 8 . 0 0 3 ;   C h a o   C C ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 2 6 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 6 . 0 9 . 0 0 3 ;   C h u a n g   K Y ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 0 1 ,   D O I   [ 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 1 - 0 ,   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 3 - 0 ] ;   D e a c o n   D ,   2 0 0 7 ,   E U R   J   C O M M U N ,   V 2 2 ,   P 5 ,   D O I   1 0 . 1 1 7 7 / 0 2 6 7 3 2 3 1 0 7 0 7 3 7 4 3 ;   D u b o u r g   L ,   2 0 0 8 ,   S U R F   C O A T   T E C H ,   V 2 0 2 ,   P 5 8 6 3 ,   D O I   1 0 . 1 0 1 6 / j . s u r f c o a t . 2 0 0 8 . 0 6 . 1 2 2 ;   G o d i n   B ,   2 0 0 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 3 1 ,   P 6 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 0 6 2 9 1 8 6 5 ;   G R I L I C H E S   Z ,   1 9 9 0 ,   J   E C O N   L I T ,   V 2 8 ,   P 1 6 6 1 ;   G r i l i c h e s   Z ,   1 9 9 8 ,   R   D   P R O D U C T I V I T Y   E C ;   G u p t a   B M ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 5 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 7 ;   H a u p t   R ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 3 8 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 1 2 . 0 0 4 ;   * I D C ,   2 0 0 9 ,   T A C K L   I N F   O V   S O U R C ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 7 7 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 5 . 0 0 5 ;   K a j i k a w a   Y ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 1 1 1 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 4 . 0 0 4 ;   K l e i n k n e c h t   A ,   2 0 0 2 ,   E C   I N N O V A T I O N   N E W   T E ,   V 1 1 ,   P 1 0 9 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 3 8 5 9 0 2 1 0 8 9 9 ;   K L I N E   S .   J . ,   1 9 8 6 ,   P O S I T I V E   S U M   S T R A T E G ,   P 2 7 5 ;   K o s t o f f   R N ,   2 0 0 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 2 ,   P 7 9 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 2 . 0 0 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   K o s t o f f   R N ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 5 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 6 . 0 0 4 ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 6 0 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 7 ;   L u n d v a l l   B .   -   A . ,   1 9 9 4 ,   J   I N D   S T U D I E S ,   V 1 ,   P 2 3 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 6 6 2 7 1 9 4 0 0 0 0 0 0 0 2 ;   M a r t i n o   J .   P . ,   1 9 9 3 ,   T E C H N O L O G I C A L   F O R E C A ,   V 3 r d ,   P 4 6 2 ;   M i s h r a   S ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 2 3 - 8 ;   M o s e r   P ,   2 0 0 5 ,   A M   E C O N   R E V ,   V 9 5 ,   P 1 2 1 4 ,   D O I   1 0 . 1 2 5 7 / 0 0 0 2 8 2 8 0 5 4 8 2 5 5 0 1 ;   * N A T   B I O D   B O A R D ,   2 0 0 9 ,   2 0 0 9   B I O D   D E F ;   N e l s o n   A J ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 9 9 4 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 1 . 0 2 3 ;   N o r t o n   M .   J . ,   2 0 0 0 ,   I N T R O   C O N C E P T S   I N F O R ;   P a l m b e r g   C . ,   2 0 0 9 ,   N A N O T E C H N O L O G Y   O V E R V ;   P a l m e r   P .   J . ,   1 9 9 9 ,   E n g i n e e r i n g   S c i e n c e   a n d   E d u c a t i o n   J o u r n a l ,   V 8 ,   D O I   1 0 . 1 0 4 9 / e s e j : 1 9 9 9 0 5 1 3 ;   R O S E N B E R G   N ,   1 9 9 4 ,   E X P L O R I N G   B L A C K   B O X ,   P 2 7 4 ;   S h i n   J ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 1 0 7 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 4 . 0 0 1 ;   S u u r s   R A A ,   2 0 0 9 ,   E N E R G Y ,   V 3 4 ,   P 6 6 9 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 8 . 0 9 . 0 0 2 ;   T r u m b a c h   C C ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 3 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 5 . 0 1 8 ;   T U O M I N E N   J ,   2 0 0 9 ,   E N G   C O A T I N G S   L A S E R   C ,   P 2 2 3 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 1 ;   W a t a n a b e   C ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 7 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 1 ) 0 0 0 2 5 - 6 ;   W a t t s   R J ,   1 9 9 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 5 6 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 7 ) 0 0 0 5 0 - 4 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W O L V A A R D T   E ,   2 0 0 7 ,   J O U R N A L I S M   C A N   H I D E 	 4 3 	 2 4 	 2 4 	 5 	 5 0 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 F E B 	 2 0 1 1 	 7 8 	 2 	 	 	 S I 	 	 2 8 3 	 2 9 3 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 6 . 0 2 0 	 	 1 1 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 7 2 2 M Z 	 W O S : 0 0 0 2 8 7 4 3 7 7 0 0 0 0 8 	 	 
 
 J 	 S a n d s t r o m ,   U 	 	 	 	 S a n d s t r o m ,   U l f 	 	 	 C o m b i n i n g   c u r r i c u l u m   v i t a e   a n d   b i b l i o m e t r i c   a n a l y s i s :   m o b i l i t y ,   g e n d e r   a n d   r e s e a r c h   p e r f o r m a n c e 	 R E S E A R C H   E V A L U A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N T I F I C   P R O D U C T I V I T Y ;   S E X - D I F F E R E N C E S ;   C A R E E R S ;   I N D I C A T O R S ;   S C I E N C E ;   I M P A C T 	 T h i s   p a p e r   d e m o n s t r a t e s   t h e   b e n e f i t s   o f   c o m b i n i n g   c u r r i c u l u m   v i t a e   s t u d i e s   w i t h   a d v a n c e d   b i b l i o m e t r i c s .   B a s e d   o n   d a t a   f r o m   3 2 6   C V s   w i t h i n   o n e   b r o a d   m e d i c a l   s u b j e c t   a r e a   w e   p e r f o r m   a   C l u s t e r   a n a l y s i s   o f   C V   d a t a .   D a t a   r e d u c t i o n   p r o d u c e s   f o u r   d i f f e r e n t   g r o u p s   o f   s c i e n t i s t s :   1 )   m o b i l e ,   2 )   i m m o b i l e ,   3 )   e x c e l l e n t   a n d   4 )   e n t r e p r e n e u r i a l .   W h i l e   i t   i s   c l e a r   t h a t   t h e   m o s t   m o b i l e   a n d   t h e   l e a s t   m o b i l e   r e s e a r c h e r s   r e p r e s e n t   o p p o s i t e s   a l s o   i n   c i t a t i o n   p e r f o r m a n c e   w e   s h o u l d   a c k n o w l e d g e   t h a t   f o r   t h e   l a r g e   m a j o r i t y ,   w i t h   a   l o w   a n d   m e d i u m   m o b i l i t y ,   t h e r e   i s   n o   l i n e a r   p a t t e r n   o f   p e r f o r m a n c e .   T h e   p a p e r   p o i n t s   a t   a   d o u b l e   p r o c e s s   w h e r e   t h e r e   a r e   o n   t h e   o n e   h a n d   s e l e c t i o n   p r o c e s s e s   a t   u n i v e r s i t i e s   p i c k i n g   o u t   ' t h e   w i n n e r s '   a n d   o n   t h e   o t h e r   h a n d   s e l f   s e l e c t i o n   p r o c e s s e s   w h e r e   r e s e a r c h e r s   e n h a n c e   t h e i r   o w n   p e r f o r m a n c e   b y   b e i n g   m o b i l e . 	 L i n k o p i n g   U n i v ,   D e p t   S o c i a l   C h a n g e   &   C u l t u r e ,   S - 5 8 1 8 3   L i n k o p i n g ,   S w e d e n 	 S a n d s t r o m ,   U   ( r e p r i n t   a u t h o r ) ,   L i n k o p i n g   U n i v ,   D e p t   S o c i a l   C h a n g e   &   C u l t u r e ,   S - 5 8 1 8 3   L i n k o p i n g ,   S w e d e n . 	 u l f s a @ i s a k . l i u . s e 	 S a n d s t r o m ,   U l f / G - 2 8 3 3 - 2 0 1 1 	 S a n d s t r o m ,   U l f / 0 0 0 0 - 0 0 0 3 - 1 2 9 2 - 8 2 3 9 	 	 	 B r o u n s   M . ,   2 0 0 0 ,   H I G H E R   E D   E U R O P E ,   V 2 5 ,   P 1 9 3 ,   D O I   1 0 . 1 0 8 0 / 7 1 3 6 6 9 2 6 1 ;   C a n i b a n o   C ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 9 2 7 9 7 ;   C e s a r o n i   F . ,   2 0 0 3 ,   S C I   I N N O V A T I O N   R E T H I ,   P 2 0 2 ;   C o l e   J R ,   1 9 8 4 ,   A D V   M O T I V A T I O N   A C H I E ,   P 2 1 7 ;   D i e t z   J S ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 4 1 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 7 6 0 6 9 6 9 ;   D i e t z   J S ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 3 4 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 2 . 0 1 . 0 0 8 ;   G a u g h a n   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 5 6 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 0 5 ;   G a u g h a n   M ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 5 2 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 7 5 ;   L e e   S ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 6 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 5 0 5 2 3 5 9 ;   L O N G   J S ,   1 9 9 2 ,   S O C   F O R C E S ,   V 7 1 ,   P 1 5 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 9 9 7 1 ;   M a n g e m a t i n   V ,   2 0 0 1 ,   I N T   J   T E C H N O L   M A N A G E ,   V 2 2 ,   P 6 7 0 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 1 . 0 0 2 9 8 4 ;   M a n g e m a t i n   V ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 7 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 4 7 - 5 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   N e d e r h o f   A J ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 6 5 8 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 6 8 1 4 2 ;   P r p i c   K ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 4 6 8 1 9 4 5 7 ;   S a n d s t r o m   U ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 1 - 3 ;   S a n d s t r o m   U ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 3 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 2 2 - 2 ;   T I J S S E N   R J W ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 7 0 5 ;   v a n   R a a n   A F J ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 4 0 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 8 4 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 1 9 ;   X i e   Y ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 4 7 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 5 	 2 3 	 2 4 	 2 4 	 5 	 4 3 	 B E E C H   T R E E   P U B L I S H I N G 	 G U I L D F O R D 	 1 0   W A T F O R D   C L O S E , ,   G U I L D F O R D   G U 1   2 E P ,   S U R R E Y ,   E N G L A N D 	 0 9 5 8 - 2 0 2 9 	 	 	 R E S   E V A L U A T 	 R e s .   E v a l u a t . 	 J U N 	 2 0 0 9 	 1 8 	 2 	 	 	 	 	 1 3 5 	 1 4 2 	 	 1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 9 X 4 4 1 7 9 0 	 	 8 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 5 9 I N 	 W O S : 0 0 0 2 6 7 0 9 5 3 0 0 0 0 6 	 	 
 
 J 	 Z u c c a l a ,   A 	 	 	 	 Z u c c a l a ,   A l e s i a 	 	 	 A u t h o r   c o c i t a t i o n   a n a l y s i s   i s   t o   i n t e l l e c t u a l   s t r u c t u r e   a s   w e b   c o l i n k   a n a l y s i s   i s   t o   . . .   ? 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S I T E S ;   L I N K S ;   I N F O R M A T I O N ;   S I M I L A R I T Y ;   S C I E N C E ;   W E B O M E T R I C S ;   C I T A T I O N ;   S P A C E 	 A u t h o r   C o c i t a t i o n   A n a l y s i s   ( A C A )   a n d   W e b   C o l i n k   A n a l y s i s   ( W C A )   a r e   e x a m i n e d   a s   s i s t e r   t e c h n i q u e s   i n   t h e   r e l a t e d   f i e l d s   o f   b i b l i o m e t r i c s   a n d   w e b o m e t r i c s .   C o m p a r i s o n s   a r e   m a d e   b e t w e e n   t h e   t w o   t e c h n i q u e s   b a s e d   o n   t h e i r   d a t a   r e t r i e v a l ,   m a p p i n g ,   a n d   i n t e r p r e t a t i o n   p r o c e d u r e s ,   u s i n g   m a t h e m a t i c s   a s   t h e   s u b j e c t   i n   f o c u s .   A n   A C A   i s   c a r r i e d   o u t   a n d   i n t e r p r e t e d   f o r   a   g r o u p   o f   p a r t i c i p a n t s   ( a u t h o r s )   i n v o l v e d   i n   a n   I s a a c   N e w t o n   I n s t i t u t e   ( 2 0 0 0 )   w o r k s h o p - S i n g u l a r i t y   T h e o r y   a n d   I t s   A p p l i c a t i o n s   t o   W a v e   P r o p a g a t i o n   T h e o r y   a n d   D y n a m i c a l   S y s t e m s - a n d   c o m p a r e d / c o n t r a s t e d   w i t h   a   W C A   f o r   a   l i s t   o f   i n t e r n a t i o n a l   m a t h e m a t i c s   r e s e a r c h   i n s t i t u t e   h o m e   p a g e s   o n   t h e   W e b .   A l t h o u g h   t h e   p r a c t i c e   o f   A C A   m a y   b e   u s e d   t o   i n f o r m   a   W C A ,   t h e   t w o   t e c h n i q u e s   d o   n o t   s h a r e   m a n y   e l e m e n t s   i n   c o m m o n .   T h e   m o s t   i m p o r t a n t   d e p a r t u r e   b e t w e e n   A C A   a n d   W C A   e x i s t s   a t   t h e   i n t e r p r e t i v e   s t a g e   w h e n   A C A   m a p s   b e c o m e   m e a n i n g f u l   i n   l i g h t   o f   c i t a t i o n   t h e o r y ,   a n d   W C A   m a p s   r e q u i r e   i n t e r p r e t a t i o n   b a s e d   o n   h y p e r l i n k   t h e o r y .   M u c h   o f   t h e   r e s e a r c h   c o n c e r n i n g   l i n k   t h e o r y   a n d   m o t i v a t i o n s   f o r   l i n k i n g   i s   s t i l l   n e w ;   t h e r e f o r e   f u r t h e r   s t u d i e s   b a s e d   o n   c o l i n k i n g   a r e   n e e d e d ,   m a i n l y   m a p - b a s e d   s t u d i e s ,   t o   u n d e r s t a n d   w h a t   m a k e s   a   W e b   c o l i n k   s t r u c t u r e   m e a n i n g f u l . 	 W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n   W V 1   1 E Q ,   E n g l a n d 	 Z u c c a l a ,   A   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 E Q ,   E n g l a n d . 	 a . z u c c a l a @ w l v . a c . u k 	 	 	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B a r - I l a n   J ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 9 7 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 4 . 0 2 . 0 0 5 ;   B a r - I l a n   J . ,   1 9 9 9 ,   S E A R C H   E N G I N E   R E S U L T ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B j o r n e b o r n   L . ,   2 0 0 4 ,   T H E S I S   R O Y A L   S C H   L I B ;   C H U   H ,   2 0 0 3 ,   9   I N T   C   S C I   I N F ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 5 3 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 8 ) 4 5 : 7 < 5 3 7 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - Q ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   E d g e   D a v i d ,   1 9 7 7 ,   S O C   S O C I A L   S T U D I E S   S ,   V 2 ,   P 1 3 ;   G a r f i e l d   E ,   1 9 6 5 ,   S T A T   A S S   M E T H O D S   M E C ,   P 1 8 9 ;   H a r r i e s   G ,   2 0 0 4 ,   J   I N F O R M   S C I ,   V 3 0 ,   P 4 3 6 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 6 7 3 6 ;   H a r t e r   S t e p h e n   P . ,   1 9 8 6 ,   O N L I N E   I N F O R M   R E T R I E ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   L e y d e s d o r f f   L ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 7 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 3 0 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   O R T E G A P R I E G O   J L ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ,   P 1 9 7 ;   P e r r y   C A ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 2 ) 4 9 : 2 < 1 5 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - V ;   P e r s s o n   O ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 4 0 0 9 4 2 8 ;   P o l a n c o   X . ,   2 0 0 1 ,   C L U S T E R I N G   M A P P I N G   W ;   R o u s s e a u   R ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 5 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 4 0 1 ;   R O U S S E A U   R ,   1 9 9 9 ,   D A I L Y   T I M E   S E R I E S   C O ;   R O U S S E A U   R ,   1 9 9 7 ,   S I T A T I O N S   E X P L O R A T O R ;   S a n d s t r o m   P .   E . ,   1 9 9 8 ,   T H E S I S   I N D I A N A   U   B L O ;   S M A L L   H ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 8 9 ;   S M I T H   A ,   2 0 0 4 ,   W E B   L I N K S   A N A L O G U E S ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   T h e l w a l l   M ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 5 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 3 ) 0 0 0 4 2 - 6 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   I N F O R M   S C I ,   V 2 8 ,   P 4 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 2 7 6 2 2 0 2 1 5 0 ;   T h e l w a l l   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 1 0 7 2 8 8 5 2 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T h e l w a l l   M . ,   2 0 0 4 ,   L I N K   A N A L   I N F O R M   S C I ;   T H E L W A L L   M ,   2 0 0 3 ,   1 5 1   I N F   R E S ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   V a u g h a n   L . ,   2 0 0 5 ,   P   I S S I   2 0 0 5   1 0   I N T   C ,   P 5 3 4 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 5 ;   W H I T E   H D ,   1 9 8 6 ,   I N F O R M   T E C H N O L   L I B R ,   V 5 ,   P 9 3 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 ;   W H I T E   H D ,   1 9 8 1 ,   C O N C E P T S   J U D G E M E N T   D ,   P 2 6 1 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 ;   Z U C C A L A   A ,   2 0 0 4 ,   T H E S I S   U   T O R O N T O   T O R 	 4 5 	 2 4 	 2 4 	 0 	 1 1 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 S E P 	 2 0 0 6 	 5 7 	 1 1 	 	 	 	 	 1 4 8 7 	 1 5 0 2 	 	 1 0 . 1 0 0 2 / a s i . 2 0 4 6 8 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 7 2 K K 	 W O S : 0 0 0 2 3 9 6 7 2 1 0 0 0 0 8 	 	 
 
 J 	 U r e n ,   V ;   S h u m ,   S B ;   B a c h l e r ,   M ;   L i ,   G M 	 	 	 	 U r e n ,   V ;   S h u m ,   S B ;   B a c h l e r ,   M ;   L i ,   G M 	 	 	 S e n s e m a k i n g   t o o l s   f o r   u n d e r s t a n d i n g   r e s e a r c h   l i t e r a t u r e s :   D e s i g n ,   i m p l e m e n t a t i o n   a n d   u s e r   e v a l u a t i o n 	 I N T E R N A T I O N A L   J O U R N A L   O F   H U M A N - C O M P U T E R   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 m o d e l l i n g   i n t e r f a c e s ;   s e a r c h   i n t e r f a c e s ;   u s e r   s t u d i e s 	 B I B L I O M E T R I C S ;   W E B 	 T h i s   p a p e r   d e s c r i b e s   t h e   w o r k   u n d e r t a k e n   i n   t h e   S c h o l a r l y   O n t o l o g i e s   P r o j e c t .   T h e   a i m   o f   t h e   p r o j e c t   h a s   b e e n   t o   d e v e l o p   a   c o m p u t a t i o n a l   a p p r o a c h   t o   s u p p o r t   s c h o l a r l y   s e n s e m a k i n g ,   t h r o u g h   i n t e r p r e t a t i o n   a n d   a r g u m e n t a t i o n ,   e n a b l i n g   r e s e a r c h e r s   t o   m a k e   c l a i m s :   t o   d e s c r i b e   a n d   d e b a t e   t h e i r   v i e w   o f   a   d o c u m e n t ' s   k e y   c o n t r i b u t i o n s   a n d   r e l a t i o n s h i p s   t o   t h e   l i t e r a t u r e .   T h e   p r o j e c t   h a s   i n v e s t i g a t e d   t h e   t e c h n i c a l i t i e s   a n d   p r a c t i c a l i t i e s   o f   c a p t u r i n g   c o n c e p t u a l   r e l a t i o n s ,   w i t h i n   a n d   b e t w e e n   c o n v e n t i o n a l   d o c u m e n t s   i n   t e r m s   o f   a b s t r a c t   o n t o l o g i c a l   s t r u c t u r e s .   I n   t h i s   w a y ,   w e   h a v e   d e v e l o p e d   a   n e w   k i n d   o f   i n d e x   t o   d i s t r i b u t e d   d i g i t a l   l i b r a r y   s y s t e m s .   T h i s   p a p e r   r e p o r t s   a   c a s e   s t u d y   u n d e r t a k e n   t o   t e s t   t h e   s e n s e m a k i n g   t o o l s   d e v e l o p e d   b y   t h e   S c h o l a r l y   O n t o l o g i e s   p r o j e c t .   T h e   t o o l s   u s e d   w e r e   C l a i M a p p e r ,   w h i c h   a l l o w s   t h e   u s e r   t o   s k e t c h   a r g u m e n t   m a p s   o f   i n d i v i d u a l   p a p e r s   a n d   t h e i r   c o n n e c t i o n s ,   C l a i M a k e r ,   a   s e r v e r   o n   w h i c h   S u c h   m o d e l s   c a n   b e   s t o r e d   a n d   s a v e d ,   w h i c h   p r o v i d e s   i n t e r p r e t a t i v e   s e r v i c e s   t o   a s s i s t   t h e   q u e r y i n g   o f   a r g u m e n t   m a p s   a c r o s s   m u l t i p l e   p a p e r s   a n d   C l a i m F i n d e r ,   a   n o v i c e   i n t e r f a c e   t o   t h e   s e a r c h   s e r v i c e s   i n   C l a i M a k e r .   ( c )   2 0 0 5   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 O p e n   U n i v ,   K n o w l e d g e   M e d i a   I n s t ,   M i l t o n   K e y n e s   M K 7   6 A A ,   B u c k s ,   E n g l a n d 	 U r e n ,   V   ( r e p r i n t   a u t h o r ) ,   O p e n   U n i v ,   K n o w l e d g e   M e d i a   I n s t ,   M i l t o n   K e y n e s   M K 7   6 A A ,   B u c k s ,   E n g l a n d . 	 v . s . u r e n @ o p e n . a c . u k ;   s . b u c k i n g h a m . s h u m @ o p e n . a c . u k ;   m . s . b a c h l e r @ o p e n . a c . u k ;   g g l @ o m i i . a c . u k 	 	 L i ,   G a n g m i n / 0 0 0 0 - 0 0 0 3 - 4 0 0 6 - 7 4 7 2 ;   B u c k i n g h a m   S h u m ,   S i m o n / 0 0 0 0 - 0 0 0 2 - 6 3 3 4 - 7 4 2 9 	 	 	 B e r n e r s - L e e   T ,   2 0 0 1 ,   S C I   A M ,   V 2 8 4 ,   P 3 4 ;   B u s h   V . ,   1 9 4 5 ,   A T L A N T I C   M O N T H L Y ,   V 1 7 6 ,   P 1 0 1 ;   B U Z A N   T ,   1 9 8 9 ,   U S E   Y O U R   H E A D ;   C A R R   C S ,   2 0 0 3 ,   V I S U A L I Z I N G   A R G U M E N T ,   P 7 5 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   D U N C A N   E B ,   1 9 8 1 ,   I N F O R M   R E T R I E V A L   E D ;   E n g e l b a r t   D . ,   1 9 6 2 ,   A U G M E N T I N G   H U M A N   I N T ;   G A R Z O N E   M ,   2 0 0 0 ,   P   1 3   B I E N N   C   C A N   S O C ;   G I L   Y ,   2 0 0 2 ,   L N A I ,   V 2 4 7 3 ;   G R E E N   T R G ,   1 9 9 0 ,   P E O P L E   C O M P U T E R S ,   V 5 ;   G r u b e r   T . R . ,   1 9 9 3 ,   F O R M A L   O N T O L O G Y   C O N C ;   H A N D S C H U H   S ,   2 0 0 2 ,   P   1 1   I N T   W O R L D   W I D   W ;   K a h a n   J . ,   2 0 0 1 ,   P   1 0   I N T   C   W O R L D   W I D ;   K a m p   H . ,   1 9 8 1 ,   F O R M A L   M E T H O D S   S T U D Y ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K n o t t   A ,   1 9 9 8 ,   J   P R A G M A T I C S ,   V 3 0 ,   P 1 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 2 1 6 6 ( 9 8 ) 0 0 0 2 3 - X ;   K N O T T   A ,   1 9 9 6 ,   D A T A D R I V E N   M E T H O D   C L ;   L A S S I L A   O ,   2 0 0 1 ,   P   S W W S   S E M   W E B   W O R K ;   L I P E T Z   B A ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 2 0 7 ;   M A N C I N I   C ,   2 0 0 4 ,   P   1 5   A C M   C   H Y P   H Y P   S ;   M a n c i n i   C . ,   2 0 0 5 ,   C I N E M A T I C   H Y P E R T E X T ;   M E R C E R   R E ,   2 0 0 4 ,   L I N K I N G   B I O L   L I T   O N T ;   M U R U G E S A N   P ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 0 7 ;   N A N B A   H ,   1 9 9 9 ,   P   1 6   I N T   J O I N T   C   A R T ;   N o v a k   J .   D . ,   1 9 8 4 ,   L E A R N I N G   L E A R N ;   P a g e   L . ,   1 9 9 8 ,   P A G E R A N K   C I T A T I O N   R A ;   P i r o l l i   P ,   1 9 9 9 ,   P S Y C H O L   R E V ,   V 1 0 6 ,   P 6 4 3 ,   D O I   1 0 . 1 0 3 7 / / 0 0 3 3 - 2 9 5 X . 1 0 6 . 4 . 6 4 3 ;   P O O L   I D ,   1 9 7 8 ,   S O C   N E T W O R K S ,   V 1 ,   P 5 ;   R E I C H   Y ,   1 9 9 4 ,   A I   E D A M ,   V 8 ,   P 2 6 3 ;   S E R E N O   B ,   2 0 0 5 ,   P   I U I 2 0 0 5   A C M   C   I N T ;   S h i p m a n   F .   M .     I I I ,   1 9 9 9 ,   C o m p u t e r   S u p p o r t e d   C o o p e r a t i v e   W o r k :   T h e   J o u r n a l   o f   C o l l a b o r a t i v e   C o m p u t i n g ,   V 8 ,   P 3 3 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 1 6 3 3 0 2 1 2 ;   S h u m   S .   B . ,   2 0 0 0 ,   I n t e r n a t i o n a l   J o u r n a l   o n   D i g i t a l   L i b r a r i e s ,   V 3 ,   P 2 3 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 7 9 9 0 0 0 0 0 3 4 ;   S H U M   S B ,   1 9 9 4 ,   I N T   J   H U M - C O M P U T   S T ,   V 4 0 ,   P 6 0 3 ,   D O I   1 0 . 1 0 0 6 / i j h c . 1 9 9 4 . 1 0 2 9 ;   S H U M   S B ,   2 0 0 5 ,   N E W   R E V   H Y P E R M E D I A   M ,   V 1 1 ,   P 1 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 1 4 5 6 0 5 0 0 2 0 2 2 6 6 ;   S H U M   S B ,   2 0 0 2 ,   P   2   I N T   W O R K S H   I N F R ;   S h u m   S .   J .   B . ,   2 0 0 3 ,   V I S U A L I Z I N G   A R G U M E N T ,   P 1 8 5 ;   S H U M   S B ,   2 0 0 3 ,   V I S U A L I Z I N G   A R G U M E N T ,   P 3 ;   S L E V I N   A M ,   2 0 0 5 ,   N E W   R E V   H Y P E R M E D I A   M ,   V 1 1 ,   P 9 1 ;   T e u f e l   S . ,   2 0 0 2 ,   C O M P U T A T I O N A L   L I N G U I ,   V 2 8 ;   T E U F E L   S ,   2 0 0 0 ,   P   J O I N T   S I G D A T   C   E M P ;   T o u l m i n   S . ,   1 9 5 8 ,   U S E S   A R G U M E N T ;   T r i g g   R . ,   1 9 8 3 ,   N E T W O R K   B A S E D   A P P R O A ;   U R E N   V ,   2 0 0 4 ,   P   4   W O R K S H   C O M P   M O D ;   U R E N   V S ,   2 0 0 3 ,   P   1 2   I N T   W O R L D   W I D   W ;   V a n R a a n   A F J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 0 5 ;   W e i c k   K .   E . ,   1 9 9 6 ,   S E N S E M A K I N G   O R G ;   W e i n s t o c k   M . ,   1 9 7 1 ,   E N C Y   L I B R A R Y   I N F O R M A ,   V 5 ,   P 1 6 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 	 4 9 	 2 4 	 2 4 	 2 	 4 	 A C A D E M I C   P R E S S   L T D   E L S E V I E R   S C I E N C E   L T D 	 L O N D O N 	 2 4 - 2 8   O V A L   R D ,   L O N D O N   N W 1   7 D X ,   E N G L A N D 	 1 0 7 1 - 5 8 1 9 	 	 	 I N T   J   H U M - C O M P U T   S T 	 I n t .   J .   H u m . - C o m p u t .   S t u d . 	 M A Y 	 2 0 0 6 	 6 4 	 5 	 	 	 	 	 4 2 0 	 4 4 5 	 	 1 0 . 1 0 1 6 / j . i j h c s . 2 0 0 5 . 0 9 . 0 0 4 	 	 2 6 	 C o m p u t e r   S c i e n c e ,   C y b e r n e t i c s ;   E r g o n o m i c s ;   P s y c h o l o g y ,   M u l t i d i s c i p l i n a r y 	 C o m p u t e r   S c i e n c e ;   E n g i n e e r i n g ;   P s y c h o l o g y 	 0 2 8 G U 	 W O S : 0 0 0 2 3 6 4 7 5 9 0 0 0 0 3 	 	 
 
 J 	 H o l d e n ,   G ;   R o s e n b e r g ,   G ;   B a r k e r ,   K 	 	 	 	 H o l d e n ,   G ;   R o s e n b e r g ,   G ;   B a r k e r ,   K 	 	 	 T r a c i n g   t h o u g h t   t h r o u g h   t i m e   a n d   s p a c e :   A   s e l e c t i v e   r e v i e w   o f   b i b l i o m e t r i c s   i n   s o c i a l   w o r k 	 S O C I A L   W O R K   I N   H E A L T H   C A R E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 i n f o r m e t r i c s ;   s c i e n t o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   s o c i o l o g y   o f   s c i e n c e ;   s o c i a l   w o r k   e d u c a t i o n 	 E D I T O R I A L - B O A R D   M E M B E R S ;   E D I T O R - I N - C H I E F ;   C I T A T I O N   A N A L Y S I S ;   P U B L I C A T I O N   P R O D U C T I V I T Y ;   S C H O L A R L Y   P R O D U C T I V I T Y ;   A C A D E M I C   A F F I L I A T I O N S ;   F A C U L T Y   P U B L I C A T I O N S ;   I M P A C T   F A C T O R S ;   M U L T I P L E   A U T H O R S H I P ;   C O N S U L T I N G   E D I T O R S 	 B i b l i o m e t r i c s   i s   a   f i e l d   o f   r e s e a r c h   t h a t   e x a m i n e s   b o d i e s   o f   k n o w l e d g e   w i t h i n   a n d   a c r o s s   d i s c i p l i n e s .   C i t a t i o n   a n a l y s i s ,   a   c o m p o n e n t   o f   b i b l i o m e t r i c s ,   f o c u s e s   o n   t h e   q u a n t i t a t i v e   a s s e s s m e n t   o f   c i t a t i o n   p a t t e r n s   w i t h i n   a   b o d y   o f   l i t e r a t u r e .   C i t a t i o n   a n a l y s i s   h a s   b e e n   u s e d   i n   s o c i a l   w o r k   t o   e x a m i n e   t h e   q u a n t i t y   a n d   t h e   i m p a c t   o f   t h e   w o r k   o f   i n d i v i d u a l s   a n d   a c a d e m i c   i n s t i t u t i o n s .   T h i s   p a p e r   p r e s e n t s   a   s e l e c t i v e   r e v i e w   o f   t h e s e   u s e s   o f   b i b l i o m e t r i c s   w i t h i n   s o c i a l   w o r k . 	 N Y U ,   S c h   S o c i a l   W o r k ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A ;   M t   S i n a i   S c h   M e d ,   N e w   Y o r k ,   N Y   1 0 0 2 9   U S A ;   C U N Y   M e d g a r   E v e r s   C o l l ,   B r o o k l y n ,   N Y   1 1 2 2 5   U S A 	 H o l d e n ,   G   ( r e p r i n t   a u t h o r ) ,   N Y U ,   S c h   S o c i a l   W o r k ,   R o o m   4 0 7 , M C   6 1 1 2 , 1   W a s h i n g t o n   S q   N ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A . 	 g a r y . h o l d e n @ n y u . e d u 	 H o l d e n ,   G a r y / A - 2 2 9 0 - 2 0 0 8 ;   	 H o l d e n ,   G a r y / 0 0 0 0 - 0 0 0 2 - 7 2 2 7 - 3 6 5 2 	 	 	 A B B O T T   A A ,   1 9 8 5 ,   S O C   W O R K   R E S   A B S T R ,   V 2 1 ,   P 1 1 ;   B A K E R   D R ,   1 9 9 2 ,   S O C   W O R K   R E S   A B S T R ,   V 2 8 ,   P 4 ;   B A K E R   D R ,   1 9 9 2 ,   J   S O C   W O R K   E D U C ,   V 2 8 ,   P 2 0 4 ;   B A K E R   D R ,   1 9 9 1 ,   J   S O C   W O R K   E D U C ,   V 2 7 ,   P 4 1 ;   B A K E R   D R ,   1 9 9 0 ,   S O C   W O R K   R E S   A B S T R ,   V 2 6 ,   P 3 ;   B a k e r   D .   R . ,   1 9 9 2 ,   J   S O C I A L   S E R V I C E   R E S ,   V 1 5 ,   P 1 5 3 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 1 5 n 0 3 _ 0 9 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B L A C K   P E ,   2 0 0 2 ,   L O T K A S   L A W ;   B L O O M   M ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 7 7 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B r o o k e s   B .   C . ,   1 9 9 0 ,   I N F O R M E T R I C S ,   V 8 9 ,   P 3 1 ;   B r o w n i n g   J ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 1 3 ;   B u s h   I R ,   1 9 9 7 ,   S O C   W O R K   R E S ,   V 2 1 ,   P 4 5 ;   C H E U N G   K F M ,   1 9 9 0 ,   S O C   W O R K   R E S   A B S T R ,   V 2 6 ,   P 2 3 ;   C H R I S T E N S O N   J A ,   1 9 8 5 ,   S O C   S C I   Q U A R T ,   V 6 6 ,   P 9 6 4 ;   C N A A N   R A ,   1 9 9 4 ,   J   S O C   W O R K   E D U C ,   V 3 0 ,   P 1 8 5 ;   C O L E   J ,   1 9 7 1 ,   A M   S O C I O L ,   V 6 ,   P 2 3 ;   C O L E   J R ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 8 1 ;   C O L E   S ,   1 9 6 7 ,   A M   S O C I O L   R E V ,   V 3 2 ,   P 3 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 0 8 5 ;   C O R C O R A N   K ,   1 9 9 0 ,   J   S O C   W O R K   E D U C ,   V 2 6 ,   P 3 1 0 ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   C r o n i n   B ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 3 ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 3 ) 4 5 : 2 < 6 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - F ;   D U M A S   T ,   1 9 9 3 ,   P   5 6   A N N   M   A M   S O C   I N ,   P 1 3 5 ;   E p s t e i n   W ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 1 1 ;   E P S T E I N   W M ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 5 2 5 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 1 2 ;   F O R T U N E   A E ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 5 0 5 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 0 9 ;   F O X   M F ,   1 9 8 5 ,   S O C I O L   Q U A R T ,   V 2 6 ,   P 5 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 3 - 8 5 2 5 . 1 9 8 5 . t b 0 0 2 4 3 . x ;   F r a n c k   G ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 5 9 4 0 2 6 1 8 ;   F r a n k   M ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 ;   F R A S E R   M W ,   1 9 9 4 ,   J   S O C   W O R K   E D U C ,   V 3 0 ,   P 2 5 2 ;   F U R R   L A ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 8 ;   G a r f i e l d   E ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 9 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 9 6 2 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - X ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 6 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ,   P 1 ;   G a s t e l   B ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 4 1 ;   G I L L E S P I E   D F ,   1 9 9 2 ,   J   S O C I A L   S E R V I C E   R E S ,   V 2 ,   P 5 1 1 ;   G i n s b e r g   L ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 0 0 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G r e e n   R G ,   1 9 9 8 ,   J   S O C   W O R K   E D U C ,   V 3 4 ,   P 4 1 5 ;   G r e e n   R G ,   1 9 9 7 ,   J   S O C   W O R K   E D U C ,   V 3 3 ,   P 5 4 1 ;   G r e e n   R G ,   1 9 9 6 ,   S O C   W O R K   R E S ,   V 2 0 ,   P 3 1 ;   G R E E N   R G ,   1 9 9 2 ,   S O C   S E R V   R E V ,   V 6 6 ,   P 4 4 1 ;   G r e e n   R G ,   2 0 0 1 ,   J   S O C   S E R V   R E S ,   V 2 7 ,   P 4 1 ;   G R E E N   R G ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 8 8 ;   G R E E N   R G ,   1 9 9 4 ,   S O C   W O R K ,   V 4 ,   P 4 0 5 ;   G R E E N   R G ,   2 0 0 1 ,   J   S O C I A L   W O R K   E D ,   V 3 5 ,   P 1 9 5 ;   G R E E N   R G ,   2 0 0 2 ,   J   S O C I A L   W O R K   E D ,   V 3 7 ,   P 1 3 5 ;   G R I N N E L L   R M ,   1 9 8 3 ,   J   S O C I A L   S E R V I C E   R E S ,   V 6 ,   P 1 4 7 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 V 0 6 N 0 3 _ 1 1 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 6 7 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 3 ;   H O P P S   J G ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 4 9 9 ;   H O W A R D   M O ,   1 9 9 2 ,   J   S T U D   A L C O H O L ,   V 5 3 ,   P 4 2 7 ;   H U L L   G H ,   1 9 9 4 ,   J   S O C I A L   W O R K   E D ,   V 3 0 ,   P 3 4 ;   * I S I ,   2 0 0 3 ,   I N T E R P R E T A T I O N ;   J A Y A R A T N E   S ,   1 9 7 9 ,   J   E D U C   S O C   W O R K ,   V 1 5 ,   P 7 2 ;   J O H N S O N   H W ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 5 8 ;   J o n e s   A W ,   1 9 9 9 ,   A L C O H O L   A L C O H O L I S M ,   V 3 4 ,   P 2 5 ,   D O I   1 0 . 1 0 9 3 / a l c a l c / 3 4 . 1 . 2 5 ;   J O N E S   J F ,   1 9 8 6 ,   N A T L   T A I W A N   U   J   S O C I ,   V 1 8 ,   P 2 0 7 ;   K a r g e r   H J ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 9 6 ;   K I R K   S A ,   1 9 7 7 ,   J   S O C I A L   W E L F A R E   W I N ,   P 9 0 ;   K I R K   S A ,   1 9 8 0 ,   S O C I A L   W O R K             M A Y ,   P 2 0 4 ;   K I R K   S A ,   1 9 8 4 ,   S O C I A L   W O R K             J A N ,   P 6 7 ;   K I R K   S A ,   1 9 8 4 ,   J   S O C I A L   S E R V I C E   R E S ,   V 7 ,   P 5 9 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 0 7 n 0 3 _ 0 5 ;   K L E I N   W C ,   1 9 9 2 ,   J   S O C   W O R K   E D U C ,   V 2 8 ,   P 2 9 1 ;   K o s t o f f   R N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 3 1 9 2 0 1 7 2 ;   K O S T O F F   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 ;   K r e u g e r   L W ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 0 8 ;   K R E U G E R   L W ,   1 9 9 3 ,   J   S O C   W O R K   E D U C ,   V 2 9 ,   P 2 4 0 ;   K R O L L   H W ,   1 9 7 6 ,   A R E T E ,   V 4 ,   P 1 2 1 ;   L i g o n   J ,   2 0 0 1 ,   J   S O C   S E R V   R E S ,   V 2 8 ,   P 6 9 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 2 8 n 0 2 _ 0 4 ;   L I G O N   J ,   1 9 9 5 ,   J   S O C   W O R K   E D U C ,   V 3 1 ,   P 3 6 9 ;   L I N D S E Y   D ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 5 1 5 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 1 1 ;   L I N D S E Y   D ,   1 9 7 8 ,   Q U A L   Q U A N T ,   V 1 2 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 1 3 8 6 5 8 ;   L I N D S E Y   D ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 2 4 3 ;   L I N D S E Y   D ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 2 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 0 4 ;   L I N D S E Y   D ,   1 9 7 6 ,   A M   P S Y C H O L ,   V 3 1 ,   P 7 9 9 ;   L i n d s e y   D ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 1 5 ;   L I N D S E Y   D ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 7 ;   L I N D S E Y   D ,   1 9 9 2 ,   S O C   S E R V   R E V ,   V 6 6 ,   P 2 9 5 ;   L I N D S E Y   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 2 ;   L I N D S E Y   D ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 8 ;   L I N D S E Y   D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 5 1 2 4 ;   L I N D S E Y   D ,   1 9 7 8 ,   S C I   P U B L   S Y S T E M   S O C I ;   M A C R O B E R T S   M H ,   1 9 9 2 ,   S O C   W O R K   R E S   A B S T R ,   V 2 8 ,   P 4 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M a c R o b e r t s   M H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 7 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 7 4 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - U ;   M C M U R T Y   S L ,   2 0 0 3 ,   7   A N N   S O C   S O C   W O R K   R ;   M C N E E C E   C A ,   1 9 8 1 ,   J   E D U C   S O C   W O R K ,   V 1 7 ,   P 1 3 ;   M E I N E R T   R ,   1 9 9 3 ,   J   S O C   W O R K   E D U C ,   V 2 9 ,   P 2 4 5 ;   M E N D E L S O H N   H N ,   1 9 9 7 ,   A U T H O R S   G U I D E   S O C I A L ;   M i d g l e y   J ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 0 4 ;   M O K A U   N ,   1 9 9 3 ,   J   S O C I A L   W O R K   E D ,   V 2 9 ,   P 1 6 0 ;   M Y E R S   C R ,   1 9 7 0 ,   A M   P S Y C H O L ,   V 2 5 ,   P 1 0 4 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 3 0 1 4 9 ;   N a j m a n   J M ,   2 0 0 3 ,   J   S O C I O L ,   V 3 9 ,   P 6 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 4 8 6 9 0 0 3 0 3 9 0 0 1 3 2 0 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N I S O N G E R   T E ,   2 0 0 1 ,   L I B R   C O L L E C T   A C Q U I S ,   V 2 5 ,   P 4 8 5 ,   D O I   1 0 . 1 0 1 6 / S 1 4 6 4 - 9 0 5 5 ( 0 1 ) 0 0 2 2 0 - 2 ;   N o r t o n   M .   J . ,   2 0 0 0 ,   I N T R O   C O N C E P T S   I N F O R ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   P A R D E C K   J T ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 5 2 9 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 1 3 ;   P a r d e c k   J T ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 1 2 1 ;   P A R D E C K   J T ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 4 8 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 0 5 ;   P a r d e c k   J T ,   2 0 0 2 ,   P S Y C H O L   R E P ,   V 9 0 ,   P 1 0 5 1 ,   D O I   1 0 . 2 4 6 6 / P R 0 . 9 0 . 3 . 1 0 5 1 - 1 0 5 4 ;   P a r d e c k   J T ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 8 6 ;   P A R D E C K   J T ,   1 9 9 1 ,   P S Y C H O L   R E P ,   V 6 8 ,   P 5 2 3 ;   P A R D E C K   J T ,   1 9 9 5 ,   R E S   S O C I A L   W O R K   P R A C ,   V 5 ,   P 2 2 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 5 0 0 5 0 0 2 0 6 ;   P h e l a n   T J ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 7 2 ;   P L O M P   R ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 3 4 6 ;   P O R T E R   A L ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 2 5 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 7 ;   R A O   I K R ,   1 9 9 8 ,   I N F O R M E T R I C S   S C I E N T O ;   R E A M E R   F G ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 5 0 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 0 8 ;   R e a m e r   F G ,   1 9 9 9 ,   R E S   S O C I A L   W O R K   P R A C ,   V 9 ,   P 9 2 ;   R e h r   H ,   1 9 9 8 ,   S O C   W O R K   H E A L T H   C A R E ,   V 2 8 ,   P 8 3 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 2 8 n 0 2 _ 0 6 ;   R e h r   H ,   1 9 9 8 ,   S O C   W O R K   H E A L T H   C A R E ,   V 2 8 ,   P 6 3 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 2 8 n 0 2 _ 0 5 ;   R o b b i n s   S .   P . ,   1 9 8 5 ,   A C A D   P R O D U C T I V I T Y   S O ;   R O S E N   A ,   1 9 7 9 ,   S O C   W O R K   R E S   A B S T R ,   V 1 5 ,   P 1 9 ;   R O S E N B E R G   G ,   2 0 0 5 ,   S O C I A L   W O R K   H L T H   C A R ,   V 4 1 ,   P 3 7 ;   R o t h m a n   J ,   2 0 0 3 ,   S O C   W O R K   R E S ,   V 2 7 ,   P 1 0 5 ;   R O U S S E A U   R ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ,   P 1 ;   R U B I N   A ,   1 9 8 7 ,   S O C   W O R K ,   V 3 2 ,   P 3 1 7 ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   S C H I E L E   J H ,   1 9 9 1 ,   J   S O C   W O R K   E D U C ,   V 2 7 ,   P 1 2 5 ;   S c h o e p f l i n   U ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 0 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 7 7 8 2 4 4 4 9 ;   S C H U E R M A N   J R ,   1 9 9 2 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 ,   P 4 9 9 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 9 2 0 0 2 0 0 4 0 7 ;   S e a b e r g   J R ,   1 9 9 8 ,   J   S O C   W O R K   E D U C ,   V 3 4 ,   P 7 ;   S E L L I N   M K ,   1 9 9 3 ,   B I B L I O M E T R I C S   A N N O T A ;   S M I T H   E W ,   1 9 8 5 ,   S T U D   M Y S T ,   V 8 ,   P 8 1 ;   S t a u d t   M M ,   2 0 0 3 ,   S O C   W O R K ,   V 4 8 ,   P 7 5 ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   T h y e r   B A ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 1 2 5 ;   T H Y E R   B A ,   1 9 9 4 ,   J   S O C   S E R V   R E S ,   V 1 8 ,   P 1 5 3 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 1 8 n 0 3 _ 0 8 ;   T H Y E R   B A ,   1 9 8 6 ,   J   S O C   W O R K   E D U C ,   V 2 2 ,   P 6 7 ;   T h y e r   B .   A . ,   1 9 9 7 ,   J   A P P L   S O C I A L   S C I ,   V 2 1 ,   P 1 0 5 ;   T W I N I N G   J ,   2 0 0 2 ,   B I B L I O M E T R I C S   O V E R V I ;   V O N U N G E R N S T E R N B . S ,   2 0 0 0 ,   S C I   C O M M U N I C A T I O N   B I ;   W i l l i a m s   J W ,   2 0 0 1 ,   S E R I A L S   L I B R ,   V 3 9 ,   P 6 9 ,   D O I   1 0 . 1 3 0 0 / J 1 2 3 v 3 9 n 0 3 _ 0 8 ;   W o r m e l l   I ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 2 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 8 8 0 6 0 8 4 ;   W o r m e l l   I ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 2 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 6 7 2 2 0 1 4 ;   W O U T E R S   P ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 6 5 	 1 4 0 	 2 4 	 2 4 	 4 	 2 1 	 H A W O R T H   P R E S S   I N C 	 B I N G H A M T O N 	 1 0   A L I C E   S T ,   B I N G H A M T O N ,   N Y   1 3 9 0 4 - 1 5 8 0   U S A 	 0 0 9 8 - 1 3 8 9 	 	 	 S O C   W O R K   H E A L T H   C A R E 	 S o c .   W o r k   H e a l t h   C a r e 	 	 2 0 0 5 	 4 1 	 3 - 4 	 	 	 	 	 1 	 3 4 	 	 1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 1 	 	 3 4 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 9 9 9 H Y 	 W O S : 0 0 0 2 3 4 3 8 1 6 0 0 0 0 1 	 1 6 2 3 6 6 3 7 	 
 
 J 	 C r o n i n ,   B ;   S h a w ,   D 	 	 	 	 C r o n i n ,   B ;   S h a w ,   D 	 	 	 B a n k i n g   ( o n )   d i f f e r e n t   f o r m s   o f   s y m b o l i c   c a p i t a l 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W E B ;   B I B L I O M E T R I C S ;   C I T A T I O N 	 T h e   a c c r u a l   o f   s y m b o l i c   c a p i t a l   i s   a n   i m p o r t a n t   a s p e c t   o f   a c a d e m i c   l i f e .   S u c c e s s f u l   c a p i t a l   f o r m a t i o n   i s   c o m m o n l y   s i g n i f i e d   b y   t h e   t r a p p i n g s   o f   s c h o l a r l y   d i s t i n c t i o n   o r   a c k n o w l e d g e d   s t a t u s   a s   a   p u b l i c   i n t e l l e c t u a l .   W e   c o n s i d e r   a n d   c o m p a r e   t h r e e   p o t e n t i a l   i n d i c e s   o f   s y m b o l i c   c a p i t a l :   c i t a t i o n   c o u n t s ,   W e b   h i t s ,   a n d   m e d i a   m e n t i o n s .   O u r   f i n d i n g s ,   w h i c h   a r e   d o m a i n   s p e c i f i c ,   s u g g e s t   t h a t   p u b l i c   i n t e l l e c t u a l s   a r e   n o t a b l e   b y   t h e i r   a b s e n c e   w i t h i n   t h e   i n f o r m a t i o n   s t u d i e s   c o m m u n i t y . 	 I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A 	 C r o n i n ,   B   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 	 	 	 	 	 B o u r d i e u   P . ,   1 9 9 0 ,   H O M O   A C A D E M I C U S ;   B o u r d i e u   P i e r r e ,   1 9 8 6 ,   H D B   T H E O R Y   R E S   S O C I O ,   P 2 4 1 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 2 6 5 5 3 2 2 0 7 0 8 3 7 4 3 ;   B o u r d i e u   P . ,   1 9 9 1 ,   L A N G U A G E   S Y M B O L I C   P O ;   B u d d   J M ,   2 0 0 0 ,   L I B R   Q U A R T ,   V 7 0 ,   P 2 3 0 ;   B u d d   J M ,   2 0 0 1 ,   L I B R   Q U A R T ,   V 7 1 ,   P 4 9 8 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 9 5 3 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - C ;   C r o n i n   B ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 4 4 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 ;   C R O N I N   B ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 3 ;   C r o n i n   B ,   1 9 9 6 ,   J   D O C ,   V 5 2 ,   P 1 8 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 6 7 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C R O N I N   B ,   I N   P R E S S   P U L P   F R I C T I ;   D A V E N P O R T   E ,   2 0 0 1 ,   A S I S   M O N O G R A P H   S E R I E ,   P 5 1 7 ;   H y l a n d   K e n ,   2 0 0 0 ,   D I S C I P L I N A R Y   D I S C O U R ;   L a n d e s   W M ,   2 0 0 0 ,   J   L E G A L   S T U D ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 8 6 / 4 6 8 0 7 5 ;   N E L S O N   C ,   1 9 9 7 ,   A C A D E M E ,   V 8 7 ,   P 3 8 ;   P O S N E R   R A ,   2 0 0 1 ,   P U B L I C   I N T E L L E C T U A L S ,   p C H 5 ;   S o s t e r i c   M . ,   1 9 9 9 ,   R A D I C A L   P E D A G O G Y ,   V 1 ;   S p u r g i n   T ,   2 0 0 1 ,   M I N N   R E V ,   P 2 2 5 ;   S P U R G I N   T ,   2 0 0 1 ,   M I N N   R E V ,   P 5 2 	 2 0 	 2 4 	 2 4 	 1 	 1 3 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 D E C 	 2 0 0 2 	 5 3 	 1 4 	 	 	 	 	 1 2 6 7 	 1 2 7 0 	 	 1 0 . 1 0 0 2 / a s i . 1 0 1 4 0 	 	 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 2 0 A E 	 W O S : 0 0 0 1 7 9 5 0 9 9 0 0 0 1 1 	 	 
 
 J 	 P r i m e ,   C ;   B a s s e c o u l a r d ,   E ;   Z i t t ,   M 	 	 	 	 P r i m e ,   C ;   B a s s e c o u l a r d ,   E ;   Z i t t ,   M 	 	 	 C o - c i t a t i o n s   a n d   c o - s i t a t i o n s :   A   c a u t i o n a r y   v i e w   o n   a n   a n a l o g y 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N T I F I C   L I T E R A T U R E ;   S C I E N C E ;   C O C I T A T I O N ;   I M P A C T 	 L i k e   t h e   c i t a t i o n   n e t w o r k   o f   s c i e n t i f i c   p u b l i c a t i o n s ,   t h e   W e b   i s   a l s o   a   g r a p h   w h e r e   p a g e s   a r e   c o n n e c t e d   t o g e t h e r   b y   h y p e r t e x t   l i n k s   o r   " s i t a t i o n s " .   I n   t h e   n e w   r e s e a r c h   f i e l d   W e b o m e t r i c s ,   s c h o l a r s   h a v e   i n v e s t i g a t e d   e q u i v a l e n c i e s   b e t w e e n   c i t a t i o n i s t   c o n c e p t s   e s t a b l i s h e d   i n   b i b l i o m e t r i c s   a n d   h y p e r l i n k s   n e t w o r k s .   T h i s   p a p e r   f o c u s e s   o n   t h e   p o s s i b l e   a n a l o g y   b e t w e e n   c o - c i t a t i o n   a n d   c o - s i t a t i o n   t o   s t r u c t u r e   W e b   u n i v e r s e s .   I t   r e p o r t s   a n   e x p e r i m e n t   i n   t h e   f i e l d   o f   b i b l i o m e t r i c s   a n d   s c i e n t i f i c   i n d i c a t o r s .   S e v e r a l   t e c h n i c a l   a s p e c t s   t h a t   m u s t   b e   d e a l t   w i t h   a r e   r e v i e w e d .   C o - s i t a t i o n   s e e m s   a   p r o m i s i n g   w a y   t o   d e l i n e a t e   t o p i c s   o n   t h e   W e b .   H o w e v e r ,   t h e   a n a l o g y   w i t h   t r a d i t i o n a l   c o - c i t a t i o n   i s   d e e p l y   m i s l e a d i n g :   m a n y   p r e c a u t i o n s   m u s t   b e   t a k e n   i n   t h e   i n t e r p r e t a t i o n   o f   t h e   r e s u l t s . 	 E c o l e   N a t l   S u p e r   M i n e s ,   F - 4 2 0 2 3   S t   E t i e n n e   D u   R o u v r a y   2 ,   F r a n c e ;   U n i v   N a n t e s ,   I N R A ,   U M R   E D R A ,   N a n t e s ,   F r a n c e ;   R E C O D O C ,   V i l l e u r b a n n e ,   F r a n c e ;   O b s e r v   S c i   &   T e c h ,   P a r i s ,   F r a n c e 	 P r i m e ,   C   ( r e p r i n t   a u t h o r ) ,   E c o l e   N a t l   S u p e r   M i n e s ,   1 5 8   C o u r s   F a u r i e l ,   F - 4 2 0 2 3   S t   E t i e n n e   D u   R o u v r a y   2 ,   F r a n c e . 	 	 	 	 	 	 A G U I L L O   I ,   1 9 9 9 ,   S T A T   I N D I C A T O R S   I N T E ;   B A R I L A N   J ,   2 0 0 1 ,   P   8   I N T   C   S C I E N T   I N F ,   P 6 3 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B O U D O U R I D E S   M A ,   1 9 9 9 ,   W E B O M E T R I C S   S E L F   O R G ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B r i n   S ,   1 9 9 8 ,   P   7   I N T   W O R L D   W I D   W E ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 2 ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   K o s a l a   R . ,   2 0 0 0 ,   S I G K D D   E X P L O R A T I O N S ,   V 2 ,   P 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 6 0 4 0 2 . 3 6 0 4 0 6 ;   K u m a r   R . ,   1 9 9 9 ,   P   8   W O R L D   W I D   W E B   C ;   L a r s o n   R . ,   1 9 9 6 ,   P   A N N   M   A M   S O C   I N F   S ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   M A N N I N A   B ,   C Y B E R N E T I C S ,   V 4 ;   M a r s h a k o v a   I . ,   1 9 7 3 ,   N A U C H N O   T E K H N I C H E S K A ,   V 2 ,   P 3 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P I T K O W   J ,   1 9 9 7 ,   P   A C M   S I G C H I   C   H U M   F ,   P 1 1 8 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   R i p   A . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 2 5 3 ;   R O U S S E A U   R ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ,   P 1 ;   S A V O Y   J ,   2 0 0 0 ,   A C T   J A D T 2 0 0 0 ,   P 2 7 ;   S A V O Y   J ,   1 9 9 6 ,   I N F O R M A T I O N   R E T R I E V A ,   P 9 9 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S M A L L   H G ,   1 9 7 4 ,   S C I   S T U D ,   V 1 ,   P 2 6 5 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W O U T E R S   P ,   2 0 0 1 ,   F O R M A L L Y   C I T I N G   W E B ;   Z I T T   M ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 2 ;   Z i t t   M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 2 ;   Z I T T   M ,   1 9 9 8 ,   V E I L L E   S T R A T E G I Q U E   S ,   P 3 1 ;   1 9 9 9 ,   D U B L I N   C O R E   P R O J E C T 	 3 7 	 2 4 	 2 4 	 1 	 1 4 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 2 	 5 4 	 2 	 	 	 	 	 2 9 1 	 3 0 8 	 	 1 0 . 1 0 2 3 / A : 1 0 1 6 0 2 2 2 1 4 0 0 5 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 6 6 F A 	 W O S : 0 0 0 1 7 6 4 1 5 3 0 0 0 1 0 	 	 
 
 J 	 N o y o n s ,   E C M ;   M o e d ,   H F ;   V a n   R a a n ,   A F J 	 	 	 	 N o y o n s ,   E C M ;   M o e d ,   H F ;   V a n   R a a n ,   A F J 	 	 	 I n t e g r a t i n g   r e s e a r c h   p e r f o r m a n c e   a n a l y s i s   a n d   s c i e n c e   m a p p i n g 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 7 t h   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l - S o c i e t y - f o r - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s 	 J U L   0 5 - 0 8 ,   1 9 9 9 	 C O L I M A ,   M E X I C O 	 U n i v   C o l i m a ,   E u g e n e   G a r f i e l d   F d n ,   I n s t   S c i   I n f o r m a t ,   E B S C O   I n f o r m a t   S e r v ,   S e c r e t a r i a   E d u c   P u b l i c a ,   C o n s e j o   N a c l   C i e n c i a   T e c h n o l ,   H o s p   G e n   M e x i c o ,   I n d i a   E m b a s s y ,   G o b i e r n o   E s t a d o   C o l i m a ,   U n i v   N a c l   A u t o n o m a   M e x i c o ,   F u n d a c i o n   M e x i c a n a   S a l u d ,   U N E S C O s   I N F O L A C   G r p ,   P a n   A m e r   H l t h   &   E d u c   F d n 	 	 	 I N D I C A T O R S ;   S U B F I E L D S 	 I n   t h i s   p a p e r   w e   p r e s e n t   t h e   e x p l o r a t i o n s   o f   c o m b i n i n g   t h e   t w o   m a i n   p i l l a r s   o f   e v a l u a t i v e   b i b l i o m e t r i c s .   T h e s e   t w o   p i l l a r s ,   p e r f o r m a n c e   a n a l y s i s   a n d   s c i e n c e   m a p p i n g ,   b o t h   h a v e   t h e i r   s t r e n g t h s   a n d   i m p e r f e c t i o n s .   I n   t h i s   s t u d y   w e   s h o w   h o w   t h e s e   i m p e r f e c t i o n s   a r e   d e a l t   w i t h   b y   a n   i n t e g r a t e d   a n a l y s i s . 	 L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s 	 N o y o n s ,   E C M   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   P O B   9 5 5 5 ,   N L - 2 3 0 0   R B   L e i d e n ,   N e t h e r l a n d s . 	 	 	 	 	 	 B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   G l a n z e l   W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 0 2 ;   G l a n z e l   W ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 8 8 ;   H E A L E Y   P ,   1 9 8 6 ,   R E S   P O L I C Y ,   V 1 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 6 ) 9 0 0 2 4 - 7 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   N o y o n s   E C M ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 2 < 1 1 5 : : A I D - A S I 3 > 3 . 3 . C O ; 2 - A ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   N O Y O N S   E C M ,   1 9 9 6 ,   R E S   E V A L U A T ,   V 6 ,   P 1 3 3 ;   N o y o n s   E .   C .   M . ,   1 9 9 9 ,   B I B L I O M E T R I C   M A P P I N G ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   T a k a h a s h i   K ,   1 9 9 9 ,   O C C U P   M E D - O X F O R D ,   V 4 9 ,   P 5 7 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / 4 9 . 1 . 5 7 - a ;   V I N K L E R   P ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 0 2 	 1 2 	 2 4 	 2 9 	 0 	 1 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 N O V - D E C 	 1 9 9 9 	 4 6 	 3 	 	 	 	 	 5 9 1 	 6 0 4 	 	 1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 4 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 7 2 P R 	 W O S : 0 0 0 0 8 4 6 6 0 6 0 0 0 1 7 	 	 
 
 J 	 K o s t o f f ,   R N 	 	 	 	 K o s t o f f ,   R N 	 	 	 S c i e n c e   a n d   t e c h n o l o g y   i n n o v a t i o n 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i n n o v a t i o n ;   d i s c o v e r y ;   c o m p l e m e n t a r y   l i t e r a t u r e s ;   d i s p a r a t e   d i s c i p l i n e s ;   c r o s s - d i s c i p l i n e ;   d a t a b a s e   t o m o g r a p h y ;   c o m p u t a t i o n a l   l i n g u i s t i c s ;   b i b l i o m e t r i c s ;   w o r k s h o p s 	 	 T h i s   p a p e r   d e s c r i b e s   t w o   n o v e l   c o m p l e m e n t a r y   a p p r o a c h e s   f o r   s y s t e m a t i c a l l y   e n h a n c i n g   t h e   p r o c e s s   o f   i n n o v a t i o n   a n d   d i s c o v e r y .   O n e   a p p r o a c h   i s   w o r k s h o p - b a s e d   a n d   t h e   o t h e r   a p p r o a c h   i s   l i t e r a t u r e - b a s e d .   B o t h   a p p r o a c h e s   h a v e   t h e   c o m m o n   f e a t u r e   o f   e x p l o r i n g   k n o w l e d g e   f r o m   v e r y   d i s p a r a t e   t e c h n i c a l   d i s c i p l i n e s   a n d   t e c h n o l o g i e s ,   a n d   t r a n s f e r r i n g   i n s i g h t s   a n d   u n d e r s t a n d i n g   f r o m   o n e   o r   m o r e   d i s p a r a t e   t e c h n i c a l   a r e a s   t o   a n o t h e r .   I t   i s   h i g h l y   r e c o m m e n d e d   t h a t   t h e   a p p r o a c h e s   b e   c o m b i n e d   i n t o   a   s i n g l e   p r o c e s s .   T h e   i n t e g r a t e d   a p p r o a c h   h a s   t h e   p o t e n t i a l   t o   b e   a   m a j o r   b r e a k t h r o u g h   f o r   t h e   s y s t e m a t i c   p r o m o t i o n   o f   i n n o v a t i o n   a n d   d i s c o v e r y .   P u b l i s h e d   b y   E l s e v i e r   S c i e n c e   L t d . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 F I N N   R ,   1 9 9 8 ,   P R O G R   U N C O V E R S   H I D D E ;   G O R D O N   M D ,   1 9 9 6 ,   J A S I S ,   V 4 7 ,   P 2 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K O S T O F F   R N ,   1 9 9 3 ,   C O M P E T I T I V E   I N T E L L I G ,   V 4 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 1 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T I V E S   B I O L   M E ,   V 3 0 ,   P 1 	 9 	 2 4 	 2 4 	 1 	 1 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 6 - 4 9 7 2 	 1 8 7 9 - 2 3 8 3 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 O C T 	 1 9 9 9 	 1 9 	 1 0 	 	 	 	 	 5 9 3 	 6 0 4 	 	 1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X 	 	 1 2 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 2 3 4 K X 	 W O S : 0 0 0 0 8 2 4 8 4 8 0 0 0 0 1 	 	 
 
 J 	 P i e t e r s ,   R ;   B a u m g a r t n e r ,   H ;   V e r m u n t ,   J ;   B i j m o l t ,   T 	 	 	 	 P i e t e r s ,   R ;   B a u m g a r t n e r ,   H ;   V e r m u n t ,   J ;   B i j m o l t ,   T 	 	 	 I m p o r t a n c e   a n d   s i m i l a r i t y   i n   t h e   e v o l v i n g   c i t a t i o n   n e t w o r k   o f   t h e   I n t e r n a t i o n a l   J o u r n a l   o f   R e s e a r c h   i n   M a r k e t i n g 	 I N T E R N A T I O N A L   J O U R N A L   O F   R E S E A R C H   I N   M A R K E T I N G 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   s o c i a l   n e t w o r k s ;   l o g - m u l t i p l i c a t i v e   m o d e l s ;   b i b l i o m e t r i c s 	 S T R U C T U R A L - E Q U I V A L E N C E ;   C O N S U M E R   R E S E A R C H ;   A S S O C I A T I O N ;   M O D E L S 	 T h e   c i t a t i o n   n e t w o r k   o f   t h e   I n t e r n a t i o n a l   J o u r n a l   o f   R e s e a r c h   i n   M a r k e t i n g   ( I J R M )   i s   e x a m i n e d   f r o m   1 9 8 1   t o   1 9 9 5 .   A   t i m e - h e t e r o g e n o u s   l o g - m u l t i p l i c a t i v e   m o d e l   i s   e s t i m a t e d   t o   e x a m i n e   s i m u l t a n e o u s l y   t h e   i m p o r t a n c e   a n d   s i m i l a r i t y   o f   j o u r n a l s   i n   t h e   n e t w o r k   o v e r   t i m e .   T w o   d i s t i n c t   t y p e s   o f   j o u r n a l   s i m i l a r i t y ,   c o h e s i o n   a n d   s t r u c t u r a l   e q u i v a l e n c e ,   a r e   c o n s i d e r e d   a n d   m o d e l e d   i n   a n   i n t e g r a t i v e   f a s h i o n .   T h e   f i n d i n g s   s h o w   t h a t   t h e   o v e r a l l   i m p o r t a n c e   o f   I J R M   i n   i t s   n e t w o r k   i s   g r o w i n g   r a p i d l y   a l b e i t   f r o m   a   l o w   b a s e .   T h e   i m p o r t a n c e   o f   p s y c h o l o g y   j o u r n a l s   i n   t h e   n e t w o r k   a p p e a r s   t o   b e   d e c r e a s i n g .   C l e a r   c o h e s i v e   a n d   s t r u c t u r a l l y   e q u i v a l e n t   g r o u p s   o f   c o r e   m a r k e t i n g ,   m e t h o d o l o g y ,   m a n a g e r i a l   a n d   p s y c h o l o g y   j o u r n a l s   w i t h   d i s t i n c t   f u n c t i o n s   i n   t h e   n e t w o r k   a r e   i d e n t i f i e d .   R e c o m m e n d a t i o n s   f o r   f u t u r e   c i t a t i o n   r e s e a r c h   a r e   o f f e r e d   a s   w e l l .   ( C )   1 9 9 9   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 T i l b u r g   U n i v ,   D e p t   M k t ,   N L - 5 0 0 0   L E   T i l b u r g ,   N e t h e r l a n d s ;   P e n n   S t a t e   U n i v ,   S m e a l   C o l l   B u s i n e s s ,   S t a t e   C o l l ,   P A   U S A ;   T i l b u r g   U n i v ,   F a c   S o c i a l   S c i   &   R e s ,   D e p t   M e t h o d o l ,   N L - 5 0 0 0   L E   T i l b u r g ,   N e t h e r l a n d s 	 P i e t e r s ,   R   ( r e p r i n t   a u t h o r ) ,   T i l b u r g   U n i v ,   D e p t   M k t ,   N L - 5 0 0 0   L E   T i l b u r g ,   N e t h e r l a n d s . 	 	 B a u m g a r t n e r ,   H a n s / A - 4 1 9 8 - 2 0 0 8 ;   B i j m o l t ,   T a m m o / C - 1 1 5 9 - 2 0 1 2 ;   v e r m u n t ,   j e r o e n / K - 3 6 8 0 - 2 0 1 2 	 v e r m u n t ,   j e r o e n / 0 0 0 0 - 0 0 0 1 - 9 0 5 3 - 9 3 3 0 	 	 	 B u r t   R . ,   1 9 8 3 ,   A P P L   N E T W O R K   A N A L   M E ,   P 2 6 2 ;   C L O G G   C C ,   1 9 8 7 ,   S O C I O L   M E T H O D   R E S ,   V 1 6 ,   P 8 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 9 1 2 4 1 8 7 0 1 6 0 0 1 0 0 2 ;   C l o g g   C .   C . ,   1 9 9 4 ,   S T A T   M O D E L S   O R D I N A L ;   C O T E   J A ,   1 9 9 1 ,   J   C O N S U M   R E S ,   V 1 8 ,   P 4 0 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 2 6 9 ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 ;   D O R E I A N   P ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 7 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 0 3 ) 3 9 : 2 < 7 9 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - C ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 4 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 6 1 1 ;   G O O D M A N   L A ,   1 9 8 7 ,   A M   J   S O C I O L ,   V 9 3 ,   P 5 2 9 ,   D O I   1 0 . 1 0 8 6 / 2 2 8 7 8 9 ;   G O O D M A N   L A ,   1 9 7 9 ,   J   A M   S T A T   A S S O C ,   V 7 4 ,   P 5 3 7 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 6 9 7 1 ;   H A M E L M A N   P W ,   1 9 7 3 ,   J   M A R K E T I N G   R E S ,   V 1 0 ,   P 2 1 5 ,   D O I   1 0 . 2 3 0 7 / 3 1 4 9 8 3 3 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   I A C O B U C C I   D ,   1 9 8 8 ,   P S Y C H O L   B U L L ,   V 1 0 3 ,   P 3 7 9 ;   I a c o b u c c i   D . ,   1 9 9 6 ,   N E T W O R K S   M A R K E T I N G ;   I A C O B U C C I   D ,   1 9 9 2 ,   J   M A R K E T I N G   R E S ,   V 2 4 ,   P 5 ;   I a c o b u c c i   D . ,   1 9 9 6 ,   I N T   J   R E S   M A R K ,   V 1 3 ,   P 4 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 8 1 1 6 ( 9 6 ) 0 0 0 2 2 - 5 ;   J o b b e r   D a v i d ,   1 9 8 8 ,   I N T   J   R E S   M A R K ,   V 5 ,   P 1 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 8 1 1 6 ( 8 8 ) 9 0 0 6 5 - 1 ;   K n o k e   D . ,   1 9 8 2 ,   A P P L   N E T W O R K   A N A L ,   P 1 9 5 ;   L A B A N D   D N ,   1 9 9 4 ,   J   E C O N   L I T ,   V 3 2 ,   P 6 4 0 ;   L E O N G   S M ,   1 9 8 9 ,   J   C O N S U M   R E S ,   V 1 5 ,   P 4 9 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 1 8 8 ;   L o n g   J .   S . ,   1 9 9 7 ,   R E G R E S S I O N   M O D E L S   C A ;   P E C O T I C H   A ,   1 9 9 0 ,   I N T   J   R E S   M A R K ,   V 6 ,   P 1 9 9 ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   S A L A N C I K   G R ,   1 9 9 5 ,   A D M I N   S C I   Q U A R T ,   V 4 0 ,   P 3 4 5 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 6 4 2 ;   S c o t t   J ,   1 9 9 1 ,   S O C I A L   N E T W O R K S   A N A L ;   V e r m u n t   J K . ,   1 9 9 7 ,   L E M   G E N   P R O G R A M   A N A L ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W O N G   R S K ,   1 9 9 5 ,   S O C I O L   M E T H O D   R E S ,   V 2 3 ,   P 5 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 9 1 2 4 1 9 5 0 2 3 0 0 4 0 0 5 ;   Z I N K H A N   G M ,   1 9 9 2 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 2 8 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 0 2 	 2 8 	 2 4 	 2 4 	 1 	 7 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 7 - 8 1 1 6 	 	 	 I N T   J   R E S   M A R K 	 I n t .   J .   R e s .   M a r k . 	 J U N 	 1 9 9 9 	 1 6 	 2 	 	 	 	 	 1 1 3 	 1 2 7 	 	 1 0 . 1 0 1 6 / S 0 1 6 7 - 8 1 1 6 ( 9 9 ) 0 0 0 0 8 - 7 	 	 1 5 	 B u s i n e s s 	 B u s i n e s s   &   E c o n o m i c s 	 2 0 8 U L 	 W O S : 0 0 0 0 8 1 0 1 0 2 0 0 0 0 2 	 	 
 
 J 	 F a r d i ,   A ;   K o d o n a s ,   K ;   G o g o s ,   C ;   E c o n o m i d e s ,   N 	 	 	 	 F a r d i ,   A n a s t a s i a ;   K o d o n a s ,   K o n s t a n t i n o s ;   G o g o s ,   C h r i s t o s ;   E c o n o m i d e s ,   N i k o l a o s 	 	 	 T o p - c i t e d   A r t i c l e s   i n   E n d o d o n t i c   J o u r n a l s 	 J O U R N A L   O F   E N D O D O N T I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 B i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   e n d o d o n t i c s 	 1 0 0   C I T A T I O N - C L A S S I C S ;   E X P E R I M E N T A L   L E S I O N S ;   S U R G E R Y   J O U R N A L S ;   D E N T A L - P U L P ;   T R A U M A ;   I M P A C T ;   B O N E 	 I n t r o d u c t i o n :   T h e   p u r p o s e   o f   t h i s   s t u d y   w a s   t o   i d e n t i f y   t h e   1 0 0   t o p - c i t e d   a r t i c l e s   p u b l i s h e d   i n   j o u r n a l s   d e d i c a t e d   t o   e n d o d o n t o l o g y   a n d   a n a l y z e   t h e i r   c h a r a c t e r i s t i c s   t o   d e s c r i b e   t h e   q u a l i t y   a n d   e v o l u t i o n   o f   r e s e a r c h   i n   t h e   f i e l d   o f   e n d o d o n t o l o g y .   M e t h o d s :   T h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   W e b   o f   K n o w l e d g e   D a t a b a s e   a n d   t h e   J o u r n a l   C i t a t i o n   R e p o r t   S c i e n c e   E d i t i o n s   w e r e   u s e d   t o   r e t r i e v e   t h e .   1 0 0   m o s t   c i t e d   a r t i c l e s   p u b l i s h e d   i n   j o u r n a l s   d e d i c a t e d   t o   e n d o d o n t i c s .   T h e   t o p - c i t e d   a r t i c l e s   w e r e   s e l e c t e d   a n d   a n a l y z e d   w i t h   r e g a r d   t o   j o u r n a l s ,   a u t h o r s ,   i n s t i t u t i o n ,   c o u n t r y   o f   o r i g i n ,   p u b l i c a t i o n   t i t l e   a n d   y e a r ,   n u m b e r   o f   c i t a t i o n s ,   a r t i c l e   t y p e ,   s t u d y   d e s i g n ,   l e v e l   o f   e v i d e n c e ,   a n d   f i e l d   o f   s t u d y .   R e s u l t s :   T h e   t o p   1 0 0   a r t i c l e s   w e r e   c i t e d   b e t w e e n   8 7   a n d   5 5 4   t i m e s .   T h e s e   a r t i c l e s   a p p e a r e d   i n   4   d i f f e r e n t   j o u r n a l s ,   w i t h   m o r e   t h a n   h a l f   i n   t h e   J o u r n a l   o f   E n d o d o n t i c s ,   f o l l o w e d   b y   t h e   j o u r n a l s   O r a l   S u r g e r y   O r a l   M e d i c i n e   O r a l   P a t h o l o g y   O r a l   R a d i o l o g y   a n d   E n d o d o n t o l o g y ,   t h e   I n t e r n a t i o n a l   E n d o d o n t i c   J o u r n a l ,   a n d   E n d o d o n t i c s   &   D e n t a l   T r a u m a t o l o g y .   F o r t y - e i g h t   a r t i c l e s   w e r e   p u b l i s h e d   b e t w e e n   1 9 9 0   a n d   1 9 9 9 .   A l l   a r t i c l e s   w e r e   p u b l i s h e d   i n   E n g l i s h   a n d   p r i m a r i l y   o r i g i n a t e d   f r o m   t h e   U n i t e d   S t a t e s   ( n   =   5 2 ) .   T h e   m a j o r i t y   o f   a r t i c l e s   w e r e   b a s i c   s c i e n c e   a r t i c l e s   ( n   =   5 5 ) ,   f o l l o w e d   b y   c l i n i c a l   r e s e a r c h   s t u d i e s   ( n   =   2 8 )   a n d   n o n s y s t e m a t i c   r e v i e w s   ( n   =   1 7 ) .   U n c o n t r o l l e d   c a s e   s e r i e s   w i t h   l e v e l   I V   o f   e v i d e n c e   a n d   n a r r a t i v e   r e v i e w s   w i t h   l e v e l   V   o f   e v i d e n c e   w e r e   t h e   m o s t   f r e q u e n t   t y p e s   o f   s t u d y   d e s i g n .   T h e   m a i n   t o p i c s   c o v e r e d   b y   t h e   t o p - c i t e d   a r t i c l e s   w e r e   m i c r o l e a k a g e   a n d   e n d o d o n t i c   m i c r o b i o l o g y .   C o n c l u s i o n s :   T h i s   a n a l y s i s   o f   c i t a t i o n   r a t e s   r e v e a l s   u s e f u l   a n d   i n t e r e s t i n g   i n f o r m a t i o n   a b o u t   s c i e n t i f i c   p r o g r e s s   i n   t h e   f i e l d   o f   e n d o d o n t i c s .   B a s i c   r e s e a r c h   a n d   o b s e r v a t i o n a l   s t u d i e s   p u b l i s h e d   i n   h i g h - i m p a c t   e n d o d o n t i c   j o u r n a l s   h a d   t h e   h i g h e s t   c i t a t i o n   r a t e s .   ( J   E n d o d   2 0 1 1 ; 3 7 : 1 1 8 3 - 1 1 9 0 ) 	 [ F a r d i ,   A n a s t a s i a ;   K o d o n a s ,   K o n s t a n t i n o s ;   G o g o s ,   C h r i s t o s ;   E c o n o m i d e s ,   N i k o l a o s ]   A r i s t o t l e   U n i v   T h e s s a l o n i k i ,   D e p t   E n d o d o n t o l ,   S c h   D e n t ,   T h e s s a l o n i k i   1 1 5 2 1 ,   G r e e c e 	 F a r d i ,   A   ( r e p r i n t   a u t h o r ) ,   A r i s t o t l e   U n i v   T h e s s a l o n i k i ,   D e p t   E n d o d o n t o l ,   S c h   D e n t ,   V a s   S o f i a s   1 1 5 ,   T h e s s a l o n i k i   1 1 5 2 1 ,   G r e e c e . 	 n f a r d i @ d e n t . a u t h . g r 	 	 G o g o s ,   C h r i s / 0 0 0 0 - 0 0 0 3 - 2 7 9 0 - 4 2 6 4 	 	 	 A d a m s   A l e x a n d e r   B ,   2 0 0 4 ,   R e s p i r   C a r e ,   V 4 9 ,   P 2 7 6 ;   A k s n e s   D W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 1 9 2 2 8 3 6 8 ;   B a l t u s s e n   A ,   2 0 0 4 ,   I N T E N S   C A R E   M E D ,   V 3 0 ,   P 9 0 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 4 - 2 1 9 5 - 7 ;   B a l t u s s e n   A ,   2 0 0 4 ,   A N E S T H   A N A L G ,   V 9 8 ,   P 4 4 3 ,   D O I   1 0 . 1 2 1 3 / 0 1 . A N E . 0 0 0 0 0 9 6 1 8 5 . 1 3 4 7 4 . 0 A ;   B E N D E R   I B ,   1 9 6 1 ,   J   A M   D E N T   A S S O C ,   V 6 2 ,   P 7 0 8 ;   B E N D E R   I B ,   1 9 6 1 ,   J   A M   D E N T   A S S O C ,   V 6 2 ,   P 1 5 2 ;   B E R G E N H O L T Z   G ,   1 9 8 2 ,   J   O R A L   P A T H O L   M E D ,   V 1 1 ,   P 4 3 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 7 1 4 . 1 9 8 2 . t b 0 0 1 8 8 . x ;   B o u i l l a g u e t   S ,   2 0 0 3 ,   D E N T   M A T E R ,   V 1 9 ,   P 1 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 0 9 - 5 6 4 1 ( 0 2 ) 0 0 0 3 0 - 1 ;   B r a n d t   J S ,   2 0 1 0 ,   A M   J   O B S T E T   G Y N E C O L ,   V 2 0 3 ;   B Y S T R O M   A ,   1 9 8 1 ,   S C A N D   J   D E N T   R E S ,   V 8 9 ,   P 3 2 1 ;   C h e e k   J ,   2 0 0 6 ,   Q U A L   H E A L T H   R E S ,   V 1 6 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 2 3 0 5 2 8 5 7 0 1 ;   F e n t o n   J E ,   2 0 0 2 ,   J   L A R Y N G O L   O T O L ,   V 1 1 6 ,   P 4 9 4 ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G a r f i e l d   E . ,   W H A T   I S   C I T A T I O N   C L A ;   G r o n t h o s   S ,   2 0 0 2 ,   J   D E N T   R E S ,   V 8 1 ,   P 5 3 1 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L e f a i v r e   K A ,   2 0 1 0 ,   J   O R T H O P   T R A U M A ,   V 2 4 ,   P 5 3 ,   D O I   1 0 . 1 0 9 7 / B O T . 0 b 0 1 3 e 3 1 8 1 a a 2 1 8 2 ;   L o o n e n   M P J ,   2 0 0 8 ,   P L A S T   R E C O N S T R   S U R G ,   V 1 2 1 ,   p 3 2 0 E ,   D O I   1 0 . 1 0 9 7 / P R S . 0 b 0 1 3 e 3 1 8 1 6 b 1 3 a 9 ;   M a r s h a l l   G W ,   1 9 9 7 ,   J   D E N T ,   V 2 5 ,   P 4 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 0 - 5 7 1 2 ( 9 6 ) 0 0 0 6 5 - 6 ;   M e a d   C ,   2 0 0 5 ,   J   E N D O D O N T ,   V 3 1 ,   P 1 9 ,   D O I   1 0 . 1 0 9 7 / 0 1 . D O N . 0 0 0 0 1 3 3 1 5 8 . 3 5 3 9 4 . 8 A ;   M o e d   H F ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 1 - 5 ;   N i e r i   M ,   2 0 0 7 ,   J   C L I N   P E R I O D O N T O L ,   V 3 4 ,   P 3 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 5 1 X . 2 0 0 7 . 0 1 0 6 0 . x ;   O h b a   N ,   2 0 0 7 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 2 5 ,   P 9 5 2 ,   D O I   1 0 . 1 0 0 1 / a r c h o p h t . 1 2 5 . 7 . 9 5 2 ;   O l l e r t o n   J E ,   2 0 0 5 ,   J   T R A U M A ,   V 5 8 ,   P 3 6 4 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T A . 0 0 0 0 1 4 1 8 8 2 . 3 1 2 8 1 . 6 6 ;   P a i k   S ,   2 0 0 4 ,   J   E N D O D O N T ,   V 3 0 ,   P 7 4 5 ,   D O I   1 0 . 1 0 9 7 / 0 1 . d o n . 0 0 0 0 1 3 7 6 3 6 . 9 3 9 3 3 . 5 1 ;   P a l a d u g u   R ,   2 0 0 2 ,   W O R L D   J   S U R G ,   V 2 6 ,   P 1 0 9 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 6 8 - 0 0 2 - 6 3 7 6 - 7 ;   P a s h l e y   D H ,   1 9 9 7 ,   J   D E N T ,   V 2 5 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 0 - 5 7 1 2 ( 9 6 ) 0 0 0 5 7 - 7 ;   P h i l l i p s   B ,   L E V E L S   E V I D E N C E ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S h a d g a n   B ,   2 0 1 0 ,   A R C H   P H Y S   M E D   R E H A B ,   V 9 1 ,   P 8 0 6 ,   D O I   1 0 . 1 0 1 6 / j . a p m r . 2 0 1 0 . 0 1 . 0 1 1 ;   T e r a j i m a   K ,   2 0 0 3 ,   A C T A   A N A E S T H   S C A N D ,   V 4 7 ,   P 6 5 5 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 3 7 . x ;   T o r a b i n e j a d   M ,   2 0 0 5 ,   J   E N D O D O N T ,   V 3 1 ,   P 6 3 7 ,   D O I   1 0 . 1 0 9 7 / 0 1 . d o n . 0 0 0 0 1 5 3 5 9 3 . 6 4 9 5 1 . 1 4 	 3 2 	 2 3 	 2 5 	 1 	 3 4 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 9 9 - 2 3 9 9 	 	 	 J   E N D O D O N T 	 J .   E n d o d . 	 S E P 	 2 0 1 1 	 3 7 	 9 	 	 	 	 	 1 1 8 3 	 1 1 9 0 	 	 1 0 . 1 0 1 6 / j . j o e n . 2 0 1 1 . 0 5 . 0 3 7 	 	 8 	 D e n t i s t r y ,   O r a l   S u r g e r y   &   M e d i c i n e 	 D e n t i s t r y ,   O r a l   S u r g e r y   &   M e d i c i n e 	 8 1 3 T R 	 W O S : 0 0 0 2 9 4 3 9 3 6 0 0 0 0 1 	 2 1 8 4 6 5 3 1 	 
 
 J 	 N a v a r r e t e - C o r t e s ,   J ;   F e r n a n d e z - L o p e z ,   J A ;   L o p e z - B a e n a ,   A ;   Q u e v e d o - B l a s c o ,   R ;   B u e l a - C a s a l ,   G 	 	 	 	 N a v a r r e t e - C o r t e s ,   J o s e ;   A n t o n i o   F e r n a n d e z - L o p e z ,   J u a n ;   L o p e z - B a e n a ,   A l f o n s o ;   Q u e v e d o - B l a s c o ,   R a u l ;   B u e l a - C a s a l ,   G u a l b e r t o 	 	 	 G l o b a l   P s y c h o l o g y :   A   b i b l i o m e t r i c   A n a l y s i s   o f   W e b   o f   S c i e n c e   P u b l i c a t i o n s 	 U N I V E R S I T A S   P S Y C H O L O G I C A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 D e s c r i p t i v e   s t u d y   t h r o u g h   d o c u m e n t   a n a l y s i s ;   S c i e n t i f i c   p r o d u c t i v i t y ;   B i b l i o m e t r i c s   i n d i c a t o r s ;   C o u n t r y   r a n k i n g 	 I M P A C T   F A C T O R ;   I N T E R N A T I O N A L I T Y   I N D E X ;   T R A N S N A T I O N A L   A N A L Y S I S ;   U N I V E R S I T Y   P R O F E S S O R S ;   R E S E A R C H   P E R F O R M A N C E ;   S C I E N T I F I C   J O U R N A L S ;   I N D I C A T O R S ;   P R O G R A M S ;   C R I T E R I A ;   S P A I N 	 I n   t h i s   s t u d y ,   w e   c a r r i e d   a   c l a s s i f i c a t i o n   b y   c o u n t r y   b a s e d   o n   t h e   a n a l y s i s   o f   t h e   s c i e n t i f i c   p r o d u c t i o n   o f   p s y c h o l o g y   j o u r n a l s .   W e   a n a l y z e d   a   t o t a l   o f   1 0 8 , 7 4 1   d o c u m e n t s ,   p u b l i s h e d   i n   t h e   W e b   o f   S c i e n c e .   T h e   i n d i c a t o r s   u s e d   w e r e   t h e   W e i g h t e d   I m p a c t   F a c t o r ,   t h e   R e l a t i v e   I m p a c t   F a c t o r ,   t h e   C i t a t i o n   R a t e   p e r   a r t i c l e   a n d   t h e   a r t i c l e s   p u b l i s h e d   i n   t h e   t o p   f i v e   j o u r n a l s   o f   t h e   J o u r n a l   C i t a t i o n   R e p o r t   ( J C R ) .   T h e   r e s u l t s   i n d i c a t e   t h a t   S p a i n   h a s   t h e   h i g h e s t   p e r c e n t a g e   o f   a r t i c l e s   i n   t h e   t o p   f i v e   j o u r n a l s   i n   t h e   J C R   a n d   C o l o m b i a   i s   t h e   s e c o n d   l a t i n   a m e r i c a n ,   S p a n i s h   -   s p e a k i n g   c o u n t r y   t h a t   h a s   m o r e   c i t a t i o n s   p e r   a r t i c l e .   C o u n t r i e s   l i k e   H u n g a r y ,   I t a l y   a n d   U S A ,   h a d   a   h i g h e r   I m p a c t   F a c t o r   a n d   C i t a t i o n   R a t e . 	 [ N a v a r r e t e - C o r t e s ,   J o s e ]   U n i v   J a e n ,   U n i v   L i b ,   A c c e s s   D o c u m e n t   S e r v ,   J a e n   2 1 0 7 0 ,   S p a i n ;   [ A n t o n i o   F e r n a n d e z - L o p e z ,   J u a n ]   S y s t   S c i   I n f o r m a t   A n d a l u s i a ,   S e v i l l e ,   S p a i n ;   [ L o p e z - B a e n a ,   A l f o n s o ]   A n d a l u s i a n   A g c y   E v a l u a t ,   C o r d o b a ,   S p a i n ;   [ Q u e v e d o - B l a s c o ,   R a u l ]   U n i v   G r a n a d a ,   F a c   P s y c h o l ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n 	 N a v a r r e t e - C o r t e s ,   J   ( r e p r i n t   a u t h o r ) ,   U n i v   J a e n ,   U n i v   L i b ,   A c c e s s   D o c u m e n t   S e r v ,   J a e n   2 1 0 7 0 ,   S p a i n . 	 j c o r t e s @ u j a e n . e s ;   j a f l @ u s . e s ;   a j l o p e z @ u c u a . e s ;   r q u e v e d o @ u g r . e s ;   g b u e l a @ u g r . e s 	 F e r n a n d e z   L o p e z ,   J u a n   A n t o n i o / F - 1 3 0 9 - 2 0 1 6 	 	 	 	 A l e g r e - d e - l a - R o s a   O .   M . ,   2 0 0 7 ,   R E V   U   S O C   C O N O C I M I E N ,   V 4 ,   P 1 ;   B e n g o e t x e a   E . ,   2 0 0 9 ,   R E V   U   S O C   C O N O C I M I E N ,   V 6 ,   P 6 0 ;   B i g n a m i   G ,   2 0 0 0 ,   E p i d e m i o l   P s i c h i a t r   S o c ,   V 9 ,   P 1 1 ;   B o r d o n s   M ,   1 9 9 9 ,   R E V   E S P   C A R D I O L ,   V 5 2 ,   P 7 9 0 ;   B o r d o n s   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 0 4 0 7 8 7 6 ;   B u e l a - C a s a l   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 5 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 4 ;   B u e l a - C a s a l   G ,   2 0 0 3 ,   P S I C O T H E M A ,   V 1 5 ,   P 2 3 ;   B u e l a - C a s a l   G u a l b e r t o ,   2 0 0 7 ,   P s i c o t h e m a ,   V 1 9 ,   P 5 3 7 ;   B u e l a - C a s a l   G ,   2 0 0 7 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 7 ,   P 8 9 9 ;   B u e l a - C a s a l   G ,   2 0 0 7 ,   P S I C O T H E M A ,   V 1 9 ,   P 4 7 3 ;   B u e l a - C a s a l   G ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 5 3 - 8 ;   B u e l a - C a s a l   G ,   2 0 1 0 ,   P S I C O T H E M A ,   V 2 2 ,   P 1 7 1 ;   B u e l a - C a s a l   G . ,   2 0 0 9 ,   P S I C O T H E M A ,   V 2 1 ,   P 3 0 9 ;   B U E L A C A S A L   G ,   2 0 0 8 ,   I N T   J   P S Y C H O L   P S Y C H O ,   V 8 ,   P 1 2 7 ;   B u e l a - C a s a l   G . ,   2 0 0 7 ,   R E V   E L E C T   M E T O D O L O G I ,   V 1 2 ,   P 1 ;   B U E L A C A S A L   G ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 2 6 7 ;   B U E L A C A S A L   G ,   2 0 0 9 ,   R E V   U   S O C   C O N O C I M I E N ,   V 6 ,   P 3 ;   B U E L A C A S A L   G ,   2 0 0 9 ,   R E V   U   S O C   C O N O C I M I E N ,   V 6 ,   P 9 ;   B u e l a - C a s a l   G ,   2 0 0 8 ,   R E V   I N V E S T I G A C I O N   E D ,   V 5 ,   P 4 9 ;   S i e r r a   J C ,   2 0 0 8 ,   I N T E R C I E N C I A ,   V 3 3 ,   P 2 5 1 ;   S i e r r a   J C ,   2 0 0 9 ,   P S I C O T H E M A ,   V 2 1 ,   P 1 2 4 ;   C a s t r o   A . ,   2 0 0 8 ,   R E V   I N V E S T I G A C I O N   E D ,   V 5 ,   P 6 1 ;   C L A V I J O   A   A R T U R O ,   2 0 0 7 ,   U n i v .   P s y c h o l . ,   V 6 ,   P 6 9 9 ;   C s a j b o k   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 9 - 9 ;   d a   L u z   M P ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 6 4 - 9 ;   D E L R I O   L ,   2 0 0 8 ,   R E V   I N V E S T I G A C I O N   E D ,   V 5 ,   P 5 ;   E g g h e   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 2 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 9 ;   F A I N H O L C   B ,   2 0 0 6 ,   R E V   U   S O C   C O N O C I M I E N ,   V 3 ,   P 1 ;   F a v a   G A ,   2 0 0 0 ,   P S Y C H O T H E R   P S Y C H O S O M ,   V 6 9 ,   P 2 8 5 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 1 2 4 0 9 ;   F a v a   G A ,   2 0 0 1 ,   P S Y C H O T H E R   P S Y C H O S O M ,   V 7 0 ,   P 2 8 3 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 5 6 2 6 8 ;   F a v a   G A ,   1 9 9 7 ,   P S Y C H O T H E R   P S Y C H O S O M ,   V 6 6 ,   P 1 6 9 ;   G a r c i a   E . ,   2 0 0 9 ,   R E V   I N V E S T I G A C I O N   E D ,   V 6 ,   P 1 4 2 ;   G A R C I A M A R T I N E Z   A T ,   2 0 0 8 ,   U N I V   P S Y C H O L ,   V 8 ,   P 1 3 ;   G a r f i e l d   E . ,   2 0 0 3 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 3 ,   P 3 6 3 ;   G o m e z - C a r i d a d   I . ,   1 9 9 6 ,   P O L I T I C A   C I E N T I F I C A ,   V 4 6 ,   P 2 1 ;   G O N Z A L E Z   F ,   2 0 0 9 ,   R E V   U   S O C   C O N O C I M I E N ,   V 6 ,   P 3 8 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I n t e r n a t i o n a l   R a n k i n g   E x p e r t   G r o u p ,   2 0 0 6 ,   B E R L   P R I N C   R A N K   H I G H ;   R o b l e d o - G o m e z   A M ,   2 0 0 8 ,   U N I V   P S Y C H O L ,   V 7 ,   P 9 1 1 ;   R i v e r a - G a r z o n   D M ,   2 0 0 8 ,   U N I V   P S Y C H O L ,   V 7 ,   P 9 1 7 ;   A l z a t e - M e d i n a   G M ,   2 0 0 8 ,   U N I V   P S Y C H O L ,   V 7 ,   P 4 2 5 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M o l i n a r i   J F ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 3 - 2 ;   M o n t e r o   I ,   2 0 0 7 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 7 ,   P 8 4 7 ;   M O Y A   F ,   2 0 0 4 ,   I N D I C A D O R E S   B I B L I O M E ;   M o y a n o   M . ,   2 0 0 6 ,   I N T   J   P S Y C H O L   P S Y C H O ,   V 6 ,   P 1 1 1 ;   M u n i z   J . ,   2 0 0 8 ,   R E V   I N V E S T I G A C I O N   E D ,   V 5 ,   P 1 3 ;   M u s i - L e c h u g a   B ,   2 0 0 5 ,   P S I C O T H E M A ,   V 1 7 ,   P 5 3 9 ;   M u s i - L e c h u g a   B ,   2 0 0 9 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 9 ,   P 1 6 1 ;   N a v a r r e t e - C o r t e s   J ,   2 0 0 9 ,   R E V   M E X   P S I C O L ,   V 2 6 ,   P 1 3 1 ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   O s u n a   E . ,   2 0 0 9 ,   R E V   I N V E S T I G A C I O N   E D ,   V 6 ,   P 1 3 3 ;   P A G A N I   R ,   2 0 0 6 ,   E S T U D I O   I N T   C R I T E R I O ;   B e r m u d e z   M P ,   2 0 0 9 ,   R E V   P S I C O D I D A C T ,   V 1 4 ,   P 1 9 3 ;   P e l e c h a n o   V . ,   2 0 0 2 ,   A N A L   M O D I F I C A C I O N   C O ,   V 2 8 ,   P 3 2 3 ;   R a h m a n   M ,   2 0 0 0 ,   J   E p i d e m i o l ,   V 1 0 ,   P 2 9 0 ;   R a m o s - A l v a r e z   M M ,   2 0 0 8 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 8 ,   P 7 5 1 ;   G i l   R o a l e s - N i e t o   J . ,   2 0 0 9 ,   R E V   I N V E S T I G A C I O N   E D ,   V 6 ,   P 1 6 0 ;   R o b l e d o   G  m e z    n g e l a   M a r  a ,   2 0 0 8 ,   U n i v .   P s y c h o l . ,   V 7 ,   P 9 ;   R O C A   S ,   2 0 0 8 ,   R E V   I N V E S T I G A C I O N   E D ,   V 5 ,   P 2 7 ;   R U E D A C L A U S E N   C F ,   2 0 0 5 ,   R E V   M E D U N A B ,   V 8 ,   P 2 9 ;   R u i z - P e r e z   R ,   2 0 0 6 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 6 ,   P 4 0 1 ;   S c h u b e r t   A ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 2 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   * S H A N G   J I A O   T O N G   U ,   2 0 0 8 ,   A C   R A N K   W O R L D   U ;   S i e r r a   J .   C . ,   2 0 0 9 ,   R E V   U   S O C   C O N O C I M I E N ,   V 6 ,   P 4 9 ;   S T E R N B E R G   R J ,   2 0 0 1 ,   O B S E R V E R ,   V 1 4 ,   P 3 ;   T h o m p s o n   D F ,   1 9 9 9 ,   N E W   E N G L   J   M E D ,   V 3 4 0 ,   P 8 1 7 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 9 0 3 1 1 3 4 0 1 0 2 0 ;   T o l   R S J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 4 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 1 . 0 0 1 ;   V a n   R a a n   A ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 4 1 7 ;   V i l l a l o b o s - G a l v i s   F ,   2 0 0 7 ,   R E V   L A T   A M   P S I C O L ,   V 3 9 ,   P 5 9 3 ;   V i n o l a s   B ,   2 0 0 9 ,   R E V   U   S O C   C O N O C I M I E N ,   V 6 ,   P 2 2 ;   Z y c h   I . ,   2 0 0 7 ,   R E V   M E X   P S I C O L ,   V 2 4 ,   P 7 ;   Z y c h   I ,   2 0 0 9 ,   R E V   L A T   A M   P S I C O L ,   V 4 1 ,   P 4 0 1 	 7 4 	 2 3 	 2 8 	 1 	 2 5 	 P O N T I F I C A   U N I V   J A V E R I A N A ,   F A C   P S Y C H 	 B O G O T A 	 C A R R E R A   5   N U M   3 9 - 0 0 ,   E D I F I C I O   M A N U E L   B R I C E N O ,   B O G O T A ,   0 0 0 0 0 ,   C O L O M B I A 	 1 6 5 7 - 9 2 6 7 	 	 	 U N I V   P S Y C H O L 	 U n i v .   P s y c h o l . 	 M A Y - A U G 	 2 0 1 0 	 9 	 2 	 	 	 	 	 5 5 3 	 5 6 7 	 	 	 	 1 5 	 P s y c h o l o g y ,   M u l t i d i s c i p l i n a r y 	 P s y c h o l o g y 	 6 6 0 O Z 	 W O S : 0 0 0 2 8 2 6 5 4 2 0 0 0 2 2 	 	 
 
 J 	 Y a r i m e ,   M ;   T a k e d a ,   Y ;   K a j i k a w a ,   Y 	 	 	 	 Y a r i m e ,   M a s a r u ;   T a k e d a ,   Y o s h i y u k i ;   K a j i k a w a ,   Y u y a 	 	 	 T o w a r d s   i n s t i t u t i o n a l   a n a l y s i s   o f   s u s t a i n a b i l i t y   s c i e n c e :   a   q u a n t i t a t i v e   e x a m i n a t i o n   o f   t h e   p a t t e r n s   o f   r e s e a r c h   c o l l a b o r a t i o n 	 S U S T A I N A B I L I T Y   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S u s t a i n a b i l i t y   s c i e n c e ;   I n s t i t u t i o n a l   a n a l y s i s ;   R e s e a r c h   c o l l a b o r a t i o n ;   B i b l i o m e t r i c s 	 N E T W O R K S ;   M A N A G E M E N T 	 T h i s   p a p e r   e x a m i n e s   q u a n t i t a t i v e l y   t h e   p a t t e r n s   o f   c o l l a b o r a t i o n   o v e r   g e o g r a p h i c a l   b o u n d a r i e s   i n   t h e   e m e r g i n g   f i e l d   o f   s u s t a i n a b i l i t y   s c i e n c e   b y   e m p i r i c a l l y   a n a l y z i n g   t h e   b i b l i o m e t r i c   d a t a   o f   s c i e n t i f i c   a r t i c l e s .   T h e   r e s u l t s   i n d i c a t e   t h a t   a n   i n c r e a s i n g   n u m b e r   o f   c o u n t r i e s   a r e   e n g a g e d   i n   r e s e a r c h   o n   s u s t a i n a b i l i t y ,   w i t h   t h e   p r o p o r t i o n   o f   a r t i c l e s   p u b l i s h e d   t h r o u g h   i n t e r n a t i o n a l   c o l l a b o r a t i o n   r i s i n g   a s   w e l l .   T h e   n u m b e r   o f   c o u n t r i e s   e n g a g e d   i n   i n t e r n a t i o n a l   c o l l a b o r a t i o n   o n   s u s t a i n a b i l i t y   r e s e a r c h   h a s   b e e n   i n c r e a s i n g ,   a n d   t h e   d i v e r s i t y   o f   c o u n t r i e s   e n g a g e d   i n   r e s e a r c h   c o l l a b o r a t i o n   b e y o n d   n a t i o n a l   b o r d e r s   i s   a l s o   i n c r e a s i n g .   T h e   g e o g r a p h i c a l   p a t t e r n s   o f   c o l l a b o r a t i o n   o n   s u s t a i n a b i l i t y   s h o w   t h a t   r e s e a r c h   c o l l a b o r a t i o n   t e n d s   t o   b e   c o n d u c t e d   b e t w e e n   c o u n t r i e s   w h i c h   a r e   g e o g r a p h i c a l l y   l o c a t e d   c l o s e l y ,   s u g g e s t i n g   t h a t   c o m m u n i c a t i o n   a n d   i n f o r m a t i o n   e x c h a n g e   m i g h t   b e   l i m i t e d   w i t h i n   t h e   r e g i o n a l   c l u s t e r s .   T h e   f o c u s e d   f i e l d s   o f   r e s e a r c h   a c t i v i t i e s   o n   s u s t a i n a b i l i t y   a r e   s i g n i f i c a n t l y   d i f f e r e n t   b e t w e e n   c o u n t r i e s ,   a s   e a c h   c o u n t r y   h a s   i t s   f o c u s e d   f i e l d s   o f   r e s e a r c h   r e l a t e d   t o   s u s t a i n a b i l i t y .   T h e   s p e c i a l i z a t i o n   o f   r e s e a r c h   a c t i v i t i e s   i s   a l s o   o b s e r v e d   i n   i n t e r n a t i o n a l   c o l l a b o r a t i o n .   W h i l e   t h e s e   p a t t e r n s   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n   w i t h i n   r e g i o n a l   c l u s t e r s   f o c u s i n g   o n   s p e c i f i c   f i e l d s   c o u l d   b e   e f f e c t i v e   i n   p r o m o t i n g   t h e   c r e a t i o n ,   t r a n s m i s s i o n ,   a n d   s h a r i n g   o f   k n o w l e d g e   o n   s u s t a i n a b i l i t y   u t i l i z i n g   t h e   a l r e a d y   e x i s t i n g   r e g i o n a l   n e t w o r k s ,   t h e y   c o u l d   p o s e   a   s e r i o u s   o b s t a c l e   t o   c o l l e c t i n g ,   e x c h a n g i n g ,   a n d   i n t e g r a t i n g   d i v e r s e   t y p e s   o f   k n o w l e d g e ,   e s p e c i a l l y   w h e n   i t   i s   n e c e s s a r y   t o   d e a l   w i t h   p r o b l e m s   i n v o l v i n g   l a r g e - s c a l e   c o m p l e x   i n t e r a c t i o n s   w i t h   l o n g - t e r m   i m p l i c a t i o n s ,   s u c h   a s   c l i m a t e   c h a n g e .   I t   w o u l d   b e   o f   c r i t i c a l   i m p o r t a n c e   t o   e s t a b l i s h   i n t e r - r e g i o n a l   l i n k a g e s   b y   d e v i s i n g   a p p r o p r i a t e   i n s t i t u t i o n a l   a r r a n g e m e n t s   f o r   g l o b a l   r e s e a r c h   c o l l a b o r a t i o n   o n   s u s t a i n a b i l i t y   s c i e n c e . 	 [ Y a r i m e ,   M a s a r u ]   U n i v   T o k y o ,   G r a d   P r o g r a m   S u s t a i n a b i l   S c i ,   G r a d   S c h   F r o n t i e r   S c i ,   C h i b a   2 7 7 8 5 6 3 ,   J a p a n ;   [ T a k e d a ,   Y o s h i y u k i ]   C h i b a   I n s t   T e c h n o l ,   D e p t   P r o j e c t   M a n a g e m e n t ,   F a c   S o c i a l   S y s t   S c i ,   C h i b a   2 7 5 0 0 1 6 ,   J a p a n ;   [ K a j i k a w a ,   Y u y a ]   U n i v   T o k y o ,   I n s t   E n g n   I n n o v a t ,   S c h   E n g n ,   B u n k y o   K u ,   T o k y o   1 1 3 8 6 5 6 ,   J a p a n 	 Y a r i m e ,   M   ( r e p r i n t   a u t h o r ) ,   U n i v   T o k y o ,   G r a d   P r o g r a m   S u s t a i n a b i l   S c i ,   G r a d   S c h   F r o n t i e r   S c i ,   K a s h i w a n o h a   5 - 1 - 5 ,   C h i b a   2 7 7 8 5 6 3 ,   J a p a n . 	 y a r i m e @ k . u - t o k y o . a c . j p 	 K a j i k a w a ,   Y u y a / C - 1 9 9 6 - 2 0 1 5 ;   Y a r i m e ,   M a s a r u / E - 7 6 2 8 - 2 0 1 0 	 K a j i k a w a ,   Y u y a / 0 0 0 0 - 0 0 0 3 - 3 5 7 7 - 5 1 6 7 ;   Y a r i m e ,   M a s a r u / 0 0 0 0 - 0 0 0 1 - 8 0 4 8 - 7 3 5 4 	 M i n i s t r y   o f   E d u c a t i o n ,   C u l t u r e ,   S p o r t s ,   S c i e n c e ,   a n d   T e c h n o l o g y   ( M E X T )   o f   J a p a n ;   U n i v e r s i t y   o f   T o k y o 	 W e   a r e   v e r y   g r a t e f u l   t o   t h e   a n o n y m o u s   r e f e r e e s   f o r   t h e i r   i n s i g h t f u l   c o m m e n t s   a n d   s u g g e s t i o n s ,   w h i c h   i m p r o v e d   g r e a t l y   o u r   m a n u s c r i p t .   T h i s   w o r k   w a s   s u p p o r t e d   b y   t h e   M i n i s t r y   o f   E d u c a t i o n ,   C u l t u r e ,   S p o r t s ,   S c i e n c e ,   a n d   T e c h n o l o g y   ( M E X T )   o f   J a p a n   t h r o u g h   S p e c i a l   C o o r d i n a t i o n   F u n d s   f o r   P r o m o t i n g   S c i e n c e   a n d   T e c h n o l o g y   ( P r o j e c t   n a m e :   I R 3 S )   a n d   S h o w a   S h e l l   S e k i y u   K . K . ,   a s   a   p a r t   o f   t h e   r e s e a r c h   p r o j e c t   " K n o w l e d g e   S t r u c t u r i z a t i o n   f o r   S u s t a i n a b i l i t y   S c i e n c e ' '   u n d e r t a k e n   b y   t h e   U n i v e r s i t y   o f   T o k y o . 	 A h u j a   G ,   2 0 0 0 ,   A D M I N   S C I   Q U A R T ,   V 4 5 ,   P 4 2 5 ,   D O I   1 0 . 2 3 0 7 / 2 6 6 7 1 0 5 ;   B A B A   Y ,   2 0 0 9 ,   I N T   J   I N N O V   I N   P R E S S ;   C H I K Y O   T ,   2 0 0 6 ,   K A G A K U   G I J U T S U   D O K O ,   P 2 0 ;   C l a r k   W C ,   2 0 0 3 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 0 ,   P 8 0 5 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 2 3 1 3 3 3 1 0 0 ;   D a v i d   P a u l ,   2 0 0 3 ,   I   I N F R A S T R U C T U R E S   E ;   E m m o t t   S . ,   2 0 0 6 ,   2 0 2 0   S C I ;   F o r a y   D ,   2 0 0 4 ,   E C   K N O W L E D G E ;   F R E E M A N   C ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 4 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 7 2 - X ;   F R U C H T E R M A N   T M J ,   1 9 9 1 ,   S O F T W A R E   P R A C T   E X P E R ,   V 2 1 ,   P 1 1 2 9 ,   D O I   1 0 . 1 0 0 2 / s p e . 4 3 8 0 2 1 1 1 0 2 ;   H a b e r l i   R . ,   2 0 0 1 ,   T R A N S D I S C I P L I N A R I T Y ;   K a j i k a w a   Y ,   2 0 0 7 ,   S U S T A I N   S C I ,   V 2 ,   P 2 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 6 2 5 - 0 0 7 - 0 0 2 7 - 8 ;   K a s e m i r   B ,   2 0 0 3 ,   P U B L I C   P A R T I C I P A T I O N ;   K a t e s   R W ,   2 0 0 1 ,   S C I E N C E ,   V 2 9 2 ,   P 6 4 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 5 9 3 8 6 ;   K o m i y a m a   H ,   2 0 0 6 ,   S U S T A I N   S C I ,   V 1 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 6 2 5 - 0 0 6 - 0 0 0 7 - 4 ;   M A T S U D A   H ,   2 0 0 6 ,   G E R M   J A P   E   S C I   W O R K S ;   M a u r e r   S M ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 4 . 0 0 8 ;   * N A T   S C I   F D N ,   2 0 0 3 ,   R E V   S C I   E N G   C Y B ;   P a h l - W o s t l   C ,   2 0 0 8 ,   E C O L   S O C ,   V 1 3 ;   P o w e l l   W . ,   2 0 0 5 ,   O X F O R D   H D B   I N N O V A T I O ;   S h r u m   W . ,   2 0 0 7 ,   S T R U C T U R E S   S C I   C O L L A ;   S t u a r t   T E ,   1 9 9 8 ,   A D M I N   S C I   Q U A R T ,   V 4 3 ,   P 6 6 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 6 7 9 ;   T a b a r a   J D ,   2 0 0 7 ,   E C O L   S O C ,   V 1 2 ;   U z z i   B ,   1 9 9 7 ,   A D M I N   S C I   Q U A R T ,   V 4 2 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 8 0 8 ;   Y A R I M E   M ,   2 0 0 9 ,   D R U I D   S O C   S U M M   C   C O P ;   Y a r i m e   M ,   2 0 0 9 ,   J   C L E A N   P R O D ,   V 1 7 ,   P 1 2 8 1 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 9 . 0 3 . 0 1 0 	 2 5 	 2 3 	 2 4 	 4 	 3 2 	 S P R I N G E R   T O K Y O 	 T O K Y O 	 1 - 1 1 - 1 1   K U D A N - K I T A ,   C H I Y O D A - K U ,   T O K Y O ,   1 0 2 - 0 0 7 3 ,   J A P A N 	 1 8 6 2 - 4 0 6 5 	 	 	 S U S T A I N   S C I 	 S u s t a i n .   S c i . 	 J A N 	 2 0 1 0 	 5 	 1 	 	 	 	 	 1 1 5 	 1 2 5 	 	 1 0 . 1 0 0 7 / s 1 1 6 2 5 - 0 0 9 - 0 0 9 0 - 4 	 	 1 1 	 G R E E N   &   S U S T A I N A B L E   S C I E N C E   &   T E C H N O L O G Y ;   E n v i r o n m e n t a l   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y 	 6 1 6 R S 	 W O S : 0 0 0 2 7 9 2 2 7 1 0 0 0 1 2 	 	 
 
 J 	 G a r g ,   A X ;   I a n s a v i c h u s ,   A V ;   K a s t n e r ,   M ;   W a l t e r s ,   L A ;   W i l c z y n s k i ,   N ;   M c K i b b o n ,   K A ;   Y a n g ,   R C ;   R e h m a n ,   F ;   H a y n e s ,   R B 	 	 	 	 G a r g ,   A .   X . ;   I a n s a v i c h u s ,   A .   V . ;   K a s t n e r ,   M . ;   W a l t e r s ,   L .   A . ;   W i l c z y n s k i ,   N . ;   M c K i b b o n ,   K .   A . ;   Y a n g ,   R .   C . ;   R e h m a n ,   F . ;   H a y n e s ,   R .   B . 	 	 	 L o s t   i n   p u b l i c a t i o n :   H a l f   o f   a l l   r e n a l   p r a c t i c e   e v i d e n c e   i s   p u b l i s h e d   i n   n o n - r e n a l   j o u r n a l s 	 K I D N E Y   I N T E R N A T I O N A L 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 e d u c a t i o n ;   m e d i c a l ;   k i d n e y   d i s e a s e s ;   t r a n s p l a n t a t i o n ;   r e n a l ;   n e p h r o l o g y ;   b i b l i o m e t r i c s ;   p e r i o d i c a l s 	 R A N D O M I Z E D   C O N T R O L L E D - T R I A L S ;   C O N V E R T I N G - E N Z Y M E - I N H I B I T O R S ;   C O N T R A S T - I N D U C E D   N E P H R O P A T H Y ;   C H R O N I C   K I D N E Y - D I S E A S E ;   H E M O L Y T I C - U R E M I C   S Y N D R O M E ;   L O W - D O S E   D O P A M I N E ;   I D I O P A T H I C   M E M B R A N O U S   N E P H R O P A T H Y ;   R A D I O C O N T R A S T - I N D U C E D   N E P H R O P A T H Y ;   D I E T A R Y - P R O T E I N   R E S T R I C T I O N ;   L I V E - D O N O R   N E P H R E C T O M Y 	 P h y s i c i a n s   o f t e n   s c a n   a   s e l e c t   n u m b e r   o f   j o u r n a l s   t o   k e e p   u p   t o   d a t e   w i t h   p r a c t i c e   e v i d e n c e   f o r   p a t i e n t s   w i t h   k i d n e y   c o n d i t i o n s .   T h i s   r a i s e s   t h e   q u e s t i o n   o f   w h e r e   r e l e v a n t   s t u d i e s   a r e   p u b l i s h e d .   W e   p e r f o r m e d   a   b i b l i o m e t r i c   a n a l y s i s   u s i n g   1 9 5   r e n a l   s y s t e m a t i c   r e v i e w s .   E a c h   r e v i e w   u s e d   a   c o m p r e h e n s i v e   m e t h o d   t o   i d e n t i f y   a l l   p r i m a r y   s t u d i e s   f o r   a   f o c u s e d   c l i n i c a l   q u e s t i o n   r e l e v a n t   t o   p a t i e n t   c a r e .   W e   c o m p i l e d   a l l   t h e   p r i m a r y   s t u d i e s   i n c l u d e d   i n   t h e s e   r e v i e w s ,   a n d   c o n s i d e r e d   w h e r e   e a c h   s t u d y   w a s   p u b l i s h e d .   O f   t h e   2 7 7 9   s t u d i e s ,   1 3 5 1   ( 4 9 % )   w e r e   p u b l i s h e d   i n   t h e   t o p   2 0   j o u r n a l s .   P r e d i c t a b l y ,   t h i s   l i s t   i n c l u d e d   T r a n s p l a n t a t i o n   P r o c e e d i n g s   ( 5 . 9 %   o f   s t u d i e s ) ,   K i d n e y   I n t e r n a t i o n a l   ( 5 . 3 % ) ,   A m e r i c a n   J o u r n a l   o f   K i d n e y   D i s e a s e s   ( 4 . 7 % ) ,   N e p h r o l o g y   D i a l y s i s   T r a n s p l a n t a t i o n   ( 4 . 3 % ) ,   T r a n s p l a n t a t i o n   ( 4 . 2 % ) ,   a n d   J o u r n a l   o f   t h e   A m e r i c a n   S o c i e t y   o f   N e p h r o l o g y   ( 2 . 4 % ) .   T e n   n o n - r e n a l   j o u r n a l s   w e r e   a l s o   o n   t h i s   l i s t ,   i n c l u d i n g   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e   ( 2 . 4 % ) ,   L a n c e t   ( 2 . 3 % ) ,   a n d   D i a b e t e s   C a r e   ( 2 . 2 % ) .   T h e   r e m a i n i n g   1 4 2 8   ( 5 1 % )   s t u d i e s   w e r e   p u b l i s h e d   a c r o s s   o t h e r   4 4 6   j o u r n a l s .   W h e n   t h e   d i s c i p l i n e s   o f   a l l   j o u r n a l s   w e r e   c o n s i d e r e d ,   5 9   w e r e   c l a s s i f i e d   a s   r e n a l   o r   t r a n s p l a n t   j o u r n a l s   ( 4 2 %   o f   a r t i c l e s ) .   O t h e r   s p e c i a l t i e s   i n c l u d e d   g e n e r a l   a n d   i n t e r n a l   m e d i c i n e   ( 1 6 % ) ,   e n d o c r i n o l o g y   ( d i a b e t e s )   a n d   m e t a b o l i s m   ( 6 . 5 % ) ,   s u r g e r y   ( 6 . 2 % ) ,   c a r d i o v a s c u l a r   d i s e a s e s   ( 6 . 1 % ) ,   p e d i a t r i c s   ( 4 . 3 % ) ,   a n d   r a d i o l o g y   ( 3 . 3 % ) .   A b o u t   h a l f   o f   a l l   r e n a l   p r a c t i c e   e v i d e n c e   i s   p u b l i s h e d   i n   n o n - r e n a l   j o u r n a l s .   B r o w s i n g   t h e   t o p   j o u r n a l s   i s   i m p o r t a n t .   H o w e v e r ,   r e l e v a n t   s t u d i e s   a r e   a l s o   s c a t t e r e d   a c r o s s   a   l a r g e   r a n g e   o f   j o u r n a l s   t h a t   m a y   n o t   b e   r o u t i n e l y   s c a n n e d   b y   b u s y   p h y s i c i a n s ,   a n d   k e e p i n g   u p   w i t h   t h i s   l i t e r a t u r e   r e q u i r e s   o t h e r   c o n t i n u i n g   e d u c a t i o n   s t r a t e g i e s . 	 U n i v   W e s t e r n   O n t a r i o ,   D i v   N e p h r o l ,   L o n d o n ,   O N ,   C a n a d a ;   U n i v   W e s t e r n   O n t a r i o ,   D e p t   E p i d e m i o l   &   B i o s t a t ,   L o n d o n ,   O N ,   C a n a d a ;   M c M a s t e r   U n i v ,   D e p t   C l i n   E p i d e m i o l   &   B i o s t a t ,   H a m i l t o n ,   O N ,   C a n a d a 	 G a r g ,   A X   ( r e p r i n t   a u t h o r ) ,   L o n d o n   H l t h   S c i   C t r ,   L o n d o n   K i d n e y   C l i n   R e s   U n i t ,   R o o m   E L L - 1 0 1 , W e s t m i n s t e r   T o w e r , 8 0 0   C o m m i s s i o n e r s ,   L o n d o n ,   O N   N 6 A   4 G 5 ,   C a n a d a . 	 a m i t . g a r g @ l h s c . o n . c a 	 	 H a y n e s ,   R o b e r t   B r i a n / 0 0 0 0 - 0 0 0 2 - 1 4 5 3 - 3 1 9 6 	 	 	 A d u   D ,   2 0 0 3 ,   B R I T   M E D   J ,   V 3 2 6 ,   P 7 8 9 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 6 . 7 3 9 3 . 7 8 9 ;   A l b e r s   M ,   2 0 0 1 ,   E U R   J   V A S C   E N D O V A S C ,   V 2 2 ,   P 2 9 4 ,   D O I   1 0 . 1 0 5 3 / e j v s . 2 0 0 1 . 1 4 6 9 ;   A l o n s o   A ,   2 0 0 4 ,   A M   J   K I D N E Y   D I S ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 3 . 0 9 . 0 0 9 ;   A L O N S O   A ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   A l p e r   B S ,   2 0 0 4 ,   J   M E D   L I B R   A S S O C ,   V 9 2 ,   P 4 2 9 ;   B a g s h a w   S M ,   2 0 0 4 ,   B M C   M E D ,   V 2 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 1 - 7 0 1 5 - 2 - 3 8 ;   B a g s h a w   S M ,   2 0 0 5 ,   A R C H   I N T E R N   M E D ,   V 1 6 5 ,   P 1 0 8 7 ,   D O I   1 0 . 1 0 0 1 / a r c h i n t e . 1 6 5 . 1 0 . 1 0 8 7 ;   B a k r i s   G L ,   2 0 0 4 ,   K I D N E Y   I N T ,   V 6 5 ,   P 1 9 9 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 4 . 0 0 6 2 0 . x ;   B e s a r a b   A ,   2 0 0 2 ,   A M   J   K I D N E Y   D I S ,   V 4 0 ,   P 4 3 9 ,   D O I   1 0 . 1 0 5 3 / a j k d . 2 0 0 2 . 3 4 8 8 1 ;   B i r c k   R ,   2 0 0 3 ,   L A N C E T ,   V 3 6 2 ,   P 5 9 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 4 1 8 9 - X ;   B i r k e n   C S ,   1 9 9 9 ,   P E D I A T R I C S ,   V 1 0 3 ,   P 9 4 1 ,   D O I   1 0 . 1 5 4 2 / p e d s . 1 0 3 . 5 . 9 4 1 ;   * B M J   P U B L   G R O U P   M C ,   2 0 0 4 ,   B M J   E V I D E N C E   U P D A T E S ;   B o w n   M J ,   2 0 0 5 ,   E U R   J   V A S C   E N D O V A S C ,   V 3 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . e j v s . 2 0 0 5 . 0 2 . 0 4 8 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a d f o r d   S C ,   1 9 5 0 ,   D O C U M E N T A T I O N ;   B U C K L E Y   S R ,   2 0 0 3 ,   J   O R T H O D ,   V 3 0 ,   P 7 2 ;   B u r k e   D T ,   2 0 0 4 ,   A M   J   P H Y S   M E D   R E H A B ,   V 8 3 ,   P 5 5 1 ,   D O I   1 0 . 1 0 9 7 / 0 1 . P H M . 0 0 0 0 1 3 0 0 3 5 . 5 4 9 3 2 . B 9 ;   C a s a s   J P ,   2 0 0 5 ,   L A N C E T ,   V 3 6 6 ,   P 2 0 2 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 7 8 1 4 - 2 ;   C h a t u r v e d i   N ,   2 0 0 1 ,   A N N   I N T E R N   M E D ,   V 1 3 4 ,   P 3 7 0 ;   C h e e m a   B S B ,   2 0 0 5 ,   A M   J   N E P H R O L ,   V 2 5 ,   P 3 5 2 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 8 7 1 8 4 ;   C h o i   H K ,   2 0 0 1 ,   J   R H E U M A T O L ,   V 2 8 ,   P 1 5 8 4 ;   C l a s e   C M ,   2 0 0 1 ,   J   T H R O M B   T H R O M B O L Y S ,   V 1 1 ,   P 1 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 1 2 7 2 6 3 2 2 8 6 ;   C O D Y   J ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 3 ;   C O D Y   J ,   2 0 0 2 ,   C O C H R A N E   D B   S Y S T   R E V ,   V 3 ,   D O I   U N S P   C D 0 0 3 2 6 6 ;   D A L Y   C ,   2 0 0 1 ,   C O C H R A N E   D B   S Y S T   R E V ,   V 2 ,   P 3 0 7 8 ;   D a l y   C D ,   2 0 0 1 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 6 ,   P 3 4 1 ,   D O I   1 0 . 1 0 9 3 / n d t / 1 6 . 2 . 3 4 1 ;   D a s g u p t a   P ,   2 0 0 4 ,   I N T   J   C L I N   P R A C T ,   V 5 8 ,   P 4 7 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 8 - 5 0 3 1 . 2 0 0 4 . 0 0 0 8 2 . x ;   D A V I D O F F   F ,   1 9 9 5 ,   B R I T   M E D   J ,   V 3 1 0 ,   P 1 0 8 5 ;   d e   G r o o t   K ,   2 0 0 1 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 6 ,   P 2 0 1 8 ;   D e v e r e a u x   P J ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 8 ,   P 2 4 4 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 8 . 1 9 . 2 4 4 9 ;   D i l l o n   J J ,   1 9 9 7 ,   J   A M   S O C   N E P H R O L ,   V 8 ,   P 1 7 3 9 ;   D o u l t o n   T W R ,   2 0 0 5 ,   H Y P E R T E N S I O N ,   V 4 5 ,   P 8 8 0 ,   D O I   1 0 . 1 1 6 1 / 0 1 . H Y P . 0 0 0 0 1 6 1 8 8 0 . 5 9 9 6 3 . d a ;   D u o n g   M H ,   2 0 0 5 ,   C A T H E T E R   C A R D I O   I N T E ,   V 6 4 ,   P 4 7 1 ,   D O I   1 0 . 1 0 0 2 / c c d . 2 0 3 4 2 ;   D U R K A N   A ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   D u r k a n   A M ,   2 0 0 1 ,   K I D N E Y   I N T ,   V 5 9 ,   P 1 9 1 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 1 . 0 5 9 0 0 5 1 9 1 9 . x ;   E w a l d   B e n ,   2 0 0 4 ,   A u s t   F a m   P h y s i c i a n ,   V 3 3 ,   P 5 6 5 ;   F a b r i z i   F ,   2 0 0 5 ,   A M   J   T R A N S P L A N T ,   V 5 ,   P 2 4 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 6 1 4 3 . 2 0 0 5 . 0 1 0 4 0 . x ;   F a b r i z i   F ,   2 0 0 5 ,   A M   J   T R A N S P L A N T ,   V 5 ,   P 1 4 5 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 6 1 4 3 . 2 0 0 5 . 0 0 8 6 4 ;   F a b r i z i   F ,   2 0 0 4 ,   A L I M E N T   P H A R M   T H E R A P ,   V 2 0 ,   P 1 0 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 3 6 . 2 0 0 4 . 0 2 2 6 4 . x ;   F a b r i z i   F ,   2 0 0 4 ,   T R A N S P L A N T A T I O N ,   V 7 7 ,   P 8 5 9 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T P . 0 0 0 0 1 1 6 4 4 8 . 9 7 8 4 1 . 6 D ;   F a b r i z i   F ,   2 0 0 3 ,   A L I M E N T   P H A R M   T H E R A P ,   V 1 8 ,   P 1 0 7 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 0 3 6 . 2 0 0 3 . 0 1 7 8 0 . x ;   F a b r i z i   F ,   2 0 0 4 ,   A L I M E N T   P H A R M   T H E R A P ,   V 2 0 ,   P 1 2 7 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 3 6 . 2 0 0 4 . 0 2 2 9 0 . x ;   F I D I A N ,   2 0 0 2 ,   J   I N F E C T   D I S   S 1 ,   V 1 8 6 ,   p S 1 1 0 ;   F i l l e r   G ,   2 0 0 3 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 8 ,   P 7 5 ,   D O I   1 0 . 1 0 9 3 / n d t / g f g 1 0 5 9 ;   F l a n c   R S ,   2 0 0 4 ,   A M   J   K I D N E Y   D I S ,   V 4 3 ,   P 1 9 7 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 3 . 1 0 . 0 1 2 ;   F L A N C   R S ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 1 ;   F o n e s   C   S ,   1 9 9 8 ,   S i n g a p o r e   M e d   J ,   V 3 9 ,   P 5 3 7 ;   F o u q u e   D ,   2 0 0 0 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 5 ,   P 1 9 8 6 ,   D O I   1 0 . 1 0 9 3 / n d t / 1 5 . 1 2 . 1 9 8 6 ;   F O U Q U E   D ,   2 0 0 1 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   F o w l i e   P W ,   2 0 0 3 ,   A R C H   D I S   C H I L D ,   V 8 8 ,   p F 4 6 4 ,   D O I   1 0 . 1 1 3 6 / f n . 8 8 . 6 . F 4 6 4 ;   F r i e d   L F ,   2 0 0 1 ,   K I D N E Y   I N T ,   V 5 9 ,   P 2 6 0 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 1 . 0 0 4 8 7 . x ;   F r i e d r i c h   J O ,   2 0 0 5 ,   A N N   I N T E R N   M E D ,   V 1 4 2 ,   P 5 1 0 ;   G a b a r d i   S ,   2 0 0 3 ,   A N N   P H A R M A C O T H E R ,   V 3 7 ,   P 1 6 8 5 ,   D O I   1 0 . 1 3 4 5 / a p h . 1 D 0 6 3 ;   G a r g   A X ,   2 0 0 3 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 0 ,   P 1 3 6 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 0 . 1 0 . 1 3 6 0 ;   G a r o f e a n u   C G ,   2 0 0 5 ,   A M   J   K I D N E Y   D I S ,   V 4 5 ,   P 6 2 6 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 5 . 0 1 . 0 0 8 ;   G i a t r a s   I ,   1 9 9 7 ,   A N N   I N T E R N   M E D ,   V 1 2 7 ,   P 3 3 7 ;   G i e t e l i n g   E W ,   2 0 0 3 ,   J   N E U R O L ,   V 2 5 0 ,   P 4 1 8 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 1 5 - 0 0 3 - 0 9 9 7 - 0 ;   G i l l e s p i e   R S ,   2 0 0 4 ,   P E D I A T R   N E P H R O L ,   V 1 9 ,   P 6 6 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 6 7 - 0 0 4 - 1 4 2 1 - 4 ;   G i r o i s   S B ,   2 0 0 5 ,   E U R   J   C L I N   M I C R O B I O L ,   V 2 4 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 9 6 - 0 0 5 - 1 2 8 1 - 2 ;   G L I C K   N ,   2 0 0 6 ,   A M   J   T R A N S P L A N T ,   V 8 ,   P 5 5 2 ;   G o l d w a s s e r   P ,   2 0 0 4 ,   A M   J   K I D N E Y   D I S ,   V 4 4 ,   P 9 4 1 ,   D O I   1 0 . 1 0 5 3 / j . q j k d . 2 0 0 4 . 0 8 . 0 1 9 ;   G o l d w a s s e r   P ,   2 0 0 2 ,   K I D N E Y   I N T ,   V 6 2 ,   P 2 7 6 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 2 . 0 0 4 1 5 . x ;   G o r d o n   I ,   2 0 0 3 ,   J   A M   S O C   N E P H R O L ,   V 1 4 ,   P 7 3 9 ,   D O I   1 0 . 1 0 9 7 / 0 1 . A S N . 0 0 0 0 0 5 3 4 1 6 . 9 3 5 1 8 . 6 3 ;   G r e e n h a l g h   T ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 1 ,   P 1 0 6 4 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 6 3 6 . 5 9 3 4 6 1 . 6 8 ;   G R E G O I R E   G ,   1 9 9 5 ,   J   C L I N   E P I D E M I O L ,   V 4 8 ,   P 1 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 8 9 5 - 4 3 5 6 ( 9 4 ) 0 0 0 9 8 - B ;   H a b a s h y   D ,   2 0 0 3 ,   P E D I A T R   N E P H R O L ,   V 1 8 ,   P 9 0 6 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 6 7 - 0 0 3 - 1 2 0 7 - 0 ;   H A B A S H Y   D ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   H a m i l t o n   R A ,   2 0 0 3 ,   P H A R M A C O T H E R A P Y ,   V 2 3 ,   P 9 0 9 ,   D O I   1 0 . 1 5 9 2 / p h c o . 2 3 . 7 . 9 0 9 . 3 2 7 2 6 ;   H a n d s c h i n   A E ,   2 0 0 3 ,   B R I T   J   S U R G ,   V 9 0 ,   P 1 3 2 3 ,   D O I   1 0 . 1 0 0 2 / b j s . 4 3 4 0 ;   H a y n e s   R B ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 1 8 0 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 5 . 1 8 0 1 ;   H a y n e s   R B ,   2 0 0 2 ,   B R I T   M E D   J ,   V 3 2 4 ,   P 1 3 5 0 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 4 . 7 3 5 0 . 1 3 5 0 ;   H e i s e l   O ,   2 0 0 4 ,   A M   J   T R A N S P L A N T ,   V 4 ,   P 5 8 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 6 0 0 - 6 1 4 3 . 2 0 0 3 . 0 0 3 7 2 . x ;   H e l m e r   D ,   2 0 0 1 ,   B   M E D   L I B R   A S S O C ,   V 8 9 ,   P 3 4 6 ;   H i n d   D ,   2 0 0 3 ,   B R I T   M E D   J ,   V 3 2 7 ,   P 3 6 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 7 . 7 4 1 1 . 3 6 1 ;   H o d s o n   E M ,   2 0 0 5 ,   L A N C E T ,   V 3 6 5 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 6 5 5 3 - 1 ;   H O D S O N   E M ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 1 ;   H O D S O N   E M ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   H o l d g a t e   A ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 8 ,   P 1 4 0 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 1 1 9 . 5 8 1 9 9 1 . 5 5 ;   H o l l o w e l l   J G ,   2 0 0 2 ,   J   U R O L O G Y ,   V 1 6 8 ,   P 2 1 3 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 2 - 5 3 4 7 ( 0 5 ) 6 4 3 3 7 - 6 ;   H R I C I K   D E ,   1 9 9 3 ,   J   A M   S O C   N E P H R O L ,   V 4 ,   P 1 3 0 0 ;   H s u   C Y ,   2 0 0 1 ,   J   H U M   H Y P E R T E N S ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 3 8 / s j . j h h . 1 0 0 1 1 2 8 ;   H u b e r   T S ,   2 0 0 4 ,   S E M I N   D I A L Y S I S ,   V 1 7 ,   P 2 1 7 ,   D O I   1 0 . 1 1 1 1 / j . 0 8 9 4 - 0 9 5 9 . 2 0 0 4 . 1 7 3 0 9 . x ;   H u b e r   T S ,   2 0 0 3 ,   J   V A S C   S U R G ,   V 3 8 ,   P 1 0 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 1 - 5 2 1 4 ( 0 3 ) 0 0 4 2 6 - 9 ;   H u r o t   J M ,   2 0 0 2 ,   J   A M   S O C   N E P H R O L ,   V 1 3 ;   I M P E R I A L E   T F ,   1 9 9 5 ,   J   A M   S O C   N E P H R O L ,   V 5 ,   P 1 5 5 3 ;   I s e n b a r g e r   D W ,   2 0 0 3 ,   A M   J   C A R D I O L ,   V 9 2 ,   P 1 4 5 4 ,   D O I   1 0 . 1 0 1 6 / j . a m j c a r d . 2 0 0 3 . 0 8 . 0 5 9 ;   I v e s   N J ,   2 0 0 3 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 8 ,   P 2 9 8 ,   D O I   1 0 . 1 0 9 3 / n d t / 1 8 . 2 . 2 9 8 ;   I x   J H ,   2 0 0 4 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 9 ,   P 2 7 4 7 ,   D O I   1 0 . 1 0 9 3 / n d t / g f h 4 6 8 ;   J a f a r   T H ,   2 0 0 5 ,   K I D N E Y   I N T ,   V 6 7 ,   P 2 6 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 5 . 0 0 0 7 7 . x ;   J a f a r   T H ,   2 0 0 3 ,   A N N   I N T E R N   M E D ,   V 1 3 9 ,   P 2 4 4 ;   J a f a r   T H ,   2 0 0 1 ,   K I D N E Y   I N T ,   V 6 0 ,   P 1 1 3 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 1 . 0 6 0 0 0 3 1 1 3 1 . x ;   J a f a r   T H ,   2 0 0 1 ,   A N N   I N T E R N   M E D ,   V 1 3 5 ,   P 7 3 ;   J a y a l a t h   R W ,   2 0 0 5 ,   E U R   J   V A S C   E N D O V A S C ,   V 3 0 ,   P 4 7 6 ,   D O I   1 0 . 1 0 1 6 / j . e j v s . 2 0 0 5 . 0 4 . 0 3 0 ;   J o n e s   M ,   2 0 0 4 ,   K I D N E Y   I N T ,   V 6 5 ,   P 7 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 4 . 0 0 4 5 0 . x ;   J u n i   P ,   2 0 0 2 ,   I N T   J   E P I D E M I O L ,   V 3 1 ,   P 1 1 5 ,   D O I   1 0 . 1 0 9 3 / i j e / 3 1 . 1 . 1 1 5 ;   K a n d a r p a   K ,   2 0 0 1 ,   J   V A S C   I N T E R V   R A D I O L ,   V 1 2 ,   P 6 8 3 ,   D O I   1 0 . 1 0 1 6 / S 1 0 5 1 - 0 4 4 3 ( 0 7 ) 6 1 4 3 8 - 9 ;   K a r a s s a   F B ,   2 0 0 2 ,   A R T H R I T I S   R H E U M ,   V 4 6 ,   P 1 5 6 3 ,   D O I   1 0 . 1 0 0 2 / a r t . 1 0 3 0 6 ;   K a r a s s a   F B ,   2 0 0 3 ,   K I D N E Y   I N T ,   V 6 3 ,   P 1 4 7 5 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 3 . 0 0 8 7 3 . x ;   K a s i s k e   B L ,   1 9 9 8 ,   A M   J   K I D N E Y   D I S ,   V 3 1 ,   P 9 5 4 ,   D O I   1 0 . 1 0 5 3 / a j k d . 1 9 9 8 . v 3 1 . p m 9 6 3 1 8 3 9 ;   K a s i s k e   B L ,   2 0 0 0 ,   J   A M   S O C   N E P H R O L ,   V 1 1 ,   P 1 9 1 0 ;   K e l l u m   J A ,   2 0 0 2 ,   K I D N E Y   I N T ,   V 6 2 ,   P 1 8 5 5 ;   K e l l u m   J A ,   2 0 0 1 ,   C R I T   C A R E   M E D ,   V 2 9 ,   P 1 5 2 6 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 3 2 4 6 - 2 0 0 1 0 8 0 0 0 - 0 0 0 0 5 ;   K i m   M J ,   2 0 0 4 ,   J   C L I N   P H A R M A C O L ,   V 4 4 ,   P 6 9 6 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 1 2 7 0 0 0 4 2 6 6 6 3 3 ;   K n o l l   G A ,   1 9 9 9 ,   B R I T   M E D   J ,   V 3 1 8 ,   P 1 1 0 4 ;   K s h i r s a g a r   A V ,   2 0 0 4 ,   J   A M   S O C   N E P H R O L ,   V 1 5 ,   P 7 6 1 ,   D O I   1 0 . 1 0 9 7 / 0 1 . A S N . 0 0 0 0 1 1 6 2 4 1 . 4 7 6 7 8 . 4 9 ;   K u n z   R ,   1 9 9 7 ,   T R A N S P L A N T A T I O N ,   V 6 3 ,   P 3 8 6 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 7 8 9 0 - 1 9 9 7 0 2 1 5 0 - 0 0 0 1 0 ;   L a n t i n g   L C ,   2 0 0 5 ,   D I A B E T E S   C A R E ,   V 2 8 ,   P 2 2 8 0 ,   D O I   1 0 . 2 3 3 7 / d i a c a r e . 2 8 . 9 . 2 2 8 0 ;   L E E   A ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   L e e r t o u w e r   T C ,   2 0 0 0 ,   R A D I O L O G Y ,   V 2 1 6 ,   P 7 8 ;   L e n t i n e   K L ,   2 0 0 4 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 9 ,   P 2 3 7 8 ,   D O I   1 0 . 1 0 9 3 / N D T / g f h 3 8 5 ;   L i m   W ,   2 0 0 4 ,   J   A M   S O C   N E P H R O L ,   V 1 5 ,   P 3 1 9 2 ,   D O I   1 0 . 1 0 9 7 / 0 1 . A S N . 0 0 0 0 1 4 5 0 1 4 . 3 5 ;   L i n d e n f e l d   J ,   2 0 0 5 ,   A M   H E A R T   J ,   V 1 4 9 ,   P 3 9 1 ,   D O I   1 0 . 1 0 1 6 / j . a h j . 2 0 0 4 . 0 8 . 0 3 9 ;   L i u   R ,   2 0 0 5 ,   J   G E N   I N T E R N   M E D ,   V 2 0 ,   P 1 9 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 5 - 1 4 9 7 . 2 0 0 5 . 3 0 3 2 3 . x ;   L o n g   C L ,   2 0 0 4 ,   A N N   P H A R M A C O T H E R ,   V 3 8 ,   P 8 5 3 ,   D O I   1 0 . 1 3 4 5 / a p h . 1 D 3 9 9 ;   M a c L e o d   A ,   1 9 9 8 ,   H e a l t h   T e c h n o l   A s s e s s ,   V 2 ,   P 1 ;   M a c l e o d   A D ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 3 ;   M A H O N E Y   B A ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   M a n g u s   R S ,   2 0 0 4 ,   A M   J   T R A N S P L A N T ,   V 4 ,   P 1 8 8 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 6 1 4 3 . 2 0 0 4 . 0 0 5 9 5 . x ;   M a n l e y   H J ,   2 0 0 5 ,   A M   J   K I D N E Y   D I S ,   V 4 6 ,   P 6 6 9 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 5 . 0 7 . 0 0 1 ;   M a n l u c u   J ,   2 0 0 5 ,   N E P H R O L   D I A L   T R A N S P L ,   V 2 0 ,   P 2 3 7 6 ,   D O I   1 0 . 1 0 9 3 / n d t / g f i 0 2 5 ;   M a n n s   B ,   2 0 0 4 ,   K I D N E Y   I N T ,   V 6 6 ,   P 1 2 3 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 4 . 0 0 8 7 7 . x ;   M a n n s   B J ,   2 0 0 2 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 8 ,   P 8 1 ;   M a r i k   P E ,   2 0 0 2 ,   I N T E N S   C A R E   M E D ,   V 2 8 ,   P 8 7 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 2 - 1 3 4 6 - y ;   M c C u l l o u g h   P A ,   2 0 0 4 ,   J   N E P H R O L ,   V 1 7 ,   P 2 0 5 ;   M c M a s t e r   P a d d y ,   2 0 0 3 ,   P e d i a t r   C r i t   C a r e   M e d ,   V 4 ,   P 2 ,   D O I   1 0 . 1 0 9 7 / 0 0 1 3 0 4 7 8 - 2 0 0 3 0 1 0 0 0 - 0 0 0 0 2 ;   M i s r a   D ,   2 0 0 4 ,   C L I N   C A R D I O L ,   V 2 7 ,   P 6 0 7 ,   D O I   1 0 . 1 0 0 2 / c l c . 4 9 6 0 2 7 1 1 0 6 ;   M o w a t t   G ,   2 0 0 3 ,   H e a l t h   T e c h n o l   A s s e s s ,   V 7 ,   P 1 ;   M o w a t t   G ,   2 0 0 4 ,   I N T   J   T E C H N O L   A S S E S S ,   V 2 0 ,   P 2 5 8 ;   M u l a y   A V ,   2 0 0 5 ,   A M   J   T R A N S P L A N T ,   V 5 ,   P 1 7 4 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 6 1 4 3 . 2 0 0 5 . 0 0 9 3 1 . x ;   N a l l a m o t h u   B K ,   2 0 0 4 ,   A M   J   M E D ,   V 1 1 7 ,   P 9 3 8 ,   D O I   1 0 . 1 0 1 6 / j . a m j m e d . 2 0 0 4 . 0 6 . 0 4 6 ;   N a r c h i   H ,   2 0 0 5 ,   A R C H   D I S   C H I L D ,   V 9 0 ,   P 9 1 6 ,   D O I   1 0 . 1 1 3 6 / a d c . 2 0 0 5 . 0 7 4 6 4 1 ;   N a r c h i   H ,   2 0 0 5 ,   A R C H   D I S   C H I L D ,   V 9 0 ,   P 9 2 1 ,   D O I   1 0 . 1 1 3 6 / a d c . 2 0 0 5 . 0 7 5 3 3 3 ;   N A V A N E E T H A N   S D ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   N e e d h a m   D M ,   2 0 0 4 ,   C A N   J   C A R D I O L ,   V 2 0 ,   P 1 2 1 2 ;   N e w m a n   D J ,   2 0 0 5 ,   H E A L T H   T E C H N O L   A S S E S ,   V 9 ,   p x i i i ;   N g   D ,   2 0 0 5 ,   D I A B E T O L O G I A ,   V 4 8 ,   P 1 0 0 8 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 2 5 - 0 0 5 - 1 7 2 6 - 2 ;   N o r d m a n n   A J ,   2 0 0 3 ,   A M   J   M E D ,   V 1 1 4 ,   P 4 4 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 9 4 3 ( 0 2 ) 0 1 3 9 6 - 7 ;   P a l m e r   A J ,   2 0 0 5 ,   N E P H R O L   D I A L   T R A N S P L ,   V 2 0 ,   P 1 1 0 3 ,   D O I   1 0 . 1 0 9 3 / n d t / g f h 8 0 2 ;   P A L M E R   S ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   P a l m e r   S C ,   2 0 0 5 ,   A M   J   K I D N E Y   D I S ,   V 4 5 ,   P 6 3 8 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 4 . 1 2 . 0 0 7 ;   P a n n u   N ,   2 0 0 4 ,   K I D N E Y   I N T ,   V 6 5 ,   P 1 3 6 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 4 . 0 0 5 1 6 . x ;   P a r i k h   C R ,   2 0 0 5 ,   K I D N E Y   I N T ,   V 6 7 ,   P 1 9 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 5 . 0 0 3 0 1 . x ;   P a r k   H Y ,   2 0 0 3 ,   P H A R M A C O T H E R A P Y ,   V 2 3 ,   P 1 6 1 1 ,   D O I   1 0 . 1 5 9 2 / p h c o . 2 3 . 1 5 . 1 6 1 1 . 3 1 9 6 2 ;   P a s c u a l   J ,   2 0 0 4 ,   T R A N S P L A N T A T I O N ,   V 7 8 ,   P 1 5 4 8 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T P . 0 0 0 0 1 4 0 9 6 9 . 4 3 7 6 1 . 1 F ;   P e d r i n i   M T ,   1 9 9 6 ,   A N N   I N T E R N   M E D ,   V 1 2 4 ,   P 6 2 7 ;   P e r n a   A ,   2 0 0 4 ,   A M   J   K I D N E Y   D I S ,   V 4 4 ,   P 3 8 5 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 4 . 0 5 . 0 2 0 ;   P L A Y F O R D   E G ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 3 ;   P r a k a s h   S ,   2 0 0 4 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 9 ,   P 2 5 5 3 ,   D O I   1 0 . 1 0 9 3 / n d t / g f h 4 2 0 ;   P r i c e   C P ,   2 0 0 5 ,   C L I N   C H E M ,   V 5 1 ,   P 1 5 7 7 ,   D O I   1 0 . 1 3 7 3 / c l i n c h e m . 2 0 0 5 . 0 4 9 7 4 2 ;   P r i n s   I ,   2 0 0 1 ,   I N T E N S   C A R E   M E D ,   V 2 7 ,   P 2 0 6 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 0 0 0 0 7 7 5 ;   P r u c h n i c k i   M C ,   2 0 0 2 ,   A N N   P H A R M A C O T H E R ,   V 3 6 ,   P 1 2 6 1 ;   P y n e   T ,   1 9 9 9 ,   H e a l t h   L i b r   R e v ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 5 3 2 . 1 9 9 9 . 0 0 2 0 0 . x ;   R a b b a t   C G ,   2 0 0 3 ,   J   A M   S O C   N E P H R O L ,   V 1 4 ,   P 4 3 1 ,   D O I   1 0 . 1 0 9 7 / 0 1 . A S N . 0 0 0 0 4 7 5 6 0 . 5 1 4 4 4 . 3 A ;   R a b i n d r a n a t h   K S ,   2 0 0 5 ,   A M   J   K I D N E Y   D I S ,   V 4 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 4 . 1 1 . 0 0 8 ;   R A B I N D R A N A T H   K S ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   R e e d   K L ,   1 9 9 9 ,   B   M E D   L I B R   A S S O C ,   V 8 7 ,   P 2 9 8 ;   R i t z a u   J ,   2 0 0 1 ,   P E R I T O N   D I A L Y S I S   I N T ,   V 2 1 ,   P 4 7 1 ;   R o o i j e n s   P P G M ,   2 0 0 4 ,   E U R   J   V A S C   E N D O V A S C ,   V 2 8 ,   P 5 8 3 ,   D O I   1 0 . 1 0 1 6 / j . e j v s . 2 0 0 4 . 0 8 . 0 1 4 ;   R o s s   S D ,   2 0 0 3 ,   C L I N   T H E R ,   V 2 5 ,   P 1 7 8 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 9 1 8 ( 0 3 ) 8 0 1 7 0 - 4 ;   R u i l o p e   L M ,   2 0 0 3 ,   C L I N   T H E R ,   V 2 5 ,   P 3 0 4 4 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 9 1 8 ( 0 3 ) 9 0 0 9 1 - 9 ;   R u s s o   M W ,   2 0 0 3 ,   A M   J   G A S T R O E N T E R O L ,   V 9 8 ,   P 1 6 1 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 9 2 7 0 ( 0 3 ) 0 0 3 0 8 - 3 ;   S a c k n e r - B e r n s t e i n   J D ,   2 0 0 5 ,   C I R C U L A T I O N ,   V 1 1 1 ,   P 1 4 8 7 ,   D O I   1 0 . 1 1 6 1 / 0 1 . C I R . 0 0 0 0 1 5 9 3 4 0 . 9 3 2 2 0 . E 4 ;   S a f d a r   N ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 8 ,   P 9 9 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 8 . 8 . 9 9 6 ;   S a m u e l s   J A ,   2 0 0 4 ,   N E P H R O L O G Y ,   V 9 ,   P 1 7 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 0 - 1 7 9 7 . 2 0 0 4 . 0 0 2 5 5 . x ;   S A M U E L S   J A ,   2 0 0 3 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   S c h e i d   D C ,   2 0 0 1 ,   J   F A M   P R A C T I C E ,   V 5 0 ,   P 6 6 1 ;   S c h e i n   M . ,   2 0 0 0 ,   C U R R   S U R G ,   V 5 7 ,   P 2 5 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 7 9 4 4 ( 0 0 ) 0 0 1 7 7 - X ;   S c h e n a   F P ,   1 9 9 6 ,   N E P H R O L   D I A L   T R A N S P L ,   V 1 1 ,   P 2 3 5 9 ;   S c h i e p p a t i   A ,   2 0 0 3 ,   S E M I N   N E P H R O L ,   V 2 3 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 0 - 9 2 9 5 ( 3 0 ) 0 0 0 5 0 - 0 ;   S C H I E P P A T I   A ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   S C H I L L I D A Y   I R ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   S h a h   M B ,   1 9 9 9 ,   T R A N S P L A N T A T I O N ,   V 6 7 ,   P 1 4 1 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 7 8 9 0 - 1 9 9 9 0 6 1 5 0 - 0 0 0 0 4 ;   S h a r m a   S K ,   2 0 0 5 ,   C A T H E T E R   C A R D I O   I N T E ,   V 6 5 ,   P 3 8 6 ,   D O I   1 0 . 1 0 0 2 / c c d . 2 0 4 0 4 ;   S h a r p   J ,   2 0 0 5 ,   A M   J   K I D N E Y   D I S ,   V 4 5 ,   P 1 5 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 4 . 0 9 . 0 1 0 ;   S i e b e n h o f e r   A ,   2 0 0 4 ,   D I A B E T I C   M E D ,   V 2 1 ,   P 1 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 4 - 5 4 9 1 . 2 0 0 4 . 0 1 1 2 2 . x ;   S i t t i g   D F ,   1 9 9 6 ,   B   M E D   L I B R   A S S O C ,   V 8 4 ,   P 2 0 0 ;   S o l o m o n   R ,   2 0 0 5 ,   K I D N E Y   I N T ,   V 6 8 ,   P 2 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 5 . 0 0 6 8 4 . x ;   S t r a t t o n   R J ,   2 0 0 5 ,   A M   J   K I D N E Y   D I S ,   V 4 6 ,   P 3 8 7 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 5 . 0 4 . 0 3 6 ;   S T R I P P O L I   G F ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   S T R I P P O L I   G F ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   S t r i p p o l i   G F ,   2 0 0 3 ,   C O C H R A N E   D B   S Y S T   R E V ,   V 1 ;   S t r i p p o l i   G F M ,   2 0 0 4 ,   J   A M   S O C   N E P H R O L ,   V 1 5 ,   P 3 1 5 4 ,   D O I   1 0 . 1 0 9 7 / 0 1 . A S N . 0 0 0 0 1 4 5 4 3 6 . 0 9 1 7 6 . A 7 ;   S t r i p p o l i   G F M ,   2 0 0 4 ,   A M   J   K I D N E Y   D I S ,   V 4 4 ,   P 5 9 1 ,   D O I   1 0 . 1 0 5 3 / j . a j k d . 2 0 0 4 . 0 5 . 0 4 3 ;   S t r i p p o l i   G F M ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ,   P 8 2 8 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 2 3 7 . 5 8 5 0 0 0 . 7 C ;   S t r i p p o l i   G F M ,   2 0 0 3 ,   A M   J   K I D N E Y   D I S ,   V 4 1 ,   P 1 1 2 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 3 8 6 ( 0 3 ) 0 0 3 4 4 - 5 ;   S t r i p p o l i   G F M ,   2 0 0 4 ,   J   A M   S O C   N E P H R O L ,   V 1 5 ,   P 4 1 1 ,   D O I   1 0 . 1 0 9 7 / 0 1 . A S N . 0 0 0 0 1 0 0 1 2 5 . 2 1 4 9 1 . 4 6 ;   S u b r a m a n i a n   S ,   2 0 0 2 ,   K I D N E Y   I N T ,   V 6 2 ,   P 1 8 1 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 3 - 1 7 5 5 . 2 0 0 2 . 0 0 6 0 8 . x ;   S u r i   R S ,   2 0 0 5 ,   D I A B E T E S   C A R E ,   V 2 8 ,   P 2 5 5 6 ,   D O I   1 0 . 2 3 3 7 / d i a c a r e . 2 8 . 1 0 . 2 5 5 6 ;   S z c z e c h   L A ,   1 9 9 7 ,   J   A M   S O C   N E P H R O L ,   V 8 ,   P 1 7 7 1 ;   T a c c o n e l l i   E ,   2 0 0 3 ,   C L I N   I N F E C T   D I S ,   V 3 7 ,   P 1 6 2 9 ,   D O I   1 0 . 1 0 8 6 / 3 7 9 7 1 5 ;   T a n   K T ,   2 0 0 2 ,   C L I N   R A D I O L ,   V 5 7 ,   P 6 1 7 ,   D O I   1 0 . 1 0 5 3 / c r a d . 2 0 0 2 . 0 9 4 1 ;   T o n e l l i   M ,   2 0 0 2 ,   A M   J   K I D N E Y   D I S ,   V 4 0 ,   P 8 7 5 ,   D O I   1 0 . 1 0 5 3 / a j k d . 2 0 0 2 . 3 6 3 1 8 ;   T o o h e r   R L ,   2 0 0 4 ,   T R A N S P L A N T A T I O N ,   V 7 8 ,   P 4 0 4 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T P . 0 0 0 0 1 2 8 6 3 8 . 8 5 4 9 1 ;   * U S   N A T   L I B R   M E D ,   2 0 0 5 ,   M E D L I N E   F A C T   S H E E T ;   V A L E   L ,   2 0 0 4 ,   C O C H A N E   D A T A B A S E   S Y S ,   V 4 ;   V a s b i n d e r   G B C ,   2 0 0 1 ,   A N N   I N T E R N   M E D ,   V 1 3 5 ,   P 4 0 1 ;   V i l l e n e u v e   E ,   2 0 0 5 ,   A N N   P H A R M A C O T H E R ,   V 3 9 ,   P 7 3 2 ,   D O I   1 0 . 1 3 4 5 / a p h . 1 E 3 6 5 ;   V i m a l a c h a n d r a   D ,   2 0 0 1 ,   J   P E D I A T R - U S ,   V 1 3 9 ,   P 5 6 0 ,   D O I   1 0 . 1 0 6 7 / m p d . 2 0 0 1 . 1 1 7 5 8 2 ;   V I M A L A C H A N D R A   D ,   2 0 0 1 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   V i v i a n   E M ,   2 0 0 2 ,   C L I N   T H E R ,   V 2 4 ,   P 1 7 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 9 1 8 ( 0 2 ) 8 0 0 7 6 - 5 ;   W e b s t e r   A ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   W e b s t e r   A C ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 1 ,   P 8 1 0 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 5 6 9 . 4 7 1 0 0 7 . A E ;   W e b s t e r   A C ,   2 0 0 4 ,   T R A N S P L A N T A T I O N ,   V 7 7 ,   P 1 6 6 ,   D O I   1 0 . 1 0 9 7 / 0 1 . T P . 0 0 0 0 1 1 0 9 6 4 3 . 3 2 6 5 9 . C 4 ;   W E B S T E R   A C ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 1 ;   W e l c h   J L ,   2 0 0 5 ,   I N T   J   N U R S   S T U D ,   V 4 2 ,   P 5 9 7 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 4 . 0 9 . 0 1 5 ;   W h e e l e r   D ,   2 0 0 3 ,   A R C H   D I S   C H I L D ,   V 8 8 ,   P 6 8 8 ,   D O I   1 0 . 1 1 3 6 / a d c . 8 8 . 8 . 6 8 8 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i d e m a n n   B C ,   2 0 0 4 ,   C A N C E R - A M   C A N C E R   S O C ,   V 1 0 0 ,   P 2 2 2 2 ,   D O I   1 0 . 1 0 0 2 / c n c r . 2 0 2 5 5 ;   W i g h t   J P ,   2 0 0 3 ,   C L I N   T R A N S P L A N T ,   V 1 7 ,   P 2 9 3 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 0 0 1 2 . 2 0 0 3 . 0 0 0 7 7 . x ;   W i l s o n   C H ,   2 0 0 5 ,   T R A N S P L A N T A T I O N ,   V 8 0 ,   P 8 7 7 ,   D O I   1 0 . 1 0 9 7 / 0 1 . t p . 0 0 0 0 1 8 1 1 9 7 . 2 1 7 0 6 . f a ;   W I L S O N   C H ,   2 0 0 5 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 4 ;   W i n k e l m a y e r   W C ,   2 0 0 2 ,   M E D   D E C I S   M A K I N G ,   V 2 2 ,   P 4 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 2 7 2 9 8 9 0 2 2 3 6 9 2 7 ;   W o o d r o f f e   R ,   2 0 0 5 ,   H E A L T H   T E C H N O L   A S S E S ,   V 9 ,   P 1 ;   W o r s t e r   A ,   2 0 0 2 ,   A N N   E M E R G   M E D ,   V 4 0 ,   P 2 8 0 ,   D O I   1 0 . 1 0 6 7 / m e m . 2 0 0 2 . 1 2 6 1 7 0 ;   W U   H M ,   2 0 0 4 ,   C O C H R A N E   D A T A B A S E   S Y ,   V 2 ;   Y m p a   Y P ,   2 0 0 5 ,   A M   J   M E D ,   V 1 1 8 ,   P 8 2 7 ,   D O I   1 0 . 1 0 1 6 / j . a m j m e d . 2 0 0 5 . 0 1 . 0 6 9 ;   Z a r a z a g a   A ,   2 0 0 1 ,   C L I N   N U T R ,   V 2 0 ,   P 2 9 1 ,   D O I   1 0 . 1 0 5 4 / c l n u . 2 0 0 1 . 0 3 8 8 ;   Z i n t z a r a s   E ,   2 0 0 5 ,   J   H U M   G E N E T ,   V 5 0 ,   P 8 4 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 3 8 - 0 0 4 - 0 2 2 4 - 6 	 2 1 8 	 2 3 	 2 4 	 0 	 5 	 N A T U R E   P U B L I S H I N G   G R O U P 	 N E W   Y O R K 	 7 5   V A R I C K   S T R E E T ,   9 T H   F L O O R ,   N E W   Y O R K ,   N Y   1 0 0 1 3 - 1 9 1 7   U S A 	 0 0 8 5 - 2 5 3 8 	 	 	 K I D N E Y   I N T 	 K i d n e y   I n t . 	 D E C 	 2 0 0 6 	 7 0 	 1 1 	 	 	 	 	 1 9 9 5 	 2 0 0 5 	 	 1 0 . 1 0 3 8 / s j . k i . 5 0 0 1 8 9 6 	 	 1 1 	 U r o l o g y   &   N e p h r o l o g y 	 U r o l o g y   &   N e p h r o l o g y 	 1 0 6 T Q 	 W O S : 0 0 0 2 4 2 1 2 4 8 0 0 0 2 3 	 1 7 0 3 5 9 4 6 	 
 
 J 	 N i c h o l s o n ,   S 	 	 	 	 N i c h o l s o n ,   S 	 	 	 T h e   b a s i s   f o r   b i b l i o m i n i n g :   F r a m e w o r k s   f o r   b r i n g i n g   t o g e t h e r   u s a g e - b a s e d   d a t a   m i n i n g   a n d   b i b l i o m e t r i c s   t h r o u g h   d a t a   w a r e h o u s i n g   i n   d i g i t a l   l i b r a r y   s e r v i c e s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 d a t a   m i n i n g ;   d a t a   w a r e h o u s i n g ;   d i g i t a l   l i b r a r i e s ;   b i b l i o m i n i n g ;   e v a l u a t i o n ;   t h e o r y ;   l i b r a r y   m e a s u r e m e n t ;   l i b r a r y   e v a l u a t i o n 	 S C H O L A R L Y   C O M M U N I C A T I O N 	 O v e r   t h e   p a s t   f e w   y e a r s ,   d a t a   m i n i n g   h a s   m o v e d   f r o m   c o r p o r a t i o n s   t o   o t h e r   o r g a n i z a t i o n s .   T h i s   p a p e r   l o o k s   a t   t h e   i n t e g r a t i o n   o f   d a t a   m i n i n g   i n   d i g i t a l   l i b r a r y   s e r v i c e s .   F i r s t ,   b i b l i o m i n i n g ,   o r   t h e   c o m b i n a t i o n   o f   b i b l i o m e t r i c s   a n d   d a t a   m i n i n g   t e c h n i q u e s   t o   u n d e r s t a n d   l i b r a r y   s e r v i c e s ,   i s   d e f i n e d   a n d   t h e   c o n c e p t   e x p l o r e d .   S e c o n d ,   t h e   c o n c e p t u a l   f r a m e w o r k s   f o r   b i b l i o m i n i n g   f r o m   t h e   v i e w p o i n t   o f   t h e   l i b r a r y   d e c i s i o n - m a k e r   a n d   t h e   l i b r a r y   r e s e a r c h e r   a r e   p r e s e n t e d   a n d   c o m p a r e d .   F i n a l l y ,   a   r e s e a r c h   a g e n d a   t o   r e s o l v e   m a n y   o f   t h e   c o m m o n   b i b l i o m i n i n g   i s s u e s   a n d   t o   m o v e   t h e   f i e l d   f o r w a r d   i n   a   m i n d f u l   m a n n e r   i s   d e v e l o p e d .   T h e   r e s u l t   i s   n o t   o n l y   a   r o a d m a p   f o r   u n d e r s t a n d i n g   t h e   i n t e g r a t i o n   o f   d a t a   m i n i n g   i n   d i g i t a l   l i b r a r y   s e r v i c e s ,   b u t   a l s o   a   t e m p l a t e   f o r   o t h e r   c r o s s - d i s c i p l i n e   d a t a   m i n i n g   r e s e a r c h e r s   t o   f o l l o w   f o r   s y s t e m a t i c   e x p l o r a t i o n   i n   t h e i r   o w n   s u b j e c t   d o m a i n s .   ( c )   2 0 0 5   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 S y r a c u s e   U n i v ,   S c h   I n f o r m a t   S t u d i e s ,   S y r a c u s e ,   N Y   1 3 2 4 4   U S A 	 S y r a c u s e   U n i v ,   S c h   I n f o r m a t   S t u d i e s ,   2 4 5   H i n d s   H a l l ,   S y r a c u s e ,   N Y   1 3 2 4 4   U S A . 	 s c o t t @ s c o t t n i c h o l s o n . c o m 	 	 	 	 	 * A M   C I V   L I B   U N ,   U S A   P A T R I O T ;   B a n e r j e e   K . ,   1 9 9 8 ,   C o m p u t e r s   i n   L i b r a r i e s ,   V 1 8 ;   B a r a b a s i   A .   L . ,   2 0 0 3 ,   L I N K E D ;   B e r r y   J . ,   2 0 0 4 ,   D A T A   M I N I N G   T E C H N I Q U ,   V 2 n d ;   B O L L E N   J ,   2 0 0 3 ,   D L I B   M A G A Z I N E ,   V 9 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B u c k l a n d   M K ,   2 0 0 3 ,   L I B R   T R E N D S ,   V 5 1 ,   P 6 7 5 ;   C h a u d h u r i   S . ,   1 9 9 7 ,   S I G M O D   R e c o r d ,   V 2 6 ,   P 6 5 ,   D O I   1 0 . 1 1 4 5 / 2 4 8 6 0 3 . 2 4 8 6 1 6 ;   C h e n   C M ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 4 0 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 6 8 - 5 ;   C h e n   G T ,   2 0 0 3 ,   R A I R O - O P E R   R E S ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 5 1 / r o : 2 0 0 3 0 2 0 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   E i r i n a k i   M ,   2 0 0 3 ,   A C M   T   I N T E R N E T   T E C H N ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 6 4 3 4 7 7 . 6 4 3 4 7 8 ;   G e y e r - S c h u l z   A ,   2 0 0 3 ,   S T U D   C L A S S   D A T A   A N A L ,   P 4 1 2 ;   * I N F   I   S Y R ,   2 0 0 4 ,   Q A B U I L D E R ;   J O H N S O N   M ,   1 9 9 9 ,   A R C H E O L O G I C A L   T H E O R Y ;   K a o   S C ,   2 0 0 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 9 ,   P 1 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 1 9 - 5 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   L I M P A A   H ,   2 0 0 3 ,   P R I V A C Y   P R E S E R V I N G   D ;   M c C l u r e   C h a r l e s ,   2 0 0 2 ,   S T A T   M E A S U R E S   Q U A L I T ;   M C C L U R E   C R ,   1 9 8 9 ,   L I B R   T R E N D S ,   V 3 8 ,   P 2 8 0 ;   M i c h a i l   A . ,   1 9 9 9 ,   1 4 t h   I E E E   I n t e r n a t i o n a l   C o n f e r e n c e   o n   A u t o m a t e d   S o f t w a r e   E n g i n e e r i n g ,   P 2 4 ,   D O I   1 0 . 1 1 0 9 / A S E . 1 9 9 9 . 8 0 2 0 8 9 ;   M U R P H Y   D E ,   2 0 0 3 ,   N Y   T I M E S                 0 4 0 7 ,   p A 1 2 ;   N i c h o l s o n   S ,   2 0 0 3 ,   I N F O R M   T E C H N O L   L I B R ,   V 2 2 ,   P 1 4 6 ;   N I C H O L S O N   S ,   2 0 0 5 ,   F I R S T   M O N D A Y ,   V 1 0 ;   N i c h o l s o n   S . ,   2 0 0 3 ,   O R G   D A T A   M I N I N G   L E V E ,   P 2 4 7 ,   D O I   1 0 . 4 0 1 8 / 9 7 8 - 1 - 5 9 1 4 0 - 1 3 4 - 6 . c h 0 1 7 ;   N I C H O L S O N   S ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 1 6 2 ;   N I C H O L S O N   S ,   2 0 0 5 ,   A N N   M   J O I N T   C   D I G   L I ;   N I C H O L S O N   S ,   2 0 0 4 ,   B I B L I O M I N I N G   B I L B I O ;   * N I S O ,   2 0 0 4 ,   Z 3 9   7   L I B   S T A T   E M   D A ;   S a n d s t r o m   P E ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 5 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 5 5 3 0 5 2 8 6 ;   S a r a c e v i c   T ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 5 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 6 ) 4 8 : 6 < 5 2 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - W ;   S o u t h   S ,   1 9 7 7 ,   M E T H O D   T H E O R Y   H I S T   A ;   S r i v a s t a v a   J . ,   2 0 0 0 ,   S I G K D D   E X P L O R A T I O N S ,   V 1 ,   P 1 2 ,   D O I   D O I   1 0 . 1 1 4 5 / 8 4 6 1 8 3 . 8 4 6 1 8 8 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 9 9 ;   W i l k i n s o n   D ,   2 0 0 3 ,   S O C   S C I   C O M P U T   R E V ,   V 2 1 ,   P 3 4 0 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 4 4 3 9 3 0 3 2 5 3 9 8 0 ;   Z u c c a   J ,   2 0 0 3 ,   I N F O R M   T E C H N O L   L I B R ,   V 2 2 ,   P 1 7 5 	 3 8 	 2 3 	 2 4 	 2 	 2 1 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 1 8 7 3 - 5 3 7 1 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 M A Y 	 2 0 0 6 	 4 2 	 3 	 	 	 	 	 7 8 5 	 8 0 4 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 5 . 0 0 8 	 	 2 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 8 7 X Z 	 W O S : 0 0 0 2 3 3 5 5 2 4 0 0 0 1 3 	 	 
 
 J 	 W h i t e ,   H D 	 	 	 	 W h i t e ,   H D 	 	 	 A u t h o r - c e n t e r e d   b i b l i o m e t r i c s   t h r o u g h   C A M E O s :   C h a r a c t e r i z a t i o n s   a u t o m a t i c a l l y   m a d e   a n d   e d i t e d   o n l i n e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   P U B L I C A T I O N S ;   R E T R I E V A L ;   M O D E L 	 T h i s   a r t i c l e   d e s c r i b e s   w a y s   o f   a u t o m a t i c a l l y   g e n e r a t i n g   1 5   k i n d s   o f   p e r s o n a l   p r o f i l e s   o f   a u t h o r s   f r o m   b i b l i o g r a p h i c   d a t a   o n   t h e i r   p u b l i c a t i o n s   i n   d a t a b a s e s .   N i c k n a m e d   C A M E O s ,   t h e   p r o f i l e s   c a n   b e   u s e d   f o r   r e t r i e v a l   o f   d o c u m e n t s   b y   h u m a n   s e a r c h e r s   o r   c o m p u t e r i z e d   a g e n t s .   T h e y   c a n   a l s o   b e   u s e d   f o r   m a p p i n g   a n   a u t h o r ' s   s u b j e c t   m a t t e r   ( i n   t e r m s   o f   d e s c r i p t o r s ,   i d e n t i f i e r s ,   a n d   n a t u r a l   l a n g u a g e )   a n d   s t u d y i n g   h i s   o r   h e r   p u b l i s h i n g   c a r e e r .   F i n a l l y ,   t h e y   c a n   b e   u s e d   t o   m a p   t h e   i n t e l l e c t u a l   a n d   s o c i a l   n e t w o r k s   e v i d e n t   i n   c i t a t i o n s   t o   a n d   f r o m   a u t h o r s   a n d   i n   c o - a u t h o r s h i p s . 	 D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 W h i t e ,   H D   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   3 1 4 1   C h e s t n u t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 	 	 	 	 	 B a l d i   S ,   1 9 9 8 ,   A M   S O C I O L   R E V ,   V 6 3 ,   P 8 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 0 4 ;   B J O R N E R   S N ,   1 9 9 0 ,   O N L I N E ,   V 1 4 ,   P 9 0 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   C h e n   C M ,   1 9 9 8 ,   I N T E R A C T   C O M P U T ,   V 1 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 3 - 5 4 3 8 ( 9 8 ) 0 0 0 1 5 - 0 ;   C h r i s t e n s e n   F H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 4 ;   F R E E M A N   L C ,   1 9 8 4 ,   S O C   N E T W O R K S ,   V 6 ,   P 2 0 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 4 ) 9 0 0 1 1 - X ;   G R I F F I T H   B C ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 7 ,   P 9 5 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 7 . 4 0 5 3 . 9 5 9 ;   G R Z E L A K   H ,   1 9 8 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 9 ,   P 3 8 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 3 ) 9 0 0 5 5 - 9 ;   H I T E   H D ,   2 0 0 0 ,   I V 2 0 0 0 ,   P 2 5 ;   H I T E   H D ,   2 0 0 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 2 ,   P 8 7 ;   H U D N U T   S K ,   1 9 9 3 ,   P   1 4   N A T   O N L   M   N E W   Y ,   P 2 0 9 ;   I n g w e r s e n   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 ;   J a k o b i a k   F . ,   1 9 8 5 ,   I N F O D I A L - V I D E O T E X .   4 t h   I n t e r n a t i o n a l   C o n g r e s s   a n d   E x h i b i t i o n   o n   D a t a   B a s e s   a n d   V i d e o t e x ;   J A R N E V I N G   B ,   1 9 9 9 ,   T H E S I S   B I B L I O T E K S H O G ;   L a t o u r   B ,   1 9 8 7 ,   S C I   A C T I O N   F O L L O W   S C ;   L E N O I R   T ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 4 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 9 0 0 9 0 0 4 0 4 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   L u u k k o n e n   T ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 1 1 2 1 ;   M A N N I   P ,   1 9 8 7 ,   P   1 1   I N T   O N L   I N F   M   M ,   P 3 6 7 ;   M O E D   H F ,   1 9 9 1 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 1 1 3 ;   M U L L I N S   N C ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 5 5 2 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 5 5 4 ;   M U R R A Y   S O ,   1 9 8 2 ,   S O C   N E T W O R K S ,   V 4 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 2 ) 9 0 0 2 3 - 5 ;   P E R S S O N   O ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 1 ;   P E T E R S   H P F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 1 ) 4 6 : 1 < 9 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 3 ;   P I E R S S O N   O ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 2 2 9 ;   P I E R S S O N   O ,   2 0 0 0 ,   B I B E X C E L ;   S A L T O N   G ,   1 9 7 5 ,   D Y N A M I C   I N F O R M A T I O N ,   p C H 1 0 ;   S H E P H E R D   M A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 4 6 ;   S H V A N E V E L D T   R W ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ;   S N O W   B ,   1 9 9 3 ,   D A T A B A S E ,   V 1 6 ,   P 1 1 1 ;   S T E W A R T   J A ,   1 9 9 0 ,   D R I F T I N G   C O N T I N E N T S ,   P 2 1 6 ;   T H O R N E   F C ,   1 9 7 7 ,   J   C L I N   P S Y C H O L ,   V 3 3 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 6 7 9 ( 1 9 7 7 1 0 ) 3 3 : 4 < 1 1 5 7 : : A I D - J C L P 2 2 7 0 3 3 0 4 5 3 > 3 . 0 . C O ; 2 - B ;   V i n k l e r   P ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 0 0 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W H I T E   H D ,   1 9 8 1 ,   O N L I N E   R E V ,   V 5 ,   P 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 0 5 0 ;   W H I T E   H D ,   1 9 8 6 ,   I N F O R M   T E C H N O L   L I B R ,   V 5 ,   P 9 3 ;   W h i t e   H D ,   1 9 9 6 ,   L I B R   T R E N D S ,   V 4 5 ,   P 2 3 9 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 1 0 ,   P 9 5 9 ;   W H I T E   H D ,   1 9 9 2 ,   I N F O R M A T I O N   S P E C I A L I ,   P 2 7 ;   W h i t e   H . D . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 4 7 5 ;   W H I T E   H D ,   1 9 8 9 ,   P   1 3   I N T   O N L   I N F   M   O ,   P 3 3 ;   W H I T E   H D ,   1 9 9 0 ,   P   1 1   N A T   O N L   M ,   P 4 5 3 ;   W o r m e l l   I ,   1 9 9 8 ,   D A T A B A S E ,   V 2 1 ,   P 2 5 ;   W O R M E L L   I ,   1 9 9 8 ,   A S I A N   L I B ,   V 7 ,   P 2 5 7 ,   D O I   1 0 . 1 1 0 8 / 1 0 1 7 6 7 4 9 8 1 0 2 4 1 8 3 8 ;   Z O E L I C K   B ,   1 9 8 7 ,   O P T I C A L   P U B L I S H I N G   P ,   V 2 ,   P 6 3 	 4 8 	 2 3 	 2 4 	 3 	 1 2 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 S P U I B O U L E V A R D   5 0 ,   P O   B O X   1 7 ,   3 3 0 0   A A   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L - A U G 	 2 0 0 1 	 5 1 	 3 	 	 	 	 	 6 0 7 	 6 3 7 	 	 1 0 . 1 0 2 3 / A : 1 0 1 9 6 0 7 5 2 2 1 2 5 	 	 3 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 4 6 6 P F 	 W O S : 0 0 0 1 7 0 6 5 3 4 0 0 0 1 2 	 	 
 
 J 	 O s a r e h ,   F 	 	 	 	 O s a r e h ,   F 	 	 	 B i b l i o m e t r i c s ,   c i t a t i o n   a n a l y s i s   a n d   c o - c i t a t i o n   a n a l y s i s :   A   r e v i e w   o f   l i t e r a t u r e   . 2 . 	 L I B R I 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 S C I E N T I F I C   L I T E R A T U R E S ;   I N T E L L E C T U A L   S T R U C T U R E ;   P U B L I C A T I O N   O U T P U T ;   S C I E N C E ;   C O C I T A T I O N ;   P E R F O R M A N C E ;   C O U N T R I E S ;   S P A C E ;   S P E C I A L T I E S ;   D I S C I P L I N E S 	 T h i s   a r t i c l e   i s   t h e   s e c o n d   p a r t   o f   a n   a r t i c l e   e n t i t l e d   B i b l i o m e t r i c s ,   C i t a t i o n   a n a l y s i s   a n d   C o - c i t a t i o n   a n a l y s i s :   A   R e v i e w   o f   L i t e r a t u r e .   I n   t h i s   p a r t   o f   t h e   a r t i c l e   d o c u m e n t   a n d   a u t h o r   c o c i t a t i o n ,   j o u r n a l - b y - j o u r n a l   a n d   c o u n t r y - b y   c o u n t r y   c i t a t i o n   a n a l y s i s   a r e   s t u d i e d .   M a p p i n g   s c i e n c e   a s   a n   a p p l i c a t i o n   o f   c o c i t a t i o n   a n a l y s i s   i s   a l s o   s t u d i e d .   F i n a l l y   t h e   L i m i t a t i o n s ,   p r o b l e m s   a n d   r e l i a b i l i t y   a n d   v a l i d i t y   o f   c i t a t i o n   a n a l y s i s   a s   a   r e s e a r c h   m e t h o d   w i l l   b e   c o n s i d e r e d . 	 	 O s a r e h ,   F   ( r e p r i n t   a u t h o r ) ,   S H A H I D   C H A M R A N   U N I V ,   S C H   E D U C   &   P S Y C H O L ,   D E P T   L I B   S C I ,   A H W A Z ,   I R A N . 	 	 	 	 	 	 B A K K E R   C J ,   1 9 7 7 ,   S C I   P U B L   P O L I C Y ,   V 4 ,   P 5 6 3 ;   B A Y E R   A E ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 4 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 4 4 : : A I D - A S I 1 2 > 3 . 0 . C O ; 2 - J ;   B e l l a r d o   T . ,   1 9 8 0 ,   L I B R   R E S ,   V 2 ,   P 2 3 1 ;   B e n s m a n   S .   J . ,   1 9 8 2 ,   L I B R   R E S ,   V 4 ,   P 2 7 9 ;   B L I C K E N S T A F F   J ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 1 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 5 1 ;   B O I G   F S ,   1 9 5 2 ,   S C I E N C E ,   V 1 1 5 ,   P 5 5 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 . 2 9 9 5 . 5 5 5 ;   B O I G   F S ,   1 9 5 2 ,   S C I E N C E ,   V 1 1 5 ,   P 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 5 . 2 9 7 6 . 2 5 ;   B O N I T Z   M ,   1 9 9 5 ,   5   I N T   C   I N T   S O C   S C I ,   P 6 3 ;   B r a d f o r d   S C ,   1 9 4 8 ,   D O C U M E N T A T I O N ;   B R A U N   T ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 9 5 7 ;   B R A U N   T ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 2 5 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   B R A U N   T ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 7 5 8 ;   B U S H   V . ,   1 9 4 5 ,   S C I   E N D L E S S   F R O N T I E R ;   C A W K E L L   A E ,   1 9 7 6 ,   I N F O R M   S C I E N T I S T ,   V 1 0 ,   P 3 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C O L E   J R ,   1 9 7 4 ,   S C I E N C E ,   V 1 8 3 ,   P 2 8 ;   C R A N E   D ,   1 9 7 2 ,   I N V I S I B L E   C O L L E G E S ;   E d g e   D ,   1 9 7 9 ,   H i s t   S c i ,   V 1 7 ,   P 1 0 2 ;   E d g e   D a v i d ,   1 9 7 7 ,   S O C   S O C I A L   S T U D I E S   S ,   V 2 ,   P 1 3 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   F R A M E   J D ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 5 0 1 ;   F r a n k l i n   J .   J . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 3 2 5 ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G a r f i e l d   E . ,   1 9 8 3 ,   S C I   P U B L   P O L ,   V 1 0 ,   P 1 1 2 ;   G A R F I E L D   F ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G o u l d   P . ,   1 9 7 4 ,   M E N T A L   M A P S ;   G R I F F I T H   B C ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 3 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 4 0 2 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H E A L E Y   P ,   1 9 8 6 ,   R E S   P O L I C Y ,   V 1 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 6 ) 9 0 0 2 4 - 7 ;   I N H A B E R   H ,   1 9 7 5 ,   G E O F O R U M ,   V 6 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 1 8 5 ( 7 5 ) 9 0 0 2 6 - 3 ;   I R V I N E   J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 0 ;   K O E N I G   M E D ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 2 4 - 0 ;   K O V A C H   E G ,   1 9 7 8 ,   C O U N T R Y   T R E N D S   S C I   P ,   P 3 3 ;   L a n c a s t e r   F . W ,   1 9 9 1 ,   B I B L I O M E T R I C   M E T H O D S ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M C C A I N   K W ,   1 9 9 1 ,   L I B R   Q U A R T ,   V 6 1 ,   P 3 1 1 ;   M C C A I N   K W ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 9 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M O M B E R S   C ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 3 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N A R I N   F ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 5 ,   P 8 0 ;   N a t i o n a l   S c i e n c e   B o a r d ,   1 9 7 3 ,   S C I   I N D   1 9 7 2 ;   P H I L L I P S   D C ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 1 8 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 7 4 ;   P R I C E   D J D ,   1 9 7 5 ,   I S I   W H O   I S   P U B L I S H I N ;   P r i c e   D e   S o l l a ,   1 9 6 9 ,   P   I S R A E L   A C A D E M Y   S C I ,   V 4 ,   P 9 8 ;   P R I C E   D J D ,   1 9 6 6 ,   P   I S R   A C   S C I   H U M ,   V 1 ,   P 8 8 ;   R I C E   R E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 0 2 ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S M A L L   H G ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 4 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 1 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S N Y D E R   H ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 7 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 2 0 2 ;   S P I E G E L R O S I N G   I S ,   1 9 7 2 ,   S C I   S T U D ,   V 2 ,   P 3 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 2 0 0 2 0 0 4 0 3 ;   T I J S S E N   R J W ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   V A N H E E R I N G E N   A ,   1 9 8 4 ,   S C I   T E C H N O L O G Y   I N D I C ;   V A N R A A N   A F J ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 4 3 9 ;   V A N R A A N   A F J ,   1 9 9 0 ,   N A T U R E ,   V 3 4 7 ,   P 6 2 6 ,   D O I   1 0 . 1 0 3 8 / 3 4 7 6 2 6 a 0 ;   V I N K L E R   P ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 3 9 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 1 0 3 ;   W H I T E   H D ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 1 	 6 7 	 2 3 	 2 3 	 8 	 4 9 	 M U N K S G A A R D   I N T   P U B L   L T D 	 C O P E N H A G E N 	 3 5   N O R R E   S O G A D E ,   P O   B O X   2 1 4 8 ,   D K - 1 0 1 6   C O P E N H A G E N ,   D E N M A R K 	 0 0 2 4 - 2 6 6 7 	 	 	 L I B R I 	 L i b r i 	 D E C 	 1 9 9 6 	 4 6 	 4 	 	 	 	 	 2 1 7 	 2 2 5 	 	 1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 4 . 2 1 7 	 	 9 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 W G 7 8 2 	 W O S : A 1 9 9 6 W G 7 8 2 0 0 0 0 6 	 	 
 
 J 	 I K P A A H I N D I ,   L 	 	 	 	 I K P A A H I N D I ,   L 	 	 	 A N   O V E R V I E W   O F   B I B L I O M E T R I C S   -   I T S   M E A S U R E M E N T S ,   L A W S   A N D   T H E I R   A P P L I C A T I O N S 	 L I B R I 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 I K P A A H I N D I ,   L   ( r e p r i n t   a u t h o r ) ,   N A T L   V E T   R E S   I N S T ,   S E R I A L S   &   I N F O R M A T   R E T R I E V A L ,   V O M   V I A   J O S ,   N I G E R I A . 	 	 	 	 	 	 A A R O N S O N   S ,   1 9 7 4 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 2 ,   P 2 8 6 ;   A I Y E P E K U   W O ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 1 0 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 7 ;   B A X E N D A L E   P B ,   1 9 5 8 ,   I B M   J   R E S   D E V ,   V 2 ,   P 3 5 4 ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B O O K S T E I N   A ,   1 9 7 9 ,   C O L L E C T I O N   M A N A G E M E N ,   V 3 ,   P 1 5 1 ;   B R A D F O R D   S C ,   1 9 7 6 ,   C O L L E C T I O N   M A N A G E M E N ,   P 9 6 ;   B r a d f o r d   S .   C . ,   1 9 4 8 ,   D O C U M E N T A T I O N ,   P 1 5 4 ;   B R O A D U S   R N ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 6 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 7 7 ,   D O C U M E N T A T I O N ,   V 3 3 ,   P 1 8 0 ;   C O I L E   R C ,   1 9 7 4 ,   J   A S I S ,   V 2 5 ,   P 2 7 0 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C O L E   J R ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 3 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 5 9 . 3 6 8 ;   C R O N I N   B ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 3 ;   D A V I E S   D ,   1 9 7 0 ,   N A T U R E ,   V 2 2 8 ,   P 1 3 5 6 ,   D O I   1 0 . 1 0 3 8 / 2 2 8 1 3 5 6 b 0 ;   d e   S o l a   P r i c e   D J ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   d e   S o l l a   P r i c e   D . ,   1 9 7 6 ,   J   A S I S ,   V 2 7 ,   P 2 9 2 ;   D O N A H U E   J C ,   1 9 7 2 ,   J   A S I S ,   V 2 3 ,   P 3 1 3 ;   D R O T T   M C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 4 1 ;   E A R L E ,   1 9 6 9 ,   J   D O C U M E N T A T I O N ,   V 2 5 ,   P 1 2 3 ;   E D G E   A ,   1 9 7 7 ,   S O C   S O C I A L   S T U D I E S   S ,   V 2 ,   P 1 3 ;   F a n o   R .   M . ,   1 9 5 6 ,   D O C U M E N T A T I O N   A C T I O N ,   P 2 3 8 ;   F R E E M A N   C ,   1 9 7 4 ,   A U S T   L I B R   J ,   V 2 3 ,   P 6 7 ;   F R E E M A N   C ,   1 9 7 4 ,   A U S T R   A C A D   R E S   L I B ,   V 5 ,   P 6 5 ;   F R O S T   C O ,   1 9 7 9 ,   L I B R   Q U A R T ,   V 4 9 ,   P 3 9 9 ;   G A R F I E L D   E ,   1 9 7 4 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 7 9 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 7 4 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 2 ,   P 2 7 2 ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 3 ,   P 5 3 8 ;   G A R F I E L D   E ,   1 9 7 9 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 4 ,   P 1 5 6 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 8 2 ,   J   C I T A T I O N   S T U D I E S ,   V 3 5 ,   P 5 ;   G R O S S   O V ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 4 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   G U P T A   B M ,   1 9 7 9 ,   H E R A L D   L I B R A R Y   S C I ,   V 2 8 ,   P 8 6 ;   H E R D A N   G ,   1 9 6 6 ,   A D V   T H E O R Y   L A N G U A G E ,   P 3 3 ;   H J E R P P E   R ,   1 9 8 0 ,   B I B L I O   B I B L I O M E T R I C S ;   H o u s t o n   W . ,   1 9 8 3 ,   Q u a r t e r l y   B u l l e t i n   o f   t h e   I n t e r n a t i o n a l   A s s o c i a t i o n   o f   A g r i c u l t u r a l   L i b r a r i a n s   a n d   D o c u m e n t a l i s t s ,   V 2 8 ,   P 6 ;   H U L M E   E W ,   1 9 2 3 ,   S T A T I S T I C A L   B I B L I O   R ;   I K P A A H I N D I   L N ,   1 9 8 2 ,   Q   B   I A A L D ,   V 2 7 ,   P 1 6 ;   K A P L A N   N ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 5 ;   K E N D A L L   M G ,   1 9 6 0 ,   O P E R A T I O N A L   R E S   Q ,   V 1 1 ,   P 3 0 ;   K E S S L E R   M M ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 9 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K O E N I G   M E D ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 7 ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   L A W A N I   S M ,   1 9 7 3 ,   I N T   L I B R   R E V ,   V 5 ,   P 3 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 0 - 7 8 3 7 ( 7 3 ) 8 0 0 3 7 - 8 ;   L A W A N I   S M ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 1 0 9 ;   L A W A N I   S M ,   1 9 7 2 ,   U N E S C O   B U L L   L I B R ,   V 2 6 ,   P 8 8 ;   L I E M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 7 ;   L O T K A   A J ,   1 9 2 6 ,   J   W A S H I N G T O N   A C   0 1 1 6 ,   P 3 2 3 ;   L U H N   H P ,   1 9 5 7 ,   I B M   J   R E S   D E V ,   V 1 ,   P 3 0 9 ;   M A R T Y N   J ,   1 9 6 4 ,   J   D O C ,   V 2 0 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 3 5 2 ;   M A Y   K O ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 6 ,   P 8 9 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 6 . 3 7 7 7 . 8 9 0 - a ;   M A Y   K O ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 6 ,   P 8 9 2 ;   M E A D O W S   A J ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 2 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 1 8 ;   M e r t o n   R .   K . ,   1 9 6 5 ,   S H O U L D E R S   G I A N T S   S H A ;   M e r t o n   R .   K ,   1 9 7 7 ,   S O C I O L O G Y   S C I   E U R O P E ,   P 3 ;   M U R P H Y   L J ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 6 0 7 ;   N E W T O N   I ,   C I T E D   I N D I R E C T L Y ;   P O T E R   W G ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 2 1 ;   P R I C E   N ,   1 9 6 8 ,   I N F O R M   S T O R A G E   R E T ,   V 4 ,   P 2 7 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 6 8 ) 9 0 0 0 6 - 5 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R A D H A K R I S H N A N   T ,   1 9 7 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 0 ,   P 5 1 ;   R O G G E   E A ,   1 9 7 6 ,   A M   A N T H R O P O L ,   V 7 8 ,   P 8 3 5 ;   S C H I M I N O V I C H   S ,   1 9 7 1 ,   I N F O R M   S T O R A G E   R E T ,   V 6 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 1 ) 9 0 0 0 8 - 8 ;   S C H O R R   A E ,   1 9 7 4 ,   R E S   L I B R A R I A N S H I P ,   V 5 ,   P 2 0 5 ;   S C H O R R   E A ,   1 9 7 5 ,   J   A S I S ,   V 2 6 ,   P 1 8 9 ;   S I M O N   H A ,   1 9 5 7 ,   M O D E L S   M A N   S O C I A L   R A ,   P 1 4 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H G ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 2 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   T A G L I A C O Z Z O ,   1 9 6 7 ,   M E T H   I N F O R M   M E D ,   V 6 ,   P 1 3 6 ;   V I C K E R Y   B C ,   1 9 4 8 ,   J   D O C ,   V 4 ,   P 1 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 1 3 3 ;   V O O S   H ,   1 9 7 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 5 ,   P 2 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 5 0 4 1 0 ;   W e i n s t o c k   M . ,   1 9 7 1 ,   E N C Y   L I B R A R Y   I N F O R M A ,   V 5 ,   P 1 6 ;   W H I T E   D W ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 5 5 ;   W Y L L Y S   R ,   1 9 8 1 ,   L I B R A R Y   Q ,   V 3 1 ,   P 5 3 ;   Z I M A N   J M ,   1 9 6 9 ,   N A T U R E ,   V 2 2 4 ,   P 3 1 8 ,   D O I   1 0 . 1 0 3 8 / 2 2 4 3 1 8 a 0 ;   Z I P F   G K ,   1 9 6 5 ,   H U M A N   B E H A V I O R   P R I N C 	 8 0 	 2 3 	 2 7 	 2 	 5 	 M U N K S G A A R D   I N T   P U B L   L T D 	 C O P E N H A G E N 	 3 5   N O R R E   S O G A D E ,   P O   B O X   2 1 4 8 ,   D K - 1 0 1 6   C O P E N H A G E N ,   D E N M A R K 	 0 0 2 4 - 2 6 6 7 	 	 	 L I B R I 	 L i b r i 	 	 1 9 8 5 	 3 5 	 2 	 	 	 	 	 1 6 3 	 1 7 7 	 	 	 	 1 5 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A L Q 2 9 	 W O S : A 1 9 8 5 A L Q 2 9 0 0 0 0 7 	 	 
 
 J 	 L o w r y ,   P B ;   M o o d y ,   G D ;   G a s k i n ,   J ;   G a l l e t t a ,   D F ;   H u m p h e r y s ,   S L ;   B a r l o w ,   J B ;   W i l s o n ,   D W 	 	 	 	 L o w r y ,   P a u l   B e n j a m i n ;   M o o d y ,   G r e g o r y   D . ;   G a s k i n ,   J a m e s ;   G a l l e t t a ,   D e n n i s   F . ;   H u m p h e r y s ,   S e a n   L . ;   B a r l o w ,   J o r d a n   B . ;   W i l s o n ,   D a v i d   W . 	 	 	 E V A L U A T I N G   J O U R N A L   Q U A L I T Y   A N D   T H E   A S S O C I A T I O N   F O R   I N F O R M A T I O N   S Y S T E M S   S E N I O R   S C H O L A R S '   J O U R N A L   B A S K E T   V I A   B I B L I O M E T R I C   M E A S U R E S :   D O   E X P E R T   J O U R N A L   A S S E S S M E N T S   A D D   V A L U E ? 	 M I S   Q U A R T E R L Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I n f o r m a t i o n   s y s t e m s   j o u r n a l   r a n k i n g s ;   s c i e n t o m e t r i c s ;   b i b l i o m e t r i c s ;   j o u r n a l   q u a l i t y ;   S e n S - 6 ;   S e n S - 8 ;   s e l f - c i t a t i o n ;   i m p a c t   f a c t o r ;   h - i n d e x ;   s o c i a l   n e t w o r k   a n a l y s i s ;   e x p e r t   o p i n i o n ;   c o m p o s i t e   r a n k i n g   o r   r a t i n g ;   A I S   S e n i o r   S c h o l a r s   b a s k e t   o f   j o u r n a l s ;   n o m o l o g i e s   f o r   d i s s e m i n a t i o n   o f   s c i e n t i f i c   k n o w l e d g e 	 R E S E A R C H   P R O D U C T I V I T Y ;   H - I N D E X ;   C A R E E R   S U C C E S S ;   I N F L U E N T I A L   J O U R N A L S ;   R E S E A R C H   P E R F O R M A N C E ;   C O E R C I V E   C I T A T I O N ;   N E T W O R K   A N A L Y S I S ;   M A N A G E M E N T ;   B U S I N E S S ;   R A N K I N G 	 I n f o r m a t i o n   s y s t e m s   j o u r n a l   r a n k i n g s   a n d   r a t i n g s   h e l p   s c h o l a r s   f o c u s   t h e i r   p u b l i s h i n g   e f f o r t s   a n d   a r e   w i d e l y   u s e d   s u r r o g a t e s   f o r   j u d g i n g   t h e   q u a l i t y   o f   r e s e a r c h .   O v e r   t h e   y e a r s ,   n u m e r o u s   a p p r o a c h e s   h a v e   b e e n   u s e d   t o   r a n k   I S   j o u r n a l s ,   a p p r o a c h e s   s u c h   a s   c i t a t i o n   m e t r i c s ,   s c h o o l   l i s t s ,   a c c e p t a n c e   r a t e s ,   a n d   e x p e r t   a s s e s s m e n t s .   H o w e v e r ,   t h e   r e s u l t s   o f   t h e s e   a p p r o a c h e s   o f t e n   c o n f l i c t   d u e   t o   a   h o s t   o f   v a l i d i t y   c o n c e r n s .   I n   t h e   c u r r e n t   s c i e n t o m e t r i c   s t u d y ,   w e   m a k e   s i g n i f i c a n t   s t r i d e s   t o w a r d   c o r r e c t i n g   f o r   t h e s e   l i m i t a t i o n s   i n   t h e   r a n k i n g   o f   m a i n s t r e a m   I S   j o u r n a l s .   W e   c o m p a r e   e x p e r t   r a n k i n g s   t o   b i b l i o m e t r i c   m e a s u r e s   s u c h   a s   t h e   I S I   I m p a c t   F a c t o r   T ,   t h e   h - i n d e x ,   a n d   s o c i a l   n e t w o r k   a n a l y s i s   m e t r i c s .   A m o n g   o t h e r   f i n d i n g s ,   w e   c o n c l u d e   t h a t   b i b l i o m e t r i c   m e a s u r e s   p r o v i d e   v e r y   s i m i l a r   r e s u l t s   t o   e x p e r t - b a s e d   m e t h o d s   i n   d e t e r m i n i n g   a   t i e r e d   s t r u c t u r e   o f   I S   j o u r n a l s ,   t h e r e b y   s u g g e s t i n g   t h a t   b i b l i o m e t r i c s   c a n   b e   a   c o m p l e t e ,   l e s s   e x p e n s i v e ,   a n d   m o r e   e f f i c i e n t   s u b s t i t u t e   f o r   e x p e r t   a s s e s s m e n t .   W e   a l s o   f i n d   s t r o n g   s u p p o r t   f o r   s e v e n   o f   t h e   e i g h t   j o u r n a l s   i n   t h e   A s s o c i a t i o n   f o r   I n f o r m a t i o n   S y s t e m s   S e n i o r   S c h o l a r s '   " b a s k e t "   o f   j o u r n a l s .   A   c l u s t e r   a n a l y s i s   o f   o u r   r e s u l t s   i n d i c a t e s   a   t w o - t i e r e d   s e p a r a t i o n   i n   t h e   q u a l i t y   o f   t h e   h i g h e s t   q u a l i t y   I S   j o u r n a l s - w i t h   M I S   Q u a r t e r l y ,   I n f o r m a t i o n   S y s t e m s   R e s e a r c h ,   a n d   J o u r n a l   o f   M a n a g e m e n t   I n f o r m a t i o n   S y s t e m s   b e l o n g i n g ,   i n   t h a t   o r d e r ,   t o   t h e   h i g h e s t   A +   t i e r .   J o u r n a l   q u a l i t y   m e t r i c s   f i t   n i c e l y   i n t o   t h e   s o c i o l o g y   o f   s c i e n c e   l i t e r a t u r e   a n d   c a n   b e   u s e f u l   i n   m o d e l s   t h a t   a t t e m p t   t o   e x p l a i n   h o w   k n o w l e d g e   d i s s e m i n a t e s   t h r o u g h   s c i e n t i f i c   c o m m u n i t i e s . 	 [ L o w r y ,   P a u l   B e n j a m i n ]   C i t y   U n i v   H o n g   K o n g ,   C o l l   B u s i n e s s ,   D e p t   I n f o r m a t   S y s t ,   H o n g   K o n g ,   H o n g   K o n g ,   P e o p l e s   R   C h i n a ;   [ M o o d y ,   G r e g o r y   D . ]   U n i v   N e v a d a ,   L e e   B u s i n e s s   S c h ,   D e p t   M a n a g e m e n t   E n t r e p r e n e u r s h i p   &   T e c h n o l ,   L a s   V e g a s ,   N V   8 9 1 5 4   U S A ;   [ G a s k i n ,   J a m e s ]   B r i g h a m   Y o u n g   U n i v ,   M a r r i o t t   S c h   M a n a g e m e n t ,   D e p t   I n f o r m a t   S y s t ,   P r o v o ,   U T   8 4 6 0 2   U S A ;   [ G a l l e t t a ,   D e n n i s   F . ]   U n i v   P i t t s b u r g h ,   K a t z   S c h   B u s i n e s s ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A ;   [ H u m p h e r y s ,   S e a n   L . ]   W e s t   T e x a s   A & M   U n i v ,   C o l l   B u s i n e s s ,   C a n y o n ,   T X   7 9 0 1 6   U S A ;   [ B a r l o w ,   J o r d a n   B . ]   I n d i a n a   U n i v ,   K e l l e y   S c h   B u s i n e s s ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A ;   [ W i l s o n ,   D a v i d   W . ]   U n i v   A r i z o n a ,   E l l e r   C o l l   M a n a g e m e n t ,   D e p t   M a n a g e m e n t   I n f o r m a t   S y s t ,   T u c s o n ,   A Z   8 5 7 2 1   U S A 	 L o w r y ,   P B   ( r e p r i n t   a u t h o r ) ,   C i t y   U n i v   H o n g   K o n g ,   C o l l   B u s i n e s s ,   D e p t   I n f o r m a t   S y s t ,   H o n g   K o n g ,   H o n g   K o n g ,   P e o p l e s   R   C h i n a . 	 P a u l . L o w r y . P h D @ g m a i l . c o m ;   g r e g . m o o d y @ u n l v . e d u ;   j a m e s . e r i c . g a s k i n @ g m a i l . c o m ;   g a l l e t t a @ k a t z . p i t t . e d u ;   s h u m p h e r y s @ w t a m u . e d u ;   j o r d y . b a r l o w @ g m a i l . c o m ;   d a v e w i l s o n p h d @ g m a i l . c o m 	 L o w r y ,   P a u l / A - 2 7 9 0 - 2 0 0 8 	 L o w r y ,   P a u l / 0 0 0 0 - 0 0 0 2 - 0 1 8 7 - 5 8 0 8 	 C i t y   U n i v e r s i t y   o f   H o n g   K o n g   U C G   [ 7 2 0 0 2 5 6 ] 	 W e   a p p r e c i a t e   t h e   p a r t i a l   f u n d i n g   f o r   t h i s   p r o j e c t   f r o m   C i t y   U n i v e r s i t y   o f   H o n g   K o n g   U C G   G r a n t   #   7 2 0 0 2 5 6 .   W e   a r e   i n d e b t e d   t o   D e t m a r   S t r a u b ,   t o   t h e   a s s o c i a t e   e d i t o r ,   a n d   t o   t h e   r e v i e w e r s   f o r   t h e i r   r i g o r o u s   o v e r s i g h t   a n d   f e e d b a c k   t h a t   r e s u l t e d   i n   a   m u c h   i m p r o v e d   m a n u s c r i p t .   W e   a p p r e c i a t e   r e v i e w s   a n d   f e e d b a c k   o n   p r e v i o u s   v e r s i o n s   o f   t h i s   w o r k   f r o m   R i t u   A g a r w a l ,   J o e y   G e o r g e ,   M i k e   D e n n y ,   L a u r a   R a w l i n s ,   a n d   L e s l i e   W i l c o c k s .   W e   a l s o   a p p r e c i a t e   c o n t r i b u t i o n s   t o   e a r l i e r   p o r t i o n s   o f   t h i s   r e s e a r c h   f r o m   J a r e d   v a n   d e r   H o r s t . 	 A c u n a   D E ,   2 0 1 2 ,   N A T U R E ,   V 4 8 9 ,   P 2 0 1 ,   D O I   1 0 . 1 0 3 8 / 4 8 9 2 0 1 a ;   A D L E R   N J ,   1 9 9 2 ,   J   I N T   B U S   S T U D ,   V 2 3 ,   P 5 5 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 2 7 9 ;   A I S ,   2 0 1 1 ,   S E N   S C H O L   B A S K   J ;   A l l e n   L . ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ;   A x a r l o g l o u   K ,   2 0 0 3 ,   J   E U R   E C O N   A S S O C ,   V 1 ,   P 1 4 0 2 ,   D O I   1 0 . 1 1 6 2 / 1 5 4 2 4 7 6 0 3 3 2 2 7 5 2 5 8 4 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B a s k e r v i l l e   R ,   1 9 9 8 ,   E U R   J   I N F O R M   S Y S T ,   V 7 ,   P 9 0 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 2 9 8 ;   B a s k e r v i l l e   R ,   2 0 0 8 ,   E U R   J   I N F O R M   S Y S T ,   V 1 7 ,   P 1 5 6 ,   D O I   1 0 . 1 0 5 7 / e j i s . 2 0 0 8 . 7 ;   B O N A C I C H   P ,   1 9 8 7 ,   A M   J   S O C I O L ,   V 9 2 ,   P 1 1 7 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 8 6 3 1 ;   B o n n e r   S E ,   2 0 0 6 ,   A C C O U N T   O R G   S O C ,   V 3 1 ,   P 6 6 3 ,   D O I   1 0 . 1 0 1 6 / j . a o s . 2 0 0 5 . 0 6 . 0 0 3 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 6 ;   B o r n m a n n   L ,   2 0 0 9 ,   E M B O   R E P ,   V 1 0 ,   P 2 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 0 8 . 2 3 3 ;   B U T L E R   L i n d a ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 8 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 7 ;   C a b e l l   D .   W .   E ,   2 0 0 4 ,   C A B E L L S   D I R E C T O R Y   P U ;   C a l i n s k i   T . ,   1 9 7 4 ,   C O M M U N   S T A T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 6 1 0 9 2 7 4 0 8 8 2 7 1 0 1 ;   C A M P B E L L   D T ,   1 9 5 9 ,   P S Y C H O L   B U L L ,   V 5 6 ,   P 8 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 4 6 0 1 6 ;   C A M P B E L L   D T ,   1 9 6 0 ,   A M   P S Y C H O L ,   V 1 5 ,   P 5 4 6 ,   D O I   1 0 . 1 0 3 7 / h 0 0 4 8 2 5 5 ;   C a m p b e l l   J .   P . ,   1 9 8 2 ,   W H A T   S T U D Y   G E N E R A T I N ;   C a r n e g i e   F o u n d a t i o n ,   2 0 1 0 ,   C A R N   C L A S S   I   H I G H   E D ;   C h e n   C R ,   2 0 0 7 ,   J   C O R P   F I N A N C ,   V 1 3 ,   P 1 0 0 8 ,   D O I   1 0 . 1 0 1 6 / j . j c o r p f i n . 2 0 0 7 . 0 4 . 0 1 1 ;   C h u a   C . ,   2 0 0 3 ,   J   A S S O C   I N F   S Y S T ,   V 3 ,   P 1 4 5 ;   C l a r k e   R . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ,   P 9 1 ;   C r e w s   J .   M . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ,   P 9 7 ;   C U L N A N   M J ,   1 9 8 6 ,   M I S   Q U A R T ,   V 1 0 ,   P 2 8 9 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 2 6 3 ;   D A F T   R L ,   1 9 8 7 ,   A C A D   M A N A G E   J ,   V 3 0 ,   P 7 6 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 1 5 9 ;   D a v i s   M .   S . ,   1 9 7 1 ,   P H I L O S   S O C   S C I ,   V 1 ,   P 3 0 9 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 0 4 8 3 9 3 1 7 1 0 0 1 0 0 2 1 1 ;   D e a n   D L ,   2 0 1 1 ,   M I S   Q U A R T ,   V 3 5 ,   P 1 ;   D e n n i s   A R ,   2 0 0 6 ,   M I S   Q U A R T ,   V 3 0 ,   P 1 ;   D o l n i c a r   S ,   2 0 0 2 ,   A U S T R   N Z   M A R K   A C   C   2 ;   D R E H E R   G F ,   1 9 9 1 ,   J   A P P L   P S Y C H O L ,   V 7 6 ,   P 3 9 2 ,   D O I   1 0 . 1 0 3 7 / 0 0 2 1 - 9 0 1 0 . 7 6 . 3 . 3 9 2 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F e r r a t t   T .   W . ,   2 0 0 7 ,   C O M M U N I C A T I O N S   A S S   I ,   V 1 9 ,   P 7 1 0 ;   F e r s h t   A ,   2 0 0 9 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 6 ,   P 6 8 8 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 9 0 3 3 0 7 1 0 6 ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   G a l l e t t a   D . ,   2 0 1 0 ,   P   3 1   I N T   C   I N F   S Y S T ;   G a l l i e r s   R . D . ,   2 0 0 3 ,   C O M M U N I C A T I O N S   A S S   I ,   V 1 1 ,   P 1 0 8 ;   G a l l i v a n   M J ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 3 6 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 6 7 ;   G a r f i e l d   E . ,   2 0 0 5 ,   I N T   C   P E E R   R E V   B I O M ;   G o n z a l e z - P e r e i r a   B ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 2 ;   G r a n t   A M ,   2 0 0 8 ,   J   A P P L   P S Y C H O L ,   V 9 3 ,   P 4 8 ,   D O I   1 0 . 1 0 3 7 / 0 0 2 1 - 9 0 1 0 . 9 3 . 1 . 4 8 ;   G r a y   P . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ;   H a i r   J r   J F ,   2 0 0 9 ,   M U L T I V A R I A T E   D A T A   A N ;   I v e s   B . ,   1 9 8 0 ,   P   1   I N T   C   I N F   S Y S T   P ,   P 2 2 0 ;   H a r d g r a v e   B C ,   1 9 9 7 ,   C O M M U N   A C M ,   V 4 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 4 5 / 2 6 5 6 8 4 . 2 6 5 7 0 0 ;   H a r n a d   S . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 1 0 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 8 ;   H a r v e y   C . ,   2 0 0 7 ,   A C A D   J   Q U A L I T Y   G U I D E ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H e n d r i x   D ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 6 0 - 2 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I i v a r i   J ,   2 0 0 8 ,   E U R   J   I N F O R M   S Y S T ,   V 1 7 ,   P 1 6 9 ,   D O I   1 0 . 1 0 5 7 / e j i s . 2 0 0 8 . 1 0 ;   J u d g e   T A ,   2 0 0 9 ,   J   A P P L   P S Y C H O L ,   V 9 4 ,   P 7 4 2 ,   D O I   1 0 . 1 0 3 7 / a 0 0 1 5 4 9 7 ;   K a r u g a   G .   G . ,   2 0 0 7 ,   C O M M U N I C A T I O N S   A I S ,   V 2 0 0 7 ,   P 1 1 5 ;   K a t e r a t t a n a k u l   P ,   2 0 0 3 ,   E U R   J   I N F O R M   S Y S T ,   V 1 2 ,   P 6 0 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 4 4 7 ;   K O N R A D   A M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 2 5 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 3 9 1 ;   K o z a r   K .   A . ,   2 0 0 6 ,   C O M M U N I C A T I O N S   A I S ,   V 2 0 0 6 ,   P 5 2 4 ;   L e w i s   B R ,   2 0 0 7 ,   J   A S S O C   I N F   S Y S T ,   V 8 ,   P 6 1 9 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   L i   E .   Y . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ,   P 2 1 ;   L o n g   R G ,   1 9 9 8 ,   A C A D   M A N A G E   J ,   V 4 1 ,   P 7 0 4 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 9 6 6 ;   L o w r y   P . ,   2 0 0 4 ,   J   A S S O C   I N F   S Y S T ,   V 5 ,   P 2 9 ;   L y n c h   J G ,   2 0 1 2 ,   S C I E N C E ,   V 3 3 5 ,   P 1 1 6 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 3 5 . 6 0 7 3 . 1 1 6 9 - a ;   M a s l a c h   C ,   2 0 0 8 ,   J   A P P L   P S Y C H O L ,   V 9 3 ,   P 4 9 8 ,   D O I   1 0 . 1 0 3 7 / 0 0 2 1 - 9 0 1 0 . 9 3 . 3 . 4 9 8 ;   M c V e i g h   M .   E . ,   2 0 0 4 ,   O P E N   A C C E S S   J   I S I   C I ;   M e h o   L I ,   2 0 0 7 ,   P H Y S   W O R L D ,   V 2 0 ,   P 3 2 ;   M i l l e r   C .   W . ,   2 0 0 6 ,   A R X I V P H Y S I C S 0 6 0 8 1 8 3 V ;   M i n g e r s   J ,   2 0 0 7 ,   E U R   J   I N F O R M   S Y S T ,   V 1 6 ,   P 3 0 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . e j i s . 3 0 0 0 6 9 6 ;   M y l o n o p o u l o s   N A ,   2 0 0 1 ,   C O M M U N   A C M ,   V 4 4 ,   P 2 9 ,   D O I   1 0 . 1 1 4 5 / 3 8 3 6 9 4 . 3 8 3 7 0 1 ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   O z b i l g i n   M F ,   2 0 0 9 ,   A C A D   M A N A G   L E A R N   E D U ,   V 8 ,   P 1 1 3 ;   P e f f e r s   K . ,   2 0 0 3 ,   J   I N F O R M A T I O N   T E C H N O ,   V 5 ,   P 6 3 ;   P F E F F E R   J ,   1 9 9 3 ,   A D M I N   S C I   Q U A R T ,   V 3 8 ,   P 3 8 2 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 3 7 3 ;   P o l i t e s   G L ,   2 0 0 9 ,   J   A S S O C   I N F   S Y S T ,   V 1 0 ,   P 5 9 5 ;   P o r t a   S ,   2 0 0 6 ,   E N V I R O N   P L A N N   B ,   V 3 3 ,   P 7 0 5 ,   D O I   1 0 . 1 0 6 8 / b 3 2 0 4 5 ;   R a i n e r   R K ,   2 0 0 5 ,   C O M M U N   A C M ,   V 4 8 ,   P 9 1 ,   D O I   1 0 . 1 1 4 5 / 1 0 4 2 0 9 1 . 1 0 4 2 0 9 6 ;   R o m a n o   N .   C . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ,   P 4 1 ;   S a r k i s   J . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ,   P 1 4 1 ;   S a r l e   W .   S . ,   1 9 9 3 ,   P 2 5 6   S A S   I   I N C ;   S A S ,   1 9 9 9 ,   I N T R   C L U S T   P R O C   N U M B ;   S a u n d e r s   C . ,   2 0 0 7 ,   A I S   S E N I O R   S C H O L A R S ;   S e i b e r t   S E ,   1 9 9 9 ,   J   A P P L   P S Y C H O L ,   V 8 4 ,   P 4 1 6 ,   D O I   1 0 . 1 0 3 7 / / 0 0 2 1 - 9 0 1 0 . 8 4 . 3 . 4 1 6 ;   S e l l e r s   S L ,   2 0 0 4 ,   J   S O C   W O R K   E D U C ,   V 4 0 ,   P 1 4 3 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   S o m b a t s o m p o p   N ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 6 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 5 0 ;   S T E P H E N S O N   K ,   1 9 8 9 ,   S O C   N E T W O R K S ,   V 1 1 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 9 ) 9 0 0 1 6 - 6 ;   S t r a u b   D . ,   2 0 1 0 ,   M I S   Q ,   V 3 4 ,   p i i i ;   S t r a u b   D e t m a r   W . ,   2 0 0 4 ,   C O M M U N I C A T I O N S   A S S   I ,   V 1 3 ,   P 3 8 0 ;   S t r a u b   D ,   2 0 0 6 ,   J   A S S O C   I N F   S Y S T ,   V 7 ,   P 2 4 1 ;   S t r a u b   D W ,   2 0 0 9 ,   C A I S ,   V 2 5 ,   P 5 7 ;   S v e n s s o n   G . ,   2 0 0 6 ,   E U R O P E A N   B U S I N E S S   R E ,   V 1 8 ,   P 4 5 7 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 5 5 3 4 0 6 1 0 7 1 1 0 8 5 ;   T r i e s c h m a n n   J S ,   2 0 0 0 ,   A C A D   M A N A G E   J ,   V 4 3 ,   P 1 1 3 0 ,   D O I   1 0 . 2 3 0 7 / 1 5 5 6 3 4 1 ;   T r k m a n   P . ,   2 0 0 9 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 5 ,   P 1 6 5 ;   T r u e x   D ,   2 0 0 9 ,   J   A S S O C   I N F   S Y S T ,   V 1 0 ,   P 5 6 0 ;   V a l a c i c h   J S ,   2 0 0 6 ,   I N F O R M   S Y S T   R E S ,   V 1 7 ,   P 1 0 7 ,   D O I   1 0 . 1 2 8 7 / i s r e . 1 0 6 0 . 0 0 8 9 ;   v a n   D a l e n   H P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 0 8 3 1 7 1 8 ;   W a l s h   J P ,   2 0 1 1 ,   A C A D   M A N A G E   R E V ,   V 3 6 ,   P 2 1 5 ;   W a l s t r o m   K A ,   2 0 0 1 ,   I N F O R M   M A N A G E ,   V 3 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 2 0 6 ( 0 1 ) 0 0 0 8 4 - 2 ;   W h i t m a n   M E ,   1 9 9 9 ,   I N F O R M   S Y S T   R E S ,   V 1 0 ,   P 9 9 ,   D O I   1 0 . 1 2 8 7 / i s r e . 1 0 . 2 . 9 9 ;   W i l h i t e   A W ,   2 0 1 2 ,   S C I E N C E ,   V 3 3 5 ,   P 5 4 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 1 2 5 4 0 ;   W i l l c o c k s   L ,   2 0 0 8 ,   E U R   J   I N F O R M   S Y S T ,   V 1 7 ,   P 1 6 3 ,   D O I   1 0 . 1 0 5 7 / e j i s . 2 0 0 8 . 9 ;   W i l l i a m s o n   I O ,   2 0 0 3 ,   J   O R G A N   B E H A V ,   V 2 4 ,   P 2 5 ,   D O I   1 0 . 1 0 0 2 / j o b . 1 7 8 ;   W o l f f   H G ,   2 0 0 9 ,   J   A P P L   P S Y C H O L ,   V 9 4 ,   P 1 9 6 ,   D O I   1 0 . 1 0 3 7 / a 0 0 1 3 3 5 0 ;   Z h a n g   C T ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 5 4 2 9 	 1 0 2 	 2 2 	 2 2 	 2 5 	 1 1 3 	 S O C   I N F O R M   M A N A G E - M I S   R E S   C E N T 	 M I N N E A P O L I S 	 U N I V   M I N N E S O T A - S C H   M A N A G E M E N T   2 7 1   1 9 T H   A V E   S O U T H ,   M I N N E A P O L I S ,   M N   5 5 4 5 5   U S A 	 0 2 7 6 - 7 7 8 3 	 	 	 M I S   Q U A R T 	 M I S   Q . 	 D E C 	 2 0 1 3 	 3 7 	 4 	 	 	 	 	 9 9 3 	 + 	 	 	 	 4 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e ;   M a n a g e m e n t 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e ;   B u s i n e s s   &   E c o n o m i c s 	 2 9 0 K X 	 W O S : 0 0 0 3 2 9 7 5 6 8 0 0 0 0 2 	 	 
 
 J 	 B o r n m a n n ,   L 	 	 	 	 B o r n m a n n ,   L u t z 	 	 	 H o w   t o   a n a l y z e   p e r c e n t i l e   c i t a t i o n   i m p a c t   d a t a   m e a n i n g f u l l y   i n   b i b l i o m e t r i c s :   T h e   s t a t i s t i c a l   a n a l y s i s   o f   d i s t r i b u t i o n s ,   p e r c e n t i l e   r a n k   c l a s s e s ,   a n d   t o p - c i t e d   p a p e r s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s 	 P R E D I C T I V E - V A L I D I T Y ;   I N D I C A T O R S ;   E X C E L L E N C E ;   C O U N T S ;   I N D E X 	 A c c o r d i n g   t o   c u r r e n t   r e s e a r c h   i n   b i b l i o m e t r i c s ,   p e r c e n t i l e s   ( o r   p e r c e n t i l e   r a n k   c l a s s e s )   a r e   t h e   m o s t   s u i t a b l e   m e t h o d   f o r   n o r m a l i z i n g   t h e   c i t a t i o n   c o u n t s   o f   i n d i v i d u a l   p u b l i c a t i o n s   i n   t e r m s   o f   t h e   s u b j e c t   a r e a ,   t h e   d o c u m e n t   t y p e ,   a n d   t h e   p u b l i c a t i o n   y e a r .   U p   t o   n o w ,   b i b l i o m e t r i c   r e s e a r c h   h a s   c o n c e r n e d   i t s e l f   p r i m a r i l y   w i t h   t h e   c a l c u l a t i o n   o f   p e r c e n t i l e s .   T h i s   s t u d y   s u g g e s t s   h o w   p e r c e n t i l e s   ( a n d   p e r c e n t i l e   r a n k   c l a s s e s )   c a n   b e   a n a l y z e d   m e a n i n g f u l l y   f o r   a n   e v a l u a t i o n   s t u d y .   P u b l i c a t i o n   s e t s   f r o m   f o u r   u n i v e r s i t i e s   a r e   c o m p a r e d   w i t h   e a c h   o t h e r   t o   p r o v i d e   s a m p l e   d a t a .   T h e s e   s u g g e s t i o n s   t a k e   i n t o   a c c o u n t   o n   t h e   o n e   h a n d   t h e   d i s t r i b u t i o n   o f   p e r c e n t i l e s   o v e r   t h e   p u b l i c a t i o n s   i n   t h e   s e t s   ( u n i v e r s i t i e s   h e r e )   a n d   o n   t h e   o t h e r   h a n d   c o n c e n t r a t e   o n   t h e   r a n g e   o f   p u b l i c a t i o n s   w i t h   t h e   h i g h e s t   c i t a t i o n   i m p a c t t h a t   i s ,   t h e   r a n g e   t h a t   i s   u s u a l l y   o f   m o s t   i n t e r e s t   i n   t h e   e v a l u a t i o n   o f   s c i e n t i f i c   p e r f o r m a n c e . 	 A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 	 	 	 A l b a r r a n   P ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 3 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 0 7 - 9 ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B o r n m a n n   L ,   J   A M   S O C   I N F O R M   S C I ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 6 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 8 . 0 0 4 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   R   S T A T   S O C   A   S T A T ,   V 1 7 4 ,   P 8 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 8 5 X . 2 0 1 1 . 0 0 6 8 9 . x ;   B o r n m a n n   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 1 8 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 9 ;   B o r n m a n n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 4 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 4 . 0 0 4 ;   B o y a c k   K W ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 9 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 0 9 1 0 0 ;   C o h e n   J ,   1 9 8 8 ,   S T A T   P O W E R   A N A L   B E H A ;   C o x   N .   J . ,   2 0 0 4 ,   S T A T A   J ,   V 4 ,   P 1 9 0 ;   H a r d i n   J a m e s   W . ,   2 0 1 2 ,   G E N   L I N E A R   M O D E L S   E X ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o s m e r   D W ,   2 0 0 0 ,   A P P L   L O G I S T I C   R E G R E S ;   K o h l e r   U . ,   2 0 0 9 ,   D A T A   A N A L   U S I N G   S T A T ;   L e y d e s d o r f f   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 3 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 1 4 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 9 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 3 4 ;   M a u r e r   H ,   2 0 1 2 ,   T H E O R   C O M P U T   S C I ,   V 4 2 9 ,   P 2 2 2 ,   D O I   1 0 . 1 0 1 6 / j . t c s . 2 0 1 1 . 1 2 . 0 4 2 ;   M i t c h e l l   M .   N . ,   2 0 1 2 ,   I N T E R P R E T I N G   V I S U A L I ;   M u t z   R ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 2 . 0 0 6 ;   N a t i o n a l   S c i e n c e   B o a r d ,   2 0 1 2 ,   S C I   E N G   I N D   2 0 1 2 ;   P r a t h a p   G ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 1 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 2 0 - 1 ;   R a b e - H e s k e t h   S ,   2 0 0 4 ,   H D B   S T A T   A N A L   U S I N G ;   R a d i c c h i   F . ,   2 0 1 1 ,   P H Y S   R E V   E ,   V 8 3 ;   R o u s s e a u   R ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 8 4 ;   S c h r e i b e r   M . ,   2 0 1 2 ,   U N C E R T A I N T I E S   A M B I G U ;   S c h r e i b e r   M ,   2 0 1 2 ,   I N C O N S I S T E N C I E S   R E C E ,   P 3 8 6 1 ;   S h e s k i n   D .   J . ,   2 0 0 7 ,   H D B   P A R A M E T R I C   N O N P A ;   S t a t a   C o r p o r a t i o n ,   2 0 1 1 ,   S T A T   S T A T   S O F T W   R E L ;   T i j s s e n   R . ,   2 0 0 6 ,   9   I N T   C   S C I   T E C H N   I N ,   P 1 4 6 ;   T i j s s e n   R J W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 8 2 4 3 2 6 6 0 ;   W a g n e r   C .   S ,   2 0 1 2 ,   I N T E G R A T E D   I M P A C T   I N ;   W a l t m a n   L . ,   2 0 1 2 ,   L E I D E N   R A N K I N G   2 0 1 1 ;   W a l t m a n   L ,   2 0 1 2 ,   C A L C U L A T I O N   P E R C E N T I ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 0 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 7 8 ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 ;   W i l l i a m s   R ,   2 0 1 2 ,   S T A T A   J ,   V 1 2 ,   P 3 0 8 ;   Z i t t   M ,   2 0 0 9 ,   P   1 2   C   I N T   S O C   S O C   I 	 4 3 	 2 2 	 2 2 	 5 	 6 0 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A R 	 2 0 1 3 	 6 4 	 3 	 	 	 	 	 5 8 7 	 5 9 5 	 	 1 0 . 1 0 0 2 / a s i . 2 2 7 9 2 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 0 4 S I 	 W O S : 0 0 0 3 2 3 3 8 8 8 0 0 0 1 2 	 	 
 
 J 	 J u z n i c ,   P ;   P e c l i n ,   S ;   Z a u c e r ,   M ;   M a n d e l j ,   T ;   P u s n i k ,   M ;   D e m s a r ,   F 	 	 	 	 J u z n i c ,   P r i m o z ;   P e c l i n ,   S t o j a n ;   Z a u c e r ,   M a t j a z ;   M a n d e l j ,   T i l e n ;   P u s n i k ,   M i r o ;   D e m s a r ,   F r a n c i 	 	 	 S c i e n t o m e t r i c   i n d i c a t o r s :   p e e r - r e v i e w ,   b i b l i o m e t r i c   m e t h o d s   a n d   c o n f l i c t   o f   i n t e r e s t s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 S c i e n t o m e t r i c   i n d i c a t o r s ;   R e s e a r c h   p r o j e c t   p r o p o s a l s ;   E x   p o s t   e v a l u a t i o n ;   P e e r   r e v i e w   s y s t e m s ;   C o n f l i c t   o f   i n t e r e s t s 	 S C I E N T I F I C   E X C E L L E N C E ;   S C I E N C E   P O L I C Y ;   J O U R N A L   I M P A C T ;   C I T A T I O N ;   P U B L I C A T I O N S ;   E X E R C I S E S ;   P H Y S I C S ;   C O U N T S ;   S Y S T E M 	 T h e   p a p e r   d i s c u s s e s   t h e   r o l e   o f   s c i e n t o m e t r i c   i n d i c a t o r s   i n   p e e r - r e v i e w   s e l e c t i o n   o f   r e s e a r c h   p r o j e c t   p r o p o s a l s .   A n   e x   p o s t   f a c t o   e v a l u a t i o n   w a s   m a d e   o f   t h r e e   c a l l s   f o r   r e s e a r c h   p r o j e c t   p r o p o s a l s   i n   S l o v e n i a :   2 0 0 3   w i t h   a   p e e r   r e v i e w   s y s t e m   d e s i g n e d   i n   a   w a y   t h a t   c o n f l i c t   o f   i n t e r e s t   w a s   n o t   a v o i d e d   e f f e c t i v e l y ,   2 0 0 5   w i t h   a   s o u n d   i n t e r n a t i o n a l   p e e r - r e v i e w   s y s t e m   w i t h   m i n i m i z e d   c o n f l i c t   o f   i n t e r e s t   i n f l u e n c e   b u t   a   l i m i t e d   n u m b e r   o f   r e v i e w e r s ,   a n d   2 0 0 8   w i t h   a   c o m b i n a t i o n   o f   s c i e n t o m e t r i c   i n d i c a t o r s   a n d   a   s o u n d   i n t e r n a t i o n a l   p e e r   r e v i e w   w i t h   m i n i m i z e d   c o n f l i c t   o f   i n t e r e s t   i n f l u e n c e .   T h e   h y p o t h e s i s   w a s   t h a t   t h e   t h r e e   d i f f e r e n t   p e e r   r e v i e w   s y s t e m s   w o u l d   h a v e   d i f f e r e n t   c o r r e l a t i o n s   w i t h   t h e   s a m e   s e t   o f   s c i e n t o m e t r i c   i n d i c a t o r s .   I n   t h e   l a s t   t w o   d e c i s i o n - m a k i n g   s y s t e m s   ( 2 0 0 5   a n d   2 0 0 8 )   w h e r e   c o n f l i c t   o f   i n t e r e s t   w a s   e f f e c t i v e l y   a v o i d e d ,   w e   h a v e   a   h i g h   p e r c e n t a g e   ( 6 5 % )   o f   p r o j e c t s   t h a t   w o u l d   h a v e   b e e n   s e l e c t e d   i n   t h e   c a l l   i r r e s p e c t i v e   o f   t h e   m e t h o d   ( p e e r   r e v i e w   o r   b i b l i o m e t r i c s   s o l e l y ) .   I n   c o n t r a s t ,   i n   t h e   2 0 0 3   c a l l   t h e r e   i s   a   s i g n i f i c a n t l y   s m a l l e r   p e r c e n t a g e   ( 4 9 % )   o f   p r o j e c t s   t h a t   w o u l d   h a v e   b e e n   s e l e c t e d   i n   t h e   c a l l   i r r e s p e c t i v e   o f   t h e   m e t h o d   ( p e e r   r e v i e w   o r   b i b l i o m e t r i c s   s o l e l y ) .   I t   w a s   s h o w n   t h a t   w h i l e   s c i e n t o m e t r i c   i n d i c a t o r s   c a n   h a r d l y   r e p l a c e   t h e   p e e r - r e v i e w   s y s t e m   a s   t h e   u l t i m a t e   d e c i s i o n - m a k i n g   a n d   s u p p o r t   s y s t e m ,   t h e y   c a n   r e v e a l   i t s   w e a k n e s s e s   o n   o n e   h a n d   a n d   o n   t h e   o t h e r   c a n   v e r i f y   p e e r - r e v i e w   s c o r e s   a n d   m i n i m i z e   c o n f l i c t   o f   i n t e r e s t   i f   n e c e s s a r y . 	 [ J u z n i c ,   P r i m o z ]   U n i v   L j u b l j a n a ,   F a c   A r t s ,   D e p t   L i b   &   I n f o r m a t   S c i   &   B o o k   S t u d i e s ,   L j u b l j a n a ,   S l o v e n i a ;   [ P e c l i n ,   S t o j a n ;   D e m s a r ,   F r a n c i ]   S l o v e n i a n   R e s   A g c y   A R R S ,   L j u b l j a n a ,   S l o v e n i a ;   [ Z a u c e r ,   M a t j a z ;   M a n d e l j ,   T i l e n ;   P u s n i k ,   M i r o ]   U n i v   L j u b l j a n a ,   C e n t   T e c h n o l   L i b ,   L j u b l j a n a ,   S l o v e n i a 	 J u z n i c ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   L j u b l j a n a ,   F a c   A r t s ,   D e p t   L i b   &   I n f o r m a t   S c i   &   B o o k   S t u d i e s ,   L j u b l j a n a ,   S l o v e n i a . 	 p r i m o z . j u z n i c @ f f . u n i - l j . s i ;   s t o j a n . p e c l i n @ a r r s . s i ;   m a t j a z . z a u c e r @ c t k . u n i - l j . s i ;   t i l e n . m a n d e l j @ c t k . u n i - l j . s i ;   m i r o . p u s n i k @ c t k . u n i - l j . s i ;   f d @ a r r s . s i 	 	 	 	 	 A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   B o r n m a n n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 1 - 1 ;   B u t l e r   L ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 ;   C o c c i a   M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 0 6 - 2 ;   C O L E   S ,   1 9 8 1 ,   S C I E N C E ,   V 2 1 4 ,   P 8 8 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 3 0 2 5 6 6 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 2 6 3 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 8 ;   H a e f f n e r - C a v a i l l o n   N ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 3 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 4 - 2 ;   L a r s e n   P O ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 9 1 - 6 ;   M o e d   H F ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 3 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   R E I N H A R T   M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   P 1 ;   R i g b y   J ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 7 0 - y ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   R i n i a   E J ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 8 2 - 2 ;   S a n d s t r o m   U ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 1 - 3 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S o r c a n   S t o j a n ,   2 0 0 8 ,   Z N A N S T V E N O   R A Z I S K O V A ;   v a n   L e e u w e n   T N ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 1 4 1 8 1 9 3 0 2 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   V a n c l a y   J K ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 7 7 8 - 4 ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   W a r n e r   J ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 5 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 5 6 ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 	 2 3 	 2 2 	 2 2 	 2 	 5 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 N O V 	 2 0 1 0 	 8 5 	 2 	 	 	 	 	 4 2 9 	 4 4 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 3 0 - 8 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 5 2 Y J 	 W O S : 0 0 0 2 8 2 0 4 8 2 0 0 0 0 4 	 	 
 
 J 	 L i ,   J A ;   S a n d e r s o n ,   M ;   W i l l e t t ,   P ;   N o r r i s ,   M ;   O p p e n h e i m ,   C 	 	 	 	 L i ,   J i a n g ;   S a n d e r s o n ,   M a r k ;   W i l l e t t ,   P e t e r ;   N o r r i s ,   M i c h a e l ;   O p p e n h e i m ,   C h a r l e s 	 	 	 R a n k i n g   o f   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e   r e s e a r c h e r s :   C o m p a r i s o n   o f   d a t a   s o u r c e s   f o r   c o r r e l a t i n g   c i t a t i o n   d a t a ,   a n d   e x p e r t   j u d g m e n t s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 E x p e r t   j u d g m e n t s ;   g - i n d e x ;   h - i n d e x ;   H - i n d e x ;   L i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e ;   P e e r   r e v i e w 	 W E B - O F - S C I E N C E ;   B I B L I O M E T R I C   I N D I C A T O R S ;   G O O G L E - S C H O L A R ;   H - I N D E X ;   S O C I A L - S C I E N C E S ;   P E E R   J U D G M E N T ;   P U B L I C A T I O N S ;   S C O P U S ;   U N I V E R S I T Y ;   P H Y S I C S 	 T h i s   p a p e r   s t u d i e s   t h e   c o r r e l a t i o n s   b e t w e e n   p e e r   r e v i e w   a n d   c i t a t i o n   i n d i c a t o r s   w h e n   e v a l u a t i n g   r e s e a r c h   q u a l i t y   i n   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e   ( L I S ) .   F o r t y - t w o   L I S   e x p e r t s   p r o v i d e d   j u d g m e n t s   o n   a   5 - p o i n t   s c a l e   o f   t h e   q u a l i t y   o f   r e s e a r c h   p u b l i s h e d   b y   1 0 1   s c h o l a r s ;   t h e   m e d i a n   r a n k i n g s   r e s u l t i n g   f r o m   t h e s e   j u d g m e n t s   w e r e   t h e n   c o r r e l a t e d   w i t h   h - ,   g -   a n d   H - i n d e x   v a l u e s   c o m p u t e d   u s i n g   t h r e e   d i f f e r e n t   s o u r c e s   o f   c i t a t i o n   d a t a :   W e b   o f   S c i e n c e   ( W o S ) ,   S c o p u s   a n d   G o o g l e   S c h o l a r   ( G S ) .   T h e   t w o   v a r i a n t s   o f   t h e   b a s i c   h - i n d e x   c o r r e l a t e d   m o r e   s t r o n g l y   w i t h   p e e r   j u d g m e n t   t h a n   d i d   t h e   h - i n d e x   i t s e l f ;   c i t a t i o n   d a t a   f r o m   S c o p u s   w a s   m o r e   s t r o n g l y   c o r r e l a t e d   w i t h   t h e   e x p e r t   j u d g m e n t s   t h a n   w a s   d a t a   f r o m   G S ,   w h i c h   i n   t u r n   w a s   m o r e   s t r o n g l y   c o r r e l a t e d   t h a n   d a t a   f r o m   W o S ;   c o r r e l a t i o n s   f r o m   a   c a r e f u l l y   c l e a n e d   v e r s i o n   o f   G S   d a t a   w e r e   l i t t l e   d i f f e r e n t   f r o m   t h o s e   o b t a i n e d   u s i n g   s w i f t l y   g a t h e r e d   G S   d a t a ;   t h e   i n d i c e s   f r o m   t h e   c i t a t i o n   d a t a b a s e s   r e s u l t e d   i n   b r o a d l y   s i m i l a r   r a n k i n g s   o f   t h e   L I S   a c a d e m i c s ;   G S   d i s a d v a n t a g e d   r e s e a r c h e r s   i n   b i b l i o m e t r i c s   c o m p a r e d   t o   t h e   o t h e r   t w o   c i t a t i o n   d a t a b a s e   w h i l e   W o S   d i s a d v a n t a g e d   r e s e a r c h e r s   i n   t h e   m o r e   t e c h n i c a l   a s p e c t s   o f   i n f o r m a t i o n   r e t r i e v a l ;   a n d   e x p e r t s   f r o m   t h e   U K   a n d   o t h e r   E u r o p e a n   c o u n t r i e s   r a t e d   U K   a c a d e m i c s   w i t h   h i g h e r   s c o r e s   t h a n   d i d   e x p e r t s   f r o m   t h e   U S A .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ S a n d e r s o n ,   M a r k ;   W i l l e t t ,   P e t e r ]   U n i v   S h e f f i e l d ,   D e p t   I n f o r m a t   S t u d i e s ,   S h e f f i e l d   S 1 0   2 T N ,   S   Y o r k s h i r e ,   E n g l a n d ;   [ L i ,   J i a n g ]   N a n j i n g   U n i v ,   D e p t   I n f o r m a t   M a n a g e m e n t ,   N a n j i n g ,   P e o p l e s   R   C h i n a ;   [ N o r r i s ,   M i c h a e l ;   O p p e n h e i m ,   C h a r l e s ]   U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h ,   L e i c s ,   E n g l a n d 	 S a n d e r s o n ,   M   ( r e p r i n t   a u t h o r ) ,   U n i v   S h e f f i e l d ,   D e p t   I n f o r m a t   S t u d i e s ,   S h e f f i e l d   S 1 0   2 T N ,   S   Y o r k s h i r e ,   E n g l a n d . 	 m . s a n d e r s o n @ s h e f f i e l d . a c . u k 	 	 N o r r i s ,   M i c h a e l / 0 0 0 0 - 0 0 0 3 - 1 4 4 3 - 6 3 2 6 ;   S a n d e r s o n ,   M a r k / 0 0 0 0 - 0 0 0 3 - 0 4 8 7 - 9 6 0 9 	 	 	 A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B a n e y x   A ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 4 3 - 0 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B a u e r   K ,   2 0 0 5 ,   E X A M I N A T I O N   C I T A T I O N ;   B L A N D   J M ,   1 9 8 6 ,   L A N C E T ,   V 1 ,   P 3 0 7 ;   B o r n m a n n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 1 - 1 ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E g g h e   L ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 7 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 1 0 - 2 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a c s o   P ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 3 7 ;   K o r e v a a r   J C ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 8 ;   M a i e r   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 5 - 0 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   N i c o l   M B ,   2 0 0 7 ,   M E D   J   A U S T R A L I A ,   V 1 8 7 ,   P 3 4 8 ;   N o r r i s   M ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 1 ;   N o r r i s   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 2 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 1 . 0 0 1 ;   O P P E N H E I M   C ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 0 ;   O p p e n h e i m   C ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 0 ;   P a t t e r s o n   M S ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 6 4 - 1 ;   R a n d i c   M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 8 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 2 8 - 2 ;   R e a l e   E ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 2 1 6 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 2 7 5 0 1 ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   S a n d e r s o n   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 1 8 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 7 1 ;   S c h r e i b e r   M ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 1 8 ;   S E N G   L B ,   1 9 9 5 ,   J   I N F O R M   S C I ,   V 2 1 ,   P 6 8 ;   S I E G E L   S ,   1 9 8 8 ,   N O N P A R A M E T R I C   S T A T   B ,   p C H 5 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   V i e i r a   E S ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 5 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 2 1 7 8 - 0 	 3 1 	 2 2 	 2 3 	 5 	 4 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 0 	 4 	 4 	 	 	 	 	 5 5 4 	 5 6 3 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 5 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 4 7 K A 	 W O S : 0 0 0 2 8 1 6 1 6 2 0 0 0 1 0 	 	 
 
 J 	 E t t e r ,   J F ;   S t a p l e t o n ,   J 	 	 	 	 E t t e r ,   J e a n - F r a n c o i s ;   S t a p l e t o n ,   J o h n 	 	 	 C i t a t i o n s   t o   t r i a l s   o f   n i c o t i n e   r e p l a c e m e n t   t h e r a p y   w e r e   b i a s e d   t o w a r d   p o s i t i v e   r e s u l t s   a n d   h i g h - i m p a c t - f a c t o r   j o u r n a l s 	 J O U R N A L   O F   C L I N I C A L   E P I D E M I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 T o b a c c o ;   S m o k i n g ;   N i c o t i n e ;   B i b l i o g r a p h i c ;   B i b l i o m e t r i c s ;   B i a s ;   R e v i e w ;   T o b a c c o   u s e   d i s o r d e r 	 S M O K I N G - C E S S A T I O N ;   R A N D O M I Z E D - T R I A L S ;   Q U A L I T Y ;   S C I E N C E ;   I N D E X ;   M E T A A N A L Y S I S 	 O b j e c t i v e :   T o   s t u d y   v a r i a t i o n s   i n   t h e   n u m b e r   o f   t i m e s   t r i a l s   o f   n i c o t i n e   r e p l a c e m e n t   t h e r a p y   ( N R T )   w e r e   c i t e d ,   a n d   w h i c h   c h a r a c t e r i s t i c s   o f   t r i a l s   p r e d i c t e d   t h e   n u m b e r   o f   c i t a t i o n s   a n d   t h e   i m p a c t   f a c t o r s   o f   j o u r n a l s   i n   w h i c h   a r t i c l e s   w e r e   p u b l i s h e d .   S t u d y   D e s i g n   a n d   S e t t i n g :   W e   u s e d   a l l   1 0 5   r a n d o m i z e d   c o n t r o l l e d   t r i a l s   i n   t h e   C o c h r a n e   r e v i e w   o f   N R T   f o r   s m o k i n g   c e s s a t i o n .   W e   o b t a i n e d   i m p a c t   f a c t o r s   f r o m   t h e   J o u r n a l   C i t a t i o n   R e p o r t s   a n d   t h e   n u m b e r   o f   c i t a t i o n s   f r o m   I S I   W e b   o f   K n o w l e d g e   a n d   G o o g l e   S c h o l a r .   R e s u l t s :   T r i a l s   w e r e   c i t e d   f r o m   0   t o   6 3 2   t i m e s   ( m e d i a n   2 3   t i m e s ) .   T r i a l s   w e r e   c i t e d   m o r e   o f t e n   w h e n   r e s u l t s   w e r e   s t a t i s t i c a l l y   s i g n i f i c a n t   t h a n   w h e n   t h e y   w e r e   n o t   ( m e d i a n   =   4 1   v s .   1 7   t i m e s ,   P   <   0 . 0 0 1 ) ,   a n d   w h e n   i m p a c t   f a c t o r s   w e r e   h i g h e r   ( 1 0 . 2   m o r e   c i t a t i o n s   p e r   i m p a c t   f a c t o r   p o i n t ,   P   <   0 . 0 0 1 ) .   P a t c h   t r i a l s   w e r e   c i t e d   m o r e   o f t e n   t h a n   g u m   t r i a l s   ( m e d i a n   =   2 9   v s .   1 7   t i m e s ,   P   =   0 . 0 0 1 ) ,   a n d   t r i a l s   f u n d e d   b y   t h e   p h a r m a c e u t i c a l   i n d u s t r y   w e r e   c i t e d   m o r e   o f t e n   t h a n   o t h e r   t r i a l s   ( m e d i a n   =   2 8   v s .   1 6 . 5   t i m e s ,   P   =   0 . 0 0 1 ) .   T r i a l s   w i t h   s t a t i s t i c a l l y   s i g n i f i c a n t   r e s u l t s   w e r e   p u b l i s h e d   i n   j o u r n a l s   w i t h   h i g h e r   i m p a c t   f a c t o r s   t h a n   t r i a l s   w i t h   n o n s i g n i f i c a n t   r e s u l t s   ( m e d i a n   i m p a c t   f a c t o r   =   2 . 8 0   v s .   1 . 8 1 ,   P   =   0 . 0 1 1 ) .   C o n c l u s i o n :   C i t a t i o n s   w e r e   b i a s e d   t o w a r d   t r i a l s   w i t h   p o s i t i v e   r e s u l t s   a n d   t o w a r d   t r i a l s   p u b l i s h e d   i n   h i g h - i m p a c t - f a c t o r   j o u r n a l s .   ( C )   2 0 0 9   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ E t t e r ,   J e a n - F r a n c o i s ]   U n i v   G e n e v a ,   F a c   M e d ,   I n s t   S o c i a l   &   P r e v e n t   M e d ,   C H - 1 2 1 1   G e n e v a ,   S w i t z e r l a n d ;   [ S t a p l e t o n ,   J o h n ]   U C L ,   D e p t   E p i d e m i o l   &   P u b l   H l t h ,   H l t h   B e h a v   R e s   C t r ,   L o n d o n ,   E n g l a n d 	 E t t e r ,   J F   ( r e p r i n t   a u t h o r ) ,   U n i v   G e n e v a ,   F a c   M e d ,   I n s t   S o c i a l   &   P r e v e n t   M e d ,   C H - 1 2 1 1   G e n e v a ,   S w i t z e r l a n d . 	 J e a n - F r a n c o i s . E t t e r @ i m s p . u n i g e . c h 	 S t a p l e t o n ,   J o h n / I - 6 5 5 0 - 2 0 1 2 ;   	 E T T E R ,   J e a n - F r a n c o i s / 0 0 0 0 - 0 0 0 2 - 1 4 2 6 - 3 1 5 7 	 	 	 B a r b u i   C ,   2 0 0 6 ,   J   C L I N   P S Y C H I A T ,   V 6 7 ,   P 3 7 ;   B e r g h m a n s   T ,   2 0 0 3 ,   A N N   O N C O L ,   V 1 4 ,   P 7 1 5 ,   D O I   1 0 . 1 0 9 3 / a n n o n c / m d g 2 0 3 ;   B h a n d a r i   M ,   2 0 0 7 ,   C A N   J   S U R G ,   V 5 0 ,   P 1 1 9 ;   B l o c h   S ,   2 0 0 1 ,   A U S T   N Z   J   P S Y C H I A T ,   V 3 5 ,   P 5 6 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 6 1 4 . 2 0 0 1 . 0 0 9 1 8 . x ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   E t t e r   J F ,   2 0 0 7 ,   A D D I C T I O N ,   V 1 0 2 ,   P 8 1 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 0 - 0 4 4 3 . 2 0 0 7 . 0 1 8 2 2 . x ;   E t t e r   J F ,   2 0 0 6 ,   T O B   C O N T R O L ,   V 1 5 ,   D O I   1 0 . 1 1 3 6 / t c . 2 0 0 5 . 0 1 5 4 8 7 ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   G a l l a g h e r   E J ,   1 9 9 8 ,   A N N   E M E R G   M E D ,   V 3 1 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 6 - 0 6 4 4 ( 9 8 ) 7 0 2 8 6 - 0 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   * I   S C I   I N F ,   2 0 0 5 ,   S C I   C I T   I N D   J   C I T   R E ;   I o a n n i d i s   J P A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 4 ,   P 2 1 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 4 . 2 . 2 1 8 ;   J a c s o   P ,   2 0 0 5 ,   C U R R   S C I   I N D I A ,   V 8 9 ,   P 1 5 3 7 ;   J o r e n b y   D E ,   1 9 9 9 ,   N E W   E N G L   J   M E D ,   V 3 4 0 ,   P 6 8 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 9 0 3 0 4 3 4 0 0 9 0 3 ;   K j a e r g a r d   L L ,   2 0 0 2 ,   J   C L I N   E P I D E M I O L ,   V 5 5 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 4 3 5 6 ( 0 1 ) 0 0 5 1 3 - 3 ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   L u w e l   M ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 1 ;   M a b e   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 2 0 9 1 3 1 2 4 ;   M o k d a d   A H ,   2 0 0 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 1 ,   P 1 2 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 1 . 1 0 . 1 2 3 8 ;   N i e m i n e n   P e n t t i ,   2 0 0 6 ,   B M C   M e d   R e s   M e t h o d o l ,   V 6 ,   P 4 2 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 6 - 4 2 ;   N u n n a l l y   J .   C ,   1 9 9 4 ,   P S Y C H O M E T R I C   T H E O R Y ;   O p t h o f   T ,   2 0 0 4 ,   C A R D I O V A S C   R E S ,   V 6 1 ,   P 2 0 1 ,   D O I   1 0 . 1 0 1 6 / j . c a r d i o r e s . 2 0 0 3 . 1 1 . 0 2 3 ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   P a t s o p o u l o s   N A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 3 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 3 . 1 9 . 2 3 6 2 ;   R o s s   J S ,   2 0 0 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 9 ,   P 1 8 0 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 9 . 1 5 . 1 8 0 0 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S i l a g y   C ,   2 0 0 4 ,   C O C H R A N E   D B   S Y S T   R E V ,   D O I   [ 1 0 . 1 0 0 2 / 1 4 6 5 1 8 5 8 . C D 0 0 0 1 4 6 ,   D O I   1 0 . 1 0 0 2 / 1 4 6 5 1 8 5 8 . C D 0 0 0 1 4 6 . P U B 2 ] ;   S i m k i n   M i k h a i l   V . ,   2 0 0 3 ,   C O M P L E X   S Y S T E M S ,   V 1 4 ,   P 2 6 9 ;   S i m k i n   M . V . ,   2 0 0 5 ,   A N N   I M P R O B   R E S ,   V 1 1 ,   P 2 4 ,   D O I   D O I   1 0 . 1 0 7 3 / P N A S . 0 8 0 6 9 7 7 1 0 5 ;   W e a l e   A n d y   R ,   2 0 0 4 ,   B M C   M e d   R e s   M e t h o d o l ,   V 4 ,   P 1 4 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 4 - 1 4 ;   W e s t   R ,   2 0 0 2 ,   A D D I C T I O N ,   V 9 7 ,   P 5 0 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 0 - 0 4 4 3 . 2 0 0 2 . 0 0 1 0 4 . x 	 3 3 	 2 2 	 2 2 	 0 	 5 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 8 9 5 - 4 3 5 6 	 	 	 J   C L I N   E P I D E M I O L 	 J .   C l i n .   E p i d e m i o l . 	 A U G 	 2 0 0 9 	 6 2 	 8 	 	 	 	 	 8 3 1 	 8 3 7 	 	 1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 8 . 0 9 . 0 1 5 	 	 7 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 4 7 3 I T 	 W O S : 0 0 0 2 6 8 2 0 0 3 0 0 0 0 7 	 1 9 1 2 8 9 4 1 	 
 
 J 	 K o s t o f f ,   R N ;   B h a t t a c h a r y a ,   S ;   P e c h t ,   M 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   B h a t t a c h a r y a ,   S u j i t ;   P e c h t ,   M i c h a e l 	 	 	 A s s e s s m e n t   o f   C h i n a ' s   a n d   I n d i a ' s   s c i e n c e   a n d   t e c h n o l o g y   l i t e r a t u r e   -   i n t r o d u c t i o n ,   b a c k g r o u n d ,   a n d   a p p r o a c h 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C h i n a ;   I n d i a ;   s c i e n c e   a n d   t e c h n o l o g y ;   r e s e a r c h   e v a l u a t i o n ;   r e s e a r c h   a s s e s s m e n t ;   t e c h n o l o g y   a s s e s s m e n t ;   t e x t   m i n i n g ;   b i b l i o m e t r i c s ;   c o m p u t a t i o n a l   l i n g u i s t i c s ;   d o c u m e n t   c l u s t e r i n g ;   f a c t o r   a n a l y s i s ;   c o r r e l a t i o n   m a p p i n g ;   c o r e   c o m p e t e n c y 	 B I B L I O M E T R I C S ;   K N O W L E D G E ;   S Y S T E M ;   T R E N D S ;   I M P A C T 	 S c i e n c e   a n d   t e c h n o l o g y   ( S & T )   a l l o w s   ( 1 )   a u t o m a t i o n   t o   r e p l a c e   h u m a n   l a b o r ,   ( 2 )   e n h a n c e d   h u m a n   l a b o r   c a p a b i l i t i e s ,   ( 3 )   q u i c k e r   a n d   c h e a p e r   p r o d u c t i o n   o f   g o o d s ,   a n d   ( 4 )   m o r e   c o m p l e x   p r o d u c t s   a n d   p r o c e s s e s .   I n   o r d e r   t o   m a i n t a i n   c o m p e t i t i v e   a d v a n t a g e s ,   i t   i s   c r i t i c a l   f o r   a n y   c o u n t r y   t o   u n d e r s t a n d   w h a t   o t h e r   c o u n t r i e s   a r e   p r o d u c i n g   i n   S & T ,   a n d   w h a t   i n t r i n s i c   S & T   c a p a b i l i t i e s   a r e   b e i n g   d e v e l o p e d .   I n d i a   a n d   C h i n a   a r e   t h e   t w o   m o s t   p o p u l o u s   c o u n t r i e s   i n   t h e   w o r l d .   T h e s e   t w o   d y n a m i c   e c o n o m i e s   a r e   a d v a n c i n g   r a p i d l y   i n   S & T ,   a n d   i t   i s   p r u d e n t   t o   a s s e s s   t h e   q u a n t i t y   a n d   q u a l i t y   o f   t h e i r   r e s e a r c h   o u t p u t   a s   w e l l   a s   t o   e x a m i n e   t r e n d s   i n   t h e i r   S & T   c a p a b i l i t i e s .   T h i s   p a p e r ,   t h e   f i r s t   o f   f o u r   i n   a   S p e c i a l   S e c t i o n   o n   C h i n a ' s   a n d   I n d i a ' s   S & T ,   i n t r o d u c e s   t h e   r e m a i n i n g   t h r e e   p a p e r s .   S p e c i f i c a l l y ,   t h i s   p a p e r   d e s c r i b e s   t h e   m o t i v a t i o n   f o r   t h e   s t u d i e s ,   t h e   b a c k g r o u n d   f o r   u n d e r s t a n d i n g   n a t i o n a l   S & T   a s s e s s m e n t s ,   a n   o v e r v i e w   o f   t e x t   m i n i n g ,   a   b r i e f   p i c t u r e   o f   t h e   I n d i a n   a n d   C h i n e s e   S & T   e s t a b l i s h m e n t s ,   a n d   a   s u m m a r y   o f   t h e   a n a l y t i c a l   t e c h n i q u e s   u s e d   i n   t h e   a s s e s s m e n t s .   P u b l i s h e d   b y   E l s e v i e r   I n c . 	 [ K o s t o f f ,   R o n a l d   N . ]   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   [ B h a t t a c h a r y a ,   S u j i t ]   N a t l   I n s t   S c i   T e c h n o l   &   D e v   S t u d i e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a ;   [ P e c h t ,   M i c h a e l ]   U n i v   M a r y l a n d ,   C A L C E ,   C o l l e g e   P k ,   M D   2 0 7 4 2   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 P e c h t ,   M i c h a e l / 0 0 0 0 - 0 0 0 3 - 1 1 2 6 - 8 6 6 2 	 	 	 B h a t t a c h a r y a   S ,   2 0 0 2 ,   C U R R   S C I   I N D I A ,   V 8 3 ,   P 2 3 ;   B L A N P I E D   W ,   2 0 0 2 ,   P   S I N O   U S   F O R U M   B A S I ;   B o s t i a n   C W ,   2 0 0 0 ,   S P A C E   C O M M U N ,   V 1 6 ,   P 9 7 ;   C A M P B E L L   R ,   1 9 8 5 ,   S O V I E T   S C I   T E C H N O L O G ;   C A T T E L L   R B ,   1 9 6 6 ,   M U L T I V A R   B E H A V   R E S ,   V 1 ,   P 2 4 5 ,   D O I   1 0 . 1 2 0 7 / s 1 5 3 2 7 9 0 6 m b r 0 1 0 2 _ 1 0 ;   * C H I N   E M B ,   2 0 0 5 ,   S C I   T E C H N   P O L ;   C u t t i n g   D .   R . ,   1 9 9 2 ,   P   1 5   A N N   I N T   A C M   S I G ,   P 3 1 8 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 3 1 6 0 . 1 3 3 2 1 4 ;   D A V I D S O N   R C ,   1 9 9 0 ,   J A P A N E S E   M A G N E T I C   C O ;   D U N C A N   L M ,   1 9 8 8 ,   S O V I E T   I O N O S P H E R I C   M ,   V 4 0 4 0 ;   * E C   I N T   U N ,   2 0 0 4 ,   W O R L D   I N V   P R O S P   2 0 0 4 ;   G a l u n i c   D C ,   1 9 9 8 ,   S T R A T E G I C   M A N A G E   J ,   V 1 9 ,   P 1 1 9 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 8 1 2 0 ) 1 9 : 1 2 < 1 1 9 3 : : A I D - S M J 5 > 3 . 0 . C O ; 2 - F ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   G o l d m a n   J A ,   1 9 9 9 ,   M E T H O D   I N F O R M   M E D ,   V 3 8 ,   P 9 6 ;   * G O V   I N D ,   2 0 0 2 ,   R E S   D E V   S T A T   2 0 0 4   0 5 ;   G R A Y   E M ,   1 9 9 3 ,   N O N U S   D A T A   C O M P R E S S I ;   G r e e n g r a s s   E . ,   1 9 9 7 ,   T R R 5 2 0 2 9 6   N A T   S E C   A G ;   G u h a   S ,   1 9 9 8 ,   P   A C M   S I G M O D   I N T   C   M ,   P 7 3 ,   D O I   1 0 . 1 1 4 5 / 2 7 6 3 0 4 . 2 7 6 3 1 2 ;   H E A R S T   M A ,   2 0 0 0 ,   N A T U R A L   L A N G   I N F O R M ;   H s i u n g   D I ,   2 0 0 2 ,   E V A L U A T I O N   C H I N A S   S C ;   H u t u b e s s y   R C W ,   2 0 0 2 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 8 ,   P 6 9 0 ;   J E F F E R S O N   G H ,   2 0 0 6 ,   I M P A C T   F O R E I G N   S E C T O ;   Z e m i n   J i a n g ,   1 9 9 7 ,   1 5   N A T   C   C O M M   P A R T   C ;   K A I S E R   H F ,   1 9 6 0 ,   E D U C   P S Y C H O L   M E A S ,   V 2 0 ,   P 1 4 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 3 1 6 4 4 6 0 0 2 0 0 0 1 1 6 ;   K A R Y P I S   G ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 8 ,   D O I   D O I   1 0 . 1 1 0 9 / 2 . 7 8 1 6 3 7 ;   K A R Y P I S   G ,   2 0 0 5 ,   C L U T O   C L U S T E R I N G   T O O ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K L I N G E R   A ,   1 9 9 0 ,   S O V I E T   I M A G E   P A T T E R N ;   K o s t o f f   R N ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 9 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 1 8 7 ;   K o s t o f f   R N ,   2 0 0 5 ,   E N E R G Y ,   V 3 0 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e n e r g y . 2 0 0 4 . 0 4 . 0 5 8 ;   K o s t o f f   R N ,   2 0 0 4 ,   F R A C T A L S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 ;   K o s t o f f   R N ,   2 0 0 3 ,   M E D   H Y P O T H E S E S ,   V 6 1 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 9 8 7 7 ( 0 3 ) 0 0 1 6 7 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   A N A L   C H E M ,   V 7 3 ,   p 3 7 0 A ,   D O I   1 0 . 1 0 2 1 / a c 0 1 2 4 7 2 h ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R . N . ,   2 0 0 3 ,   I N T   H D B   I N N O V A T I O N ,   P 3 8 8 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 0 8 0 4 4 1 9 8 - 6 / 5 0 0 2 7 - 9 ;   K O S T O F F   R N ,   2 0 0 6 ,   A D A 4 4 4 6 2 5   D T I C ;   K O S T O F F   R N ,   1 9 9 7 ,   A D A 2 9 6 0 2 1   D T I C ;   K O S T O F F   R N ,   2 0 0 3 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 4 ,   P 2 7 8 9 ;   K O S T O F F   R N ,   2 0 0 4 ,   S C I E N T I S T               0 9 2 7 ;   K o s t o f f   R .   N . ,   2 0 0 6 ,   A D A 4 4 3 3 1 5   D T I C ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   K o s t o f f   R N ,   2 0 0 6 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 8 ,   P 1 8 7 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 6 0 0 6 2 4 1 0 5 ;   L A N Z E R O T T I   L J ,   1 9 8 6 ,   F A S A C T A R 3 0 6 0 ;   L e y d e s d o r f f   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 6 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 3 1 - 1 ;   M c I n t i r e   L V ,   2 0 0 3 ,   T I S S U E   E N G ,   V 9 ,   P 3 ,   D O I   1 0 . 1 0 8 9 / 1 0 7 6 3 2 7 0 3 7 6 2 6 8 7 4 8 3 ;   M o o n e y   B ,   1 9 9 6 ,   M A R   T E C H N O L   S O C   J ,   V 3 0 ,   P 7 1 ;   * M O S T ,   2 0 0 5 ,   S C I   T E C H   I N D   2 0 0 2 ;   * M O S T ,   2 0 0 3 ,   C H I N   S C I   T E C H N   S T A T ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N A R I N   F ,   1 9 7 6 ,   6 3 7   N S F   C ;   N a t i o n a l   S c i e n c e   B o a r d   ( N S B ) ,   2 0 0 4 ,   S C I   E N G   I N D ;   P R A H A L A D   C K ,   1 9 9 0 ,   H A R V A R D   B U S   R E V ,   V 6 8 ,   P 7 9 ;   R a s m u s s e n   E ,   1 9 9 2 ,   I N F O R M   R E T R I E V A L   D A T ;   S P E N C E R   W J ,   1 9 8 9 ,   C H I N E S E   M I C R O E L E C T R O ;   S T A R E S   P ,   1 9 8 5 ,   D A E D A L U S ,   V 1 1 4 ,   P 1 2 7 ;   S t e i n b a c h   M i c h a e l ,   2 0 0 0 ,   0 0 0 3 4   U   M I N N   D E P   C O M ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   * T H O M   S C I   I N C ,   2 0 0 6 ,   S C I   C E R D   D A T   I N C L   H E ;   U n i t e d   N a t i o n s ,   2 0 0 5 ,   W O R L D   I N V   R E P   2 0 0 5   T ;   * U S   N A T   S E C   M I L   C O ,   1 9 9 9 ,   1 0 5 8 5 1   U S   N A T   S E C   M I ;   W I L L E T T   P ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 7 - 1 ;   X I N H U A ,   2 0 0 3 ,   C H I N A   R I S E S   3   R E S   D E ;   Z a m i r   O . ,   1 9 9 8 ,   P r o c e e d i n g s   o f   t h e   2 1 s t   A n n u a l   I n t e r n a t i o n a l   A C M   S I G I R   C o n f e r e n c e   o n   R e s e a r c h   a n d   D e v e l o p m e n t   i n   I n f o r m a t i o n   R e t r i e v a l ,   P 4 6 ,   D O I   1 0 . 1 1 4 5 / 2 9 0 9 4 1 . 2 9 0 9 5 6 ;   Z h a o   Y ,   2 0 0 4 ,   M A C H   L E A R N ,   V 5 5 ,   P 3 1 1 ,   D O I   1 0 . 1 0 2 3 / B : M A C H . 0 0 0 0 0 2 7 7 8 5 . 4 4 5 2 7 . d 6 ;   Z h a o   Y ,   2 0 0 5 ,   D A T A   M I N   K N O W L   D I S C ,   V 1 0 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 1 8 - 0 0 5 - 0 3 6 1 - 3 ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 ;   2 0 0 5 ,   T R E C   T E X T   R E T R I E V A L ;   2 0 0 0 ,   P E O P L E S   D A I L Y   O   0 6 1 8 	 7 2 	 2 2 	 2 3 	 1 	 1 5 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 N O V 	 2 0 0 7 	 7 4 	 9 	 	 	 	 	 1 5 1 9 	 1 5 3 8 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 4 	 	 2 0 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 4 7 K Q 	 W O S : 0 0 0 2 5 2 0 7 8 2 0 0 0 0 1 	 	 
 
 J 	 W h i t e ,   H D 	 	 	 	 W h i t e ,   H o w a r d   D . 	 	 	 C o m b i n i n g   b i b l i o m e t r i c s ,   i n f o r m a t i o n   r e t r i e v a l ,   a n d   r e l e v a n c e   t h e o r y ,   P a r t   1 :   F i r s t   e x a m p l e s   o f   a   s y n t h e s i s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   S C I E N C E ;   V I S U A L I Z A T I O N ;   L I T E R A T U R E S ;   P H I L O S O P H Y ;   L A N G U A G E ;   S P A C E ;   T I M E ;   I D F ;   I R 	 I n   S p e r b e r   a n d   W i l s o n ' s   r e l e v a n c e   t h e o r y   ( R T ) ,   t h e   r a t i o   C o g n i t i v e   E f f e c t s / P r o c e s s i n g   E f f o r t   d e f i n e s   t h e   r e l e v a n c e   o f   a   c o m m u n i c a t i o n .   T h e   t f * i d f   f o r m u l a   f r o m   i n f o r m a t i o n   r e t r i e v a l   i s   u s e d   t o   o p e r a t i o n a l i z e   t h i s   r a t i o   f o r   a n y   i t e m   c o - o c c u r r i n g   w i t h   a   u s e r - s u p p l i e d   s e e d   t e r m   i n   b i b l i o m e t r i c   d i s t r i b u t i o n s .   T h e   t f   w e i g h t   o f   t h e   i t e m   p r e d i c t s   i t s   e f f e c t   o n   t h e   u s e r   i n   t h e   c o n t e x t   o f   t h e   s e e d   t e r m ,   a n d   i t s   i d f   w e i g h t   p r e d i c t s   t h e   u s e r ' s   p r o c e s s i n g   e f f o r t   i n   r e l a t i n g   t h e   i t e m   t o   t h e   s e e d   t e r m .   T h e   i d f   m e a s u r e ,   a l s o   k n o w n   a s   s t a t i s t i c a l   s p e c i f i c i t y ,   i s   s h o w n   t o   h a v e   u n s u s p e c t e d   a p p l i c a t i o n s   i n   q u a n t i f y i n g   i n t e r r e l a t e d   c o n c e p t s   s u c h   a s   t o p i c a l   a n d   n o n t o p i c a l   r e l e v a n c e ,   l e v e l s   o f   u s e r   e x p e r t i s e ,   a n d   l e v e l s   o f   a u t h o r i t y .   A   n e w   k i n d   o f   v i s u a l i z a t i o n ,   t h e   p e n n a n t   d i a g r a m ,   i l l u s t r a t e s   t h e s e   c l a i m s .   T h e   b i b l i o m e t r i c   d i s t r i b u t i o n s   v i s u a l i z e d   a r e   t h e   w o r k s   c o c i t e d   w i t h   a   s e e d   w o r k   ( M o b y   D i c k ) ,   t h e   a u t h o r s   c o c i t e d   w i t h   a   s e e d   a u t h o r   ( W h i t e   H D ,   f o r   m a x i m u m   i n t e r p r e t a b i l i t y ) ,   a n d   t h e   b o o k s   a n d   a r t i c l e s   c o c i t e d   w i t h   a   s e e d   a r t i c l e   ( S . A .   H a r t e r ' s   " P s y c h o l o g i c a l   R e l e v a n c e   a n d   I n f o r m a t i o n   S c i e n c e , "   w h i c h   i n t r o d u c e d   R T   t o   i n f o r m a t i o n   s c i e n t i s t s   i n   1 9 9 2 ) .   P e n n a n t   d i a g r a m s   u s e   b i b l i o m e t r i c   d a t a   a n d   i n f o r m a t i o n   r e t r i e v a l   t e c h n i q u e s   o n   t h e   s y s t e m   s i d e   t o   m i m i c   a   r e l e v a n c e - t h e o r e t i c   m o d e l   o f   c o g n i t i o n   o n   t h e   u s e r   s i d e .   R e l e v a n c e   t h e o r y   m a y   t h u s   i n f l u e n c e   t h e   d e s i g n   o f   n e w   v i s u a l   i n f o r m a t i o n   r e t r i e v a l   i n t e r f a c e s .   G e n e r a l l y ,   w h e n   i n f o r m a t i o n   r e t r i e v a l   a n d   b i b l i o m e t r i c s   a r e   i n t e r p r e t e d   i n   l i g h t   o f   R T ,   t h e   i m p l i c a t i o n s   a r e   r i c h :   A   s i n g l e   s o c i o c o g n i t i v e   t h e o r y   m a y   s e r v e   t o   i n t e g r a t e   r e s e a r c h   o n   l i t e r a t u r e - b a s e d   s y s t e m s   w i t h   r e s e a r c h   o n   t h e i r   u s e r s ,   a r e a s   n o w   l a r g e l y   s e p a r a t e . 	 D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 W h i t e ,   H D   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 w h i t e h d @ d r e x e l . e d u 	 	 	 	 	 B E A N   C A ,   2 0 0 1 ,   R E L A T I O N S H I P S   O R G   K N ,   P 1 1 5 ;   B e l e w   R .   K . ,   2 0 0 0 ,   F I N D I N G   O U T   C O G N I T I V ;   B L A I R   D C ,   1 9 9 2 ,   C O M P U T   J ,   V 3 5 ,   P 2 0 0 ,   D O I   1 0 . 1 0 9 3 / c o m j n l / 3 5 . 3 . 2 0 0 ;   B l a k e m o r e   D . ,   1 9 9 2 ,   U N D E R S T A N D I N G   U T T E R A ;   B o r l u n d   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 8 6 ;   B r a d f o r d   S C ,   1 9 5 0 ,   D O C U M E N T A T I O N ;   B R O O K E S   B C ,   1 9 8 0 ,   C A N   J   I N F O R M   S C I ,   V 5 ,   P 1 9 9 ;   B R O O K E S   B C ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 2 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 4 0 4 ;   B R O O K E S   B C ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 1 8 ;   B r o w n   G i l l i a n ,   1 9 8 3 ,   D I S C O U R S E   A N A L ;   B U C K L A N D   M K ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 5 2 ;   B u d d   J M ,   2 0 0 4 ,   L I B R   T R E N D S ,   V 5 2 ,   P 4 4 7 ;   C a s e   D . ,   2 0 0 5 ,   T H E O R I E S   I N F O R M   B E H A ,   P 2 8 9 ;   C h e n   Z . ,   2 0 0 5 ,   P   3 8   H A W   I N T   C   S Y S T ;   C O S I J N   E ,   2 0 0 0 ,   I N F O R M   P R O C E S S I N G   M A ,   V 3 1 ,   P 1 9 1 ;   C O T T R I L L   C A ,   1 9 8 9 ,   K N O W L E D G E ,   V 1 1 ,   P 1 8 1 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   B E A U G R A N D E   R .   d e ,   1 9 8 1 ,   I N T R O   T E X T   L I N G U I S T I ;   E l l i s   D . ,   1 9 9 8 ,   I n f o r m a t i o n   S e r v i c e s   &   U s e ,   V 1 8 ;   F u r n e r   J ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 8 0 ;   G a r f i e l d   E ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 6 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G o a t l e y   A n d r e w ,   1 9 9 7 ,   L A N G U A G E   M E T A P H O R S ;   G R E E N   R ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 6 4 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 1 0 ) 4 6 : 9 < 6 4 6 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 1 ;   G r e i s d o r f   H . ,   2 0 0 0 ,   I N F O R M I N G   S C I ,   V 3 ,   P 6 7 ;   G r o s s m a n   D A ,   1 9 9 8 ,   I N F O R M   R E T R I E V A L   A L G ;   H a l l i d a y   M .   A .   K . ,   1 9 7 6 ,   C O H E S I O N   E N G L I S H ;   H A R D Y   A P ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 1 4 - 0 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   H j o r l a n d   B ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 2 0 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 2 0 9 : : A I D - A S I 1 4 > 3 . 3 . C O ; 2 - 2 ;   J o n e s   K .   S . ,   1 9 9 7 ,   R E A D I N G S   I N F O R M   R E T R ,   P 3 0 5 ;   J u r a f s k y   D ,   2 0 0 0 ,   S P E E C H   L A N G U A G E   P R O C ;   K a r k i   R ,   1 9 9 6 ,   J   I N F O R M   S C I ,   V 2 2 ,   P 3 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 6 0 2 2 0 0 5 0 1 ;   K o e s t l e r   A . ,   1 9 6 4 ,   A C T   C R E A T I O N   S T U D Y   C ;   M a n n   T . ,   1 9 9 3 ,   L I B   R E S   M O D E L S   G U I D E ;   M a n n i n g   C .   D . ,   2 0 0 0 ,   F D N   S T A T   N A T U R A L   L A N ;   M i z z a r o   S ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 1 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 9 ) 4 8 : 9 < 8 1 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - U ;   M o r r i s   S A ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 7 ;   N E L S O N   M J ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 2 ;   P o o l e   H . ,   1 9 8 5 ,   T H E O R I E S   M I D D L E   R A N G ;   P o s n e r   R .   A . ,   2 0 0 1 ,   P U B L I C   I N T E L L E C T U A L S ;   * R E D   R O C K   S O F T W ,   2 0 0 5 ,   D E L T   V E R S   5   6   C O M P   S ;   R o b e r t s o n   S ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 5 0 3 ,   D O I   [ 1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 6 0 5 8 2 ,   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 5 6 0 5 8 2 ] ;   R u t h v e n   I . ,   1 9 9 6 ,   P r o c e e d i n g s   o f   t h e   N i n t h   F l o r i d a   A r t i f i c i a l   I n t e l l i g e n c e   R e s e a r c h   S y m p o s i u m ,   F L A I R S - 9 6 ;   S a r a c e v i c   T . ,   1 9 9 7 ,   S I G I R   F o r u m ,   V 3 1 ,   P 1 6 ;   S A R A C E V I C   T ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 6 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 6 0 6 0 4 ;   S a r a c e v i c   T . ,   1 9 9 6 ,   I N F O R M   S C I   I N T E G R A T I ,   P 2 0 1 ;   S C H A M B E R   L ,   1 9 9 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 9 ,   P 3 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S p a r c k - J o n e s   K ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 5 2 1 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 6 0 5 9 1 ;   S P A R C K J O N E S   K ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 1 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 2 6 ;   S p e r b e r   D ,   1 9 9 6 ,   B E H A V   B R A I N   S C I ,   V 1 9 ,   P 5 3 0 ;   S p e r b e r   D . ,   1 9 9 5 ,   R E L E V A N C E   C O M M U N I C A T ;   S p e r b e r   D . ,   1 9 8 6 ,   R E L E V A N C E   C O M M U N I C A T ;   S W A N S O N   D R ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 1 2 8 ;   W a l t o n   D .   N ,   1 9 8 9 ,   I N F O R M A L   L O G I C   H D B   C ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 9 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 6 3 0 1 0 0 ;   W h i t e   H D ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 4 2 > 3 . 3 . C O ; 2 - K ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W h i t e   H D ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 3 . 9 1 4 0 1 . 9 b ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 0 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 0 7 5 2 2 1 2 5 ;   W H I T E   H D ,   2 0 0 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 6 ,   P 5 8 3 ;   W h i t e   H . D . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 4 7 5 ;   W H I T E   H D ,   2 0 0 2 ,   C H I   2 0 0 2   D I S C   A R C H   W ;   W h i t e   H .   D . ,   1 9 9 4 ,   H D B   R E S   S Y N T H E S I S ,   P 4 1 ;   W i l d e m u t h   B M ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 2 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 6 7 ;   W I L L I A M S   S T ,   1 9 6 3 ,   8   A M   A U T H O R S   R E V   R E S ,   P 2 0 7 ;   W I L S O N   D ,   1 9 8 6 ,   E N C O N T R O   L I N G U I S T A S ,   P 1 9 ;   W I L S O N   D ,   2 0 0 2 ,   L I N G U I S T I C S ,   V 1 4 ,   P 2 4 9 ;   W i l s o n   D . ,   1 9 9 4 ,   L A N G U A G E   U N D E R S T A N D I ,   P 3 5 ;   W i l s o n   P a t r i c k ,   1 9 6 8 ,   2   K I N D S   P O W E R   E S S A Y ;   Y a n g   K D ,   2 0 0 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 9 ,   P 3 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 9 0 1 0 9 ;   Y u s   F r a n c i s c o ,   1 9 9 8 ,   J   P R A G M A T I C S ,   V 3 0 ,   P 3 0 5 ;   Y U S   F ,   2 0 0 6 ,   R E L E V A N C E   T H E O R Y   O N L 	 7 7 	 2 2 	 2 2 	 1 	 1 9 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 F E B   1 5 	 2 0 0 7 	 5 8 	 4 	 	 	 	 	 5 3 6 	 5 5 9 	 	 1 0 . 1 0 0 2 / a s i . 2 0 5 4 3 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 6 6 L F 	 W O S : 0 0 0 2 4 6 3 7 9 6 0 0 0 0 8 	 	 
 
 J 	 J o n e s ,   A W 	 	 	 	 J o n e s ,   A l a n   W a y n e 	 	 	 T h e   d i s t r i b u t i o n   o f   f o r e n s i c   j o u r n a l s ,   r e f l e c t i o n s   o n   a u t h o r s h i p   p r a c t i c e s ,   p e e r - r e v i e w   a n d   r o l e   o f   t h e   i m p a c t   f a c t o r 	 F O R E N S I C   S C I E N C E   I N T E R N A T I O N A L 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 a u t h o r s h i p ;   b i b l i o m e t r i c s ;   f o r e n s i c   s c i e n c e   j o u r n a l s ;   i m p a c t   f a c t o r s ;   p e e r - r e v i e w 	 R E S E A R C H   A S S E S S M E N T   E X E R C I S E ;   L E G A L - M E D I C I N E ;   B I O M E D I C A L - R E S E A R C H ;   S C I E N C E ;   C I T A T I O N S ;   Q U A L I T Y ;   G A T E K E E P E R S ;   P U B L I C A T I O N ;   A S S O C I A T I O N ;   M I S C O N D U C T 	 T h i s   a r t i c l e   p r e s e n t s   i n f o r m a t i o n   a b o u t   j o u r n a l s   s p e c i a l i z i n g   i n   t h e   f o r e n s i c   s c i e n c e s   a n d   l e g a l   m e d i c i n e ,   t h e i r   d e v e l o p m e n t   a n d   d i s t r i b u t i o n   a n d   t h e i r   c u r - r e n t   s t a t u s   a s   r e f l e c t e d   i n   t h e   j o u r n a l   i m p a c t   f a c t o r .   T h e   f i r s t   s c i e n t i f i c   j o u r n a l   d e v o t e d   t o   s p r e a d i n g   i n f o r m a t i o n   a n d   r e p o r t i n g   n e w   d e v e l o p m e n t s   i n   s o c i a l   a n d   l e g a l   m e d i c i n e   s e e m i n g l y   o r i g i n a t e d   i n   G e r m a n y   a b o u t   1 5 0   y e a r s   a g o .   T h e   o f f i c i a l   j o u r n a l   o f   t h e   A m e r i c a n   A c a d e m y   o f   F o r e n s i c   S c i e n c e s   ( J o u r n a l   o f   F o r e n s i c   S c i e n c e s ,   J F S )   w a s   f o u n d e d   i n   1 9 5 6   a n d   h a s   e n j o y e d   5 0   y e a r s   o f   s c h o l a r l y   p u b l i s h i n g .   T h e   t w o   l e a d i n g   E u r o p e a n   j o u r n a l s   s p e c i a l i z i n g   i n   f o r e n s i c s   a r e   F o r e n s i c   S c i e n c e   I n t e r n a t i o n a l   ( F S I )   a n d   I n t e r n a t i o n a l   J o u r n a l   o f   L e g a l   M e d i c i n e   ( I J L M ) .   B e s i d e s   t h e   s i z e   o f   t h e   c i r c u l a t i o n ,   t h e   r e a d e r s h i p   n u m b e r s ,   t h e   q u a l i t y   o f   t h e   e d i t o r i a l   s t a f f   a n d   t h e   p e e r - r e v i e w e r s ,   t h e   n u m b e r   o f   s u b m i t t e d   a n d   a c c e p t e d   m a n u s c r i p t s ,   c o n s i d e r a b l e   i n t e r e s t   h a s   f o c u s e d   o n   t h e   j o u r n a l ' s   i m p a c t   f a c t o r   a s   a   m e a s u r e   o f   p r e s t i g e .   T h e   2 0 0 6   i m p a c t   f a c t o r   o f   a   c e r t a i n   j o u r n a l   i s   d e r i v e d   b y   c o u n t i n g   t h e   n u m b e r   o f   c i t a t i o n s   i n   2 0 0 6   t o   a l l   m a t e r i a l   p u b l i s h e d   i n   t h e   j o u r n a l   i n   t h e   p r e v i o u s   2   y e a r s   ( 2 0 0 4   a n d   2 0 0 5 )   a n d   d i v i d i n g   t h i s   t o t a l   b y   t h e   n u m b e r   o f   c i t a b l e   i t e m s   ( a r t i c l e s   a n d   r e v i e w s )   p u b l i s h e d   i n   t h e   s a m e   2   y e a r s .   I m p a c t   f a c t o r s   f o r   s e v e r a l   t h o u s a n d   s c i e n t i f i c   j o u r n a l s   a r e   c o m p i l e d   a n d   p u b l i s h e d   b y   a   c o m p a n y   c a l l e d   T h o m s o n   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( T h o m s o n   I S I )   a n d   a r e   a v a i l a b l e   o n - l i n e   v i a   t h e   d a t a b a s e   J o u r n a l   C i t a t i o n   R e p o r t s .   F o r e n s i c   j o u r n a l s   a r e   g r o u p e d   w i t h i n   t h e   s u b j e c t   c a t e g o r y   M e d i c i n e ,   L e g a l ,   w h i c h   c u r r e n t l y   c o m p r i s e s   n i n e   j o u r n a l s   a   f e w   o f   w h i c h   a r e   s e e m i n g l y   u n r e l a t e d   t o   m a i n s t r e a m   f o r e n s i c s .   T h e   t o p - r a n k e d   f o r e n s i c   j o u r n a l   i n   t e r m s   o f   i t s   i m p a c t   f a c t o r   w a s   I J L M   w i t h   a   s c o r e   o f   j u s t   o v e r   2 . 0   i n   2 0 0 4 .   T h i s   m e a n s   t h a t   t h e   a v e r a g e   a r t i c l e   p u b l i s h e d   i n   2 0 0 3   a n d   2 0 0 2   w a s   c i t e d   t w i c e   p e r   y e a r   i n   t h e   2 - y e a r   w i n d o w   a f t e r   p u b l i c a t i o n .   I m p a c t   f a c t o r s   o f   f o r e n s i c   j o u r n a l s   a r e   f a i r l y   l o w   i n   c o m p a r i s o n   w i t h   m a n y   o t h e r   d i s c i p l i n e s ,   p r o b a b l y   b e c a u s e   o f   t h e   s m a l l   s i z e   o f   t h e   f i e l d ,   f e w e r   a c t i v e   r e s e a r c h e r s   a n d   l e s s   p r e s s u r e   t o   p u b l i s h .   T h e   r e l a t i v e l y   l o w   i m p a c t   f a c t o r s   o f   f o r e n s i c   j o u r n a l s   s h o u l d   b e   l e s s   o f   a   c o n c e r n   t h a n   e n s u r i n g   t h a t   m a n u s c r i p t s   r e c e i v e   a   r i g o r o u s   a n d   p r e f e r a b l y   a n   o p e n   p e e r - r e v i e w   p r i o r   t o   a c c e p t a n c e   f o r   p u b l i c a t i o n .   T h e   i n f o r m a t i o n ,   c o n c l u s i o n s   a n d   o p i n i o n s   p u b l i s h e d   i n   f o r e n s i c   s c i e n c e   j o u r n a l s   m i g h t   o n e   d a y   b e   p r o f f e r e d   a s   e v i d e n c e   i n   c r i m i n a l   o r   c i v i l   l i t i g a t i o n .   ( c )   2 0 0 6   E l s e v i e r   I r e l a n d   L t d .   A l l   r i g h t s   r e s e r v e d . 	 N a t l   B o a r d   F o r e n s   M e d ,   D e p t   F o r e n s   C h e m   &   G e n e t ,   S E - 5 8 1 3 3   L i n k o p i n g ,   S w e d e n ;   L i n k o p i n g   U n i v   H o s p ,   S E - 5 8 1 8 5   L i n k o p i n g ,   S w e d e n 	 J o n e s ,   A W   ( r e p r i n t   a u t h o r ) ,   N a t l   B o a r d   F o r e n s   M e d ,   D e p t   F o r e n s   C h e m   &   G e n e t ,   A r t i l l e r i g a t a n   1 2 ,   S E - 5 8 1 3 3   L i n k o p i n g ,   S w e d e n . 	 w a y n e . j o n e s @ R M V . S E 	 J o n e s ,   A l a n / C - 2 2 0 2 - 2 0 0 8 	 	 	 	 A b b a s i   K ,   2 0 0 2 ,   B R I T   M E D   J ,   V 3 2 5 ,   P 1 4 7 2 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 5 . 7 3 7 8 . 1 4 7 2 ;   A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A l t m a n   D G ,   1 9 9 8 ,   S T A T   M E D ,   V 1 7 ,   P 2 6 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 5 8 ( 1 9 9 8 1 2 1 5 ) 1 7 : 2 3 < 2 6 6 1 : : A I D - S I M 3 3 > 3 . 0 . C O ; 2 - B ;   A N G E L L   M ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 4 ,   P 2 6 1 ;   A N G E L L   M ,   1 9 9 7 ,   S C I   T R I A L ;   B a c c h e t t i   P ,   2 0 0 2 ,   B R I T   M E D   J ,   V 3 2 4 ,   P 1 2 7 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 4 . 7 3 4 8 . 1 2 7 1 ;   B l o c h   S ,   2 0 0 1 ,   A U S T   N Z   J   P S Y C H I A T ,   V 3 5 ,   P 5 6 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 6 1 4 . 2 0 0 1 . 0 0 9 1 8 . x ;   B R A D Y   J P ,   1 9 8 5 ,   B I O L   P S Y C H I A T ,   V 2 0 ,   P 8 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 6 - 3 2 2 3 ( 8 5 ) 9 0 2 0 6 - 9 ;   B r e t t e l l   T A ,   2 0 0 5 ,   A N A L   C H E M ,   V 7 7 ,   P 3 8 3 9 ,   D O I   1 0 . 1 0 2 1 / a c 0 5 0 6 8 2 e ;   B y a r d   R o g e r   W ,   2 0 0 5 ,   F o r e n s i c   S c i   M e d   P a t h o l ,   V 1 ,   P 2 3 7 ,   D O I   1 0 . 1 3 8 5 / F S M P : 1 : 4 : 2 3 7 ;   C h a m b e r s   R ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 1 4 6 0 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 2 7 . 1 4 6 0 ;   C h o   M K ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 1 ,   P 6 1 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 2 4 9 4 8 ;   C H O   M K ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 3 ;   C H U B I N   O E ,   1 9 9 0 ,   P E E R L E S S   S C I   P E E R   R E ;   C l a r k   M J ,   2 0 0 5 ,   L A N C E T ,   V 3 6 6 ,   P 1 3 5 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 7 5 5 2 - 6 ;   C o l e m a n   R ,   1 9 9 9 ,   A N A T   R E C ,   V 2 5 7 ,   P 5 4 ;   C R O N I N   B . ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ;   C u l l i t o n   B J ,   1 9 9 7 ,   N A T   M E D ,   V 3 ,   P 1 2 3 ;   D a l t o n   R ,   2 0 0 2 ,   N A T U R E ,   V 4 2 0 ,   P 7 2 8 ,   D O I   1 0 . 1 0 3 8 / 4 2 0 7 2 8 a ;   D a l t o n   R ,   2 0 0 1 ,   N A T U R E ,   V 4 1 3 ,   P 1 0 2 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 9 3 2 5 2 ;   D a v i d o f f   F ,   1 9 9 8 ,   A N N   I N T E R N   M E D ,   V 1 2 8 ,   P 6 6 ;   D e a h l   M ,   2 0 0 5 ,   L A N C E T ,   V 3 6 5 ,   P 6 3 5 ;   D e A n g e l i s   C D ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 1 1 7 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 0 . 1 1 7 1 ;   D e   F o r e s t   P .   R . ,   1 9 8 3 ,   F O R E N S I C   S C I   I N T R O   C ;   D I M O L I A T I S   I ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 8 ,   P 1 2 6 7 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 8 . 7 4 5 0 . 1 2 6 7 ;   D i s n e y   R . H . L . ,   2 0 0 2 ,   J   M E D   L E G A L E   D R O I T   M ,   V 4 5 ,   P 2 2 5 ;   D r u m m e r   O ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ,   P 6 3 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 9 . 7 4 6 7 . 6 3 6 ;   E r l e n   J A ,   1 9 9 7 ,   J   P R O F   N U R S ,   V 1 3 ,   P 2 6 2 ,   D O I   1 0 . 1 0 1 6 / S 8 7 5 5 - 7 2 2 3 ( 9 7 ) 8 0 0 9 7 - X ;   E r z i n c l i o g l u   Z ,   1 9 9 8 ,   N A T U R E ,   V 3 9 2 ,   P 8 5 9 ,   D O I   1 0 . 1 0 3 8 / 3 1 7 9 5 ;   F l a n a g i n   A ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 2 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 2 2 ;   F o s t e r   K e n n e t h ,   1 9 9 9 ,   J U D G I N G   S C I   S C I   K N O W ;   F r a n k   M ,   2 0 0 6 ,   N E W   E N G L   J   M E D ,   V 3 5 4 ,   P 1 5 5 2 ,   D O I   1 0 . 1 0 5 6 / N E J M p 0 6 8 0 0 4 ;   F r a n k   M ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 ;   G A E N S S L E N   R E ,   1 9 9 8 ,   H I S T   A M   A C A D   F O R E N S C ,   P 1 1 7 ;   G A R D N E R   M J ,   1 9 8 6 ,   B R I T   M E D   J ,   V 2 9 2 ,   P 8 1 0 ;   G a r f i e l d   E ,   2 0 0 0 ,   C R O A T   M E D   J ,   V 4 1 ,   P 3 6 8 ;   G a r f i e l d   E ,   1 9 9 6 ,   L I B R   Q U A R T ,   V 6 6 ,   P 4 4 9 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R E N T   C O N T E N T   0 5 2 8 ,   P 5 ;   G E R C H O W   J ,   2 0 0 1 ,   B L U T A L K O H O L ,   V 3 8 ,   P 1 2 7 ;   G i b b s   W .   W . ,   1 9 9 5 ,   S C I   A M ,   V 2 7 3 ,   P 7 6 ;   G i l e s   C L ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 1 7 5 9 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 7 7 4 3 1 0 1 ;   G i l e s   J ,   2 0 0 6 ,   N A T U R E ,   V 4 3 9 ,   P 2 5 2 ,   D O I   1 0 . 1 0 3 8 / 4 3 9 2 5 2 b ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G o d l e e   F ,   1 9 9 9 ,   P E E R   R E V   H L T H   S C I ;   H e c h t   F ,   1 9 9 8 ,   C A N C E R   G E N E T   C Y T O G E N ,   V 1 0 4 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 6 0 8 ( 9 7 ) 0 0 4 5 9 - 7 ;   H e y   E ,   2 0 0 3 ,   B R I T   M E D   J ,   V 3 2 7 ,   P 2 9 9 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 7 . 7 4 1 0 . 2 9 9 ;   H o e y   J ,   2 0 0 0 ,   C A N   M E D   A S S O C   J ,   V 1 6 3 ,   P 7 1 6 ;   H o j a t   M ,   2 0 0 3 ,   A D V   H E A L T H   S C I   E D U C ,   V 8 ,   P 7 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 6 7 0 4 3 2 3 7 3 ;   H O P K I N   K ,   2 0 0 5 ,   S C I E N T I S T ,   V 2 0 ,   P 2 2 ;   H o r t o n   R ,   2 0 0 3 ,   L A N C E T ,   V 3 6 2 ,   P 1 5 1 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 4 7 7 5 - 7 ;   H o r t o n   R ,   1 9 9 8 ,   L A N C E T ,   V 3 5 2 ,   P 8 9 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 0 0 3 0 - X ;   H U T H   E J ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 2 8 ;   J E N N I N G S   C ,   1 9 9 9 ,   N E U R O E N D O C R I N O L   L E T T ,   V 2 0 ,   P 7 ;   J o n e s   A .   H . ,   2 0 0 0 ,   E T H I C A L   I S S U E S   B I O M E ;   J o n e s   A W ,   2 0 0 5 ,   S C A N D   J   C L I N   L A B   I N V ,   V 6 5 ,   P 6 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 6 5 5 1 0 5 0 0 3 3 3 5 3 6 ;   J o n e s   A W ,   2 0 0 5 ,   I N T   J   L E G A L   M E D ,   V 1 1 9 ,   P 5 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 1 4 - 0 0 4 - 0 5 1 2 - x ;   J o n e s   A W ,   2 0 0 3 ,   F O R E N S I C   S C I   I N T ,   V 1 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 9 - 0 7 3 8 ( 0 3 ) 0 0 0 4 2 - 2 ;   J o n e s   A W ,   1 9 9 6 ,   A L C O H O L   A L C O H O L I S M ,   V 3 1 ,   P 1 1 ;   J O N E S   A W ,   1 9 9 3 ,   F O R E N S I C   S C I   I N T ,   V 6 2 ,   P 1 7 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 9 - 0 7 3 8 ( 9 3 ) 9 0 2 0 6 - P ;   J o n e s   A W ,   1 9 9 8 ,   J   F O R E N S I C   S C I ,   V 4 3 ,   P 4 3 9 ;   J O N E S   A W ,   2 0 0 5 ,   S C I   J U S T I C E ,   V 4 5 ,   P 1 7 4 ;   J O N E S   A W ,   2 0 0 5 ,   F O R E N S I C   J   B I B L I O M E T ,   V 2 ,   P 3 3 5 ;   J o s e p h   K S ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 7 ;   K A S S I R E R   J P ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 5 ,   P 1 5 1 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 1 1 2 1 3 2 5 2 1 1 2 ;   K a u f m a n   H H ,   2 0 0 1 ,   S C I   J U S T I C E ,   V 4 1 ,   P 7 ,   D O I   1 0 . 1 0 1 6 / S 1 3 5 5 - 0 3 0 6 ( 0 1 ) 7 1 8 4 4 - 8 ;   K e i l   W ,   2 0 0 4 ,   F O R E N S I C   S C I   I N T ,   V 1 4 4 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / j . f o r s c i i n t . 2 0 0 4 . 0 4 . 0 6 5 ;   K i n d   S .   S . ,   1 9 8 7 ,   S C I   I N V E S T I G A T I O N   C R ;   K i n g   J T ,   2 0 0 0 ,   N E U R O S U R G E R Y ,   V 4 7 ,   P 4 3 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 2 3 - 2 0 0 0 0 8 0 0 0 - 0 0 0 3 2 ;   K r e s g e   N ,   2 0 0 5 ,   J   B I O L   C H E M ,   V 2 8 0 ;   K R O N I C K   D A ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 3 2 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 3 2 1 ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   L a i n e   C ,   2 0 0 3 ,   A N N   I N T E R N   M E D ,   V 1 3 9 ,   P 1 0 3 8 ;   L a w r e n c e   P A ,   2 0 0 3 ,   N A T U R E ,   V 4 2 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 2 2 2 5 9 a ;   L u n d b e r g   G D ,   2 0 0 3 ,   M E D   J   A U S T R A L I A ,   V 1 7 8 ,   P 2 5 3 ;   M a r r i s   E ,   2 0 0 6 ,   N A T U R E ,   V 4 3 9 ,   P 2 4 8 ,   D O I   1 0 . 1 0 3 8 / 4 3 9 2 4 8 b ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   M o n t g o m e r y   C ,   2 0 0 4 ,   M E D   S C I   L A W ,   V 4 4 ,   P 1 8 5 ;   N A G I   S ,   2 0 0 5 ,   A C C   R E S ,   V 1 2 ,   P 1 0 3 ;   O p t h o f   T ,   2 0 0 0 ,   C A R D I O V A S C   R E S ,   V 4 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 0 0 ) 0 0 0 1 6 - X ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   O R F I L A   M J B ,   1 8 1 4 ,   T R A I T E   P O I S O N S ;   P A Y N E J A M E S   J ,   2 0 0 5 ,   E N C Y   F O R E N S I C   L E G A L ,   V 1 ,   P 1 ;   P e r k e l   J M ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 2 4 ;   P u s c h e l   K ,   2 0 0 4 ,   F O R E N S I C   S C I   I N T ,   V 1 4 4 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / j . f o r s c i i n t . 2 0 0 4 . 0 4 . 0 6 4 ;   R e i d e n b e r g   J W ,   2 0 0 2 ,   C L I N   P H A R M A C O L   T H E R ,   V 7 2 ,   P 4 6 9 ,   D O I   1 0 . 1 0 6 7 / m c p . 2 0 0 2 . 1 2 8 8 7 0 ;   R e i d e n b e r g   J W ,   2 0 0 1 ,   C L I N   P H A R M A C O L   T H E R ,   V 7 0 ,   P 2 0 8 ,   D O I   1 0 . 1 0 6 7 / m c p . 2 0 0 1 . 1 1 8 6 3 1 ;   R E L M A N   A S ,   1 9 8 4 ,   N E W   E N G L   J   M E D ,   V 3 1 0 ,   P 1 0 4 8 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 8 4 0 4 1 9 3 1 0 1 6 0 9 ;   R E N N I E   D ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 1 ,   P 4 6 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 1 . 6 . 4 6 9 ;   R e n n i e   D ,   2 0 0 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 4 ,   P 8 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 4 . 1 . 8 9 ;   R e n n i e   D ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 8 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 8 . 7 . 5 7 9 ;   R I E S E N B E R G   D ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 4 ,   P 1 8 5 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 4 . 1 4 . 1 8 5 7 ;   R o w l a n d   F ,   2 0 0 2 ,   L E A R N   P U B L ,   V 1 5 ,   P 2 4 7 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 2 7 6 0 3 1 9 2 0 6 ;   S a f e r s t e i n   R . ,   1 9 7 7 ,   C R I M I N A L I S T I C S   I N T R O ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e g l e n   P O ,   1 9 9 8 ,   A C T A   O R T H O P   S C A N D ,   V 6 9 ,   P 2 2 4 ,   D O I   1 0 . 3 1 0 9 / 1 7 4 5 3 6 7 9 8 0 9 0 0 0 9 2 0 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   * S E L   C O M M   S C I   T E C H ,   2 0 0 5 ,   F O R   S C I   T R I A L   7   R E P ;   S e r v i c e   R F ,   2 0 0 2 ,   S C I E N C E ,   V 2 9 8 ,   P 3 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 8 . 5 5 9 1 . 3 0 ;   S I E G E L   J A ,   2 0 0 5 ,   E N C Y   F O R E N S I C   S C I ,   V 1 ,   P 1 ;   S m i t h   R ,   1 9 9 8 ,   B R I T   M E D   J ,   V 3 1 6 ,   P 1 0 3 6 ;   S m i t h   R ,   1 9 9 9 ,   B R I T   M E D   J ,   V 3 1 8 ,   P 4 ;   S n y d e r   E Y ,   2 0 0 6 ,   N E W   E N G L   J   M E D ,   V 3 5 4 ,   P 3 2 1 ,   D O I   1 0 . 1 0 5 6 / N E J M p 0 5 8 3 2 3 ;   T a m b e r   P S ,   2 0 0 3 ,   L A N C E T ,   V 3 6 2 ,   P 1 5 7 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 4 7 4 8 - 4 ;   T o b i n   M J ,   2 0 0 2 ,   A M   J   R E S P   C R I T   C A R E ,   V 1 6 6 ,   P 1 0 1 3 ,   D O I   1 0 . 1 1 6 4 / r c c m . 2 2 0 8 0 0 7 ;   T o m l i n s o n   S ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 6 3 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 3 5 . 6 3 6 ;   W a l t e r   G ,   2 0 0 3 ,   M E D   J   A U S T R A L I A ,   V 1 7 8 ,   P 2 8 0 ;   W e n n e r a s   C ,   1 9 9 7 ,   N A T U R E ,   V 3 8 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 3 8 / 3 8 7 3 4 1 a 0 ;   W e s s e l y   S ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 1 1 8 5 ;   W h i t e   C ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 1 ,   P 2 8 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 3 1 . 7 5 1 1 . 2 8 1 ;   W i l l i a m s   G ,   1 9 9 8 ,   B R I T   M E D   J ,   V 3 1 6 ,   P 1 0 7 9 ;   W u   R ,   2 0 0 4 ,   N A T U R E ,   V 4 2 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 3 8 / 4 2 8 2 0 6 a ;   1 9 9 3 ,   N A T U R E ,   V 3 6 2 ,   P 4 8 1 ;   1 9 9 7 ,   N A T U R E ,   V 3 8 7 ,   P 8 3 1 	 1 1 9 	 2 2 	 2 4 	 1 	 1 7 	 E L S E V I E R   I R E L A N D   L T D 	 C L A R E 	 E L S E V I E R   H O U S E ,   B R O O K V A L E   P L A Z A ,   E A S T   P A R K   S H A N N O N ,   C O ,   C L A R E ,   0 0 0 0 0 ,   I R E L A N D 	 0 3 7 9 - 0 7 3 8 	 	 	 F O R E N S I C   S C I   I N T 	 F o r e n s i c   S c i . I n t . 	 J A N   1 7 	 2 0 0 7 	 1 6 5 	 2 - 3 	 	 	 	 	 1 1 5 	 1 2 8 	 	 1 0 . 1 0 1 6 / j . f o r s c i i n t . 2 0 0 6 . 0 5 . 0 1 3 	 	 1 4 	 M e d i c i n e ,   L e g a l 	 L e g a l   M e d i c i n e 	 1 3 5 L W 	 W O S : 0 0 0 2 4 4 1 5 6 1 0 0 0 0 7 	 1 6 7 8 4 8 2 7 	 
 
 J 	 U g o l i n i ,   D ;   C a s i l l i ,   C ;   M e l a ,   G S 	 	 	 	 U g o l i n i ,   D ;   C a s i l l i ,   C ;   M e l a ,   G S 	 	 	 A s s e s s i n g   o n c o l o g i c a l   p r o d u c t i v i t y :   i s   o n e   m e t h o d   s u f f i c i e n t ? 	 E U R O P E A N   J O U R N A L   O F   C A N C E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n e o p l a s m s ;   b i b l i o m e t r i c s ;   E u r o p e 	 I N D I C A T O R S ;   I M P A C T 	 T h i s   w o r k   a n a l y s e s   t h e   d i s t r i b u t i o n   o f   o n c o l o g i c a l   p a p e r s   p u b l i s h e d   i n   1 9 9 5   b y   a u t h o r s   f r o m   t h e   E u r o p e a n   U n i o n   ( E U )   i n   a n y   j o u r n a l   o f   a l l   t h e   S u b j e c t   C a t e g o r i e s   o f   t h e   S c i e n c e   C i t a t i o n   I n d e x   c o m p i l e d   b y   I S I   ( I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ,   P h i l a d e l p h i a ,   U S A )   a n d   i s   b a s e d   o n   t h e   c o u n t r y   o f   o r i g i n   o f   a l l   o f   t h e   c o n t r i b u t o r s .   T h e   s t u d y   c o m p a r e s   t h e   r e s u l t s   w i t h   t h o s e   o f   a   p r e v i o u s   s t u d y   d e a l i n g   w i t h   p u b l i c a t i o n s   i n   j o u r n a l s   o f   t h e   I S I   O n c o l o g y   C a t e g o r y   b a s e d   o n   t h e   c o u n t r y   o f   o r i g i n   o f   t h e   c o r r e s p o n d i n g   a u t h o r .   T h e   a i m   o f   t h e   s t u d y   w a s   t o   c o m p a r e   t w o   d i f f e r e n t   m e t h o d s   u s e d   t o   e v a l u a t e   r e s e a r c h   p r o d u c t i v i t y   i n   o r d e r   t o   u n d e r s t a n d   t h e   e x t e n t   t o   w h i c h   t h e   r e s u l t s   a r e   i n f l u e n c e d   b y   t h e   m e t h o d o l o g y   a d o p t e d .   D a t a   o n   t h e   n u m b e r   o f   p u b l i s h e d   p a p e r s   f o r   e a c h   c o u n t r y ,   r a t i o   b e t w e e n   t h e   n u m b e r   o f   o c c u r r e n c e s   o f   p a p e r s   a n d   c o u n t r y   p o p u l a t i o n   a n d   g r o s s   d o m e s t i c   p r o d u c t   ( G D P ) ,   a n d   m e a n   I m p a c t   F a c t o r s   ( I F )   w e r e   c o m p a r e d .   W h i l e   f i n d i n g s   o n   t h e   n u m b e r   o f   p u b l i s h e d   p a p e r s   ( U n i t e d   K i n g d o m   ( U K ) ,   G e r m a n y   a n d   F r a n c e   r a n k i n g   b e s t ) ,   s o u r c e   c o u n t r y   p o p u l a t i o n   ( S w e d e n ,   D e n m a r k   a n d   t h e   N e t h e r l a n d s   r a n k i n g   b e s t )   a n d   g r o s s   d o m e s t i c   p r o d u c t   ( S w e d e n ,   F i n l a n d   a n d   t h e   N e t h e r l a n d s   r a n k i n g   b e s t )   s h o w e d   n o   i m p o r t a n t   c h a n g e s ,   t h e   m e a n   I F   v a l u e   r e s u l t   w a s ,   f o r   s o m e   c o u n t r i e s ,   v e r y   d i f f e r e n t   f r o m   t h e   p r e v i o u s   s t u d y .   I n   p a r t i c u l a r ,   w h i l e   G e r m a n y ,   B e l g i u m ,   P o r t u g a l   a n d   F r a n c e   f a r e d   w e l l ,   N o r w a y ,   S w e d e n ,   A u s t r i a   a n d   S p a i n   s h o w e d   p o o r e r   r e s u l t s .   S o m e   h y p o t h e s e s   a r e   a d v a n c e d ,   a n d   c a r e   i n   t h e   s c i e n t o m e t r i c   i n t e r p r e t a t i o n   o f   d a t a   i s   u r g e d .   A n   a n a l y s i s   o f   t h e   j o u r n a l s   i n   w h i c h   E U   a u t h o r s   p u b l i s h e d   t h e i r   a r t i c l e s   w a s   a l s o   c a r r i e d   o u t   a n d   t h e   m a i n   S C I   c a t e g o r i e s   t o   w h i c h   t h e   j o u r n a l s   b e l o n g   a r e   r e p o r t e d .   A s   w a s   e x p e c t e d ,   m a n y   c a t e g o r i e s   o t h e r   t h a n   o n c o l o g y   w e r e   r e p r e s e n t e d   ( b i o c h e m i s t r y ,   h a e m a t o l o g y ,   p a t h o l o g y ,   e t c . ) .   ( C )   2 0 0 2   E l s e v i e r   S c i e n c e   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   G e n o a ,   C i l N e w s   G r p ,   G e n o a ,   I t a l y ;   U n i v   G e n o a ,   D i p a r t i m e n t o   O n c o l   B i o l   &   G e n e t ,   I - 1 6 1 3 2   G e n o a ,   I t a l y ;   U n i v   G e n o a ,   D i p a r t i m e n t o   M e d   I n t e r n a   &   S p e c i a l i t a ,   G e n o a ,   I t a l y ;   I s t   N a z l   R i c   C a n c ,   G e n o a ,   I t a l y 	 U g o l i n i ,   D   ( r e p r i n t   a u t h o r ) ,   U n i v   G e n o a ,   C i l N e w s   G r p ,   G e n o a ,   I t a l y . 	 	 M e l a ,   G i u s e p p e / F - 6 0 7 2 - 2 0 1 0 	 	 	 	 C h a p m a n   A . ,   1 9 8 9 ,   P S Y C H O L O G I S T S ,   V 8 ,   P 3 3 9 ;   E g g h e   L ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 4 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 9 ;   H A I A Q I   Z ,   1 9 9 7 ,   B   M E D   L I B R   A S S O C ,   V 8 5 ,   P 4 3 2 ;   * I   S C I   I N F ,   1 9 9 7 ,   S C I   S C I   C I T   I N D   J   C I ;   L U U K K O N E N   T ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 2 ;   M e l a   G S ,   1 9 9 9 ,   E U R   J   C A N C E R ,   V 3 5 ,   P 1 1 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 9 9 ) 0 0 1 0 7 - 0 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M O E D   H F ,   1 9 9 2 ,   S T A T   A R T   B I B L   M A C R   O ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S T A A B   M A ,   1 9 9 3 ,   L A N C E T ,   V 3 4 1 ,   P 6 3 4 ;   V i n k l e r   P ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 6 	 1 1 	 2 2 	 2 3 	 0 	 2 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 9 5 9 - 8 0 4 9 	 	 	 E U R   J   C A N C E R 	 E u r .   J .   C a n c e r 	 M A Y 	 2 0 0 2 	 3 8 	 8 	 	 	 	 	 1 1 2 1 	 1 1 2 5 	 P I I   S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 0 2 5 - 4 	 1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 0 2 5 - 4 	 	 5 	 O n c o l o g y 	 O n c o l o g y 	 5 7 0 B E 	 W O S : 0 0 0 1 7 6 6 3 7 5 0 0 0 1 6 	 1 2 0 0 8 2 0 1 	 
 
 J 	 F e r n a n d e z ,   M T ;   G o m e z ,   I ;   S e b a s t i a n ,   J 	 	 	 	 F e r n a n d e z ,   M T ;   G o m e z ,   I ;   S e b a s t i a n ,   J 	 	 	 S c i e n t i f i c   c o o p e r a t i o n   o f   L a t i n   A m e r i c a n   c o u n t r i e s   t h r o u g h   b i b l i o m e t r i c s   i n d i c a t o r s 	 I N T E R C I E N C I A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 	 I N T E R N A T I O N A L   C O L L A B O R A T I O N ;   W O R L D   S C I E N C E ;   P A T T E R N S ;   I M P A C T 	 T h e   i n t e r n a t i o n a l   s c i e n t i f i c   c o o p e r a t i o n   b e t w e e n   L a t i n   A m e r i c a n   c o u n t r i e s ,   t h e   E u r o p e a n   U n i o n   a n d   t h e   U n i t e d   S t a t e s   h a v e   b e e n   s t u d i e d   t h r o u g h   t h e i r   p u b l i c a t i o n s   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x .   A   t o t a l   o f   1 7 , 4 7 3   d o c u m e n t s   c o a u t h o r e d   b e t w e e n   1 9 9 1 - 9 5   h a s   b e e n   a n a l y s e d .   B i b l i o m e t r i c   i n d i c a t o r s   w e r e   u s e d   t o   i d e n t i f y   t h e   c o l l a b o r a t i o n   p a t t e r n s   o f   e a c h   L a t i n   A m e r i c a n   c o u n t r y ,   p r o d u c t i v i t y ,   p r i n c i p a l   s u b j e c t   o f   t h e   c o o p e r a t i o n   a n d   p a r t n e r s .   A s   a   w h o l e ,   c o a u t h o r e d   p a p e r s   a m o u n t   t o   3 2 %   o f   m a i n s t r e a m   s c i e n t i f i c   a r t i c l e s   o f   L a t i n   A m e r i c a   a l t h o u g h   a   g r e a t   h e t e r o g e n e i t y   c a n   b e   o b s e r v e d .   B r a z i l ,   A r g e n t i n a ,   M e x i c o ,   C h i l e ,   V e n e z u e l a   a n d   C o l o m b i a   a c c o u n t   f o r   m o r e   t h a n   9 5 %   o f   t h e   c o p u b l i s h e d   a r t i c l e s .   A r o u n d   4 4 %   o f   t h e   c o p u b l i c a t i o n s   h a v e   b e e n   w i t h   U S A   a n d   a n o t h e r   4 4 %   w i t h   E U ,   w h i l e   c o p u b l i c a t i o n s   a m o n g   L a t i n   A m e r i c a n   c o u n t r i e s   r e p r e s e n t   5 , 4 %   a n d   6 , 6 %   j o i n t   p u b l i c a t i o n s   w i t h   t h e   t h r e e   r e g i o n s .   T h e   m o s t   f r e q u e n t   c a s e   w a s   t h e   c o a u t h o r s h i p   b e t w e e n   t w o   c o u n t r i e s   ( 1 5 , 2 9 8   d o c u m e n t s ) .   C o l l a b o r a t i v e   p a p e r s   h a v e   g r o w n   a l o n g   t h e   p e r i o d   s t u d i e d ,   p a r t i c u l a r l y   m u l t i l a t e r a l   c o l l a b o r a t i o n s .   P h y s i c s ,   i n c l u d i n g   A s t r o p h y s i c s ,   B i o m e d i c i n e ,   C l i n i c a l   M e d i c i n e   a n d   A g r i c u l t u r e   w e r e   t h e   f i e l d s   t h a t   p r e s e n t   h i g h e r   c o l l b o r a t i o n   r a t e s . 	 C S I C ,   C I N D O C ,   U n i d a d   I n f o r m a t ,   M a d r i d   2 8 0 0 2 ,   S p a i n 	 F e r n a n d e z ,   M T   ( r e p r i n t   a u t h o r ) ,   C S I C ,   C I N D O C ,   U n i d a d   I n f o r m a t ,   D i r e c c   J o a q u i n   C o s t a   2 2 ,   M a d r i d   2 8 0 0 2 ,   S p a i n . 	 	 	 	 	 	 A R V A N I T I S   R ,   1 9 9 5 ,   I N T E R C I E N C I A ,   V 2 0 ,   P 7 6 ;   C O H E N   J ,   1 9 9 5 ,   S C I E N C E ,   V 2 6 7 ,   P 8 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 6 7 . 5 1 9 9 . 8 0 9 ;   D e S o l l a   D . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   F E R N A N D E Z   M T ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 3 ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 9 1 9 ;   F e r n a n d e z   M .   T . ,   1 9 9 3 ,   R E S   E V A L U A T ,   V 3 / 1 ,   P 5 5 ;   F R A M E   J D ,   1 9 7 9 ,   S O C   S T U D   S C I ,   V 9 ,   P 4 8 1 ;   G A I L L A R D   J ,   1 9 8 9 ,   R E C H E R C H E ,   V 2 0 ,   P 6 3 6 ;   G A L B A N   C ,   1 9 9 2 ,   R E V   E S P A N O L A   D O C U M E N ,   V 1 5 ,   P 4 0 5 ;   G I B B S   W W ,   1 9 9 5 ,   I N V E S T I G A C I O N   C I E N C I ,   P 7 0 ;   G O M E Z   I ,   1 9 9 2 ,   R E P R E S E N T A T I O N S   S C I ,   P 1 1 2 ;   G O M E Z   I ,   1 9 9 5 ,   P   5   B I E N N   C   I N T   S O C ;   K A T Z   J S ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 0 ;   K R A U S K O P F   M ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 1 6 9 ;   K R A U S K O P F   M ,   1 9 9 5 ,   I N T E R C I E N C I A ,   V 2 0 ,   P 1 4 4 ;   K R A U S K O P F   M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 4 1 ;   L E W I S O N   G ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 7 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 4 5 ;   L U U K K O N E N   T ,   1 9 9 2 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 7 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 2 0 1 7 0 0 1 0 6 ;   M I Q U E L   J F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 5 6 6 ;   M O E D   H F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 2 ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   N A R V A E Z B E R T H E L E M O T   N ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 5 1 0 3 6 ;   Q I N   J ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 2 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 9 7 4 ;   R U S S E L L   J M ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 4 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 1 7 2 ;   S A N C H O   R ,   1 9 9 4 ,   N E W   W O R L D S   I N F O R M A T I ;   S C H U B E R T   A ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 0 4 6 1 ;   S E B A S T I A N   J ,   1 9 9 7 ,   U N I V E R S O   M E D   P E R S P E C ,   P 3 2 4 1 ;   S E B A S T I A N   J ,   1 9 9 2 ,   1 6 7   U N E S C O ,   P 2 1 5 ;   S E B A S T I A N   J ,   1 9 9 7 ,   G O B I E R N O   C I E N C I A   T E C ,   P 1 8 1 ;   S E B A S T I A N   J ,   1 9 9 6 ,   S E M   I B   A C T   G E S T   T E C N ,   P 1 7 3 ;   V o g e l   E E ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 2 	 3 0 	 2 2 	 2 9 	 1 	 1 0 	 I N T E R C I E N C I A 	 C A R A C A S 	 A P A R T A D O   5 1 8 4 2 ,   C A R A C A S   1 0 5 0 A ,   V E N E Z U E L A 	 0 3 7 8 - 1 8 4 4 	 	 	 I N T E R C I E N C I A 	 I n t e r c i e n c i a 	 N O V - D E C 	 1 9 9 8 	 2 3 	 6 	 	 	 	 	 3 2 8 	 + 	 	 	 	 1 2 	 E c o l o g y 	 E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y 	 1 4 8 D E 	 W O S : 0 0 0 0 7 7 4 8 8 5 0 0 0 0 3 	 	 
 
 J 	 E O M ,   S B ;   L E E ,   S M ;   K I M ,   J K 	 	 	 	 E O M ,   S B ;   L E E ,   S M ;   K I M ,   J K 	 	 	 T H E   I N T E L L E C T U A L   S T R U C T U R E   O F   D E C I S I O N - S U P P O R T   S Y S T E M S   ( 1 9 7 1 - 1 9 8 9 ) 	 D E C I S I O N   S U P P O R T   S Y S T E M S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 D E C I S I O N   S U P P O R T   S Y S T E M S ;   I N T E L L E C T U A L   S T R U C T U R E ;   B I B L I O M E T R I C S ;   C O C I T A T I O N   A N A L Y S I S ;   M U L T I D I M E N S I O N A L   S C A L I N G ;   F A C T O R   A N A L Y S I S 	 M A N A G E M E N T   I N F O R M A T I O N - S Y S T E M S ;   C O - C I T A T I O N   A N A L Y S I S ;   A U T H O R   C O C I T A T I O N ;   D E S I G N ;   O P T I M I Z A T I O N ;   I M P L E M E N T A T I O N ;   F R O N T I E R ;   P R O G R A M ;   M O D E L S ;   W O R K 	 T h i s   s t u d y   a i m s   a t   i d e n t i f y i n g   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   d e c i s i o n   s u p p o r t   s y s t e m s   ( D S S ) ,   u s i n g   f a c t o r   a n a l y s i s   a n d   m u l t i d i m e n s i o n a l   s c a l i n g   o f   a u t h o r   c o c i t a t i o n   f r e q u e n c y .   E i g h t   s u b s e t s   o f   D S S   r e s e a r c h   a r e   i d e n t i f i e d ;   t h e y   a r e   f o u n d a t i o n s ,   g r o u p   D S S ,   T o u t i n g   D S S ,   d a t a   b a s e   m a n a g e m e n t   s y s t e m s ,   m u l t i p l e   c r i t e r i a   D S S ,   m a r k e t i n g   D S S ,   m u l t i p l e   c r i t e r i a   d e c i s i o n   m a k i n g ,   a n d   m a n a g e m e n t   s c i e n c e .   E a r l i e r   s t u d i e s   b y   C u l n a n   r e p o r t e d   t h a t   m a n a g e m e n t   i n f o r m a t i o n   s y s t e m s   ( M I S )   h a v e   m a d e   s i g n i f i c a n t   p r o g r e s s   t o w a r d   a   c u m u l a t i v e   r e s e a r c h   t r a d i t i o n .   T h i s   s t u d y   e x t e n d s   t h e   s t u d y   o f   C u l n a n   a n d   e x a m i n e s   a   s u b s p e c i a l t y   o f   e i g h t   a r e a s   o f   M I S   r e s e a r c h   i d e n t i f i e d   b y   p r i o r   r e s e a r c h .   C o n t r a r y   t o   t h e   p r i o r   r e s e a r c h ,   t h i s   r e s e a r c h   s u p p o r t s   t h e   t h e o r y   o f   c o n t i n u i n g   f r a g m e n t a t i o n   o f   D S S   r e s e a r c h   a n d   f i n d s   v e r y   l i t t l e   c u m u l a t i v e   r e s e a r c h   t r a d i t i o n .   F u r t h e r ,   t h i s   s t u d y   s u g g e s t s   t h a t   D S S   r e s e a r c h   s h o u l d   b e   d i r e c t e d   t o w a r d   t h e   i m p r o v e m e n t   o f   o r g a n i z a t i o n a l   d e c i s i o n   m a k i n g . 	 M I D D L E   T E N N E S S E E   S T A T E   U N I V , D E P T   P S Y C H O L , M U R F R E E S B O R O , T N   3 7 1 3 0 ;   S E   M I S S O U R I   S T A T E   U N I V , N E B R A S K A   C T R   P R O D   &   E N T R E P R E N E U R S H I P , C A P E   G I R A R D E A U , M O   6 3 7 0 1 ;   S E   M I S S O U R I   S T A T E   U N I V , C T R   T E C H N O L   M A N A G E M E N T   &   D E C I S   S C I , C A P E   G I R A R D E A U , M O   6 3 7 0 1 	 E O M ,   S B   ( r e p r i n t   a u t h o r ) ,   S E   M I S S O U R I   S T A T E   U N I V , D E P T   M A N A G E M E N T , C A P E   G I R A R D E A U , M O   6 3 7 0 1 ,   U S A . 	 	 	 	 	 	 A c k o f f   R .   L . ,   1 9 7 0 ,   C O N C E P T   C O R P O R A T E   P L ;   A c k o f f   R .   L . ,   1 9 6 7 ,   M A N A G E   S C I ,   V 1 4 ,   p B ;   A L T E R   S ,   1 9 7 7 ,   S L O A N   M A N A G E   R E V ,   V 1 9 ,   P 3 9 ;   A l t e r   S . ,   1 9 8 0 ,   D E C I S I O N   S U P P O R T   S Y S ;   A R I A V   G ,   1 9 8 5 ,   C O M M U N   A C M ,   V 2 8 ,   P 1 0 4 5 ,   D O I   1 0 . 1 1 4 5 / 4 3 7 2 . 4 3 7 4 ;   B A R I F F   M L ,   1 9 8 2 ,   M I S   B E H A V I O R A L   S C I   R ,   V 1 4 ,   P 1 9 ;   B E L A R D O   S ,   1 9 8 5 ,   I N T E R F A C E S ,   V 1 5 ,   P 8 4 ,   D O I   1 0 . 1 2 8 7 / i n t e . 1 5 . 6 . 8 4 ;   B E L A R D O   S ,   1 9 8 1 ,   D E C I S I O N   S U P P O R T   S Y S ;   B E L A R D O   T ,   1 9 8 0 ,   L I B R   R E S ,   V 2 ,   P 2 3 1 ;   B E L L   W J ,   1 9 8 3 ,   I N T E R F A C E S ,   V 1 3 ,   P 4 ,   D O I   1 0 . 1 2 8 7 / i n t e . 1 3 . 6 . 4 ;   B e n n e t t   J .   L . ,   1 9 8 3 ,   B U I L D I N G   D E C I S I O N   S U ;   B l a n n i n g   R .   W . ,   1 9 7 9 ,   I n f o r m a t i o n   a n d   M a n a g e m e n t ,   V 2 ,   P 8 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 7 2 0 6 ( 7 9 ) 9 0 0 3 9 - 9 ;   B L A N N I N G   R W ,   1 9 8 1 ,   O M E G A - I N T   J   M A N A G E   S ,   V 9 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 8 1 ) 9 0 0 1 7 - 7 ;   B L A N N I N G   R W ,   1 9 8 2 ,   2 N D   I N T   C   D E C   S U P P   S ,   P 1 6 ;   B O D I N   L ,   1 9 8 3 ,   C O M P U T   O P E R   R E S ,   V 1 0 ,   P 6 3 ;   B o d i n   L .   D . ,   1 9 7 9 ,   T r a n s p o r t a t i o n   S c i e n c e ,   V 1 3 ,   P 1 1 3 ,   D O I   1 0 . 1 2 8 7 / t r s c . 1 3 . 2 . 1 1 3 ;   B o n c z e k   R .   H . ,   1 9 8 0 ,   D e c i s i o n   S c i e n c e s ,   V 1 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 8 0 . t b 0 1 1 4 3 . x ;   B o n c z e k   R .   H . ,   1 9 8 0 ,   D e c i s i o n   S c i e n c e s ,   V 1 1 ,   P 6 1 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 8 0 . t b 0 1 1 6 5 . x ;   B o n c z e k   R .   H . ,   1 9 7 9 ,   D e c i s i o n   S c i e n c e s ,   V 1 0 ,   P 2 6 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 7 9 . t b 0 0 0 2 4 . x ;   B O N C Z E K   R H ,   1 9 7 9 ,   I N F O R M   S Y S T ,   V 4 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 3 7 9 ( 7 9 ) 9 0 0 1 6 - 4 ;   B O N C Z E K   R H ,   1 9 8 1 ,   F   D E C I S I O N   S U P P O R T   S ;   B U I   T ,   1 9 8 4 ,   S Y S T   O B J E C T   S O L U T ,   V 4 ,   P 3 ;   B U I   X T ,   1 9 8 4 ,   5 T H   P   I N T   C   I N F   S Y S T ,   P 1 0 1 ;   C a s h   J . ,   1 9 7 6 ,   I n f o r m a t i o n   S y s t e m s ,   V 2 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 3 7 9 ( 7 6 ) 9 0 0 0 8 - 9 ;   C h a r n e s   A ,   1 9 5 4 ,   E C O N O M E T R I C A ,   V 2 2 ,   P 1 9 3 ,   D O I   1 0 . 2 3 0 7 / 1 9 0 7 5 4 2 ;   C H A R N E S   A ,   1 9 6 1 ,   M A N A G E M E N T   M O D E L S   I N ,   V 1 ;   C H A R N E S   A ,   1 9 6 1 ,   M A N A G E M E N T   M O D E L S   I N ,   V 2 ;   C U L N A N   M J ,   1 9 8 6 ,   M I S   Q U A R T ,   V 1 0 ,   P 2 8 9 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 2 6 3 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   D a n t z i g   G .   B . ,   1 9 6 3 ,   L I N E A R   P R O G R A M M I N G   E ;   D e l b e c q   A .   L . ,   1 9 7 5 ,   G R O U P   T E C H N I Q U E S   P R O ;   D E S A N C T I S   G ,   1 9 8 7 ,   M A N A G E   S C I ,   V 3 3 ,   P 5 8 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 3 . 5 . 5 8 9 ;   D E S A N C T I S   G ,   1 9 8 5 ,   D A T A   B A S E ,   V 1 6 ,   P 3 ;   D Y E R   J S ,   1 9 7 6 ,   M A N A G E   S C I ,   V 2 2 ,   P 1 3 3 2 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 2 . 1 2 . 1 3 3 2 ;   D Y E R   J S ,   1 9 8 3 ,   B U I L D I N G   D E C I S I O N   S U ;   E l a m   J .   J . ,   1 9 8 6 ,   D e c i s i o n   S u p p o r t   S y s t e m s :   A   D e c a d e   i n   P e r s p e c t i v e .   P r o c e e d i n g s   o f   t h e   I F I P   W G   8 . 3   W o r k i n g   C o n f e r e n c e ,   P 1 ;   E O M   H B ,   1 9 9 0 ,   E U R   J   O P E R   R E S ,   V 4 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 9 0 ) 9 0 0 0 8 - Y ;   E O M   H B ,   1 9 9 0 ,   I N T E R F A C E S ,   V 2 0 ,   P 6 5 ,   D O I   1 0 . 1 2 8 7 / i n t e . 2 0 . 3 . 6 5 ;   F A R H O O M A N D   A F ,   1 9 8 7 ,   D A T A   B A S E ,   V 1 8 ,   P 4 8 ;   G A L L U P E   R B ,   1 9 8 8 ,   M I S   Q U A R T ,   V 1 2 ,   P 2 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 8 5 3 ;   G a l l u p e   R .   B . ,   1 9 8 5 ,   T H E S I S   U   M I N N E S O T A ;   G E O F F R I O N   A M ,   1 9 7 2 ,   M A N A G E   S C I   B - A P P L ,   V 1 9 ,   P 3 5 7 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 9 . 4 . 3 5 7 ;   G E O R G E   J ,   1 9 8 8 ,   8 T H   T   I N T   C   D E C   S U P P ,   P 1 3 ;   G I N Z B E R G   M J ,   1 9 8 2 ,   D E C I S   S U P P O R T   S Y S T ,   P 9 ;   G I N Z B E R G   M   J ,   1 9 7 8 ,   M I S   Q ,   V 2 ,   P 3 9 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 1 0 5 ;   G l o v e r   F . ,   1 9 7 7 ,   A I I E   T r a n s a c t i o n s ,   V 9 ,   P 3 6 3 ;   G L O V E R   F ,   1 9 7 8 ,   M A N A G E   S C I ,   V 2 4 ,   P 1 2 0 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 4 . 1 2 . 1 2 0 9 ;   G L O V E R   F ,   1 9 8 2 ,   I N F O R ,   V 2 0 ,   P 4 3 3 ;   G l o v e r   F . ,   1 9 7 4 ,   N e t w o r k s ,   V 4 ,   P 1 9 1 ,   D O I   1 0 . 1 0 0 2 / n e t . 3 2 3 0 0 4 0 3 0 2 ;   G O R R Y   G A ,   1 9 7 1 ,   S L O A N   M A N A G E   R E V ,   V 1 3 ,   P 5 5 ;   G r a y   P . ,   1 9 8 7 ,   D e c i s i o n   S u p p o r t   S y s t e m s ,   V 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 8 7 ) 9 0 1 7 8 - 3 ;   G R A Y   P ,   1 9 8 3 ,   3 R D   T   I N T   C   D E C   S U P P ,   P 1 3 5 ;   G R A Y   P ,   1 9 8 1 ,   1 S T   T   I N T   C   D E C   S U P P ,   P 1 2 2 ;   H A I R   J F ,   1 9 8 7 ,   M U L T I V A R I A T E   D A T A   A N ;   H A S E M A N   W D ,   1 9 7 7 ,   C O M P U T   J ,   V 2 0 ,   P 2 2 2 ,   D O I   1 0 . 1 0 9 3 / c o m j n l / 2 0 . 3 . 2 2 2 ;   H a s e m a n   W .   D . ,   1 9 7 7 ,   I N T R O   D A T A   M A N A G E M E N ;   H E N D E R S O N   J C ,   1 9 8 5 ,   M I S   Q U A R T ,   V 9 ,   P 1 5 7 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 1 1 6 ;   H i l t z   S .   R . ,   1 9 7 8 ,   N E T W O R K   N A T I O N ;   H u b e r   G P ,   1 9 8 1 ,   M I S   Q U A R T ,   V 5 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 2 2 0 ;   H U B E R   G P ,   1 9 8 4 ,   M I S   Q U A R T ,   V 8 ,   P 1 9 5 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 6 6 ;   J e l a s s i   M .   T . ,   1 9 8 5 ,   J o u r n a l   o f   M a n a g e m e n t   I n f o r m a t i o n   S y s t e m s ,   V 1 ;   K e e n   P .   G .   W . ,   1 9 8 7 ,   D e c i s i o n   S u p p o r t   S y s t e m s ,   V 3 ,   P 2 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 8 7 ) 9 0 1 8 0 - 1 ;   K e e n   P .   G .   W . ,   1 9 7 8 ,   D E C I S I O N   S U P P O R T   S Y S ;   K e e n   P .   G .   W . ,   1 9 8 0 ,   1 S T   P   I N T   C   I N F   S Y S T ,   P 9 ;   K e e n e y   R .   L . ,   1 9 7 6 ,   D E C I S I O N S   M U L T I P L E   O ;   K E N D A L L   K E ,   1 9 8 2 ,   D A T A   B A S E ,   V 1 4 ,   P 1 3 ;   K I N G   W R ,   1 9 8 1 ,   M A N A G E   S C I ,   V 2 7 ,   P 7 1 7 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 7 . 6 . 7 1 7 ;   K R A E M E R   K L ,   1 9 8 8 ,   C O M P U T   S U R V ,   V 2 0 ,   P 1 1 5 ;   L I L I E N   G L ,   1 9 7 9 ,   M A N A G E   S C I ,   V 2 5 ,   P 1 9 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 5 . 2 . 1 9 1 ;   L i l i e n   G .   L . ,   1 9 8 3 ,   M A R K E T I N G   D E C I S I O N   M ;   L I T T L E   J D C ,   1 9 6 3 ,   O P E R   R E S ,   V 1 1 ,   P 9 7 2 ,   D O I   1 0 . 1 2 8 7 / o p r e . 1 1 . 6 . 9 7 2 ;   L I T T L E   J D C ,   1 9 7 9 ,   J   M A R K E T I N G ,   V 4 3 ,   P 9 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 0 1 4 3 ;   L I T T L E   J D C ,   1 9 7 0 ,   M A N A G E   S C I   B - A P P L ,   V 1 6 ,   p B 4 6 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 4 0 . 0 2 6 7 ;   L O D I S H   L M ,   1 9 8 1 ,   M A R K E T I N G   D E C I S I O N S ;   L o d i s h   L e o n a r d   M . ,   1 9 7 1 ,   M A N A G E   S C I ,   V 1 8 ,   P 2 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 8 . 4 . P 2 5 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M A S O N   R O ,   1 9 7 3 ,   M A N A G E   S C I ,   V 1 9 ,   P 4 7 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 9 . 5 . 4 7 5 ;   M C C A I N   K W ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 6 0 7 ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M C C A I N E   K W ,   1 9 8 2 ,   S C I E N T O M A T R I X ,   V 5 ,   P 2 7 7 ;   M E A D O R   C L ,   1 9 7 4 ,   S L O A N   M A N A G E   R E V ,   V 1 5 ,   P 5 1 ;   M U L V E Y   J M ,   1 9 7 8 ,   M A T H   P R O G R A M ,   V 1 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 6 0 9 0 3 4 ;   M U L V E Y   J M ,   1 9 8 2 ,   E U R   J   O P E R   R E S ,   V 9 ,   P 6 4 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 8 2 ) 9 0 0 1 2 - 1 ;   N e w e l l   A ,   1 9 7 2 ,   H U M A N   P R O B L E M   S O L V I N ;   N u n a m a k e r   J .   F .     J r . ,   1 9 8 7 ,   J o u r n a l   o f   M a n a g e m e n t   I n f o r m a t i o n   S y s t e m s ,   V 3 ,   P 5 ;   N U N A M A K E R   J F ,   1 9 7 3 ,   J U N   P   N A T   C O M P   C ,   V 4 2 ;   P o r t e r   M . E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V A N T A G ;   d e   P r i c e   D .   S . ,   1 9 6 3 ,   B I G   S C I   L I T T L E   S C I ;   R a i f f a   H ,   1 9 6 8 ,   D E C I S I O N   A N A L ;   R o c k a r t   J . ,   1 9 7 9 ,   H A R V A R D   B U S I N E S S   M A R ,   P 8 1 ;   R O C K A R T   J F ,   1 9 7 0 ,   I N D   M A N A G E M E N T   R E V ,   V 1 1 ,   P 1 ;   S a a t y   T . L . ,   1 9 8 2 ,   L O G I C   P R I O R I T I E S ;   S a a t y   T .   L ,   1 9 8 0 ,   A N A L   H I E R A R C H Y   P R O C E ;   S C H I L L I N G   D A ,   1 9 8 3 ,   S O C I O   E C   P L A N N I N G   S C ,   V 2 ,   P 5 7 ;   S c o t t - M o r t o n   M .   S . ,   1 9 7 1 ,   M A N A G E M E N T   D E C I S I O N ;   S i m o n   H .   A . ,   1 9 6 0 ,   N E W   S C I   M A N A G E M E N T   D ;   S M I T H   L ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 2 3 ,   P 8 3 ;   S p r a g u e   R H ,   1 9 8 0 ,   M I S   Q U A R T ,   V 4 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 9 5 7 ;   S P R A G U E   R H ,   1 9 7 5 ,   J   S Y S T   M A N A G E ,   V 2 6 ,   P 3 5 ;   S p r a g u e   J r   R . H . ,   1 9 8 2 ,   B U I L D I N G   E F F E C T I V E   D ;   S P R A G U E   R H ,   1 9 7 9 ,   C A L I F O R N I A   M A N A G E M E N ,   V 2 ,   P 6 0 ;   T E N G   J T C ,   1 9 9 0 ,   D A T A   B A S E ,   V 2 1 ,   P 1 ;   T U R B A N   E ,   1 9 8 3 ,   C O M P U T   I N D   E N G ,   V 7 ,   P 4 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 6 0 - 8 3 5 2 ( 8 3 ) 9 0 0 0 7 - 4 ;   T U R B A N   E ,   1 9 8 6 ,   M I S   Q U A R T ,   V 1 0 ,   P 1 2 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 0 3 1 ;   W A G N E R   G R ,   1 9 8 0 ,   D E C I S I O N   S U P P O R T   S Y S ,   P 1 6 9 ;   W A T S O N   R T ,   1 9 8 8 ,   M I S   Q U A R T ,   V 1 2 ,   P 4 6 3 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 2 1 4 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   Y o u n g   F W ,   1 9 8 7 ,   M U L T I D I M E N S I O N A L   S C A ;   Z E L E N Y   M ,   1 9 8 9 ,   H U M A N   S Y S T E M S   M A N A G E ,   V 8 ,   P 9 9 ;   Z I O N T S   S ,   1 9 8 3 ,   M A N A G E M E N T   S C I ,   V 2 9 ;   Z L E E N Y   M ,   1 9 8 2 ,   M U L T I P L E   C R I T E R I A   D E 	 1 1 2 	 2 2 	 2 2 	 2 	 1 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 7 - 9 2 3 6 	 	 	 D E C I S   S U P P O R T   S Y S T 	 D e c i s .   S u p p o r t   S y s t . 	 J U L 	 1 9 9 3 	 1 0 	 1 	 	 	 	 	 1 9 	 3 5 	 	 1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 0 3 - L 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e ;   C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 L R 4 9 6 	 W O S : A 1 9 9 3 L R 4 9 6 0 0 0 0 2 	 	 
 
 J 	 S E N G U P T A ,   I N 	 	 	 	 S E N G U P T A ,   I N 	 	 	 B I B L I O M E T R I C S ,   I N F O R M E T R I C S ,   S C I E N T O M E T R I C S   A N D   L I B R A M E T R I C S   -   A N   O V E R V I E W 	 L I B R I 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 B I O C H E M I C A L   L I T E R A T U R E ;   B R A D F O R D   D I S T R I B U T I O N ;   C I T A T I O N   N E T W O R K S ;   L E C T I N   L I T E R A T U R E ;   S C I E N C E   C I T A T I O N ;   G R O W T H ;   L A W ;   I N D I C A T O R S ;   J O U R N A L S ;   P E R I O D I C A L S 	 B i b l i o m e t r i c s ,   i n f o r m e t r i c s ,   s c i e n t o m e t r i c s   a n d   l i b r a m e t r i c s   a r e   f o u r   m e a s u r i n g   t e c h n i q u e s   i n   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e .   T h e s e   a r e   a n a l o g o u s ,   o r   r a t h e r   s y n o n y m o u s ,   t e r m s   w i t h   i n t e r m i n g l e d   a i m s   a n d   o b j e c t i v e s   a n d   a s   s u c h   t h e y   n e e d   s o m e   e l u c i d a t i o n .   T h i s   p a p e r   d i s c u s s e s   t h e i r   s c o p e ,   a p p l i c a t i o n ,   d e v e l o p m e n t   a n d   p o t e n t i a l   i n   s o l v i n g   v a r i o u s   p r o b l e m s   p e r t a i n i n g   t o   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e s . 	 	 S E N G U P T A ,   I N   ( r e p r i n t   a u t h o r ) ,   I N D I A N   I N S T   C H E M   B I O L , 4   R A J A   S C   M U L L I C K   R D , C A L C U T T A   7 0 0 0 3 2 , W   B E N G A L , I N D I A . 	 	 	 	 	 	 A B D U L L A H   S B ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 4 3 ;   A V E R S A   E S ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 6 ;   B E C K   M T ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 1 ;   B O N I T Z   M ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 4 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 6 2 ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B O T T L E   R T ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 1 0 9 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a d f o r d   S C ,   1 9 5 0 ,   D O C U M E N T A T I O N ;   B R A D F O R D   S C ,   1 9 4 6 ,   R O Y A L   S O C   E M P I R E   S C I ,   P 7 2 9 ;   B R A U N   T ,   1 9 8 8 ,   J   I N F   S C I ,   V 1 4 ,   P 3 6 5 ;   B R A U N   T ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 6 5 ;   B R O A D M A N   E ,   1 9 4 4 ,   M E D   L I B   A S S   B ,   V 3 2 ,   P 4 7 9 ;   B R O A D U S   R N ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 3 ) 3 8 : 2 < 1 2 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - K ;   B R O A D U S   R N ,   1 9 8 7 ,   J   E D U C   L I B R   I N F   S C I ,   V 2 8 ,   P 1 5 2 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 6 2 5 ;   B R O A D U S   R N ,   1 9 7 7 ,   A D V   L I B R A R I A N S H I P ,   V 7 ,   P 3 1 0 ;   B r o o k e s   B .   C . ,   1 9 7 0 ,   J o u r n a l   o f   D o c u m e n t a t i o n ,   V 2 6 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 0 0 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 7 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 8 ;   B R O O K E S   B C ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 5 8 ;   B R O O K E S   B C ,   1 9 6 9 ,   N A T U R E ,   V 2 2 4 ,   P 9 5 3 ,   D O I   1 0 . 1 0 3 8 / 2 2 4 9 5 3 a 0 ;   B R O O K E S   B C ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 1 8 ;   B R O O K E S   B C ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 1 8 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 4 1 ;   B R O O K E S   B C ,   1 9 8 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 0 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 4 ) 9 0 0 3 8 - 4 ;   B R O O K E S   B C ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 3 1 ;   B R O W N   C H ,   1 9 5 6 ,   A C R L   M O N O G R A P H S ,   V 1 6 ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C A M P B E L L   F ,   1 8 9 6 ,   T H E O R Y   N A T I O N A L   I N T ;   C A R P E N T E R   M P ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 4 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 6 0 4 ;   C H U B I N   D E ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 3 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 6 0 8 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C O L E   S ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 4 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 6 0 ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 9 ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 1 1 ;   C R O U C H   D ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 7 ;   D O B R O V   G M ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 2 ;   D O B R O V   G M ,   T H E O R E T I C A L   P R O B L E M S ,   P 1 6 5 ;   D O U   H ,   1 9 8 8 ,   E D U C   I N F O R M ,   V 6 ,   P 4 1 1 ;   E G G H E   L ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 2 8 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 7 0 7 ) 3 8 : 4 < 2 8 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Q ;   E G G H E   L ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 4 7 ;   E G G H E   L ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 1 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F u s s l e r   H H ,   1 9 4 9 ,   L I B R   Q U A R T ,   V 1 9 ,   P 1 1 9 ;   F u s s l e r   H H ,   1 9 4 9 ,   L I B R   Q U A R T ,   V 1 9 ,   P 1 9 ;   G A R F I E L D   E ,   1 9 7 1 ,   C C / L I F E   S C I ,   V 1 4 ,   P 5 ;   G A R F I E L D   E ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 9 . 6 4 9 ;   G A R F I E L D   E ,   1 9 8 8 ,   C U R R   C O N T E N T S   L I F E   S ,   V 3 1 ,   P 5 ;   G A R F I E L D   E ,   1 9 7 7 ,   C U R R   C O N T E N T S ,   V 5 ,   P 5 ;   G A R F I E L D   E ,   1 9 7 5 ,   I M P A C T   F A C T O R S   S C I   J ;   G L A N Z E L   W ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 7 ;   G O F F M A N   W ,   1 9 6 9 ,   N A T U R E ,   V 2 2 1 ,   P 1 2 0 5 ,   D O I   1 0 . 1 0 3 8 / 2 2 1 1 2 0 5 a 0 ;   G O F F M A N   W ,   1 9 6 6 ,   N A T U R E ,   V 2 1 0 ,   P 7 8 6 ,   D O I   1 0 . 1 0 3 8 / 2 1 0 7 8 6 a 0 ;   G O F F M A N   W ,   1 9 7 0 ,   N A T U R E ,   V 2 2 6 ,   P 9 2 2 ,   D O I   1 0 . 1 0 3 8 / 2 2 6 9 2 2 a 0 ;   G O F F M A N   W ,   1 9 6 4 ,   N A T U R E ,   V 2 0 4 ,   P 2 2 5 ,   D O I   1 0 . 1 0 3 8 / 2 0 4 2 2 5 a 0 ;   G O F F M A N   W ,   1 9 7 1 ,   N A T U R E ,   V 2 2 9 ,   P 1 0 3 ,   D O I   1 0 . 1 0 3 8 / 2 2 9 1 0 3 a 0 ;   G O R K O V A   V I ,   1 9 8 8 ,   I N F O R M E T R I C S ;   G O S N E L L   C F ,   1 9 7 4 ,   C O L L E G E   R E S   L I B ,   V 5 ,   P 1 1 5 ;   G R O O S   O V ,   1 9 6 7 ,   A M   D O C ,   V 1 8 ,   P 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 8 0 1 0 8 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   G R O S S   P L K ,   1 9 2 7 ,   S C I E N C E ,   V 6 6 ,   P 1 2 2 9 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   H E N K L E   H N ,   1 9 3 8 ,   M E D   L I B R A R Y   A S S   B ,   V 2 7 ,   P 1 3 9 ;   H e r t z e l   D .   H ,   1 9 8 7 ,   E N C Y   L I B R A R Y   I N F O   S 7 ,   P 1 4 4 ;   H I L L   B M ,   1 9 7 0 ,   J   A M   S T A T   A S S O C ,   V 6 5 ,   P 1 2 2 0 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 4 2 8 8 ;   H J E R P P E   R ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 0 6 4 ;   H J E R P P E   R ,   1 9 8 0 ,   T R I T A L A B 2 0 1 3   S T O C K H ;   H U B E R T   J J ,   1 9 7 7 ,   S O C   I N D I C   R E S ,   V 4 ,   P 4 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 5 3 1 4 4 ;   H U L M E   F W ,   1 9 2 3 ,   S T A T I S T I C A L   B I B L I O   R ,   P 4 4 ;   I R V I N E   J ,   1 9 8 5 ,   S O C   S T U D   S C I ,   V 1 5 ,   P 2 9 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 5 0 1 5 0 0 2 0 0 4 ;   K A R A M U R Z A   S G ,   1 9 8 1 ,   V E S T N I K   A K A D E M I I   N A U ,   V 5 ,   P 6 8 ;   K E N D A L L   M G ,   1 9 6 0 ,   O P E R   R E S   Q U A R T ,   V 1 1 ,   P 3 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 7 1 7 7 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K U M A R I   L ,   1 9 8 8 ,   J   S C I   I N D   R E S   I N D I A ,   V 4 7 ,   P 6 9 2 ;   K U M A R I   L ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 3 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 1 7 ;   L A N C A S T E R   F W ,   1 9 8 7 ,   N A T U R E ,   V 3 2 5 ,   P 1 0 2 ,   D O I   1 0 . 1 0 3 8 / 3 2 5 1 0 2 a 0 ;   L A N G E   L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 6 ;   L E I M K U H L E R   F F ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 2 8 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 9 ;   L E I M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 3 0 ;   L I N E   M B ,   1 9 7 0 ,   J   D O C ,   V 2 6 ,   P 4 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 6 ;   L L O Y D   G G ,   1 9 8 9 ,   P S Y C H O L   M E D ,   V 1 9 ,   P 1 5 ;   L O C K E T T   M W ,   1 9 8 9 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 1 ,   P 2 1 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M A N D E L B R O T   B ,   1 9 5 2 ,   P   S   A P P L I C   C O M M U N   T H ,   P 4 8 8 ;   M A R T I N   B R ,   1 9 8 7 ,   N A T U R E ,   V 3 2 0 ,   P 1 2 3 ;   M C I N T O S H   R P ,   1 9 8 9 ,   Q   R E V   B I O L ,   V 6 4 ,   P 3 1 ,   D O I   1 0 . 1 0 8 6 / 4 1 6 1 2 9 ;   M E A D O W S   A J ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 4 9 ;   M I K H I L O V   A I ,   1 9 8 4 ,   S C I   C O M M U N I C A T I O N   I N ;   M O E D   H F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 5 ;   M O R A L E S   M ,   1 9 8 5 ,   I N T   F O R U M   I N F O R M   D O C ,   V 1 0 ,   P 1 5 ;   M O R A V C S I K   M J ,   1 9 8 8 ,   S O C   S T U D   S C I ,   V 1 8 ,   P 5 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 8 0 1 8 0 0 3 0 0 5 ;   M O R A V C S I K   M J ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 1 ;   M U R P H Y   L J ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 6 0 7 ;   N A R A N A N   S ,   1 9 7 1 ,   J   D O C ,   V 2 7 ,   P 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 1 0 ;   N A R A N A N   S ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 3 1 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 3 1 a 0 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   N E E L A M E G H A N   A ,   1 9 6 9 ,   7 T H   A N N   S E M   D R T C ,   V 1 ,   P 6 3 5 ;   N I C H O L A S   D ,   1 9 7 8 ,   L I T   B I B L I O M E T R I C S ,   P 1 0 ;   N O M A   E ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 2 5 - 5 ;   O C O N N O R   D O ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 9 ;   P A T T E R S O N   C D ,   1 9 8 5 ,   J   E D U C   L I B R   I N F   S C I ,   V 2 5 ,   P 3 0 1 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 1 6 8 ;   P E R I T Z   B C ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 8 ,   P 3 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 4 8 ;   P E R I T Z   B C ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 1 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 5 0 ;   P I E R C E   S J ,   1 9 8 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 9 ,   P 1 4 3 ;   P O T T E R   W G ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 5 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P r i c e   D . D . S . ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 7 ;   P R I C E   D J D ,   1 9 7 1 ,   J   A M   S O C   I N F O R M   S C I ,   P 7 4 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   P R I T C H A R D   A ,   1 9 7 2 ,   R E S   L I B R A R I A N S H I P ,   V 4 ,   P 8 9 ;   P R I T C H A R D   A ,   1 9 6 9 ,   B I B L I O M E T R I C S   B I B L I O ;   R A I S I G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 5 0 ;   R A J A N   T N ,   1 9 8 5 ,   F I D   I M   N E W S   L E T T ,   V 1 ,   P 1 ;   R A J A N   T N ,   1 9 8 5 ,   B I B L I O M E T R I C   S T U D I E S ;   R A N G A N A T H A N   S R ,   1 9 4 8 ,   P   A S L I B S   A N N   C   G R E A T ;   R A N G A N A T H A N   S R ,   1 9 6 9 ,   7 T H   D R T C   A N N   S E M ,   V 1 ,   P 2 8 5 ;   R A O   I K K ,   I A S L I C   S P L   P U B L ,   V 2 5 ,   P 1 ;   R A O   S ,   1 9 8 8 ,   I L A   B ,   V 2 4 ,   P 1 7 ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   R O T H M A N   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 2 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 9 ;   S A N D I S O N   A ,   1 9 7 3 ,   J   D O C ,   V 2 9 ,   P 1 0 7 ;   S C H R A D E R   A M ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 5 ;   S C H U B E R T   A ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 6 1 ;   S E L F   P C ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 2 2 ;   S E N G U P T A   I N ,   1 9 8 7 ,   L I B R   I N F O R M   S C I   R E S ,   V 9 ,   P 2 3 9 ;   S E N G U P T A   I N ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 9 ;   S E N G U P T A   I N ,   1 9 7 3 ,   N A T U R E ,   V 2 4 4 ,   P 7 5 ,   D O I   1 0 . 1 0 3 8 / 2 4 4 0 7 5 a 0 ;   S E N G U P T A   I N ,   1 9 7 3 ,   J   D O C ,   V 2 9 ,   P 1 9 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 5 5 ;   S E N G U P T A   I N ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 6 0 ;   S E N G U P T A   I N ,   1 9 8 4 ,   I N T   L I B R   R E V ,   V 1 6 ,   P 4 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 7 8 3 7 ( 8 4 ) 9 0 0 3 2 - 3 ;   S E N G U P T A   I N ,   1 9 7 4 ,   I N T   L I B R   R E V ,   V 6 ,   P 1 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 7 8 3 7 ( 7 4 ) 9 0 0 2 1 - 1 ;   S E N G U P T A   I N ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 1 3 ;   S E N G U P T A   I N ,   1 9 7 4 ,   I N T   L I B R   R E V ,   V 6 ,   P 4 8 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 7 8 3 7 ( 7 4 ) 9 0 0 1 6 - 8 ;   S E N G U P T A   I N ,   1 9 7 4 ,   I N T   L I B R   R E V ,   V 6 ,   P 3 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 7 8 3 7 ( 7 4 ) 9 0 0 5 0 - 8 ;   S e n g u p t a   I . ,   1 9 8 5 ,   I A S L I C   B ,   V 6 0 ,   P 1 6 7 ;   S E N G U P T A   I N ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 6 5 ;   S E N G U P T A   I N ,   1 9 9 1 ,   I N D I A N   J   I N F   L I B   S O C ,   V 4 ;   S E N G U P T A   I N ,   1 9 8 5 ,   R A N G A N A T H A N S   P H I L O S ,   P 5 0 1 ;   S E N G U P T A   I N ,   1 9 7 2 ,   I N T   L I B R   R E V ,   V 1 1 ,   P 1 6 9 ;   S E N G U P T A   I N ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 3 6 5 ;   S E N G U P T A   I N ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 3 5 ;   S E N G U P T A   I N ,   1 9 8 5 ,   R A N G A N A T H A N S   P H I L O S ,   P 6 9 0 ;   S E N G U P T A   I N ,   1 9 9 1 ,   I N D I A N   J   I N F   L I B   S O C ,   V 4 ,   P 4 1 ;   S I C H E L   H S ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 6 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S T E V E N S   R E ,   1 9 5 3 ,   A M   C O L L E G E   R E S   L I B R A ,   V 7 ,   P 1 0 ;   S U B R A M A N Y A M   K ,   1 9 8 1 ,   L I B R   R E S ,   V 3 ,   P 1 6 7 ;   S W A L E S   J ,   1 9 8 6 ,   A P P L   L I N G U I S T ,   V 7 ,   P 3 9 ,   D O I   1 0 . 1 0 9 3 / a p p l i n / 7 . 1 . 3 9 ;   T O D O R O V   R ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 6 ;   * U K   S T A N D   I ,   1 9 7 6 ,   G L O S S   D O C   T E R M S ,   P 7 ;   V I C K E R Y   B C ,   1 9 4 8 ,   J   D O C ,   V 4 ,   P 1 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 1 3 3 ;   V I N K L E R   P ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 5 2 ;   V I N K L E R   P ,   1 9 9 1 ,   U N P U B   I N   S E N G U P T A S   I ;   V I N S O N   G P ,   1 9 8 9 ,   J   E N D O C R I N O L ,   V 1 2 0 ,   P 1 8 1 ,   D O I   1 0 . 1 6 7 7 / j o e . 0 . 1 2 0 0 1 8 1 ;   V L A C H Y   J ,   1 9 8 0 ,   C Z E C H   J   P H Y S ,   V 3 0 ,   P 4 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 5 9 6 1 0 4 ;   V L A C H Y   J ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 5 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 6 4 ;   V L A C H Y   J ,   1 9 8 6 ,   C Z E C H   J   P H Y S ,   V 3 6 ,   P 5 5 5 ;   V O O S   H ,   1 9 7 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 5 ,   P 2 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 5 0 4 1 0 ;   W A D E   N ,   1 9 7 5 ,   S C I E N C E ,   V 1 8 8 ,   P 4 2 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 8 . 4 1 8 7 . 4 2 9 ;   W I L K I N S O . E A ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 1 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 3 4 ;   W I T T I G   G R ,   1 9 7 8 ,   J   D O C ,   V 3 4 ,   P 2 4 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 6 2 ;   W O R T H E N   D B ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 5 0 5 ;   W O R T H E N   D B ,   1 9 7 5 ,   J   D O C ,   V 3 1 ,   P 2 5 ;   W Y A T T   H V ,   1 9 8 8 ,   6 6   B R   L I B   R E S   P A P ;   Y U T H A V O N G   Y ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 7 ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O R   P R I N C 	 1 6 5 	 2 2 	 2 3 	 4 	 3 7 	 M U N K S G A A R D   I N T   P U B L   L T D 	 C O P E N H A G E N 	 3 5   N O R R E   S O G A D E ,   P O   B O X   2 1 4 8 ,   D K - 1 0 1 6   C O P E N H A G E N ,   D E N M A R K 	 0 0 2 4 - 2 6 6 7 	 	 	 L I B R I 	 L i b r i 	 A P R - J U N 	 1 9 9 2 	 4 2 	 2 	 	 	 	 	 7 5 	 9 8 	 	 1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 	 	 2 4 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 H V 9 9 6 	 W O S : A 1 9 9 2 H V 9 9 6 0 0 0 0 1 	 	 
 
 J 	 B o r n m a n n ,   L ;   M a r x ,   W 	 	 	 	 B o r n m a n n ,   L u t z ;   M a r x ,   W e r n e r 	 	 	 H o w   t o   e v a l u a t e   i n d i v i d u a l   r e s e a r c h e r s   w o r k i n g   i n   t h e   n a t u r a l   a n d   l i f e   s c i e n c e s   m e a n i n g f u l l y ?   A   p r o p o s a l   o f   m e t h o d s   b a s e d   o n   p e r c e n t i l e s   o f   c i t a t i o n s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   P u b l i c a t i o n s ;   P r o d u c t i v i t y ;   C i t a t i o n s ;   P e r c e n t i l e s ;   R e s e a r c h e r s 	 H - I N D E X ;   B I B L I O M E T R I C   I N D I C A T O R S ;   S C I E N T I F I C   E X C E L L E N C E ;   R E S E A R C H   P E R F O R M A N C E ;   I N F O R M A T I O N - S C I E N C E ;   G O O G L E   S C H O L A R ;   I M P A C T ;   P U B L I C A T I O N ;   Q U A L I T Y ;   U N I V E R S I T I E S 	 A l t h o u g h   b i b l i o m e t r i c s   h a s   b e e n   a   s e p a r a t e   r e s e a r c h   f i e l d   f o r   m a n y   y e a r s ,   t h e r e   i s   s t i l l   n o   u n i f o r m i t y   i n   t h e   w a y   b i b l i o m e t r i c   a n a l y s e s   a r e   a p p l i e d   t o   i n d i v i d u a l   r e s e a r c h e r s .   T h e r e f o r e ,   t h i s   s t u d y   a i m s   t o   s e t   u p   p r o p o s a l s   h o w   t o   e v a l u a t e   i n d i v i d u a l   r e s e a r c h e r s   w o r k i n g   i n   t h e   n a t u r a l   a n d   l i f e   s c i e n c e s .   2 0 0 5   s a w   t h e   i n t r o d u c t i o n   o f   t h e   h   i n d e x ,   w h i c h   g i v e s   i n f o r m a t i o n   a b o u t   a   r e s e a r c h e r ' s   p r o d u c t i v i t y   a n d   t h e   i m p a c t   o f   h i s   o r   h e r   p u b l i c a t i o n s   i n   a   s i n g l e   n u m b e r   ( h   i s   t h e   n u m b e r   o f   p u b l i c a t i o n s   w i t h   a t   l e a s t   h   c i t a t i o n s ) ;   h o w e v e r ,   i t   i s   n o t   p o s s i b l e   t o   c o v e r   t h e   m u l t i d i m e n s i o n a l   c o m p l e x i t y   o f   r e s e a r c h   p e r f o r m a n c e   a n d   t o   u n d e r t a k e   i n t e r - p e r s o n a l   c o m p a r i s o n s   w i t h   t h i s   n u m b e r .   T h i s   s t u d y   t h e r e f o r e   i n c l u d e s   r e c o m m e n d a t i o n s   f o r   a   s e t   o f   i n d i c a t o r s   t o   b e   u s e d   f o r   e v a l u a t i n g   r e s e a r c h e r s .   O u r   p r o p o s a l s   r e l a t e   t o   t h e   s e l e c t i o n   o f   d a t a   o n   w h i c h   a n   e v a l u a t i o n   i s   b a s e d ,   t h e   a n a l y s i s   o f   t h e   d a t a   a n d   t h e   p r e s e n t a t i o n   o f   t h e   r e s u l t s . 	 [ B o r n m a n n ,   L u t z ]   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y ;   [ M a r x ,   W e r n e r ]   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   I n f o r m a t   R e t r i e v a l   S e r v   I V S   C P T ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e ;   w . m a r x @ f k f . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 	 	 	 A b r a m o   G ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 4 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 ;   A b r a m o   G ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 5 4 ;   A k s n e s   D W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 1 9 2 2 8 3 6 8 ;   A l b a r r a n   P ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 4 8 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   A n d r e s   A . ,   2 0 1 1 ,   M E A S U R I N G   A C A D   R E S   U ;   A m e r i c a n   P s y c h o l o g i c a l   A s s o c i a t i o n ,   2 0 1 0 ,   P U B L   M A N   A M   P S Y C H   A S ;   A z o u l a y   P ,   2 0 0 9 ,   1 5 4 6 6   N B E R ;   B o r n m a n n   L . ,   N E X T   G E N E R A   I N   P R E S S ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B o r n m a n n   L . ,   J   A M   S O C   I N   I N   P R E S S ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 6 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 1 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 3 1 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 7 2 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 5 . 0 0 2 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 5 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 9 2 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 0 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 9 . 0 0 4 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 8 . 0 0 2 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 5 0 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 4 . 0 0 2 ;   B o r n m a n n   L ,   2 0 1 2 ,   R H E U M A T O L   I N T ,   V 3 2 ,   P 1 8 6 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 9 6 - 0 1 1 - 2 2 7 6 - 1 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 6 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   R   S T A T   S O C   A   S T A T ,   V 1 7 4 ,   P 8 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 8 5 X . 2 0 1 1 . 0 0 6 8 9 . x ;   B o r n m a n n   L ,   2 0 1 1 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 5 ,   P 1 9 9 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 1 . 0 0 6 ;   B o r n m a n n   L ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 1 3 4 4 ;   B o r n m a n n   L ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 1 1 . 0 0 1 ;   B o r n m a n n   L ,   2 0 0 9 ,   E M B O   R E P ,   V 1 0 ,   P 2 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 0 8 . 2 3 3 ;   B o y a c k   K W ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 1 9 2 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 0 9 1 0 0 ;   B u t l e r   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 4 - 1 ;   C o l e   S . ,   1 9 9 2 ,   M A K I N G   S C I   N A T U R E   S O ;   C o l e m a n   B J ,   2 0 1 2 ,   T R A N S P O R T   J ,   V 5 1 ,   P 1 6 4 ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 5 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 8 ;   C o u n c i l   o f   C a n a d i a n   A c a d e m i e s ,   2 0 1 2 ,   I N F   R E S   C H O I C   I N D   J U ;   C r o n i n   B ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 9 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 6 7 ;   C u m m i n g   G . ,   2 0 1 2 ,   U N D E R S T A N D I N G   N E W   S T ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   D a n e l l   R ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 5 4 ;   D e   B e l l i s   N . ,   2 0 0 9 ,   B I B L I O M E T R I C S   C I T A T I ;   D e - M o y a - A n e g o n   F e l i x ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 7 ,   P 4 2 1 ;   D o a n e   D P ,   2 0 0 0 ,   A M   S T A T ,   V 5 4 ,   P 2 8 9 ,   D O I   1 0 . 2 3 0 7 / 2 6 8 5 7 8 0 ;   D u f f y   R D ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 5 2 - 4 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E g g h e   L ,   2 0 1 0 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 4 ,   P 6 5 ;   E l   E m a m   K ,   2 0 1 2 ,   J   M E D   I N T E R N E T   R E S ,   V 1 4 ,   D O I   1 0 . 2 1 9 6 / j m i r . 2 1 7 7 ;   F r a n c e s c h i n i   F ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 6 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 7 0 - z ;   F r o g h i   S ,   2 0 1 2 ,   B J U   I N T ,   V 1 0 9 ,   P 3 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 4 - 4 1 0 X . 2 0 1 1 . 1 0 8 5 6 . x ;   G a r c i a - P e r e z   M A ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 7 2 ;   G a r f i e l d   E ,   2 0 0 2 ,   S C I E N T I S T ,   V 1 6 ,   P 1 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 6 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 5 ;   G r u p p   H ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 7 5 ;   H a s l a m   N ,   2 0 1 0 ,   E U R   J   S O C   P S Y C H O L ,   V 4 0 ,   P 2 1 6 ,   D O I   1 0 . 1 0 0 2 / e j s p . 7 2 7 ;   H e m l i n   S v e n ,   1 9 9 6 ,   S O C I A L   E P I S T E M O L O G Y ,   V 1 0 ,   P 2 0 9 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 9 1 7 2 9 6 0 8 5 7 8 8 1 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a c s o   P ,   2 0 1 0 ,   O N L I N E   I N F O R M   R E V ,   V 3 4 ,   P 1 7 5 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 1 0 1 1 0 2 4 1 9 1 ;   J a c s o   P ,   2 0 0 9 ,   L I B R   J ,   V 1 3 4 ,   P 2 6 ;   K o r e v a a r   J C ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 8 ;   K o s m u l s k i   M ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 6 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 2 . 0 0 4 ;   K o s m u l s k i   M ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 4 8 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 3 . 0 0 1 ;   K r e i m a n   G ,   2 0 1 1 ,   F R O N T   C O M P U T   N E U R O S C ,   V 5 ,   D O I   1 0 . 3 3 8 9 / f n c o m . 2 0 1 1 . 0 0 0 4 8 ;   L a m o n t   M ,   2 0 1 2 ,   A N N U   R E V   S O C I O L ,   V 3 8 ,   P 2 0 1 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v - s o c - 0 7 0 3 0 8 - 1 2 0 0 2 2 ;   L a r s e n   P O ,   2 0 0 9 ,   P R O   I N T   C O N F   S C I   I N F ,   V 2 ,   P 5 9 7 ;   L e h m a n n   S ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 6 8 - 8 ;   L e w i s o n   G ,   2 0 0 7 ,   B R I T   J   P S Y C H I A T ,   V 1 9 0 ,   P 3 1 4 ,   D O I   1 0 . 1 1 9 2 / b j p . b p . 1 0 6 . 0 2 4 9 1 9 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 3 4 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M a r x   W . ,   J   A M   S O C   I N   I N   P R E S S ;   M a r x   W . ,   2 0 1 1 ,   F O R S C H U N G   L E H R E ,   V 1 1 ,   P 6 8 0 ;   M a r x   W . ,   2 0 1 2 ,   B E I T R A G E   H O C H S C H U L F O ,   V 3 4 ,   P 5 0 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   M E R T O N   R K ,   1 9 5 7 ,   A M   S O C I O L   R E V ,   V 2 2 ,   P 6 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 8 9 1 9 3 ;   M e r t o n   R o b e r t   K . ,   1 9 8 0 ,   S C H U L T E R N   R I E S E N   L E I ;   M o e d   H F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 8 7 ;   M o e d   H F ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 8 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 8 8 1 - 5 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   N o r r i s   M ,   2 0 1 0 ,   J   D O C ,   V 6 6 ,   P 6 8 1 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 1 0 1 1 0 6 6 7 9 0 ;   N o s e k   B A ,   2 0 1 0 ,   P E R S   S O C   P S Y C H O L   B ,   V 3 6 ,   P 1 2 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 6 1 6 7 2 1 0 3 7 8 1 1 1 ;   O p t h o f   T ,   2 0 1 1 ,   N E T H   H E A R T   J ,   V 1 9 ,   P 2 4 6 ,   D O I   1 0 . 1 0 0 7 / s 1 2 4 7 1 - 0 1 1 - 0 1 2 8 - y ;   P a n a r e t o s   J ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 7 4 - 9 ;   P e n d l e b u r y   D .   A . ,   2 0 0 8 ,   U S I N G   B I B L I O M E T R I C S ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   R e t z e r   V ,   2 0 0 9 ,   B A S I C   A P P L   E C O L ,   V 1 0 ,   P 3 9 3 ,   D O I   1 0 . 1 0 1 6 / j . b a a e . 2 0 0 8 . 0 9 . 0 0 1 ;   R u i z - C a s t i l l o   J ,   2 0 1 2 ,   S E R I E S - J   S P A N   E C O N ,   V 3 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 3 2 0 9 - 0 1 1 - 0 0 7 4 - 3 ;   S a h e l   J A ,   2 0 1 1 ,   S C I   T R A N S L   M E D ,   V 3 ,   D O I   1 0 . 1 1 2 6 / s c i t r a n s l m e d . 3 0 0 2 2 4 9 ;   S C H U B E R T   A ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 9 0 ;   S c h u b e r t   A ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 7 ;   S m i t h   A . ,   2 0 0 2 ,   C O R R E L A T I O N   R A E   R A T I ;   S t a t a C o r p ,   2 0 1 1 ,   S T A T   S T A T   S O F T W   R E L ;   S t r o t m a n n   A ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 1 8 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 6 9 5 ;   S u g i m o t o   C R ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 9 5 ;   T a y l o r   J ,   2 0 1 1 ,   B R I T   J   M A N A G E ,   V 2 2 ,   P 2 0 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 5 5 1 . 2 0 1 0 . 0 0 7 2 2 . x ;   T h o m p s o n   D F ,   2 0 0 9 ,   A M   J   P H A R M   E D U C ,   V 7 3 ;   T i j s s e n   R . ,   2 0 0 6 ,   9   I N T   C   S C I   T E C H N   I N ,   P 1 4 6 ;   T i j s s e n   R J W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 8 2 4 3 2 6 6 0 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   v a n   R a a n   A F J ,   2 0 0 0 ,   A S I S T   M O N   S E R ,   P 3 0 1 ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 1 ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 1 ;   V i n k l e r   P ,   2 0 1 0 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 2 5 0 ;   W a l t m a n   L . ,   2 0 1 2 ,   L E I D E N   R A N K I N G   2 0 1 1 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 0 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 7 8 ;   W a n g   J ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 8 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 7 5 - 9 ;   W e i n g a r t   P . ,   2 0 0 5 ,   W I S S E N S C H A F T   O F F E N T L ,   P 1 0 2 ;   Z h a n g   L ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 1 ,   P 6 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 9 0 - 8 	 1 0 9 	 2 1 	 2 1 	 1 0 	 8 4 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 2 0 1 4 	 9 8 	 1 	 	 	 	 	 4 8 7 	 5 0 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 1 6 1 - y 	 	 2 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 8 4 L Q 	 W O S : 0 0 0 3 2 9 3 1 9 2 0 0 0 3 1 	 	 
 
 J 	 C o r r a l l ,   S ;   K e n n a n ,   M A ;   A f z a l ,   W 	 	 	 	 C o r r a l l ,   S h e i l a ;   K e n n a n ,   M a r y   A n n e ;   A f z a l ,   W a s e e m 	 	 	 B i b l i o m e t r i c s   a n d   R e s e a r c h   D a t a   M a n a g e m e n t   S e r v i c e s :   E m e r g i n g   T r e n d s   i n   L i b r a r y   S u p p o r t   f o r   R e s e a r c h 	 L I B R A R Y   T R E N D S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I N S T I T U T I O N A L   R E P O S I T O R I E S ;   T E A C H I N G   B I B L I O M E T R I C S ;   C O L L E C T I O N   D E V E L O P M E N T ;   A C A D E M I C - L I B R A R Y ;   D A T A   C U R A T I O N ;   U N I V E R S I T Y ;   I M P A C T 	 D e v e l o p m e n t s   i n   n e t w o r k   t e c h n o l o g i e s ,   s c h o l a r l y   c o m m u n i c a t i o n ,   a n d   n a t i o n a l   p o l i c y   a r e   c h a l l e n g i n g   a c a d e m i c   l i b r a r i e s   t o   f i n d   n e w   w a y s   t o   e n g a g e   w i t h   r e s e a r c h   c o m m u n i t i e s   i n   t h e   e c o n o m i c   d o w n t u r n .   L i b r a r i a n s   a r e   r e s p o n d i n g   w i t h   s e r v i c e   i n n o v a t i o n s   i n   a r e a s   s u c h   a s   b i b l i o m e t r i c s   a n d   r e s e a r c h   d a t a   m a n a g e m e n t .   P r e v i o u s   s u r v e y s   h a v e   i n v e s t i g a t e d   r e s e a r c h   d a t a   s u p p o r t   w i t h i n   N o r t h   A m e r i c a   a n d   o t h e r   r e s e a r c h   s e r v i c e s   g l o b a l l y   w i t h   s m a l l   s a m p l e s .   A n   o n l i n e   m u l t i p l e - c h o i c e   q u e s t i o n n a i r e   w a s   u s e d   t o   s u r v e y   b i b l i o m e t r i c   a n d   d a t a   s u p p o r t   a c t i v i t i e s   o f   1 4 0   l i b r a r i e s   i n   A u s t r a l i a ,   N e w   Z e a l a n d ,   I r e l a n d ,   a n d   t h e   U n i t e d   K i n g d o m ,   i n c l u d i n g   c u r r e n t   a n d   p l a n n e d   s e r v i c e s ,   t a r g e t   a u d i e n c e s ,   s e r v i c e   c o n s t r a i n t s ,   a n d   s t a f f   t r a i n i n g   n e e d s .   A   m a j o r i t y   o f   r e s p o n d e n t s   o f f e r e d   o r   p l a n n e d   b i b l i o m e t r i c s   t r a i n i n g ,   c i t a t i o n   r e p o r t s ,   a n d   i m p a c t   c a l c u l a t i o n s   b u t   w i t h   s i g n i f i c a n t   d i f f e r e n c e s   b e t w e e n   c o u n t r i e s .   C u r r e n t   l e v e l s   o f   e n g a g e m e n t   i n   d a t a   m a n a g e m e n t   w e r e   l o w e r   t h a n   f o r   b i b l i o m e t r i c s ,   b u t   a   m a j o r i t y   a n t i c i p a t e d   f u t u r e   i n v o l v e m e n t ,   e s p e c i a l l y   i n   t e c h n o l o g y   a s s i s t a n c e ,   d a t a   d e p o s i t ,   a n d   p o l i c y   d e v e l o p m e n t .   I n i t i a t i v e s   w e r e   a i m e d   a t   m u l t i p l e   c o n s t i t u e n c i e s ,   w i t h   u n i v e r s i t y   a d m i n i s t r a t o r s   b e i n g   i m p o r t a n t   c l i e n t s   a n d   p a r t n e r s   f o r   b i b l i o m e t r i c   s e r v i c e s .   G a p s   i n   k n o w l e d g e ,   s k i l l s ,   a n d   c o n f i d e n c e   w e r e   s i g n i f i c a n t   c o n s t r a i n t s ,   w i t h   n e a r - u n i v e r s a l   s u p p o r t   f o r   i n c l u d i n g   b i b l i o m e t r i c s   a n d   p a r t i c u l a r l y   d a t a   m a n a g e m e n t   i n   p r o f e s s i o n a l   e d u c a t i o n   a n d   c o n t i n u i n g   d e v e l o p m e n t   p r o g r a m s .   T h e   s t u d y   a l s o   f o u n d   t h a t   l i b r a r i a n s   n e e d   a   m u l t i l a y e r e d   u n d e r s t a n d i n g   o f   t h e   r e s e a r c h   e n v i r o n m e n t . 	 [ C o r r a l l ,   S h e i l a ]   U n i v   P i t t s b u r g h ,   L i b   &   I n f o r m a t   S c i   P r o g r a m ,   S c h   I n f o r m a t   S c i ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A ;   [ C o r r a l l ,   S h e i l a ]   U n i v   S h e f f i e l d ,   I n f o r m a t   S c h ,   S h e f f i e l d   S 1 0   2 T N ,   S   Y o r k s h i r e ,   E n g l a n d ;   [ C o r r a l l ,   S h e i l a ]   B r i t i s h   L i b ,   L o n d o n   W 1 V   4 B H ,   E n g l a n d ;   [ K e n n a n ,   M a r y   A n n e ;   A f z a l ,   W a s e e m ]   C h a r l e s   S t u r t   U n i v ,   S c h   I n f o r m a t   S t u d i e s ,   B a t h u r s t ,   N S W   2 7 9 5 ,   A u s t r a l i a ;   [ K e n n a n ,   M a r y   A n n e ]   A u s t r a l i a n   G r a d   S c h   M a n a g e m e n t ,   F r a n k   L o w y   L i b ,   S y d n e y ,   N S W ,   A u s t r a l i a ;   [ K e n n a n ,   M a r y   A n n e ]   U n i v   N e w   S   W a l e s ,   S y d n e y ,   N S W   2 0 5 2 ,   A u s t r a l i a ;   [ K e n n a n ,   M a r y   A n n e ]   U n i v   T e c h n o l   S y d n e y ,   S y d n e y ,   N S W   2 0 0 7 ,   A u s t r a l i a 	 C o r r a l l ,   S   ( r e p r i n t   a u t h o r ) ,   U n i v   P i t t s b u r g h ,   L i b   &   I n f o r m a t   S c i   P r o g r a m ,   S c h   I n f o r m a t   S c i ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A . 	 	 K e n n a n ,   M a r y   A n n e / C - 2 0 8 8 - 2 0 1 2 	 K e n n a n ,   M a r y   A n n e / 0 0 0 0 - 0 0 0 3 - 1 3 4 2 - 9 8 5 3 	 	 	 A d a m s   J . ,   2 0 0 7 ,   S E R I A L S ,   V 2 0 ,   P 1 8 8 ,   D O I   1 0 . 1 6 2 9 / 2 0 1 8 8 ;   A l d r i c h   A .   W . ,   2 0 0 7 ,   S A I L   F U T   C H A R T   O U R   D ,   P 3 0 4 ;   A m o s   K . ,   2 0 1 2 ,   E V I D E N C E   B A S E D   L I B   I ,   V 7 ,   P 3 2 ;   A u c k l a n d   M . ,   2 0 1 2 ,   R E S K I L L I N G   R E S   I N V E S ;   A r i z o n a   S t a t e   U n i v e r s i t y ,   2 0 1 2 ,   C I T   R E S   F I N D   C I T   C O U ;   B a l l   R ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 5 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 4 1 - 0 ;   B a r r e t t   J . ,   2 0 1 2 ,   U C D   D A T A   M A N A G E M E N T ;   B A U G H M A N   J C ,   1 9 7 7 ,   C O L L   R E S   L I B R ,   V 3 8 ,   P 2 4 1 ;   B e c k   S .   E . ,   2 0 0 8 ,   P R A C T I C A L   R E S   M E T H O D ;   W r u b l e w s k i   D . ,   2 0 1 2 ,   I S S U E S   S C I   T E C H N O L O G ,   V 6 8 ;   B e n t   M o i r a ,   2 0 0 7 ,   N e w   R e v i e w   o f   I n f o r m a t i o n   N e t w o r k i n g ,   V 1 3 ,   P 8 1 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 1 4 5 7 0 8 0 1 8 9 9 9 8 3 ;   B o u r g   C . ,   2 0 0 9 ,   S U P P O R T   R E S   P R O C E S S ;   B r o a d u s   R .   N . ,   1 9 7 7 ,   A D V   L I B R A R I A N S H I P ,   V 7 ,   P 2 9 9 ;   B r o w n l e e   R o w a n ,   2 0 0 9 ,   C a t a l o g i n g   &   C l a s s i f i c a t i o n   Q u a r t e r l y ,   V 4 7 ,   P 3 7 0 ,   D O I   1 0 . 1 0 8 0 / 0 1 6 3 9 3 7 0 8 0 2 7 1 4 1 8 2 ;   B u r k e   L ,   2 0 0 8 ,   J   L I B R   I N F   S C I ,   V 4 0 ,   P 2 6 9 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 8 0 9 6 7 1 6 ;   C a r l s o n   J . ,   2 0 1 1 ,   C O L L   R E S   L I B   N E W S ,   V 7 2 ,   P 1 6 7 ;   W a l t e r   S . ,   2 0 1 0 ,   S T A F F I N G   S U S T A I N I N G ,   P 2 3 4 ;   C a s e   D .   O . ,   2 0 1 2 ,   L O O K I N G   I N F O R M   S U R V E ;   C h o u d h u r y   G S ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 7 ,   P 2 1 1 ;   C o n n a w a y   L .   S . ,   2 0 1 0 ,   B A S I C   R E S   M E T H O D S   L I ;   C o r r a l l   S . ,   2 0 1 2 ,   M A N A G I N G   R E S   D A T A ,   P 1 0 5 ;   C o t t a - S c h o n b e r g   M . ,   2 0 0 7 ,   L I B   Q ,   V 1 7 ;   D a v i s   M . ,   2 0 0 5 ,   A u s t r a l i a n   A c a d e m i c   &   R e s e a r c h   L i b r a r i e s ,   V 3 6 ,   P 1 9 5 ;   D e   B e l l i s   N . ,   2 0 0 9 ,   B I B L I O M E T R I C S   C I T A T I ;   D e l a s a l l e   J . ,   2 0 1 2 ,   S C O N U L   F O C U S ,   V 5 3 ,   P 1 5 ;   D e l s e r o n e   L M ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 7 ,   P 2 0 2 ;   D R O T T   M C ,   1 9 7 9 ,   A S L I B   P R O C ,   V 3 1 ,   P 2 9 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 5 0 6 8 7 ;   D r u m m o n d   R ,   2 0 0 9 ,   A U S T   A C A D   R E S   L I B R ,   V 4 0 ,   P 7 6 ;   D u r a n c e a u   E F ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 7 ,   P 2 4 4 ;   F l o r a n c e   P ,   2 0 0 6 ,   L I B R   T R E N D S ,   V 5 5 ,   P 2 2 2 ,   D O I   1 0 . 1 3 5 3 / l i b . 2 0 0 6 . 0 0 5 7 ;   F o n s e c a   A .   J . ,   2 0 0 9 ,   C O L L A B O R A T I V E   L I B ,   V 1 ,   P 8 1 ;   F r e i b u r g e r   G ,   2 0 0 9 ,   J   M E D   L I B R   A S S O C ,   V 9 7 ,   P 1 3 9 ,   D O I   1 0 . 3 1 6 3 / 1 5 3 6 - 5 0 5 0 . 9 7 . 2 . 0 1 3 ;   A l d e r   P . ,   2 0 0 6 ,   N A T   S C I   F D N   A R L   W O R K ;   F u l t o n   B r u c e ,   2 0 1 1 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 5 2 ,   P 9 5 ;   G a b r i d g e   T ,   2 0 0 9 ,   R E S   L I B   I S S U E S   B I M O N ,   V 2 6 5 ,   P 1 5 ;   G a r r i t a n o   J R ,   2 0 0 9 ,   I S S U E S   S C I   T E C H N O L O G ,   P 5 7 ;   S e r g e a n t   K . ,   2 0 0 9 ,   I N F   O N L   2 0 0 9   A L I A   1 4 ;   G O L D   A n n a ,   2 0 0 7 ,   D   L I B   M A G A Z I N E ,   V 1 3 ,   D O I   1 0 . 1 0 4 5 = j u l y 2 0 s e p t e m b e r - g o l d - p t 2 ;   G u m p e n b e r g e r   C h r i s t i a n ,   2 0 1 2 ,   L i b r a r y   M a n a g e m e n t ,   V 3 3 ,   P 1 7 4 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 3 5 1 2 1 2 1 1 2 1 7 1 9 9 ;   H a r r i s - P i e r c e   R e b e c c a   L . ,   2 0 1 2 ,   N e w   L i b r a r y   W o r l d ,   V 1 1 3 ,   P 5 9 8 ,   D O I   1 0 . 1 1 0 8 / 0 3 0 7 4 8 0 1 2 1 1 2 8 2 9 5 7 ;   H a r v e y   R . ,   2 0 1 0 ,   D I G I T A L   C U R A T I O N   H O W ;   H e a t h   F . ,   2 0 1 1 ,   L I B   Q ,   V 8 1 ,   P 7 ;   H E F C E ,   2 0 1 1 ,   A N   D A T   P I L   E X   D E V   B I ;   H i g h e r   E d u c a t i o n   F u n d i n g   C o u n c i l   f o r   E n g l a n d   ( H E F C E ) ,   2 0 0 9 ,   R E P   P I L   E X   D E V   B I B L ;   H e n d r i x   D e a n ,   2 0 1 0 ,   M e d i c a l   R e f e r e n c e   S e r v i c e s   Q u a r t e r l y ,   V 2 9 ,   P 1 8 3 ,   D O I   1 0 . 1 0 8 0 / 0 2 7 6 3 8 6 1 0 0 3 7 2 3 4 1 6 ;   H e n t y   M . ,   2 0 0 8 ,   A R I A D N E ,   V 5 5 ;   H e r t h e r   N K ,   2 0 0 9 ,   E L E C T R O N   L I B R ,   V 2 7 ,   P 3 6 1 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 0 9 1 0 9 6 6 8 3 5 ;   H e y   T ,   2 0 0 6 ,   L I B R   H I   T E C H ,   V 2 4 ,   P 5 1 5 ,   D O I   1 0 . 1 1 0 8 / 0 7 3 7 8 8 3 0 6 1 0 7 1 5 3 8 3 ;   H L G ,   2 0 1 0 ,   R I D   W A V   E U R   C A N   G A I N ;   D a l e   P . ,   2 0 0 6 ,   S U B J E C T   L I B   E N G A G I N G ,   P 1 3 1 ;   H o u s e r   R ,   2 0 0 6 ,   L I B R   T R E N D S ,   V 5 5 ,   P 3 1 5 ,   D O I   1 0 . 1 3 5 3 / l i b . 2 0 0 6 . 0 0 5 8 ;   H s w e   P . ,   2 0 1 1 ,   R E S   L I B   I S S U E S ,   V 2 7 4 ,   P 1 1 ;   J o i n t   N i c h o l a s ,   2 0 0 8 ,   L i b r a r y   R e v i e w ,   V 5 7 ,   P 3 4 6 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 4 2 5 3 0 8 1 0 8 7 5 1 3 1 ;   J o n e s - E v a n s   A ,   2 0 0 5 ,   J   L I B R   I N F   S C I ,   V 3 7 ,   P 1 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 5 0 5 7 9 5 5 ;   C o l b e r t - L e w i s   D . ,   2 0 1 1 ,   C O L L   R E S   L I B   N E W S ,   V 7 2 ,   P 4 7 0 ;   J a h n k e   L . ,   2 0 1 2 ,   P R O B L E M   D A T A ,   P 3 2 ;   L a g e   K ,   2 0 1 1 ,   P O R T A L - L I B R   A C A D ,   V 1 1 ,   P 9 1 5 ;   L e w i s   M . ,   2 0 1 0 ,   E N V I S I O N I N G   F U T U R E   A ,   P 1 4 5 ;   L i n e   M .   B . ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ,   P 3 1 3 ;   L y o n   L ,   2 0 1 2 ,   I N T   J   D I G I T A L   C U R A T I ,   V 7 ,   P 1 2 6 ,   D O I   D O I   1 0 . 2 2 1 8 / I J D C . V 7 I 1 . 2 2 0 ;   L y o n   L . ,   2 0 0 7 ,   D E A L I N G   D A T A   R O L E S   R ;   M A C C O L L   J . ,   2 0 1 1 ,   S U P P O R T I N G   R E S   E N V   A ;   M a c C o l l   J . ,   2 0 1 0 ,   L I B E R   Q ,   V 2 0 ,   P 1 5 2 ;   M a r t i n e z   L . ,   2 0 0 5 ,   A R I A D N E ,   V 4 4 ;   M a c D o n a l d   S ,   2 0 0 8 ,   O N L I N E ,   V 3 2 ,   P 3 6 ;   M a c q u a r i e   U n i v e r s i t y ,   2 0 1 2 ,   R E S   M E T R   R E S   M E T R   A L ;   G e o r g e   G . ,   2 0 1 0 ,   D A T A   D E L U G   C A N   L I B   C ;   M a y s   R ,   2 0 1 0 ,   R E S   L I B   I S S U E S ,   V 2 7 1 ,   P 3 6 ;   M c N e i l l   P . ,   2 0 0 5 ,   R E S   M E T H O D S ;   N i c h o l a s   D ,   2 0 1 0 ,   J   A C A D   L I B R ,   V 3 6 ,   P 3 7 6 ;   N S F ,   2 0 0 7 ,   C Y B   V I S   2 1   C E N T   D I S C ;   O a k l e a f   M . ,   2 0 1 0 ,   V A L U E   A C A D   L I B   C O M P R ;   P a n   R . ,   2 0 1 1 ,   L I L A C   2 0 1 1   L I B   I N F   L ;   P e n d l e b u r y   D .   A . ,   2 0 0 8 ,   U S I N G   B I B L I O M E T R I C S ;   P e t e r s   C h r i s t i e ,   2 0 1 1 ,   S c i e n c e   &   T e c h n o l o g y   L i b r a r i e s ,   V 3 0 ,   P 3 8 7 ,   D O I   1 0 . 1 0 8 0 / 0 1 9 4 2 6 2 X . 2 0 1 1 . 6 2 6 3 4 0 ;   P i c k a r d   A l i s o n   J a n e ,   2 0 0 7 ,   R E S   M E T H O D S   I N F O R M ;   P r y o r   G . ,   2 0 1 2 ,   M A N A G I N G   R E S   D A T A ;   P r y o r   G ,   2 0 0 9 ,   I N T   J   D I G I T A L   C U R A T I ,   V 4 ,   P 1 5 8 ,   D O I   1 0 . 2 2 1 8 / i j d c . v 4 i 2 . 1 0 5 ;   D ' I g n a z i o d   J . ,   2 0 1 0 ,   P A R T   P R A C T   G R O W   C U R ;   G e o r g e   G . ,   2 0 1 0 ,   D A T A   D E L U G E   C A N   L I B ,   P 4 3 ;   R a y   J . ,   2 0 0 9 ,   M U S E U M   M A N A G E M E N T   C U ,   V 2 4 ,   P 3 5 7 ;   T r a i n o r   K . ,   2 0 1 0 ,   I C O N F E R E N C E   2 0 1 0   C H A ;   R i c e   R ,   2 0 1 1 ,   I N T   J   D I G I T A L   C U R A T I ,   V 6 ,   P 2 3 2 ;   [ R I N .   R e s e a r c h   I n f o r m a t i o n   N e t w o r k   &   R e s e a r c h   L i b r a r i e s   U K ] ,   2 0 1 1 ,   V A L   L I B   R E S   R E S   R I N ;   [ R I N   R e s e a r c h   I n f o r m a t i o n   N e t w o r k   &   C o n s o r t i u m   o f   R e s e a r c h   L i b r a r i e s ] ,   2 0 0 7 ,   R E S   U S   C A   L I B   T H E I R ;   R o e m e r   R .   C . ,   2 0 1 2 ,   C O L L   R E S   L I B   N E W S ,   V 7 3 ,   P 5 9 6 ;   H o u s e w r i g h t   R ,   2 0 1 0 ,   F A C U L T Y   S U R V E Y   2 0 0 9 ;   G e o r g e   G . ,   2 0 1 0 ,   D A T A   D E L U G E   C A N   L I B ,   P 4 3 ;   S C H R A D E R   A M ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 1 5 1 ;   S h u m a k e r   D . ,   2 0 1 2 ,   E M B E D D E D   L I B   I N N O V A T ;   S o e h n e r   C . ,   2 0 1 0 ,   E   S C I   D A T A   S U P P O R T   S ;   S t a n t o n   J e f f r e y   M . ,   2 0 1 1 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 5 2 ,   P 7 9 ;   S t e i n h a r t   G ,   2 0 0 6 ,   L I B R   T R E N D S ,   V 5 5 ,   P 2 6 4 ,   D O I   1 0 . 1 3 5 3 / l i b . 2 0 0 6 . 0 0 6 3 ;   S w a n   A . ,   2 0 0 8 ,   S K I L L S   R O L E   C A R E E R   S ;   S w a n   A ,   2 0 1 1 ,   U N I V E R S I T Y   L I B R A R I E S   A N D   D I G I T A L   L E A R N I N G   E N V I R O N M E N T S ,   P 1 1 9 ;   T h o m a s   J e n n i f e r ,   2 0 1 1 ,   L i b r a r y   M a n a g e m e n t ,   V 3 2 ,   P 3 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 3 5 1 2 1 1 1 1 1 0 2 5 6 6 ;   T o w n   J S ,   2 0 1 1 ,   L I B R   Q U A R T ,   V 8 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 8 6 / 6 5 7 4 4 5 ;   T r e l o a r   A . ,   2 0 0 9 ,   I N T   J   D I G I T A L   C U R A T I ,   V 4 ,   P 1 2 5 ;   U n i v e r s i t y   o f   N o r t h   T e x a s ,   2 0 1 1 ,   U N T   R E C   M O R   8 0 0   0 0 0 ;   U n i v e r s i t y   o f   P i t t s b u r g h ,   2 0 1 2 ,   C I T   S E A R C H   B I B L   M E A S ;   P a l m e r   C .   L . ,   2 0 1 2 ,   I C O N F E R E N C E   2 0 1 2   P   2 ,   P 5 2 7 ;   v o n   U n g e r n - S t e r n b e r g   S ,   1 9 9 8 ,   J   E D U C   L I B R   I N F   S C I ,   V 3 9 ,   P 7 6 ;   W a l l a c e   D P ,   2 0 1 2 ,   K N O W L E D G E   A C T I O N   R E S ;   W a l t e r s   T .   O . ,   2 0 0 9 ,   I N T   J   D I G I T A L   C U R A T I ,   V 3 ,   P 8 3 ;   W a r r   R .   B . ,   1 9 8 3 ,   C O L L E C T   B U I L D ,   V 5 ,   P 2 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 3 1 0 9 ;   W e b b   J o ,   2 0 0 7 ,   P R O V I D I N G   E F F E C T I V E ;   W e s t r a   B . ,   2 0 1 0 ,   A R I A D N E ,   P 6 4 ;   W h i t t e n   J .   L . ,   2 0 0 7 ,   S Y S T E M S   A N A L   D E S I G N ;   W i l d e m u t h   B .   M . ,   2 0 0 9 ,   A P P L   S O C I A L   R E S   M E T H ;   W i t t   M ,   2 0 0 8 ,   L I B R   T R E N D S ,   V 5 7 ,   P 1 9 1 ;   W o n g   G K W ,   2 0 0 9 ,   S E R I A L S   R E V ,   V 3 5 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / j . s e r r e v . 2 0 0 9 . 0 4 . 0 0 3 ;   W o o d   E . J . ,   2 0 0 7 ,   S U R V I V A L   M A N A G I N G   A C ;   Y a k e l   E l i z a b e t h ,   2 0 1 1 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 5 2 ,   P 2 3 ;   Y o u n g   H . ,   2 0 0 8 ,   S C O N U L   F O C U S ,   V 4 3 ,   P 5 1 ;   Z h a o   D . ,   2 0 1 1 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 1 ,   D O I   [ 1 0 . 1 0 0 2 / m e e t . 2 0 1 1 . 1 4 5 0 4 8 0 1 1 9 0 ,   D O I   1 0 . 1 0 0 2 / M E E T . 2 0 1 1 . 1 4 5 0 4 8 0 1 1 9 0 ] 	 1 1 5 	 2 1 	 2 1 	 1 7 	 4 0 6 	 J O H N S   H O P K I N S   U N I V   P R E S S 	 B A L T I M O R E 	 J O U R N A L S   P U B L I S H I N G   D I V I S I O N ,   2 7 1 5   N O R T H   C H A R L E S   S T ,   B A L T I M O R E ,   M D   2 1 2 1 8 - 4 3 6 3   U S A 	 0 0 2 4 - 2 5 9 4 	 1 5 5 9 - 0 6 8 2 	 	 L I B R   T R E N D S 	 L i b r .   T r e n d s 	 W I N 	 2 0 1 3 	 6 1 	 3 	 	 	 	 	 6 3 6 	 6 7 4 	 	 	 	 3 9 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 5 3 Z C 	 W O S : 0 0 0 3 1 9 6 4 0 3 0 0 0 0 8 	 	 
 
 J 	 W a g s t a f f ,   A ;   C u l y e r ,   A J 	 	 	 	 W a g s t a f f ,   A d a m ;   C u l y e r ,   A n t h o n y   J . 	 	 	 F o u r   d e c a d e s   o f   h e a l t h   e c o n o m i c s   t h r o u g h   a   b i b l i o m e t r i c   l e n s 	 J O U R N A L   O F   H E A L T H   E C O N O M I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 H e a l t h   e c o n o m i c s ;   B i b l i o m e t r i c s ;   H i s t o r y   o f   e c o n o m i c   t h o u g h t 	 M E D I C A L - C A R E ;   H O S P I T A L I Z E D - P A T I E N T S ;   W E L F A R E   E C O N O M I C S ;   A D V E R S E   E V E N T S ;   I N S U R A N C E ;   S E R V I C E S ;   D E M A N D ;   P R I C E ;   I N S T I T U T I O N S ;   S A T I S F A C T I O N 	 I n   t h i s   p a p e r ,   w e   t a k e   a   b i b l i o m e t r i c   t o u r   o f   t h e   l a s t   f o r t y   y e a r s   o f   h e a l t h   e c o n o m i c s   u s i n g   b i b l i o g r a p h i c   " m e t a d a t a "   f r o m   E c o n L i t   s u p p l e m e n t e d   b y   c i t a t i o n   d a t a   f r o m   G o o g l e   S c h o l a r   a n d   o u r   o w n   t o p i c a l   c l a s s i f i c a t i o n s .   W e   r e p o r t   t h e   g r o w t h   o f   h e a l t h   e c o n o m i c s   ( w e   f i n d   3 3 , 0 0 0   p u b l i c a t i o n s   s i n c e   1 9 6 9 - 1 2 , 0 0 0   m o r e   t h a n   i n   t h e   e c o n o m i c s   o f   e d u c a t i o n )   a n d   l i s t   t h e   3 0 0   m o s t - c i t e d   p u b l i c a t i o n s   b r o k e n   d o w n   b y   t o p i c .   W e   r e p o r t   t h e   c h a n g i n g   t o p i c a l   a n d   g e o g r a p h i c   f o c u s   o f   h e a l t h   e c o n o m i c s   ( t h e   t o p i c s   ' D e t e r m i n a n t s   o f   h e a l t h   a n d   i l l - h e a l t h '   a n d   ' H e a l t h   s t a t i s t i c s   a n d   e c o n o m e t r i c s '   b o t h   s h o w   a n   u p w a r d   t r e n d ,   a n d   t h e   f i e l d   h a s   e x p a n d e d   a p p r e c i a b l y   i n t o   t h e   d e v e l o p i n g   w o r l d ) .   W e   a l s o   c o m p a r e   a u t h o r s ,   c o u n t r i e s ,   i n s t i t u t i o n s   a n d   j o u r n a l s   i n   t e r m s   o f   t h e   v o l u m e   o f   p u b l i c a t i o n s   a n d   t h e i r   i n f l u e n c e   a s   m e a s u r e d   t h r o u g h   v a r i o u s   c i t a t i o n - b a s e d   i n d i c e s   ( G r o s s m a n ,   t h e   U S ,   H a r v a r d   a n d   t h e   J H E   e m e r g e   c l o s e   t o   o r   a t   t h e   t o p   o n   a   v a r i e t y   o f   m e a s u r e s ) .   ( C )   2 0 1 2   W o r l d   B a n k .   P u b l i s h e d   b y   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ W a g s t a f f ,   A d a m ]   W o r l d   B a n k ,   D e v   R e s   G r p ,   W a s h i n g t o n ,   D C   2 0 4 3 3   U S A ;   [ C u l y e r ,   A n t h o n y   J . ]   U n i v   T o r o n t o ,   D e p t   H l t h   P o l i c y   M a n a g e m e n t   &   E v a l u a t ,   T o r o n t o ,   O N   M 5 T   3 M 6 ,   C a n a d a ;   [ C u l y e r ,   A n t h o n y   J . ]   U n i v   Y o r k ,   D e p t   E c o n   &   R e l a t e d   S t u d i e s ,   Y o r k   Y O 1   5 D D ,   N   Y o r k s h i r e ,   E n g l a n d 	 W a g s t a f f ,   A   ( r e p r i n t   a u t h o r ) ,   W o r l d   B a n k ,   D e v   R e s   G r p ,   1 8 1 8   H   S t   N W ,   W a s h i n g t o n ,   D C   2 0 4 3 3   U S A . 	 a w a g s t a f f @ w o r l d b a n k . o r g 	 	 W a g s t a f f ,   A d a m / 0 0 0 0 - 0 0 0 3 - 4 4 4 2 - 5 0 7 0 	 	 	 A c e m o g l u   D ,   2 0 0 1 ,   A M   E C O N   R E V ,   V 9 1 ,   P 1 3 6 9 ,   D O I   1 0 . 1 2 5 7 / a e r . 9 1 . 5 . 1 3 6 9 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   A N A N D   S ,   1 9 9 3 ,   J   E C O N   P E R S P E C T ,   V 7 ,   P 1 3 3 ;   A n g r i s t   J D ,   1 9 9 6 ,   J   A M   S T A T   A S S O C ,   V 9 1 ,   P 4 4 4 ,   D O I   1 0 . 2 3 0 7 / 2 2 9 1 6 2 9 ;   A R R O W   K J ,   1 9 6 3 ,   A M   E C O N   R E V ,   V 5 3 ,   P 9 4 1 ;   A r r o w   K J ,   2 0 0 1 ,   J   H E A L T H   P O L I T   P O L I C ,   V 2 6 ,   P 8 5 1 ,   D O I   1 0 . 1 2 1 5 / 0 3 6 1 6 8 7 8 - 2 6 - 5 - 8 5 1 ;   B a r s k y   R B ,   1 9 9 7 ,   Q   J   E C O N ,   V 1 1 2 ,   P 5 3 7 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 3 5 5 3 9 7 5 5 5 2 8 0 ;   B E C K E R   G S ,   1 9 9 4 ,   A M   E C O N   R E V ,   V 8 4 ,   P 3 9 6 ;   B l a u g   M ,   1 9 9 8 ,   H E A L T H   E C O N ,   V 7 ,   p S 6 3 ;   B O V B J E R G   R R ,   1 9 8 9 ,   N O R T H W E S T   U   L A W   R E V ,   V 8 3 ,   P 9 0 8 ;   B R E N N A N   T A ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 4 ,   P 3 7 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 0 2 0 7 3 2 4 0 6 0 4 ;   B u c h a n a n   J . ,   1 9 6 5 ,   I N C O N S I S T E N C I E S   N A T L ;   B u x t o n   M J ,   1 9 9 7 ,   H E A L T H   E C O N ,   V 6 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 9 - 1 0 5 0 ( 1 9 9 7 0 5 ) 6 : 3 < 2 1 7 : : A I D - H E C 2 6 7 > 3 . 3 . C O ; 2 - N ;   C h a l o u p k a   F . ,   2 0 0 0 ,   H D B   H L T H   E C   B ,   V 1 ;   C L E A R Y   P D ,   1 9 8 8 ,   I N Q U I R Y - J   H E A L T H   C A R ,   V 2 5 ,   P 2 5 ;   C o n t o y a n n i s   P ,   2 0 0 4 ,   J   A P P L   E C O N O M E T ,   V 1 9 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 2 / j a e . 7 5 5 ;   C o o p e r   M . H . ,   1 9 7 3 ,   H L T H   E C ;   C U L Y E R   A J ,   1 9 8 1 ,   J   S O C   P O L I C Y ,   V 1 0 ,   P 3 1 1 ;   C u l y e r   A . J . ,   2 0 0 6 ,   H L T H   E C   C R I T I C A L   P E R ;   C u t l e r   D M ,   1 9 9 8 ,   Q   J   E C O N ,   V 1 1 3 ,   P 4 3 3 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 3 5 5 3 9 8 5 5 5 6 4 9 ;   C u t l e r   D M ,   2 0 0 3 ,   J   E C O N   P E R S P E C T ,   V 1 7 ,   P 9 3 ,   D O I   1 0 . 1 2 5 7 / 0 8 9 5 3 3 0 0 3 7 6 9 2 0 4 3 7 1 ;   C U T L E R   D M ,   2 0 0 1 ,   H E A L T H   A F F A I R ,   V 2 0 ,   P 1 1 ;   D a s g u p t a   P ,   1 9 9 3 ,   I N Q U I R Y   W E L L   B E I N G   D ;   D e a t o n   A ,   2 0 0 3 ,   J   E C O N   L I T ,   V 4 1 ,   P 1 1 3 ,   D O I   1 0 . 1 2 5 7 / 0 0 2 2 0 5 1 0 3 3 2 1 5 4 4 7 1 0 ;   D e a t o n   A . ,   2 0 0 6 ,   I N D I A N   E C   I N D E P E N D E N ;   D i M a s i   J A ,   2 0 0 3 ,   J   H E A L T H   E C O N ,   V 2 2 ,   P 1 5 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 6 2 9 6 ( 0 2 ) 0 0 1 2 6 - 1 ;   D u a n   N ,   1 9 8 3 ,   J   E C   B U S I N E S S   S T A T I S ,   V 1 ,   P 1 1 5 ,   D O I   D O I   1 0 . 2 3 0 7 / 1 3 9 1 8 5 2 ;   E v a n s   R . G . ,   1 9 7 4 ,   E C   H L T H   M E D   C U R E ;   F e l d s t e i n   M ,   1 9 6 7 ,   E C   A N A L   H L T H   S E R V I C E ;   F E L D S T E I N   M S ,   1 9 7 3 ,   J   P O L I T   E C O N ,   V 8 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 8 6 / 2 6 0 0 2 7 ;   F E L D S T E I N   M S ,   1 9 7 1 ,   A M   E C O N   R E V ,   V 6 1 ,   P 8 5 3 ;   F E L D S T E I N   M S ,   1 9 7 0 ,   R E V   E C O N   S T A T ,   V 5 2 ,   P 1 2 1 ,   D O I   1 0 . 2 3 0 7 / 1 9 2 6 1 1 3 ;   F e l d s t e i n   M . S . ,   1 9 6 3 ,   O X F O R D   E C O N   P A P ,   V 1 5 ,   P 1 9 ;   F O G E L   R W ,   1 9 9 4 ,   A M   E C O N   R E V ,   V 8 4 ,   P 3 6 9 ;   F O S T E R   J ,   1 9 8 4 ,   E C O N O M E T R I C A ,   V 5 2 ,   P 7 6 1 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 3 4 7 5 ;   F u c h s   V . R . ,   1 9 7 2 ,   W H O   S H A L L   L I V E   H L T H ;   G R O S S M A N   M ,   1 9 7 2 ,   J   P O L I T   E C O N ,   V 8 0 ,   P 2 2 3 ,   D O I   1 0 . 1 0 8 6 / 2 5 9 8 8 0 ;   H a m m e r   P e t e r   J . ,   2 0 0 3 ,   U N C E R T A I N   T I M E S   K E N N ;   H A R R I S   J E ,   1 9 7 7 ,   B E L L   J   E C O N ,   V 8 ,   P 4 6 7 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 3 2 9 7 ;   H a r z i n g   A . W . ,   2 0 1 0 ,   P U B L I S H   P E R I S H   B O O K ;   H I C K S O N   G B ,   1 9 9 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 7 ,   P 1 3 5 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 7 . 1 0 . 1 3 5 9 ;   H I C K S O N   G B ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 2 ,   P 1 5 8 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 2 . 2 0 . 1 5 8 3 ;   H I L L M A N   A L ,   1 9 8 9 ,   N E W   E N G L   J   M E D ,   V 3 2 1 ,   P 8 6 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 8 9 0 7 1 3 3 2 1 0 2 0 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J e w k e s   S y l v i a ,   1 9 6 1 ,   G E N E S I S   B R I T   N A T L   H L ;   J o n e s   A M ,   2 0 0 6 ,   E L G A R   O R I G   R E F ,   P 1 ;   K a m s t r a   M J ,   2 0 0 0 ,   A M   E C O N   R E V ,   V 9 0 ,   P 1 0 0 5 ,   D O I   1 0 . 1 2 5 7 / a e r . 9 0 . 4 . 1 0 0 5 ;   K l a r m a n   H . E . ,   1 9 6 5 ,   E C   H E A L T H S ;   K r e m e r   M ,   2 0 0 7 ,   Q   J   E C O N ,   V 1 2 2 ,   P 1 0 0 7 ,   D O I   1 0 . 1 1 6 2 / q j e c . 1 2 2 . 3 . 1 0 0 7 ;   L A B E L L E   R ,   1 9 9 4 ,   J   H E A L T H   E C O N ,   V 1 3 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 6 2 9 6 ( 9 4 ) 9 0 0 3 6 - 1 ;   L E A P E   L L ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 4 ,   P 3 7 7 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 0 2 0 7 3 2 4 0 6 0 5 ;   M A N N I N G   W G ,   1 9 8 4 ,   N E W   E N G L   J   M E D ,   V 3 1 0 ,   P 1 5 0 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 8 4 0 6 0 7 3 1 0 2 3 0 5 ;   M A N N I N G   W G ,   1 9 8 7 ,   A M   E C O N   R E V ,   V 7 7 ,   P 2 5 1 ;   M C G U I R E   T G ,   1 9 9 1 ,   J   H E A L T H   E C O N ,   V 1 0 ,   P 3 8 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 6 2 9 6 ( 9 1 ) 9 0 0 2 2 - F ;   M o s l e y   W H ,   1 9 8 4 ,   P O P U L   D E V   R E V ,   V 1 0 ,   P 2 5 ,   D O I   1 0 . 2 3 0 7 / 2 8 0 7 9 5 4 ;   M U S H K I N   S J ,   1 9 5 8 ,   P U B L I C   H E A L T H   R E P ,   V 7 3 ,   P 7 8 5 ,   D O I   1 0 . 2 3 0 7 / 4 5 9 0 2 4 2 ;   M u s h k i n   S . J . ,   1 9 6 2 ,   J   P O L I T I C A L   E C ,   V 8 0 ,   P 2 2 3 ;   N a y l o r   M D ,   1 9 9 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 1 ,   P 6 1 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 1 . 7 . 6 1 3 ;   N e w h o u s e   J P ,   1 9 9 6 ,   J   E C O N   L I T ,   V 3 4 ,   P 1 2 3 6 ;   N E W H O U S E   J P ,   1 9 7 0 ,   A M   E C O N   R E V ,   V 6 0 ,   P 6 4 ;   P A U L Y   M ,   1 9 7 3 ,   A M   E C O N   R E V ,   V 6 3 ,   P 8 7 ;   P A U L Y   M V ,   1 9 6 8 ,   A M   E C O N   R E V ,   V 5 8 ,   P 5 3 1 ;   P a u l y   M . V . ,   1 9 9 1 ,   E C   H L T H ,   V 1 ;   P r i t c h e t t   L ,   1 9 9 6 ,   J   H U M   R E S O U R ,   V 3 1 ,   P 8 4 1 ,   D O I   1 0 . 2 3 0 7 / 1 4 6 1 4 9 ;   R a v a l l i o n   M ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 7 5 - 0 ;   R o d r i k   D ,   2 0 0 4 ,   J   E C O N   G R O W T H ,   V 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 2 3 / B : J O E G . 0 0 0 0 0 3 1 4 2 5 . 7 2 2 4 8 . 8 5 ;   R u b i n   R M ,   2 0 0 3 ,   H E A L T H   E C O N ,   V 1 2 ,   P 4 0 3 ,   D O I   1 0 . 1 0 0 2 / h e c . 8 0 2 ;   S c o t t   W .   R . ,   2 0 0 0 ,   I   C H A N G E   H E A L T H C A R E ;   S H L E I F E R   A ,   1 9 8 5 ,   R A N D   J   E C O N ,   V 1 6 ,   P 3 1 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 5 6 0 ;   S i c i l i a n i   L ,   2 0 0 4 ,   O E C D   E C   S T U D I E S ,   V 3 8 ,   P 9 5 ;   S m i t h   J P ,   1 9 9 9 ,   J   E C O N   P E R S P E C T ,   V 1 3 ,   P 1 4 5 ,   D O I   1 0 . 1 2 5 7 / j e p . 1 3 . 2 . 1 4 5 ;   T e n g s   T . O . ,   2 0 0 4 ,   C L A S S I C S   R I S K   M A N A G E ,   V 2 ;   T h e r n e a u   T . M . ,   2 0 0 0 ,   S P R I N G E R   S T A T   B I O L   H ;   T O R R A N C E   G W ,   1 9 8 6 ,   J   H E A L T H   E C O N ,   V 5 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 6 2 9 6 ( 8 6 ) 9 0 0 2 0 - 2 ;   V i c t o r a   C G ,   2 0 0 3 ,   L A N C E T ,   V 3 6 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 3 9 1 7 - 7 ;   W A G S T A F F   A ,   1 9 9 1 ,   S O C   S C I   M E D ,   V 3 3 ,   P 5 4 5 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 7 - 9 5 3 6 ( 9 1 ) 9 0 2 1 2 - U ;   W a g s t a f f   A ,   2 0 0 0 ,   A N N U   R E V   P U B L   H E A L T H ,   V 2 1 ,   P 5 4 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . p u b l h e a l t h . 2 1 . 1 . 5 4 3 ;   W a k e f i e l d   M A ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 1 ,   P 3 3 3 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 1 . 7 2 5 7 . 3 3 3 ;   W e i n s t e i n   M . C . ,   1 9 9 1 ,   E C   H L T H ,   V 2 ;   W E I S B R O D   B A ,   1 9 6 1 ,   J   P O L I T   E C O N ,   V 6 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 8 6 / 2 5 8 5 3 5 ;   W i l l i a m s   A ,   1 9 7 9 ,   E P I D E M I O L O G Y   C O M M U N I ,   V 3 3 ,   P 3 ;   W i l l i a m s   A . ,   1 9 8 7 ,   H L T H   E C   P   F 	 8 2 	 2 1 	 2 3 	 5 	 3 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 6 7 - 6 2 9 6 	 1 8 7 9 - 1 6 4 6 	 	 J   H E A L T H   E C O N 	 J .   H e a l t h   E c o n . 	 M A R 	 2 0 1 2 	 3 1 	 2 	 	 	 	 	 4 0 6 	 4 3 9 	 	 1 0 . 1 0 1 6 / j . j h e a l e c o . 2 0 1 2 . 0 3 . 0 0 2 	 	 3 4 	 E c o n o m i c s ;   H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   H e a l t h   P o l i c y   &   S e r v i c e s 	 B u s i n e s s   &   E c o n o m i c s ;   H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s 	 9 4 1 P K 	 W O S : 0 0 0 3 0 3 9 7 4 9 0 0 0 0 8 	 2 2 4 8 1 0 9 6 	 
 
 J 	 L a r i v i e r e ,   V 	 	 	 	 L a r i v i e r e ,   V i n c e n t 	 	 	 O n   t h e   s h o u l d e r s   o f   s t u d e n t s ?   T h e   c o n t r i b u t i o n   o f   P h D   s t u d e n t s   t o   t h e   a d v a n c e m e n t   o f   k n o w l e d g e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 D o c t o r a t e ;   B i b l i o m e t r i c s ;   P u b l i c a t i o n s ;   C i t a t i o n s ;   Q u e b e c ;   C a n a d a 	 S O C I A L - S C I E N C E S ;   P O S T G R A D U A T E   E D U C A T I O N ;   N A T U R A L - S C I E N C E S ;   P U B L I C A T I O N ;   C O L L A B O R A T I O N ;   I N D I C A T O R S ;   H U M A N I T I E S ;   I N F O R M A T I O N ;   S C I E N T I S T S ;   G E N D E R 	 U s i n g   t h e   p a r t i c i p a t i o n   i n   p e e r   r e v i e w e d   p u b l i c a t i o n s   o f   a l l   d o c t o r a l   s t u d e n t s   i n   Q u e b e c   o v e r   t h e   2 0 0 0 - 2 0 0 7   p e r i o d ,   t h i s   p a p e r   p r o v i d e s   t h e   f i r s t   l a r g e   s c a l e   a n a l y s i s   o f   t h e i r   r e s e a r c h   e f f o r t .   I t   s h o w s   t h a t   P h D   s t u d e n t s   c o n t r i b u t e   t o   a b o u t   a   t h i r d   o f   t h e   p u b l i c a t i o n   o u t p u t   o f   t h e   p r o v i n c e ,   w i t h   d o c t o r a l   s t u d e n t s   i n   t h e   n a t u r a l   a n d   m e d i c a l   s c i e n c e s   b e i n g   p r e s e n t   i n   a   h i g h e r   p r o p o r t i o n   o f   p a p e r s   p u b l i s h e d   t h a n   t h e i r   c o l l e a g u e s   o f   t h e   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s .   C o l l a b o r a t i o n   i s   a n   i m p o r t a n t   c o m p o n e n t   o f   t h i s   s o c i a l i z a t i o n :   d i s c i p l i n e s   i n   w h i c h   s t u d e n t   c o l l a b o r a t i o n   i s   h i g h e r   a r e   a l s o   t h o s e   i n   w h i c h   d o c t o r a l   s t u d e n t s   a r e   t h e   m o s t   i n v o l v e d   i n   p e e r - r e v i e w e d   p u b l i c a t i o n s .   I n   t e r m s   o f   s c i e n t i f i c   i m p a c t ,   p a p e r s   c o - s i g n e d   b y   d o c t o r a t e   s t u d e n t s   o b t a i n   s i g n i f i c a n t l y   l o w e r   c i t a t i o n   r a t e s   t h a n   o t h e r   Q u e b e c   p a p e r s ,   e x c e p t   i n   n a t u r a l   s c i e n c e s   a n d   e n g i n e e r i n g .   F i n a l l y ,   t h i s   p a p e r   s h o w s   t h a t   i n v o l v i n g   d o c t o r a l   s t u d e n t s   i n   p u b l i c a t i o n s   i s   p o s i t i v e l y   l i n k e d   w i t h   d e g r e e   c o m p l e t i o n   a n d   u l t e r i o r   c a r e e r   i n   r e s e a r c h . 	 [ L a r i v i e r e ,   V i n c e n t ]   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   M o n t r e a l ,   P Q   H 3 C   3 J 7 ,   C a n a d a ;   [ L a r i v i e r e ,   V i n c e n t ]   U n i v   Q u e b e c ,   O b s e r v   S c i   &   T e c h n o l ,   C t r   I n t e r u n i v   R e c h   S c i   &   T e c h n o l ,   M o n t r e a l ,   P Q   H 3 C   3 P 8 ,   C a n a d a 	 L a r i v i e r e ,   V   ( r e p r i n t   a u t h o r ) ,   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   C P   6 1 2 8 , S u c c u r s a l e   C t r   V i l l e ,   M o n t r e a l ,   P Q   H 3 C   3 J 7 ,   C a n a d a . 	 v i n c e n t . l a r i v i e r e @ u m o n t r e a l . c a 	 	 	 S o c i a l   S c i e n c e s   a n d   H u m a n i t i e s   R e s e a r c h   C o u n c i l   o f   C a n a d a   t h r o u g h   t h e   C G S 	 T h e   a u t h o r   w i s h e s   t o   t h a n k   p r o f e s s o r s   Y v e s   G i n g r a s ,   J a m s h i d   B e h e s h t i ,   F r a n c e   B o u t h i l l i e r ,   J o h n   L e i d e   a n d   P i e r r e   P l u y e   f o r   t h e i r   c a r e f u l   r e a d i n g   o f   t h e   d o c t o r a l   t h e s i s   f r o m   w h i c h   t h i s   p a p e r   i s   d r a w n ,   a s   w e l l   a s   t h e   f o u r   a n o n y m o u s   r e f e r e e s   f o r   u s e f u l   c o m m e n t s   a n d   s u g g e s t i o n s .   S p e c i a l   t h a n k s   t o   B e n o i t   M a c a l u s o ,   M a r i o   R o u e t t e ,   P h i l i p p e   M i r a b e l   a n d   B e n o i t   G a g n e   f o r   t h e i r   h e l p   i n   t h e   a s s i g n a t i o n   o f   d o c t o r a l   s t u d e n t s '   p a p e r s .   F i n a l l y ,   s u p p o r t   f r o m   t h e   S o c i a l   S c i e n c e s   a n d   H u m a n i t i e s   R e s e a r c h   C o u n c i l   o f   C a n a d a   t h r o u g h   t h e   C G S   D o c t o r a l   S c h o l a r s h i p   p r o g r a m   i s   a l s o   a c k n o w l e d g e d . 	 A n w a r   M A ,   2 0 0 4 ,   J   L I B R   I N F   S C I ,   V 3 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 4 0 5 0 5 6 5 ;   A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   A s s o c i a t i o n   o f   U n i v e r s i t i e s   a n d   C o l l e g e s   o f   C a n a d a ,   2 0 0 7 ,   T R E N D S   H I G H   E D ,   V 2 ;   B e r e l s o n   B . ,   1 9 6 0 ,   G R A D U A T E   E D   U S ;   B i a g i o l i   M . ,   2 0 0 3 ,   S C I   A U T H O R S H I P   C R E D I ,   P 2 5 3 ;   B L U N T   A ,   1 9 9 4 ,   A D U L T   E D U C   Q U A R T ,   V 4 4 ,   P 1 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 7 4 1 7 1 3 6 9 4 0 4 4 0 0 3 0 1 ;   B o u r d i e u   P i e r r e ,   1 9 8 0 ,   S E N S   P R A T I Q U E ;   B o u r d i e u   P i e r r e ,   1 9 8 2 ,   A C T E S   R E C H E R C H E   S C I ,   V 4 3 ,   P 5 8 ,   D O I   1 0 . 3 4 0 6 / a r s s . 1 9 8 2 . 2 1 5 9 ;   B o u r d i e u   P i e r r e ,   2 0 0 1 ,   S C I   S C I   R E F L E X I V I T E ;   B r e i m e r   L H ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 8 1 - 3 ;   B u c h m u e l l e r   T C ,   1 9 9 9 ,   E C O N   E D U C   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 7 7 5 7 ( 9 8 ) 0 0 0 1 9 - 3 ;   C a m p b e l l   R A ,   2 0 0 3 ,   S O C   S T U D   S C I ,   V 3 3 ,   P 8 9 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 3 3 3 6 0 0 4 ;   C a n a d i a n   A s s o c i a t i o n   f o r   G r a d u a t e   S t u d i e s ,   2 0 0 6 ,   3 5   C A N   A S S   G R A D   S T U D ;   C o n s e i l   S u p e r i e u r   d e   l ' E d u c a t i o n ,   2 0 0 3 ,   R E N   C O R P S   P R O F   U   D E F ;   C R E P U Q ,   2 0 0 9 ,   P R O F   P R O F   E T   U   Q U E B ;   C r o n i n   B l a i s e ,   2 0 0 5 ,   H A N D   S C I   A C A D   W R I T I N ;   C u r s i e f e n   C ,   1 9 9 8 ,   M E D   E D U C ,   V 3 2 ,   P 4 3 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 9 2 3 . 1 9 9 8 . 0 0 2 5 5 . x ;   D e l a m o n t   S ,   1 9 9 7 ,   S T U D   H I G H   E D U C ,   V 2 2 ,   P 3 1 9 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 7 5 0 7 9 7 1 2 3 3 1 3 8 0 9 2 6 ;   D e l a m o n t   S . ,   1 9 9 4 ,   O C C U P A T I O N A L   S O C I A L I ,   P 1 3 8 ;   F e i s t   G .   J . ,   2 0 0 6 ,   P S Y C H O L   S C I   O R I G I N S ;   F o x   M F ,   2 0 0 1 ,   S O C   S T U D   S C I ,   V 3 1 ,   P 1 0 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 0 1 0 3 1 0 0 1 0 0 6 ;   G a r d n e r   S K ,   2 0 0 7 ,   H I G H   E D U C ,   V 5 4 ,   P 7 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 6 - 9 0 2 0 - x ;   G a r f i e l d   E . ,   1 9 9 0 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 1 3 ,   P 1 8 5 ;   G e m m e   B ,   2 0 0 8 ,   E X C H A N G E   U N I V E R S I T Y :   C O R P O R A T I Z A T I O N   O F   A C A D E M I C   C U L T U R E ,   P 7 0 ;   G e o r g h i o u   L ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 6 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 5 4 - 7 ;   G i n g r a s   Y ,   1 9 8 4 ,   R E C H   S O C I O G R A P H ,   V 2 5 ,   P 2 8 6 ;   G i n g r a s   Y ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 4 0 4 8 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G o f f m a n   E . ,   1 9 7 4 ,   R I T E S   I N T E R A C T I O N ;   H o l d a w a y   E .   A ,   1 9 9 4 ,   C A N A D I A N   J   H I G H E R   E D ,   V 2 4 ,   P 1 ;   K a m l e r   B ,   2 0 0 8 ,   S T U D   H I G H   E D U C ,   V 3 3 ,   P 2 8 3 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 7 5 0 7 0 8 0 2 0 4 9 2 3 6 ;   K y i k   S . ,   1 9 9 4 ,   H I G H   E D U C ,   V 2 8 ,   P 2 2 7 ;   L a r i v i e r e   V ,   2 0 0 7 ,   I N D I C A T E U R S   A C T I V I T E ,   P 3 1 ;   L a r i v i e r e   V ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 7 - 8 ;   L a r i v i e r e   V ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 4 9 ;   L a r i v i e r e   V ,   2 0 1 0 ,   R E S   E V A L U A T ,   V 1 9 ,   P 4 5 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 1 0 X 4 9 2 4 9 5 ;   L e e   W M ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 3 9 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 1 ;   L e g a u l t   M . - J ,   1 9 9 3 ,   R E V   C A N A D I E N N E   E N S E I ,   V 2 3 ,   P 1 2 9 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 3 ;   L i s e e   C ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 7 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 8 ;   L o u i s   K S ,   2 0 0 7 ,   J   H I G H   E D U C ,   V 7 8 ,   P 3 1 1 ,   D O I   1 0 . 1 3 5 3 / j h e . 2 0 0 7 . 0 0 1 7 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   M o e d   H F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 7 6 ;   M o o d y   J ,   2 0 0 4 ,   A M   S O C I O L   R E V ,   V 6 9 ,   P 2 1 3 ;   N e t t l e s   M .   T . ,   2 0 0 6 ,   3   M A G I C   L E T T   G E T T I N G ;   P a g l i s   L L ,   2 0 0 6 ,   R E S   H I G H   E D U C ,   V 4 7 ,   P 4 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 6 2 - 0 0 5 - 9 0 0 3 - 2 ;   P o l e   C ,   1 9 9 7 ,   A S S E S S   E V A L   H I G H   E D U ,   V 2 2 ,   P 4 9 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 0 2 9 3 9 7 0 2 2 0 1 0 4 ;   F r a e n k e l   B ,   2 0 0 4 ,   S I G N A T U R E   S C I   S O C I O L ;   P o w e l l   S ,   2 0 0 4 ,   A W A R D   P H D   P U B L I S H E D ;   R i d d i n g   P .   J ,   1 9 9 6 ,   T H E S I S   U   B R I T   C O L U M B ;   S a d l a k   J ,   2 0 0 4 ,   D O C T O R A L   S T U D I E S   Q U A ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S e a g r a m   B C ,   1 9 9 8 ,   R E S   H I G H   E D U C ,   V 3 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 8 7 8 1 1 1 8 3 1 2 ;   S h i n n   T . ,   1 9 8 8 ,   A C T E S   R E C H E R C H E   S C I ,   V 7 4 ,   P 2 ,   D O I   1 0 . 3 4 0 6 / a r s s . 1 9 8 8 . 2 4 3 0 ;   S m e b y   J C ,   2 0 0 0 ,   S T U D   H I G H   E D U C ,   V 2 5 ,   P 5 3 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 7 5 0 7 0 0 1 1 6 0 1 9 ;   T U R N E R   C .   S .   V . ,   1 9 9 3 ,   R E V   H I G H   E D U C ,   V 1 6 ,   P 3 5 5 ;   W A L F O R D   G ,   1 9 8 3 ,   B R I T   J   S O C I O L   E D U C ,   V 4 ,   P 2 4 1 ,   D O I   1 0 . 1 0 8 0 / 0 1 4 2 5 6 9 8 3 0 0 4 0 3 0 3 ;   W A L F O R D   G ,   1 9 8 1 ,   S T U D   H I G H   E D U C ,   V 6 ,   P 1 4 7 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 7 5 0 7 8 1 1 2 3 3 1 3 7 9 4 0 2 ;   W h i t l e y   G G ,   1 9 9 8 ,   J   N U R S   E D U C ,   V 3 7 ,   P 1 8 2 ;   Z i m a n   J ,   1 9 9 3 ,   T I M E S   H I G H E R   E D   0 7 1 6 ,   P 1 6 	 6 0 	 2 1 	 2 1 	 4 	 6 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 2 	 9 0 	 2 	 	 	 	 	 4 6 3 	 4 8 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 9 5 - 6 	 	 1 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 7 6 D Z 	 W O S : 0 0 0 2 9 9 0 8 8 9 0 0 0 0 8 	 	 
 
 J 	 L e v i t t ,   J M ;   T h e l w a l l ,   M 	 	 	 	 L e v i t t ,   J o n a t h a n   M . ;   T h e l w a l l ,   M i k e 	 	 	 A   c o m b i n e d   b i b l i o m e t r i c   i n d i c a t o r   t o   p r e d i c t   a r t i c l e   i m p a c t 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   R e s e a r c h   e v a l u a t i o n ;   R e s e a r c h   i m p a c t ;   R E F ;   R A E ;   C i t a t i o n   a n a l y s i s 	 A S S E S S M E N T   E X E R C I S E   R A T I N G S ;   C I T A T I O N   C O U N T S ;   J O U R N A L   I M P A C T ;   S C I E N C E ;   A R C H A E O L O G Y ;   U N I V E R S I T Y ;   G R A N T S ;   O U T P U T ;   I N D E X 	 I n   b o t h   t h e   U K   a n d   A u s t r a l i a   t h e r e   h a s   b e e n   a   r e c e n t   m o v e   t o   u s e   c i t a t i o n   a n a l y s i s   i n   t h e   e v a l u a t i o n   o f   t h e   r e s e a r c h   o f   i n d i v i d u a l s .   I n   p a r t i c u l a r ,   t h e   f u t u r e   U K   R e s e a r c h   E x c e l l e n c e   F r a m e w o r k   ( R E F ) ,   p r o p o s e s   u s i n g   c i t a t i o n   d a t a   i n   t h e   r e s e a r c h   e v a l u a t i o n   o f   a r t i c l e s   p u b l i s h e d   a s   r e c e n t l y   a s   t h e   y e a r   p r i o r   t o   t h e   e v a l u a t i o n .   I n   r e s p o n s e   t o   t h i s   m o v e ,   t h i s   r e s e a r c h   d e v e l o p s   a n   i n d i c a t o r   a t   t h e   l e v e l   o f   i n d i v i d u a l   a r t i c l e s   t h a t ,   w h e n   n o r m a l i z e d ,   c a n   s u p p l e m e n t   p e e r   r e v i e w .   T h e   n e w   h y b r i d   i n d i c a t o r   i s   t h e   w e i g h t e d   s u m   o f   t w o   i n d i c a t o r s   i n   c o m m o n   u s a g e :   t h e   a r t i c l e ' s   t o t a l   n u m b e r   o f   c i t a t i o n s   i n   a   c i t a t i o n   w i n d o w ,   a n d   t h e   I m p a c t   F a c t o r   o f   t h e   j o u r n a l   i n   w h i c h   t h e   a r t i c l e   w a s   p u b l i s h e d .   T h i s   r e s e a r c h   c o m p a r e s   t h i s   n e w   i n d i c a t o r   w i t h   t h e   a r t i c l e ' s   t o t a l   n u m b e r   o f   c i t a t i o n s   i n   a   l o n g e r   c i t a t i o n   w i n d o w   ( t h e   s t a n d a r d   i n d i c a t o r   o f   a r t i c l e   i m p a c t ) .   F o r   c i t a t i o n   w i n d o w s   o f   0   o r   1   y e a r s ,   t h e   c o r r e l a t i o n   o f   t h e   s i m p l i f i e d   w e i g h t e d   s u m   w i t h   l o n g - t e r m   c i t a t i o n   i s   s u b s t a n t i a l l y   h i g h e r   t h a n   t h e   c o r r e l a t i o n   o f   t h e   s t a n d a r d   i n d i c a t o r   o f   a r t i c l e   c i t a t i o n   w i t h   l o n g - t e r m   c i t a t i o n .   M o r e o v e r ,   f o r   c i t a t i o n   w i n d o w s   o f   a s   l o n g   a s   3   y e a r s   t h e   s t a n d a r d   i n d i c a t o r   o f   c i t a t i o n   c o r r e l a t e s   s i g n i f i c a n t l y   w i t h   t h e   m o n t h   o f   p u b l i c a t i o n ,   i n   t h a t   a r t i c l e s   p u b l i s h e d   e a r l i e r   i n   t h e   y e a r   a r e   o n   a v e r a g e   m o r e   h i g h l y   c i t e d   t h a n   t h o s e   p u b l i s h e d   l a t e r   i n   t h e   y e a r .   B y   c o n t r a s t ,   t h e   s k e w i n g   o f   t h e   s i m p l i f i e d   w e i g h t e d   s u m   t o w a r d s   a r t i c l e s   p u b l i s h e d   e a r l y   i n   t h e   y e a r   i s   c o n s i d e r a b l y   l e s s   t h a n   t h a t   o f   t h e   s t a n d a r d   i n d i c a t o r .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ L e v i t t ,   J o n a t h a n   M . ]   U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h ,   L e i c s ,   E n g l a n d ;   [ T h e l w a l l ,   M i k e ]   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   S t a t   C y b e r m e t r   R e s   G r p ,   W o l v e r h a m p t o n   W V 1   1 S B ,   E n g l a n d 	 L e v i t t ,   J M   ( r e p r i n t   a u t h o r ) ,   U n i v   L o u g h b o r o u g h ,   D e p t   I n f o r m a t   S c i ,   L o u g h b o r o u g h ,   L e i c s ,   E n g l a n d . 	 j . l e v i t t @ l b o r o . a c . u k ;   m . t h e l w a l l @ w l v . a c . u k 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 E c o n o m i c   a n d   S o c i a l   R e s e a r c h   C o u n c i l   [ P T A - 0 2 6 - 2 7 - 2 2 2 8 ] 	 T h e   r e s e a r c h   i s   s u p p o r t e d   b y   t h e   E c o n o m i c   a n d   S o c i a l   R e s e a r c h   C o u n c i l   [ G r a n t   n u m b e r   P T A - 0 2 6 - 2 7 - 2 2 2 8 ] . 	 A d a m s   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 5 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 8 - 9 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   B o y a c k   K W ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 3 0 ;   C O S T A S   R ,   2 0 0 9 ,   P   1 2   I N T   C   S C I E N T   I N ,   P 8 1 7 ;   C r o n i n   B ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 4 0 2 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a u g h a n   M ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 1 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 5 2 ;   H E F C E   ( H i g h e r   E d u c a t i o n   F u n d i n g   C o u n c i l   f o r   E n g l a n d ) ,   2 0 0 9 ,   R E S   E X C   F R A M   2   C O N S ;   * H E F C E ,   2 0 0 9 ,   I N T   R E P   R E F   B I B L   P I L ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I n g w e r s e n   P ,   2 0 0 7 ,   P r o c e e d i n g s   o f   I S S I   2 0 0 7 :   1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l   S o c i e t y   f o r   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s ,   V o l s   I   a n d   I I ,   P 8 6 4 ;   L e w i s o n   G ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 1 5 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 8 2 6 ;   L o p e z - C o z a r   E .   D . ,   2 0 0 7 ,   B R I T   M E D   J ,   V 3 3 4 ,   P 5 6 1 ;   L U N D B E R G   J ,   2 0 0 7 ,   J   I N F O R M E T R I C S ,   V 1 ;   M i n g e r s   J ,   2 0 0 8 ,   J   O P E R   R E S   S O C ,   V 5 9 ,   P 1 0 1 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j o r s . 2 6 0 2 4 2 8 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N E D E R H O F   A J ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 7 9 3 5 3 ;   N o r r i s   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 7 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 7 3 4 ;   O P P E N H E I M   C ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 0 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   R a c k i   G ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 3 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 6 - 0 ;   S u s s m u t h   B ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 4 2 - z ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W a l t e r s   G D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 6 6 - 1 	 2 5 	 2 1 	 2 2 	 6 	 3 3 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 M A R 	 2 0 1 1 	 4 7 	 2 	 	 	 	 	 3 0 0 	 3 0 8 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 1 0 . 0 9 . 0 0 5 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 3 5 I K 	 W O S : 0 0 0 2 8 8 4 0 7 3 0 0 0 1 2 	 	 
 
 J 	 M a r x ,   W 	 	 	 	 M a r x ,   W e r n e r 	 	 	 S p e c i a l   F e a t u r e s   o f   H i s t o r i c a l   P a p e r s   f r o m   t h e   V i e w p o i n t   o f   B i b l i o m e t r i c s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S U R F A C E - T E N S I O N ;   I M P A C T ;   L I G H T 	 T h i s   p a p e r   d e a l s   w i t h   t h e   s p e c i f i c   f e a t u r e s   o f   h i s t o r i c a l   p a p e r s   r e l e v a n t   f o r   i n f o r m a t i o n   r e t r i e v a l   a n d   b i b l i o m e t r i c s .   T h e   a n a l y s i s   i s   b a s e d   m a i n l y   o n   t h e   c i t a t i o n   i n d e x e s   a c c e s s i b l e   u n d e r   t h e   W e b   o f   S c i e n c e   ( W o S )   b u t   a l s o   o n   f i e l d - s p e c i f i c   d a t a b a s e s :   t h e   C h e m i c a l   A b s t r a c t s   S e r v i c e   ( C A S )   l i t e r a t u r e   d a t a b a s e   a n d   t h e   I N S P E C   d a t a b a s e .   F i r s t ,   t h e   j o u r n a l   c o v e r a g e   o f   t h e   W o S   ( i n   p a r t i c u l a r   o f   t h e   W o S   C e n t u r y   o f   S c i e n c e   a r c h i v e ) ,   t h e   l i m i t a t i o n s   o f   s p e c i f i c   s e a r c h   f i e l d s   a s   w e l l   a s   s e v e r a l   d a t a b a s e   e r r o r s   a r e   d i s c u s s e d .   T h e n ,   t h e   p r o b l e m   o f   m i s s p e l l e d   c i t a t i o n s   a n d   t h e i r   " m u t a t i o n s "   i s   d e m o n s t r a t e d   b y   a   f e w   t y p i c a l   e x a m p l e s .   C o m p l e x   a u t h o r   n a m e s ,   c o m p l i c a t e d   j o u r n a l   n a m e s ,   a n d   o t h e r   s o u r c e s   o f   e r r o r s   t h a t   r e s u l t   f r o m   p r i o r   c i t a t i o n   p r a c t i c e   a r e   f u r t h e r   i s s u e s .   F i n a l l y ,   s o m e   b a s i c   p h e n o m e n a   l i m i t i n g   t h e   m e a n i n g   o f   c i t a t i o n   c o u n t s   o f   h i s t o r i c a l   p a p e r s   a r e   p r e s e n t e d   a n d   e x p l a i n e d . 	 M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y 	 M a r x ,   W   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   H e i s e n b e r g s t r   1 ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y . 	 W . M a r x @ f k f . m p g . d e 	 M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 	 M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 	 	 	 A N D E R S E N   O K ,   1 9 7 5 ,   P H Y S   R E V   B ,   V 1 2 ,   P 3 0 6 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v B . 1 2 . 3 0 6 0 ;   B o e h m   H P ,   2 0 0 7 ,   C A R B O N ,   V 4 5 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 1 6 / j . c a r b o n . 2 0 0 6 . 1 2 . 0 1 6 ;   B o r n   M ,   1 9 1 4 ,   P H Y S   Z ,   V 1 5 ,   P 1 8 5 ;   B u c h a n a n   R A ,   2 0 0 6 ,   C O L L   R E S   L I B R ,   V 6 7 ,   P 2 9 2 ;   C a r d o n a   M ,   2 0 0 7 ,   A N N   P H Y S - B E R L I N ,   V 1 6 ,   P 8 4 2 ,   D O I   1 0 . 1 0 0 2 / a n d p . 2 0 0 7 1 0 2 6 9 ;   C a r d o n a   M . ,   2 0 0 8 ,   N U O V O   S A G G I A T O R E ,   V 2 4 ,   P 3 9 ;   C a r d o n a   M ,   2 0 0 8 ,   A N N   P H Y S - B E R L I N ,   V 1 7 ,   P 4 9 7 ,   D O I   1 0 . 1 0 0 2 / a n d p . 2 0 0 8 1 0 3 0 4 ;   C a r d o n a   M ,   2 0 0 6 ,   J   S U P E R C O N D   N O V   M A G N ,   V 1 9 ,   P 4 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 4 8 - 0 0 6 - 0 1 7 3 - 8 ;   C a r d o n a   M ,   2 0 0 6 ,   A N N   P H Y S - B E R L I N ,   V 1 5 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / a n d p . 2 0 0 5 1 0 1 9 6 ;   D i c k s o n   P . ,   2 0 0 1 ,   S P U T N I K   S H O C K   C E N T U R ;   H o n l e   W . ,   2 0 0 4 ,   M I T T E I L U N G E N   W I L H E L M ,   V 9 ,   P 6 0 ;   H u l e t t   G A ,   1 9 0 1 ,   Z   P H Y S   C H E M - S T O C H   V E ,   V 3 7 ,   P 3 8 5 ;   K o h l r a u s c h   R . ,   1 8 4 7 ,   P O G G   A N N   P H Y S I K ,   V 7 2 ,   P 3 5 3 ;   K o h l r a u s c h   R . ,   1 8 5 4 ,   P O G G   A N N   P H Y S   C H E M ,   V 9 1 ,   P 1 7 9 ;   K o h l r a u s c h   R . ,   1 8 5 4 ,   P O G G   A N N   P H Y S   C H E M ,   V 9 1 ,   P 5 6 ;   K O H N   W ,   1 9 6 5 ,   P H Y S   R E V ,   V 1 4 0 ,   P 1 1 3 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v . 1 4 0 . A 1 1 3 3 ;   L I N D H A R D   J ,   1 9 5 4 ,   M A T   F Y S   M E D D   D A N   V I D ,   V 2 8 ,   P 1 ;   M a r x   W ,   2 0 0 4 ,   P H Y S   W O R L D ,   V 1 7 ,   P 1 4 ;   M a r x   W ,   2 0 0 1 ,   A N G E W   C H E M   I N T   E D I T ,   V 4 0 ,   P 1 3 9 ,   D O I   1 0 . 1 0 0 2 / 1 5 2 1 - 3 7 7 3 ( 2 0 0 1 0 1 0 5 ) 4 0 : 1 < 1 3 9 : : A I D - A N I E 1 3 9 > 3 . 3 . C O ; 2 - W ;   M a r x   W ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 0 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 7 7 ;   M a r x   W ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 4 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 0 7 - x ;   M a r x   W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 8 2 4 - 2 ;   M a r x   W ,   2 0 0 9 ,   I N T   J   M A T E R   R E S ,   V 1 0 0 ,   P 1 1 ,   D O I   1 0 . 3 1 3 9 / 1 4 6 . 1 0 1 7 9 3 ;   M e r t o n   R .   K . ,   1 9 6 5 ,   S H O U L D E R S   G I A N T S   S H A ;   M e r t o n   R .   K . ,   1 9 4 9 ,   S O C I A L   T H E O R Y   S O C I A L ;   M e r t o n   R .   K . ,   1 9 6 8 ,   S O C I A L   T H E O R Y   S O C I A L ;   M i e   G ,   1 9 0 8 ,   A N N   P H Y S - B E R L I N ,   V 2 5 ,   P 3 7 7 ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   O s t w a l d   W ,   1 9 0 0 ,   Z   P H Y S   C H E M - S T O C H   V E ,   V 3 4 ,   P 4 9 5 ;   P l a n c k   M . ,   1 9 0 0 ,   V e r h a n d l u n g e n   d e r   D e u t s c h e n   P h y s i k a l i s c h e n   G e s e l l s c h a f t ,   V 2 ,   P 2 0 2 ;   P l a n c k   M . ,   1 9 0 0 ,   V e r h a n d l u n g e n   d e r   D e u t s c h e n   P h y s i k a l i s c h e n   G e s e l l s c h a f t ,   V 2 ,   P 2 3 7 ;   P r a t t   S M ,   2 0 0 6 ,   A B S T R   P A P   A M   C H E M   S ,   V 2 3 2 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   S p e c h t   C . G . ,   2 0 1 0 ,   O P I N I O N   M U T A T I O N S   C I ;   W a s s e r m a n   G ,   1 9 3 3 ,   A R C H   E I S E N H U T T E N W E S ,   V 6 ,   P 3 4 7 ;   W e t t e r e r   J K ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 5 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 2 	 3 6 	 2 1 	 2 1 	 1 	 1 9 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 1 5 3 2 - 2 8 9 0 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 M A R 	 2 0 1 1 	 6 2 	 3 	 	 	 	 	 4 3 3 	 4 3 9 	 	 1 0 . 1 0 0 2 / a s i . 2 1 4 7 9 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 3 1 X B 	 W O S : 0 0 0 2 8 8 1 4 2 6 0 0 0 0 2 	 	 
 
 J 	 F e t s c h e r i n ,   M ;   V o s s ,   H ;   G u g l e r ,   P 	 	 	 	 F e t s c h e r i n ,   M a r c ;   V o s s ,   H i n r i c h ;   G u g l e r ,   P h i l i p p e 	 	 	 3 0   Y e a r s   o f   f o r e i g n   d i r e c t   i n v e s t m e n t   t o   C h i n a :   A n   i n t e r d i s c i p l i n a r y   l i t e r a t u r e   r e v i e w 	 I N T E R N A T I O N A L   B U S I N E S S   R E V I E W 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c   a n a l y s i s ;   C h i n a ;   C i t a t i o n   m a p ;   F o r e i g n   d i r e c t   i n v e s t m e n t ;   L i t e r a t u r e   r e v i e w 	 I N T E R N A T I O N A L - B U S I N E S S   R E S E A R C H ;   J O I N T   V E N T U R E S ;   M U L T I N A T I O N A L - C O R P O R A T I O N S ;   E N V I R O N M E N T A L - P R O T E C T I O N ;   E C O N O M I C - D E V E L O P M E N T ;   P E R F O R M A N C E ;   L O C A T I O N ;   I M P A C T ;   D E T E R M I N A N T S ;   M A N A G E M E N T 	 T h e   p u r p o s e   o f   t h i s   p a p e r   i s   t o   e x a m i n e   h o w   s c h o l a r l y   r e s e a r c h   o n   f o r e i g n   d i r e c t   i n v e s t m e n t   ( F D I )   t o   t h e   P e o p l e ' s   R e p u b l i c   o f   C h i n a   h a s   e v o l v e d   a n d   b e e n   s h a p e d   u s i n g   b i b l i o m e t r i c s   a n a l y s i s   o f   4 2 2   j o u r n a l   a r t i c l e s   p u b l i s h e d   i n   1 5 1   j o u r n a l s   b e t w e e n   1 9 7 9   a n d   2 0 0 8   o n   t h a t   t o p i c .   T h e   l i t e r a t u r e   i s   d o m i n a t e d   b y   t h e   f i e l d s   o f   E c o n o m i c s ,   f o l l o w e d   b y   B u s i n e s s   a n d   M a n a g e m e n t .   P l a n n i n g   a n d   D e v e l o p m e n t   a n d   I n t e r n a t i o n a l   R e l a t i o n s ,   w h i c h   t o g e t h e r   a c c o u n t   f o r   9 5 %   o f   a l l   p u b l i c a t i o n s .   T e n   p e r c e n t   o f   t h e   m o s t   p r o d u c t i v e   j o u r n a l s   a r e   r e s p o n s i b l e   f o r   4 0 %   o f   a l l   p u b l i c a t i o n s   a n d   6 3 %   o f   a l l   c i t a t i o n s   r e c e i v e d .   B y   m e a n s   o f   c i t a t i o n   m a p p i n g ,   f o u r   m a i n   r e s e a r c h   s t r e a m s   h a v e   b e e n   i d e n t i f i e d :   ( 1 )   t h e   m o t i v e s   a n d   d e t e r m i n a n t s   o f   F D I   t o   C h i n a ;   ( 2 )   ' i n s i d e '   t h e   m u l t i n a t i o n a l   e n t e r p r i s e   ( M N E ) ;   ( 3 )   t h e   i m p a c t   o f   M N E   a c t i v i t i e s :   a n d   ( 4 )   p o l i c y   i m p l i c a t i o n s   f o r   t h e   h o s t   c o u n t r y .   E m e r g i n g   r e s e a r c h   s t r e a m s   h a v e   b e e n   i d e n t i f i e d   a s   t h e   e f f e c t s   o f   i n w a r d   F D I   o n   ( i )   c o r p o r a t e   s o c i a l   r e s p o n s i b i l i t y   a t t i t u d e s   o f   d o m e s t i c   a n d   f o r e i g n   f i r m s ,   ( i i )   e n v i r o n m e n t a l   a n d   c l i m a t e   i s s u e s ,   ( i i i )   t h e   i n s t i t u t i o n a l   a n d   s o c i e t a l   t r a n s f o r m a t i o n   o f   C h i n a ,   a n d   ( i v )   t h e   e m e r g e n c e   o f   C h i n e s e   M N E s   a n d   i t s   i m p a c t   o n   t h e   o p e r a t i o n s   o f   f o r e i g n   M N E s   i n   C h i n a .   ( C )   2 0 0 9   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ F e t s c h e r i n ,   M a r c ]   R o l l i n s   C o l l ,   C r u m m e r   G r a d   S c h   B u s i n e s s ,   R o l l i n s   C h i n a   C t r ,   W i n t e r   P k ,   F L   3 2 7 8 9   U S A ;   [ F e t s c h e r i n ,   M a r c ]   H a r v a r d   U n i v ,   H a r v a r d   K e n n e d y   S c h ,   A s i a   P r o g r a m s ,   C a m b r i d g e ,   M A   0 2 1 3 8   U S A ;   [ V o s s ,   H i n r i c h ]   U n i v   L e e d s ,   S c h   B u s i n e s s ,   C t r   I n t   B u s i n e s s ,   L e e d s   L S 2   9 J T ,   W   Y o r k s h i r e ,   E n g l a n d ;   [ G u g l e r ,   P h i l i p p e ]   U n i v   F r i b o u r g ,   F a c   E c o n   &   S o c i a l   S c i ,   C t r   C o m p e t i t i v e n e s s ,   C H - 1 7 0 0   F r i b o u r g ,   S w i t z e r l a n d 	 F e t s c h e r i n ,   M   ( r e p r i n t   a u t h o r ) ,   R o l l i n s   C o l l ,   C r u m m e r   G r a d   S c h   B u s i n e s s ,   R o l l i n s   C h i n a   C t r ,   1 0 0 0   H o l t   A v e   2 7 2 3 ,   W i n t e r   P k ,   F L   3 2 7 8 9   U S A . 	 m f e t s c h e r i n @ r o l l i n s . e d u ;   h v @ l u b s . l e e d s . a c . u k ;   p h i l i p p e . g u g l e r @ u n i f r . c h 	 F e t s c h e r i n ,   M a r c / N - 3 3 1 8 - 2 0 1 6 ;   	 F e t s c h e r i n ,   M a r c / 0 0 0 0 - 0 0 0 2 - 1 5 4 7 - 0 4 7 3 ;   V o s s ,   H i n r i c h / 0 0 0 0 - 0 0 0 2 - 0 6 9 1 - 4 7 0 6 	 	 	 A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A n d e r s s o n   U ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 5 2 1 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 7 . 0 0 1 ;   A r n o t t   D C ,   2 0 0 7 ,   E U R   J   M A R K E T I N G ,   V 4 1 ,   P 1 2 0 3 ,   D O I   1 0 . 1 1 0 8 / 0 3 0 9 0 5 6 0 7 1 0 7 7 3 4 0 8 ;   B E A M I S H   P W ,   1 9 8 9 ,   M A N A G E   I N T   R E V ,   V 2 9 ,   P 5 7 ;   B e l d e r b o s   R ,   2 0 0 2 ,   J   J P N   I N T   E C O N ,   V 1 6 ,   P 1 9 4 ,   D O I   1 0 . 1 0 0 6 / j j i e . 2 0 0 1 . 0 4 9 1 ;   B j o r k m a n   I . ,   1 9 9 5 ,   I N T   B U S I N E S S   R E V ,   V 4 ,   P 5 1 9 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 9 6 9 - 5 9 3 1 ( 9 5 ) 0 0 0 2 3 - 2 ;   B j o r k m a n   I ,   2 0 0 8 ,   I N T   B U S   R E V ,   V 1 7 ,   P 1 4 6 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 8 . 0 2 . 0 0 1 ;   B O R G M A N   C L ,   2 0 0 0 ,   W E B   K N O W L E D G E ,   P 1 4 3 ;   B o s w o r t h   D . ,   2 0 0 0 ,   I N T   B U S I N E S S   R E V ,   V 9 ,   P 4 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 0 0 ) 0 0 0 1 3 - 5 ;   B r o a d m a n   H G ,   1 9 9 7 ,   W O R L D   E C O N ,   V 2 0 ,   P 3 3 9 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 7 0 1 . 0 0 0 7 3 ;   B u c k l e y   P J ,   2 0 0 7 ,   J   I N T   B U S   S T U D ,   V 3 8 ,   P 4 9 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 2 7 7 ;   B u c k l e y   P J ,   2 0 0 7 ,   I N T   B U S   R E V ,   V 1 6 ,   P 1 4 2 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 6 . 1 2 . 0 0 6 ;   B u c k l e y   P J ,   2 0 0 9 ,   J   I N T   B U S   S T U D ,   V 4 0 ,   P 1 5 6 3 ,   D O I   1 0 . 1 0 5 7 / j i b s . 2 0 0 9 . 4 9 ;   B u c k l e y   P J ,   2 0 0 9 ,   I N T   B U S   R E V ,   V 1 8 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 9 . 0 1 . 0 0 6 ;   B u c k l e y   P J ,   2 0 0 9 ,   J   W O R L D   B U S ,   V 4 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / j . j w b . 2 0 0 8 . 0 5 . 0 0 3 ;   B u c k l e y   P J ,   2 0 0 5 ,   J   I N T   B U S   S T U D ,   V 3 6 ,   P 5 9 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 1 7 0 ;   B u c k l e y   P J ,   2 0 0 2 ,   J   I N T   B U S   S T U D ,   V 3 3 ,   P 6 3 7 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 1 0 3 7 ;   B U C K L E Y   P J ,   1 9 9 0 ,   J   I N T   B U S   S T U D ,   V 2 1 ,   P 6 5 7 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 3 4 6 ;   B u c k l e y   P .   J . ,   1 9 9 6 ,   I N T   B U S I N E S S   R E V ,   V 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 9 6 9 - 5 9 3 1 ( 9 6 ) 0 0 0 0 8 - X ;   B u c k l e y   P . J . ,   1 9 7 6 ,   F U T U R E   M U L T I N A T I O N A L ;   C h a n e y   I ,   2 0 0 8 ,   I N T   B U S   R E V ,   V 1 7 ,   P 1 7 0 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 8 . 0 2 . 0 0 8 ;   C h e n   H . ,   2 0 0 2 ,   I N T   B U S I N E S S   R E V ,   V 1 1 ,   P 1 9 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 0 1 ) 0 0 0 5 5 - 5 ;   C h e n   H M ,   1 9 9 8 ,   J   I N T   B U S   S T U D ,   V 2 9 ,   P 4 4 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 0 0 2 ;   C h e n   J ,   1 9 9 6 ,   J   C O M P   E C O N ,   V 2 2 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 6 / j c e c . 1 9 9 6 . 0 0 1 5 ;   C h e n g   L K ,   2 0 0 0 ,   J   I N T   E C O N ,   V 5 1 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 2 - 1 9 9 6 ( 9 9 ) 0 0 0 3 2 - X ;   C h e u n g   F S L ,   2 0 0 7 ,   I N T   B U S   R E V ,   V 1 6 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 7 . 0 2 . 0 0 3 ;   C h e u n g   K Y ,   2 0 0 4 ,   C H I N A   E C O N   R E V ,   V 1 5 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 1 0 4 3 - 9 5 1 X ( 0 3 ) 0 0 0 2 7 - 0 ;   C h i l d   J . ,   2 0 0 5 ,   M A N A G E M E N T   O R G   R E V ,   V 1 ,   P 3 8 1 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 0 - 8 7 8 4 . 2 0 0 5 . 0 0 2 0 A . X ;   C h i l d   J ,   2 0 0 7 ,   O R G A N   S T U D ,   V 2 8 ,   P 1 0 1 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 7 0 7 8 1 1 2 ;   C o a s e   R H ,   1 9 3 7 ,   E C O N O M I C A - N E W   S E R ,   V 4 ,   P 3 8 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 3 5 . 1 9 3 7 . t b 0 0 0 0 2 . x ;   C o l e   M A ,   2 0 0 5 ,   R E V   D E V   E C O N ,   V 9 ,   P 5 3 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 6 1 . 2 0 0 5 . 0 0 2 9 2 . x ;   C o u g h l i n   C C ,   2 0 0 0 ,   W O R L D   E C O N ,   V 2 3 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 7 0 1 . t 0 1 - 1 - 0 0 2 6 0 ;   D A N I E L S   J D ,   1 9 9 1 ,   J   I N T   B U S   S T U D ,   V 2 2 ,   P 1 7 7 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 2 9 8 ;   d e M e l l o   L R ,   1 9 9 7 ,   J   D E V   S T U D ,   V 3 4 ,   P 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 2 0 3 8 9 7 0 8 4 2 2 5 0 1 ;   D e m i r   R ,   2 0 0 7 ,   I N T   B U S   R E V ,   V 1 6 ,   P 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 7 . 0 1 . 0 1 0 ;   D u B o i s   F L ,   2 0 0 0 ,   J   I N T   B U S   S T U D ,   V 3 1 ,   P 6 8 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 9 2 9 ;   D u n n i n g   J H ,   2 0 0 3 ,   J   I N T   B U S   S T U D ,   V 3 4 ,   P 1 0 8 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 0 1 0 ;   D u n n i n g   J H ,   2 0 0 8 ,   M U L T I N A T I O N A L   E N T E R P R I S E S   A N D   T H E   G L O B A L   E C O N O M Y ,   2 N D   E D I T I O N ,   P 1 ;   D u n n i n g   J H ,   1 9 9 8 ,   J   I N T   B U S   S T U D ,   V 2 9 ,   P 4 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 0 2 4 ;   D U N N I N G   J H ,   1 9 9 8 ,   E X P L A I N I N G   I N T   P R O D U ;   D u n n i n g   J . ,   2 0 0 1 ,   I N T   J   E C   B U S I N E S S ,   V 8 ,   P 1 7 3 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 5 7 1 5 1 0 1 1 0 0 5 1 4 4 1 ;   D u n n i n g   J . H . ,   2 0 0 8 ,   F O R E I G N   D I R E C T   I N V E S ,   P 8 3 ;   D u n n i n g   J H ,   2 0 0 8 ,   A S I A   P A C   J   M A N A G ,   V 2 5 ,   P 5 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 4 9 0 - 0 0 7 - 9 0 7 4 - z ;   E l l i s   P D ,   2 0 0 7 ,   I N T   B U S   R E V ,   V 1 6 ,   P 5 7 3 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 7 . 0 6 . 0 0 1 ;   F l e i s h e r   B M ,   1 9 9 7 ,   J   C O M P   E C O N ,   V 2 5 ,   P 2 2 0 ,   D O I   1 0 . 1 0 0 6 / j c e c . 1 9 9 7 . 1 4 6 2 ;   F u n g   K C ,   2 0 0 2 ,   J   C O M P   E C O N ,   V 3 0 ,   P 5 6 7 ,   D O I   1 0 . 1 0 0 6 / j c e c . 2 0 0 2 . 1 7 8 8 ;   G a r f i e l d   E ,   2 0 0 4 ,   J   I N F   S C I ,   V 3 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 4 0 4 2 8 0 2 ;   G a r f i e l d   E ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 6 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 2 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 4 0 5 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 0 2 ;   G u g l e r   P . ,   2 0 0 7 ,   I N T   A D V   E C   R E S ,   V 1 3 ,   P 2 6 8 ,   D O I   1 0 . 1 0 0 7 / s 1 1 2 9 4 - 0 0 7 - 9 0 9 1 - 1 ;   G u g l e r   P ,   2 0 0 9 ,   R O U T L   C O N T E M P   A S I A ,   P 2 5 ;   H a m b r i c k   D C ,   2 0 0 8 ,   A C A D   M A N A G E   R E V ,   V 3 3 ,   P 3 2 ;   H A R S A N Y I   M A ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 3 2 5 ;   H e   J ,   2 0 0 6 ,   E C O L   E C O N ,   V 6 0 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 5 . 1 2 . 0 0 8 ;   H e a d   K ,   1 9 9 6 ,   J   U R B A N   E C O N ,   V 4 0 ,   P 3 8 ,   D O I   1 0 . 1 0 0 6 / j u e c . 1 9 9 6 . 0 0 2 2 ;   H e n l e y   J ,   1 9 9 9 ,   W O R L D   E C O N ,   V 2 2 ,   P 2 2 3 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 7 0 1 . 0 0 2 0 1 ;   I s o b e   T ,   2 0 0 0 ,   A C A D   M A N A G E   J ,   V 4 3 ,   P 4 6 8 ,   D O I   1 0 . 2 3 0 7 / 1 5 5 6 4 0 5 ;   J o h a n s o n   J ,   2 0 0 9 ,   J   I N T   B U S   S T U D ,   V 4 0 ,   P 1 4 1 1 ,   D O I   1 0 . 1 0 5 7 / j i b s . 2 0 0 9 . 2 4 ;   K I M   J ,   2 0 0 8 ,   J   A D V E R T I S I N G ,   V 3 7 ,   P 9 9 ;   K o j i m a   K . ,   1 9 8 2 ,   H I T O T S U B   J   E C O N ,   V 2 3 ,   P 6 3 0 ;   K o j i m a   K . ,   1 9 8 4 ,   H I T O T S U B   J   E C O N ,   V 4 3 ,   P 2 7 9 ;   K o s t o v a   T ,   1 9 9 9 ,   A C A D   M A N A G E   R E V ,   V 2 4 ,   P 6 4 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 0 3 7 ;   K r u g   B ,   2 0 0 8 ,   M A N A G E   O R G A N   R E V ,   V 4 ,   P 8 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 0 - 8 7 8 4 . 2 0 0 7 . 0 0 0 9 2 . x ;   L a r d y   N . ,   1 9 9 4 ,   C H I N A   W O R L D   E C ;   L i   J .   T . ,   2 0 0 2 ,   A S I A   P A C I F I C   J   M A N A G ,   V 1 9 ,   P 8 7 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 9 1 6 2 4 0 1 8 ;   L i u   X H ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 9 7 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 4 . 1 2 . 0 0 3 ;   L i u   X i a m i n g ,   2 0 0 1 ,   I N T   B U S I N E S S   R E V ,   V 1 0 ,   P 4 2 1 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 0 1 ) 0 0 0 2 4 - 5 ;   L i u   Z Q ,   2 0 0 2 ,   J   C O M P   E C O N ,   V 3 0 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 6 / j c e c . 2 0 0 2 . 1 7 8 9 ;   L U O   Y ,   1 9 9 7 ,   I N T   B U S I N E S S   R E V ,   V 6 ,   P 3 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 9 7 ) 0 0 0 0 9 - 7 ;   L u o   Y D ,   1 9 9 9 ,   J   I N T   B U S   S T U D ,   V 3 0 ,   P 2 6 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 0 7 0 ;   M e s c h i   P . X . ,   2 0 0 4 ,   I N T   B U S I N E S S   R E V ,   V 1 3 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 4 . 0 6 . 0 0 4 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   M o r c k   R ,   2 0 0 8 ,   J   I N T   B U S   S T U D ,   V 3 9 ,   P 3 3 7 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 3 6 6 ;   * O E C D ,   2 0 0 2 ,   C H I N A   W O R L D   E C   O E C D ;   P A N   Y ,   1 9 9 8 ,   I N T   B U S I N E S S   R E V ,   V 7 ,   P 3 2 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 9 8 ) 0 0 0 2 1 - 3 ;   P a n   Y G ,   1 9 9 9 ,   J   I N T   B U S   S T U D ,   V 3 0 ,   P 8 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 0 6 1 ;   P a n   Y G ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 9 0 4 ) 2 0 : 4 < 3 5 9 : : A I D - S M J 3 1 > 3 . 0 . C O ; 2 - 9 ;   P a n   Y G ,   1 9 9 6 ,   J   I N T   B U S   S T U D ,   V 2 7 ,   P 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 1 2 3 ;   P A S A D E O S   Y . ,   1 9 9 9 ,   J   P U B L I C   R E L A T   R E S ,   V 1 1 ,   P 2 9 ,   D O I   1 0 . 1 2 0 7 / s 1 5 3 2 7 5 4 x j p r r 1 1 0 1 _ 0 2 ;   P e n g   M W ,   2 0 0 3 ,   A C A D   M A N A G E   R E V ,   V 2 8 ,   P 2 7 5 ,   D O I   1 0 . 5 4 6 5 / A M R . 2 0 0 3 . 9 4 1 6 3 4 1 ;   P e n g   M W ,   2 0 0 1 ,   J   B U S   R E S ,   V 5 2 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 8 - 2 9 6 3 ( 9 9 ) 0 0 0 6 3 - 6 ;   P e n r o s e   E . ,   1 9 5 9 ,   T H E O R Y   G R O W T H   F I R M ;   P i l l a n i a   R . ,   2 0 0 9 ,   M U L T I N A T I O N A L   B U S I N E ,   V 1 7 ,   P 5 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   Q u e r   D i e g o ,   2 0 0 7 ,   A s i a   P a c i f i c   J o u r n a l   o f   M a n a g e m e n t ,   V 2 4 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 4 9 0 - 0 0 7 - 9 0 4 0 - 9 ;   R E E V E S   B ,   1 9 8 3 ,   H U M   C O M M U N   R E S ,   V 1 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 3 . t b 0 0 0 0 7 . x ;   R O P E R   S ,   2 0 0 6 ,   M A R K E T I N G   R E V         S P R ,   P 5 5 ;   R o s s   L ,   1 9 9 8 ,   C H I N A   Q U A R T ,   P 8 0 9 ;   S a n y a l   R .   N . ,   2 0 0 0 ,   I N T   B U S I N E S S   R E V ,   V 9 ,   P 1 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 9 9 ) 0 0 0 3 2 - 3 ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   S H A N   W J ,   1 9 9 1 ,   J   I N T   B U S   S T U D ,   V 2 2 ,   P 5 5 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 3 1 4 ;   S h e n k a r   O ,   2 0 0 4 ,   J   I N T   B U S   S T U D ,   V 3 5 ,   P 1 6 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 0 7 4 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S m a l l   H . ,   1 9 7 3 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 2 ,   P 2 8 ;   S u n   H S ,   1 9 9 8 ,   W O R L D   E C O N ,   V 2 1 ,   P 6 7 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 7 0 1 . 0 0 1 5 6 ;   S u n   Q ,   2 0 0 2 ,   J   I N T   M O N E Y   F I N A N C ,   V 2 1 ,   P 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 6 1 - 5 6 0 6 ( 0 1 ) 0 0 0 3 2 - 8 ;   T s e   D K ,   1 9 9 7 ,   J   I N T   B U S   S T U D ,   V 2 8 ,   P 7 7 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 1 1 9 ;   * U N C T A D ,   2 0 0 9 ,   F D I   S T A T ;   U N C T A D ,   2 0 0 8 ,   W O R L D   I N V   R E P   2 0 0 8 ;   U N C T A D ,   2 0 0 9 ,   W O R L D   I N V   R E P   2 0 0 9 ;   V a n   R a a n   A n t h o n y   F . J . ,   2 0 0 3 ,   T E C H N I K F O L G E N A B S C H A T ,   V 1 ,   P 2 0 ;   V A S S I N E N   A ,   2 0 0 6 ,   C O N C E P T   S T R A T E G I C   M A ;   * W E B   S C I ,   2 0 0 8 ,   S O C   S C I   C I T   I N D ;   W E B E R L E Y   S E ,   2 0 0 3 ,   L I B   Q ,   V 7 3 ,   P 1 2 1 ;   W e i   S J ,   1 9 9 5 ,   C H I N A   E C O N   R E V ,   V 6 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / 1 0 4 3 - 9 5 1 X ( 9 5 ) 9 0 0 0 3 - 9 ;   W e i   Y Q ,   1 9 9 9 ,   R E G   S T U D ,   V 3 3 ,   P 8 5 7 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W o r l d   B a n k ,   2 0 0 9 ,   D O I N G   B U S   2 0 1 0   R E F   D ;   W u   X . ,   2 0 0 0 ,   I N T   B U S I N E S S   R E V ,   V 9 ,   P 3 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 0 0 ) 0 0 0 0 7 - X ;   X i a   J ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 4 8 ;   Z h a n g   K H L ,   2 0 0 1 ,   C O N T E M P   E C O N   P O L I C Y ,   V 1 9 ,   P 3 3 6 ,   D O I   1 0 . 1 0 9 3 / c e p / 1 9 . 3 . 3 3 6 ;   Z H A N G   L Y ,   1 9 9 4 ,   W O R L D   D E V ,   V 2 2 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 7 5 0 X ( 9 4 ) 9 0 1 6 7 - 8 ;   Z h a n g   Y . ,   2 0 0 1 ,   I N T   B U S I N E S S   R E V ,   V 1 0 ,   P 3 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 0 1 ) 0 0 0 2 0 - 8 ;   Z h a o   H . ,   1 9 9 8 ,   I N T   B U S I N E S S   R E V ,   V 7 ,   P 5 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 9 8 ) 0 0 0 3 2 - 8 ;   Z h o u   D . ,   2 0 0 2 ,   I N T   B U S I N E S S   R E V ,   V 1 1 ,   P 4 6 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 9 6 9 - 5 9 3 1 ( 0 2 ) 0 0 0 2 0 - 3 	 1 1 6 	 2 1 	 2 3 	 6 	 5 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 9 6 9 - 5 9 3 1 	 	 	 I N T   B U S   R E V 	 I n t .   B u s .   R e v . 	 J U N 	 2 0 1 0 	 1 9 	 3 	 	 	 	 	 2 3 5 	 2 4 6 	 	 1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 9 . 1 2 . 0 0 2 	 	 1 2 	 B u s i n e s s 	 B u s i n e s s   &   E c o n o m i c s 	 6 0 4 L J 	 W O S : 0 0 0 2 7 8 2 8 0 2 0 0 0 0 3 	 	 
 
 J 	 C r u z ,   S C S ;   T e i x e i r a ,   A A C 	 	 	 	 C r u z ,   S a r a   C .   S . ;   T e i x e i r a ,   A u r o r a   A .   C . 	 	 	 T h e   E v o l u t i o n   o f   t h e   C l u s t e r   L i t e r a t u r e :   S h e d d i n g   L i g h t   o n   t h e   R e g i o n a l   S t u d i e s - R e g i o n a l   S c i e n c e   D e b a t e 	 R E G I O N A L   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C l u s t e r s ;   I n d u s t r i a l   c l u s t e r s ;   I n d u s t r i a l   l o c a t i o n ;   B i b l i o m e t r i c s 	 E C O N O M I C - G E O G R A P H Y ;   I N D U S T R I A L   C L U S T E R S ;   K N O W L E D G E   S P I L L O V E R S ;   S C I E N T I F I C   J O U R N A L S ;   E X T E R N A L   C O N T R O L ;   I M P A C T   F A C T O R ;   I N N O V A T I O N ;   S P A C E ;   A G G L O M E R A T I O N ;   C O M P L E X E S 	 C r u z   S .   C .   S .   a n d   T e i x e i r a   A .   A .   C .   T h e   e v o l u t i o n   o f   t h e   c l u s t e r   l i t e r a t u r e :   s h e d d i n g   l i g h t   o n   t h e   r e g i o n a l   s t u d i e s - r e g i o n a l   s c i e n c e   d e b a t e ,   R e g i o n a l   S t u d i e s .   D e s p i t e   t h e   i n t u i t i v e   a w a r e n e s s   a b o u t   t h e   r i s i n g   i m p o r t a n c e   o f   t h e   c l u s t e r   l i t e r a t u r e ,   a n   e m p i r i c a l   s t u d y   o n   i t s   p r e c i s e   m a g n i t u d e   a n d   e v o l u t i o n   h a s   y e t   t o   b e   a c c o m p l i s h e d .   B a s e d   o n   t w o   c o m p l e m e n t a r y   b i b l i o m e t r i c   e x e r c i s e s   -   c o m p r i s i n g   5 0   0 0 0   c i t a t i o n s   a n d   a l m o s t   3 0 0 0   a b s t r a c t s ,   r a n g i n g   i n   d a t e   f r o m   1 9 6 2   t o   2 0 0 8   -   i t   w a s   d e m o n s t r a t e d   t h a t   a l t h o u g h   s e m i n a l   c o n t r i b u t o r s   c o m e   b o t h   f r o m   r e g i o n a l   s c i e n c e   a n d   r e g i o n a l   s t u d i e s   a r e a s ,   t h e   ' c o n v e r g e n c e '   b e t w e e n   r e g i o n a l   s c i e n c e   a n d   r e g i o n a l   s t u d i e s   a p p r o a c h e s   i s   s t i l l   a   c h i m e r a .   [ i m a g e   o m i t t e d ]   C r u z   S .   C .   S .   e t   T e i x e i r a   A .   A .   C .   L ' e v o l u t i o n   d e   l a   d o c u m e n t a t i o n   a u   s u j e t   d e s   g r a p p e s :   r e p a n d r e   d e   l a   l u m i e r e   s u r   l e   d e b a t   a   p r o p o s   d e s   e t u d e s   r e g i o n a l e s   e t   d e   l a   s c i e n c e   r e g i o n a l e ,   R e g i o n a l   S t u d i e s .   M a l g r e   l a   c o n s c i e n c e   i n t u i t i v e   a   l ' e g a r d   d e   l ' i m p o r t a n c e   a c c r u e   d e   l a   d o c u m e n t a t i o n   a u   s u j e t   d e s   g r a p p e s ,   i l   f a u t   e n c o r e   f a i r e   u n e   e t u d e   e m p i r i q u e   s u r   s o n   a m p l e u r   p r e c i s e   e t   s o n   e v o l u t i o n .   A   p a r t i r   d e   d e u x   e x e r c i c e s   b i b l i o m e t r i q u e s   -   c o m p o r t a n t   5 0   0 0 0   c i t a t i o n s   e t   a   p e u   p r e s   3   0 0 0   r e s u m e s ,   a l l a n t   d e   1 9 6 2   j u s q u ' a   2 0 0 8   -   o n   m o n t r e   q u e   l ' o n   p o u r s u i t   t o u j o u r s   d e s   c h i m e r e s   q u a n t   a u   ' r a p p r o c h e m e n t '   e n t r e   l a   f a c o n   p r i s e   d a n s   l a   s c i e n c e   r e g i o n a l e   e t   c e l l e   e m p l o y e e   d a n s   l e s   e t u d e s   r e g i o n a l e s .   G r a p p e s   G r a p p e s   i n d u s t r i e l l e s   I m p l a n t a t i o n   i n d u s t r i e l l e   B i b l i o m e t r i e   C r u z   S .   C .   S .   u n d   T e i x e i r a   A .   A .   C .   D i e   E v o l u t i o n   d e r   C l u s t e r - L i t e r a t u r :   e i n e   U n t e r s u c h u n g   d e r   D e b a t t e   u b e r   R e g i o n a l s t u d i e n   u n d   R e g i o n a l w i s s e n s c h a f t ,   R e g i o n a l   S t u d i e s .   D i e   w a c h s e n d e   B e d e u t u n g   d e r   L i t e r a t u r   u b e r   C l u s t e r   i s t   z w a r   a u f   i n t u i t i v e   W e i s e   b e k a n n t ,   d o c h   e i n e   e m p i r i s c h e   S t u d i e   u b e r   i h r e   g e n a u e   G r o s s e   u n d   E v o l u t i o n   s t e h t   n o c h   a u s .   A u s g e h e n d   v o n   z w e i   k o m p l e m e n t a r e n   b i b l i o m e t r i s c h e n   U n t e r s u c h u n g e n   -   m i t   5 0 . 0 0 0   Z i t a t e n   u n d   b e i n a h e   3 0 0 0   I n h a l t s a n g a b e n   a u s   d e n   J a h r e n   1 9 6 2   b i s   2 0 0 8   -   w u r d e   n a c h g e w i e s e n ,   d a s s   z u k u n f t s w e i s e n d e   B e i t r a g e   z w a r   s o w o h l   a u s   d e m   B e r e i c h   d e r   R e g i o n a l w i s s e n s c h a f t   a l s   a u c h   a u s   d e m   d e r   R e g i o n a l s t u d i e n   k o m m e n ,   a b e r   d i e   ' K o n v e r g e n z '   d e r   A n s a t z e   d e r   R e g i o n a l w i s s e n s c h a f t   u n d   d e r   R e g i o n a l s t u d i e n   w e i t e r h i n   e i n   T r u g b i l d   b l e i b t .   C l u s t e r   B r a n c h e n c l u s t e r   I n d u s t r i e s t a n d o r t   B i b l i o m e t r i e   C r u z   S .   C .   S .   y   T e i x e i r a   A .   A .   C .   L a   e v o l u c i o n   d e   l a   l i t e r a t u r a   d e   a g l o m e r a c i o n e s :   u n   a n a l i s i s   s o b r e   e l   d e b a t e   d e   e s t u d i o s   r e g i o n a l e s   y   c i e n c i a   r e g i o n a l ,   R e g i o n a l   S t u d i e s .   A u n q u e   l a   c r e c i e n t e   i m p o r t a n c i a   d e   l a   l i t e r a t u r a   s o b r e   a g l o m e r a c i o n e s   s e   c o n o c e   d e   m o d o   i n t u i t i v o ,   t o d a v i a   e s   n e c e s a r i o   u n   e s t u d i o   e m p i r i c o   s o b r e   s u   m a g n i t u d   p r e c i s a   y   e v o l u c i o n .   E n   b a s e   a   d o s   e j e r c i c i o s   b i b l i o m e t r i c o s   c o m p l e m e n t a r i o s   -   q u e   c o n t i e n e n   5 0 . 0 0 0   c i t a c i o n e s   y   c a s i   3 0 0 0   r e s u m e n e s ,   y   q u e   v a n   d e s d e   1 9 6 2   a   2 0 0 8   -   s e   d e m o s t r o   q u e   a u n q u e   l a s   c o n t r i b u c i o n e s   i m p o r t a n t e s   p r o c e d e n   t a n t o   d e   a r e a s   d e   e s t u d i o s   c i e n t i f i c o s   c o m o   r e g i o n a l e s ,   l a   ' c o n v e r g e n c i a '   e n t r e   l o s   e n f o q u e s   d e   c i e n c i a   r e g i o n a l   y   e s t u d i o s   r e g i o n a l e s   e s   t o d a v i a   u n a   q u i m e r a .   A g l o m e r a c i o n e s   A g l o m e r a c i o n e s   i n d u s t r i a l e s   U b i c a c i o n   i n d u s t r i a l   B i b l i o m e t r i a . 	 [ C r u z ,   S a r a   C .   S . ;   T e i x e i r a ,   A u r o r a   A .   C . ]   U n i v   P o r t o ,   F a c   E c o n ,   C E F   U P ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l ;   [ T e i x e i r a ,   A u r o r a   A .   C . ]   I N E S C   P o r t o ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l 	 C r u z ,   S C S   ( r e p r i n t   a u t h o r ) ,   U n i v   P o r t o ,   F a c   E c o n ,   C E F   U P ,   R   D r   R o b e r t o   F r i a s ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l . 	 s c r u z @ f e p . u p . p t ;   a t e i x e i r a @ f e p . u p . p t 	 T e i x e i r a ,   A u r o r a / B - 5 8 5 9 - 2 0 0 9 ;   n i p e ,   c e f / A - 4 2 1 8 - 2 0 1 0 	 T e i x e i r a ,   A u r o r a / 0 0 0 0 - 0 0 0 2 - 3 1 9 1 - 5 2 1 7 ;   	 	 	 A L M O D O V A R   J ,   2 0 0 9 ,   3 2 5   F E P   U   P O R T   D E P   E ;   A m i n   A ,   1 9 9 9 ,   I N T   J   U R B A N   R E G I O N A L ,   V 2 3 ,   P 3 6 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 2 4 2 7 . 0 0 2 0 1 ;   A M I N   A ,   1 9 9 2 ,   I N T   J   U R B A N   R E G I O N A L ,   V 1 6 ,   P 5 7 1 ;   A m i n   A . ,   1 9 9 4 ,   G L O B A L I S A T I O N   I   R E G I ;   A n s e l i n   L . ,   1 9 8 8 ,   S P A T I A L   E C O N O M E T R I C S ;   A s h e i m   B . ,   1 9 9 6 ,   E U R O P E A N   P L A N N I N G   S T ,   V 4 ,   P 3 7 9 ;   A s h e i m   B . T . ,   2 0 0 0 ,   O X F O R D   H D B   E C   G E O G R A ,   P 4 1 3 ;   A U D R E T S C H   D ,   1 9 9 5 ,   1 1 6 1   C E P R ;   A u d r e t s c h   D B ,   1 9 9 6 ,   A M   E C O N   R E V ,   V 8 6 ,   P 6 3 0 ;   A u d r e t s c h   D .   B . ,   2 0 0 6 ,   E N T R E P R E N E U R S H I P   I N N ;   A y d a l o t   P . ,   1 9 8 8 ,   H I G H   T E C H N O L O G Y   I N D ,   P 1 ;   A y d a l o t   P ,   1 9 8 6 ,   M I L I E U X   I N N O V A T E U R S ;   B a p t i s t a   R ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 5 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 6 5 - 1 ;   B a r n e s   T ,   1 9 9 8 ,   G E O G R   Z ,   V 8 6 ,   P 9 4 ;   B A R N E S   T ,   2 0 0 3 ,   P L E N   S E S S   C A N   R E G   S C ;   B a t h e l t   H ,   2 0 0 4 ,   P R O G   H U M   G E O G ,   V 2 8 ,   P 3 1 ,   D O I   1 0 . 1 1 9 1 / 0 3 0 9 1 3 2 5 0 4 p h 4 6 9 o a ;   B e c a t t i n i   G ,   1 9 9 0 ,   I N D   D I S T R I C T S   I N T E R F ,   P 3 7 ;   B e c a t t i n i   G . ,   1 9 7 9 ,   E C   P O L I T I C A   I N D ,   V 1 ,   P 1 ;   B e c a t t i n i   G . ,   1 9 8 9 ,   S M A L L   F I R M S   I N D   D I S T ,   P 1 2 3 ;   B E R L I A N T   M ,   1 9 9 4 ,   R E G   S C I   U R B A N   E C O N ,   V 2 4 ,   P 6 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 0 4 6 2 ( 9 4 ) 0 2 0 5 1 - 5 ;   B i r k i n s h a w   J ,   2 0 0 0 ,   J   I N T   B U S   S T U D ,   V 3 1 ,   P 1 4 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 8 9 3 ;   B i r k i n s h a w   J ,   1 9 9 8 ,   A C A D   M A N A G E   R E V ,   V 2 3 ,   P 7 7 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 0 6 2 ;   B o r d o n s   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 0 4 0 7 8 7 6 ;   B o s c h m a   R A ,   1 9 9 9 ,   J   E V O L   E C O N ,   V 9 ,   P 4 1 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 9 1 0 0 5 0 0 8 9 ;   B o s c h m a   R A ,   2 0 0 6 ,   J   E C O N   G E O G R ,   V 6 ,   P 2 7 3 ,   D O I   1 0 . 1 0 9 3 / j e g / l b i 0 2 2 ;   B R E S C H I   S ,   1 9 9 5 ,   R E G   I N N   S Y S T   R E G   N E T ;   B r e s c h i   S . ,   2 0 0 1 ,   I N D   C O R P   C H A N G E ,   V 1 0 ,   P 9 7 5 ,   D O I   D O I   1 0 . 1 0 9 3 / I C C / 1 0 . 4 . 9 7 5 ;   B r e s c h i   S . ,   2 0 0 1 ,   I N D   C O R P   C H A N G E ,   V 1 0 ,   P 8 1 7 ,   D O I   1 0 . 1 0 9 3 / i c c / 1 0 . 4 . 8 1 7 ;   B r e s n a h a n   T i m o t h y ,   2 0 0 1 ,   I N D   C O R P   C H A N G E ,   V 1 0 ,   P 8 3 5 ,   D O I   D O I   1 0 . 1 0 9 3 / I C C / 1 0 . 4 . 8 3 5 ;   B R U S C O   S ,   1 9 8 2 ,   C A M B R I D G E   J   E C O N ,   V 6 ,   P 1 6 7 ;   C a m a g n i   R . ,   1 9 9 1 ,   I N N O V A T I O N   N E T W O R K S ,   P 1 ;   C A M A G N I   R . ,   1 9 9 1 ,   I N N O V A T I O N   N E T W O R K S ;   C a m a g n i   R P ,   1 9 9 5 ,   P A P   R E G   S C I ,   V 7 4 ,   P 3 1 7 ;   C a m p b e l l   P . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 5 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 8 . C U R R Y ;   C a n i e l s   M C J ,   2 0 0 5 ,   C A M B R I D G E   J   E C O N ,   V 2 9 ,   P 4 9 7 ,   D O I   1 0 . 1 0 9 3 / c j e / b e i 0 1 8 ;   C H E S H I R E   P ,   2 0 0 4 ,   I N T   L I B   C R I T I C A L   W R I ,   V 1 8 2 ;   C H E S H I R E   P ,   1 9 9 1 ,   I N T   L I B   C R I T I C A L   W R I ,   V 1 4 ;   C H R I S T A L L E R W ,   1 9 3 3 ,   C E N T R A L   P L A C E S   S O   G E ;   * C O M M   E U R   C O M M ,   2 0 0 8 ,   S E C 2 0 0 8 2 6 3 7   C O M M   E U R ;   C o o k e   P ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 4 7 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 2 5 - 5 ;   C o o k e   P ,   1 9 9 8 ,   E N V I R O N   P L A N N   A ,   V 3 0 ,   P 1 5 6 3 ,   D O I   1 0 . 1 0 6 8 / a 3 0 1 5 6 3 ;   C o o k e   P . ,   1 9 9 8 ,   A S S   E C   F I R M S   R E G I O N S ;   C o o k e   P . ,   2 0 0 1 ,   I N D   C O R P   C H A N G E ,   V 1 0 ,   P 9 4 5 ,   D O I   D O I   1 0 . 1 0 9 3 / I C C / 1 0 . 4 . 9 4 5 ;   C Z A M A N S K I   S ,   1 9 7 9 ,   U R B A N   S T U D ,   V 1 6 ,   P 6 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 7 9 2 0 0 8 0 0 5 1 ;   D a h l   M . ,   2 0 0 3 ,   0 3 0 1   D R U I D ;   D E B R E S S O N   C ,   1 9 9 6 ,   E C   I N T E R D E P E N D E N C E   I ,   P 1 4 9 ;   D I C K E N   P ,   1 9 7 6 ,   R E G   S T U D ,   V 1 0 ,   P 4 0 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 9 5 2 3 7 6 0 0 1 8 5 4 3 1 ;   D i c k e n   P ,   2 0 0 7 ,   G L O B A L   S H I F T   R E S H A P I ;   D i c k e n   P e t e r ,   1 9 9 8 ,   G L O B A L   S H I F T   T R A N S F O ;   D O E R I N G E R   P B ,   1 9 9 5 ,   E C O N   D E V   Q ,   V 9 ,   P 2 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 2 4 9 5 0 0 9 0 0 3 0 4 ;   D o r i n g   T ,   2 0 0 6 ,   R E G   S T U D ,   V 4 0 ,   P 3 7 5 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 6 0 0 6 3 2 7 3 9 ;   D u n n i n g   J . H . ,   1 9 8 1 ,   I N T   P R O D U C T I O N   M U L T I ;   E l l i s o n   G ,   1 9 9 7 ,   J   P O L I T   E C O N ,   V 1 0 5 ,   P 8 8 9 ,   D O I   1 0 . 1 0 8 6 / 2 6 2 0 9 8 ;   E t z k o w i t z   H ,   2 0 0 3 ,   S O C   S C I   I N F O R M ,   V 4 2 ,   P 2 9 3 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 4 0 3 0 4 2 3 0 0 2 ;   F E L D M A N   M ,   2 0 0 0 ,   O X F O R D   H D B   E C   G E O G R A ,   p C H 1 9 ;   F e s e r   E J ,   2 0 0 0 ,   R E G   S T U D ,   V 3 4 ,   P 1 ;   F I R N   J R ,   1 9 7 5 ,   E N V I R O N   P L A N N   A ,   V 7 ,   P 3 9 3 ,   D O I   1 0 . 1 0 6 8 / a 0 7 0 3 9 3 ;   F o t h e r g i l l   S . ,   1 9 8 2 ,   U N E Q U A L   G R O W T H   U R B A N ;   F u j i t a   M ,   1 9 9 6 ,   J   J P N   I N T   E C O N ,   V 1 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 6 / j j i e . 1 9 9 6 . 0 0 2 1 ;   F u j i t a   M ,   2 0 0 5 ,   P A P   R E G   S C I ,   V 8 4 ,   P 3 7 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 3 5 - 5 9 5 7 . 2 0 0 5 . 0 0 0 2 1 . x ;   F u j i t a   M ,   2 0 0 4 ,   P A P   R E G   S C I ,   V 8 3 ,   P 1 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 1 1 0 - 0 0 3 - 0 1 8 0 - 0 ;   F U J I T A   M . ,   2 0 0 2 ,   E C   A G G L O M E R A T I O N   C I T ;   F U J I T A   M ,   2 0 0 5 ,   I N T   L I B   C R I T I C A L   W R I ,   V 1 8 8 ;   F u j i t a   M . ,   2 0 0 0 ,   S P A T I A L   E C   C I T I E S   R E ;   G o r d o n   I R ,   2 0 0 0 ,   U R B A N   S T U D ,   V 3 7 ,   P 5 1 3 ;   G O U L D   P R ,   1 9 6 3 ,   A N N   A S S O C   A M   G E O G R ,   V 5 3 ,   P 2 9 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 3 0 6 . 1 9 6 3 . t b 0 0 4 5 0 . x ;   G r a b h e r   G . ,   1 9 9 3 ,   E M B E D D E D   F I R M   S O C I O E ;   G R A N O V E T T E R   M ,   1 9 8 5 ,   A M   J   S O C I O L ,   V 9 1 ,   P 4 8 1 ,   D O I   1 0 . 1 0 8 6 / 2 2 8 3 1 1 ;   G R A N O V E T T E R   M S ,   1 9 7 3 ,   A M   J   S O C I O L ,   V 7 8 ,   P 1 3 6 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 5 4 6 9 ;   G R E E N H U T   M L ,   1 9 9 5 ,   I N T   L I B   C R I T I C A L   W R I ,   V 4 2 ;   H A L L   P e t e r ,   1 9 8 6 ,   G O V E R N I N G   E C   P O L I T I C ;   H a l l   P .   A . ,   2 0 0 1 ,   V A R I E T I E S   C A P I T A L I S M ;   H A R R I S   R I D ,   1 9 8 8 ,   R E G   S T U D ,   V 2 2 ,   P 3 6 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 8 8 1 2 3 3 1 3 4 5 0 5 0 ;   H E N D E R S O N   J ,   2 0 0 5 ,   I N T   L I B   C R I T I C A L   W R I ,   V 1 8 4 ;   H E R T O G   P ,   1 9 9 9 ,   B O O S T I N G   I N N O V A T I O N ,   P 1 9 3 ;   H i r s c h m a n n   A . O ,   1 9 5 8 ,   S T R A T E G Y   E C   D E V ;   H y m e r   S . ,   1 9 6 0 ,   I N T   O P E R A T I O N S   N A T L ;   I s a k s e n   A . ,   2 0 0 1 ,   C A N A D I A N   J   R E G I O N A L ,   V 1 ,   P 1 0 1 ;   I s a r d   W ,   1 9 5 6 ,   L O C A T I O N   S P A C E   E C ;   I s a r d   W . ,   1 9 6 0 ,   M E T H O D S   R E G I O N A L   S C I ;   J A F F E   A B ,   1 9 9 3 ,   Q   J   E C O N ,   V 1 0 8 ,   P 5 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 8 4 0 1 ;   J O V A N O V I C   M ,   2 0 0 7 ,   I N T   L I B   C R I T I C A L   W R I ,   V 2 1 2 ;   K a l a i t z i d a k i s   P ,   2 0 0 3 ,   J   E U R   E C O N   A S S O C ,   V 1 ,   P 1 3 4 6 ,   D O I   1 0 . 1 1 6 2 / 1 5 4 2 4 7 6 0 3 3 2 2 7 5 2 5 6 6 ;   K e e b l e   D . E . ,   1 9 7 6 ,   I N D   L O C A T I O N   P L A N N I N ;   K o d r z y c k i   Y . ,   2 0 0 6 ,   C O N T R I B U T I O N S   E C   A N A ,   V 5 ;   K R U G M A N   P ,   1 9 9 1 ,   J   P O L I T   E C O N ,   V 9 9 ,   P 4 8 3 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 7 6 3 ;   K r u g m a n   P ,   1 9 9 6 ,   E U R   E C O N   R E V ,   V 4 0 ,   P 9 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 4 - 2 9 2 1 ( 9 5 ) 0 0 1 0 4 - 2 ;   K r u g m a n   P . ,   1 9 9 3 ,   G E O G R A P H Y   T R A D E ;   L A T H A M   W R ,   1 9 7 6 ,   J   R E G I O N A L   S C I ,   V 1 6 ,   P 4 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 7 8 7 . 1 9 7 6 . t b 0 0 9 4 6 . x ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 6 ;   L o s c h   A . ,   1 9 4 0 ,   E C   L O C A T I O N ;   L u n d v a l l   B . - A ,   1 9 9 2 ,   N A T L   S Y S T E M S   I N N O V A T ;   M a l e c k i   E . J . ,   1 9 9 1 ,   T E C H N O L O G Y   E C   D E V   D Y ;   M a l m b e r g   A ,   2 0 0 2 ,   E N V I R O N   P L A N N   A ,   V 3 4 ,   P 4 2 9 ,   D O I   1 0 . 1 0 6 8 / a 3 4 5 7 ;   M a r k u s e n   A ,   2 0 0 3 ,   R E G   S T U D ,   V 3 7 ,   P 7 0 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 3 2 0 0 0 1 0 8 7 9 6 ;   M a r k u s e n   A ,   1 9 9 6 ,   E C O N   G E O G R ,   V 7 2 ,   P 2 9 3 ,   D O I   1 0 . 2 3 0 7 / 1 4 4 4 0 2 ;   M a r s h a l l   A . ,   1 8 9 0 ,   P R I N C I P L E S   E C ;   M a r t i n   R ,   2 0 0 3 ,   J   E C O N   G E O G R ,   V 3 ,   P 5 ,   D O I   1 0 . 1 0 9 3 / j e g / 3 . 1 . 5 ;   M a r t i n   R . ,   1 9 9 9 ,   C A M B   J   E C O N ,   V 2 3 ,   P 6 3 ;   M a s k e l l   P ,   2 0 0 4 ,   U R B A N   S T U D ,   V 4 1 ,   P 9 9 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 0 4 1 0 0 0 1 6 7 5 8 7 8 ;   K e b i r   L . ,   2 0 0 5 ,   0 5 0 9   D R U I D ;   M a s k e l l   P . ,   2 0 0 1 ,   I N D   C O R P   C H A N G E ,   V 1 0 ,   P 9 1 9 ;   M a s s e y   D . ,   1 9 8 4 ,   S P A T I A L   D I V I S I O N S   L A ;   M c C a n n   P ,   2 0 0 3 ,   R E G   S T U D ,   V 3 7 ,   P 6 4 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 3 2 0 0 0 1 0 8 7 4 1 ;   M c c a n n   P ,   2 0 0 7 ,   R E G   S T U D ,   V 4 1 ,   P 1 2 0 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 7 0 1 6 2 4 4 9 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o r g a n   K ,   1 9 9 7 ,   R E G   S T U D ,   V 3 1 ,   P 4 9 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 9 7 5 0 1 3 2 2 8 9 ;   M o s e s   L . ,   1 9 5 8 ,   Q   J   E C O N ,   V 7 2 ,   P 2 5 9 ;   M o u l a e r t   F ,   2 0 0 5 ,   E U R   U R B A N   R E G   S T U D ,   V 1 2 ,   P 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 9 7 7 6 4 0 5 0 4 8 5 0 0 ;   M o u l a e r t   F ,   2 0 0 3 ,   R E G   S T U D ,   V 3 7 ,   P 2 8 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 3 2 0 0 0 0 6 5 4 4 2 ;   M y r d a l   G . ,   1 9 5 7 ,   E C   T H E O R Y   U N D E R   D E V ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N i j k a m p   P . ,   1 9 7 9 ,   M U L T I D I M E N S I O N A L   S P A ;   O a k e y   R ,   2 0 0 1 ,   R E G   S T U D ,   V 3 5 ,   P 4 0 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 1 2 0 0 5 8 4 1 5 ;   O a k e y   R . P . ,   1 9 8 5 ,   S I L I C O N   L A N D S C A P E S ,   P 9 4 ;   O t t a v i a n o   G I P ,   1 9 9 8 ,   W O R L D   E C O N ,   V 2 1 ,   P 7 0 7 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 7 0 1 . 0 0 1 6 0 ;   P a n i c c i a   I v a n a ,   2 0 0 2 ,   I N D   D I S T R I C T S   E V O L U T ;   P a r t r i d g e   M .   D . ,   2 0 0 6 ,   R E V   R E G   S T U D ,   V 3 6 ,   P 1 ;   P e r r o u x   F ,   1 9 5 0 ,   Q   J   E C O N ,   V 6 4 ,   P 8 9 ,   D O I   1 0 . 2 3 0 7 / 1 8 8 1 9 6 0 ;   P i o r e   M . ,   1 9 8 4 ,   2   I N D   D I V I D E ;   P O L E S E   M ,   1 9 9 5 ,   I N T   R E G I O N A L   S C I   R E V ,   V 1 7 ,   P 3 1 1 ;   P O L E S E   M ,   2 0 0 3 ,   C A N A D I A N   J   R E G I O N A L ,   V 2 6 ,   P 3 1 ;   P o l e s e   M . ,   1 9 9 9 ,   C A N A D I A N   J   R E G I O N A L ,   V 2 2 ,   P 2 9 9 ;   P o r t   F K ,   1 9 9 8 ,   S E M I N   D I A L Y S I S ,   V 1 1 ,   P 7 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 5 - 1 3 9 X . 1 9 9 8 . t b 0 0 3 0 5 . x ;   P o r t e r   M . E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V A N T A G ;   P o r t e r   M .   E . ,   1 9 9 0 ,   C O M P E T I T I V E   A D V A N T A G ;   P y k e   F ,   1 9 9 2 ,   I N D   D I S T R I C T S   L O C A L ;   R E I C H   R B ,   1 9 9 0 ,   T L S - T I M E S   L I T   S U P P L ,   P 9 2 5 ;   R o e l a n d t   T .   J . ,   1 9 9 9 ,   B O O S T I N G   I N N O V A T I O N ,   P 9 ;   R o s e n f e l d   S ,   2 0 0 5 ,   J   N E W   B U S I N E S S   I D E A S ,   V 3 ,   P 4 ;   S a n z - M e n e n d e z   L ,   2 0 0 5 ,   R E G   S T U D ,   V 3 9 ,   P 9 3 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 5 0 0 2 8 9 9 4 5 ;   S a x e n i a n   A L ,   1 9 9 4 ,   R E G I O N A L   A D V A N T A G E   C ;   S c h u m p e t e r   J . A . ,   1 9 4 2 ,   C A P I T A L I S M   S O C I A L I S M ;   S c o t t   A ,   1 9 8 8 ,   N E W   I N D   S P A C E S   F L E X I ;   S c o t t   A J ,   2 0 0 0 ,   C A M B R I D G E   J   E C O N ,   V 2 4 ,   P 4 8 3 ,   D O I   1 0 . 1 0 9 3 / c j e / 2 4 . 4 . 4 8 3 ;   S i l v a   E s t e r   G ,   2 0 0 8 ,   S t r u c t u r a l   C h a n g e   a n d   E c o n o m i c   D y n a m i c s ,   V 1 9 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . s t r u e c o . 2 0 0 8 . 0 2 . 0 0 1 ;   S I L V A   J ,   2 0 0 0 ,   J   E C O N   S T U D ,   V 2 7 ,   P 3 2 6 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 8 0 0 1 0 3 4 1 8 3 5 ;   S i l v a   S T ,   2 0 0 9 ,   J   E V O L   E C O N ,   V 1 9 ,   P 6 0 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 9 1 - 0 0 8 - 0 1 2 1 - 9 ;   S i m m i e   J ,   2 0 0 5 ,   R E G   S T U D ,   V 3 9 ,   P 7 8 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 5 0 0 2 1 3 6 7 1 ;   S i m m i e   J ,   2 0 0 4 ,   U R B A N   S T U D ,   V 4 1 ,   P 1 0 9 5 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 0 4 1 0 0 0 1 6 7 5 8 2 3 ;   S t e i n l e   C ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 8 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 5 1 - 2 ;   S t o r e y   D .   J . ,   1 9 8 2 ,   E N T R E P R E N E U R S H I P   N E W ;   S t o r p e r   M . ,   1 9 9 5 ,   E U R O P E A N   U R B A N   R E G I O ,   V 2 ,   P 1 9 1 ,   D O I   D O I   1 0 . 1 1 7 7 / 0 9 6 9 7 7 6 4 9 5 0 0 2 0 0 3 0 1 ;   S T O R P E R   M . ,   1 9 8 9 ,   P O W E R   G E O G R A P H Y   T E R R ,   P 2 1 ;   S t o r p e r   M . ,   1 9 8 9 ,   C A P I T A L I S T   I M P E R A T I V ;   S T O R P E R   M . ,   1 9 9 7 ,   R E G I O N A L   W O R L D   T E R R I ;   S W A N N   P ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 3 9 ;   T a l l m a n   S ,   2 0 0 4 ,   A C A D   M A N A G E   R E V ,   V 2 9 ,   P 2 5 8 ;   V A N K L I N ,   2 0 0 1 ,   T I J D S C H R   E C O N   S O C   G E ,   V 9 2 ,   P 4 4 9 ;   V E R N O N   R ,   1 9 6 6 ,   Q   J   E C O N ,   V 8 0 ,   P 1 9 0 ,   D O I   1 0 . 2 3 0 7 / 1 8 8 0 6 8 9 ;   V O N T H U N E N   J H ,   1 8 2 6 ,   I S O L I E R T E   S T A A T   B E   1 ;   W E B E R   A . ,   1 9 0 9 ,   S T A N D O R T   I N D ;   W I L L I A M S O N   O E ,   1 9 7 9 ,   J   L A W   E C O N ,   V 2 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 8 6 / 4 6 6 9 4 2 ;   W o l f e   D A ,   2 0 0 4 ,   U R B A N   S T U D ,   V 4 1 ,   P 1 0 7 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 0 4 1 0 0 0 1 6 7 5 8 3 2 ;   Y O U N G   S ,   1 9 9 4 ,   R E G   S T U D ,   V 2 8 ,   P 6 5 7 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 9 4 1 2 3 3 1 3 4 8 5 6 6 ;   Y o u n g   S . ,   2 0 0 4 ,   M U L T I N A T I O N A L S   P U B L I ;   Z a r a t e   V ,   2 0 0 7 ,   R E V   M E D   C H I L E ,   V 1 3 5 ,   P 1 4 7 4 ,   D O I   [ / S 0 0 3 4 - 9 8 8 7 2 0 0 7 0 0 1 1 0 0 0 1 6 ,   1 0 . 4 0 6 7 / S 0 0 3 4 - 9 8 8 7 2 0 0 7 0 0 1 1 0 0 0 1 6 ] 	 1 5 7 	 2 1 	 2 1 	 5 	 4 9 	 R O U T L E D G E   J O U R N A L S ,   T A Y L O R   &   F R A N C I S   L T D 	 A B I N G D O N 	 4   P A R K   S Q U A R E ,   M I L T O N   P A R K ,   A B I N G D O N   O X 1 4   4 R N ,   O X F O R D S H I R E ,   E N G L A N D 	 0 0 3 4 - 3 4 0 4 	 	 	 R E G   S T U D 	 R e g .   S t u d . 	 	 2 0 1 0 	 4 4 	 9 	 	 	 	 	 1 2 6 3 	 1 2 8 8 	 P I I   9 1 7 2 3 8 9 1 6 	 1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 9 0 3 2 3 4 6 7 0 	 	 2 6 	 E c o n o m i c s ;   E n v i r o n m e n t a l   S t u d i e s ;   G e o g r a p h y 	 B u s i n e s s   &   E c o n o m i c s ;   E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y ;   G e o g r a p h y 	 6 6 9 A D 	 W O S : 0 0 0 2 8 3 3 1 7 8 0 0 0 1 0 	 	 
 
 J 	 B u t l e r ,   L ;   M c A l l i s t e r ,   I 	 	 	 	 B u t l e r ,   L i n d a ;   M c A l l i s t e r ,   I a n 	 	 	 M e t r i c s   o r   P e e r   R e v i e w ?   E v a l u a t i n g   t h e   2 0 0 1   U K   R e s e a r c h   A s s e s s m e n t   E x e r c i s e   i n   P o l i t i c a l   S c i e n c e 	 P O L I T I C A L   S T U D I E S   R E V I E W 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 E v a l u a t i o n s   o f   r e s e a r c h   q u a l i t y   i n   u n i v e r s i t i e s   a r e   n o w   w i d e l y   u s e d   i n   t h e   a d v a n c e d   e c o n o m i e s .   T h e   U K ' s   R e s e a r c h   A s s e s s m e n t   E x e r c i s e   ( R A E )   i s   t h e   m o s t   h i g h l y   d e v e l o p e d   o f   t h e s e   r e s e a r c h   e v a l u a t i o n s .   T h i s   a r t i c l e   u s e s   t h e   r e s u l t s   f r o m   t h e   2 0 0 1   R A E   i n   p o l i t i c a l   s c i e n c e   t o   a s s e s s   t h e   u t i l i t y   o f   c i t a t i o n s   a s   a   m e a s u r e   o f   o u t c o m e ,   r e l a t i v e   t o   o t h e r   p o s s i b l e   i n d i c a t o r s .   T h e   d a t a   c o m e   f r o m   t h e   4 , 4 0 0   s u b m i s s i o n s   t o   t h e   R A E   p o l i t i c a l   s c i e n c e   p a n e l .   T h e   2 8 , 1 2 8   c i t a t i o n s   a n a l y s e d   r e l a t e   n o t   o n l y   t o   j o u r n a l   a r t i c l e s ,   b u t   t o   a l l   s u b m i t t e d   p u b l i c a t i o n s   -   i n c l u d i n g   a u t h o r e d   a n d   e d i t e d   b o o k s   a n d   b o o k   c h a p t e r s .   T h e   r e s u l t s   s h o w   t h a t   c i t a t i o n s   a r e   t h e   m o s t   i m p o r t a n t   p r e d i c t o r   o f   t h e   R A E   o u t c o m e ,   f o l l o w e d   b y   w h e t h e r   o r   n o t   a   d e p a r t m e n t   h a d   a   r e p r e s e n t a t i v e   o n   t h e   R A E   p a n e l .   T h e   r e s u l t s   h i g h l i g h t   t h e   n e e d   t o   d e v e l o p   r o b u s t   q u a n t i t a t i v e   i n d i c a t o r s   t o   e v a l u a t e   r e s e a r c h   q u a l i t y   w h i c h   w o u l d   o b v i a t e   t h e   n e e d   f o r   a   p e e r   e v a l u a t i o n   b a s e d   o n   a   l a r g e   c o m m i t t e e .   B i b l i o m e t r i c s   s h o u l d   f o r m   t h e   m a i n   c o m p o n e n t   o f   s u c h   a   p o r t f o l i o   o f   q u a n t i t a t i v e   i n d i c a t o r s . 	 [ B u t l e r ,   L i n d a ]   A u s t r a l i a n   N a t l   U n i v ,   R e s   S c h   S o c i a l   S c i ,   C a n b e r r a ,   A C T   0 2 0 0 ,   A u s t r a l i a 	 B u t l e r ,   L   ( r e p r i n t   a u t h o r ) ,   A u s t r a l i a n   N a t l   U n i v ,   R e s   S c h   S o c i a l   S c i ,   G P O   B o x   4 ,   C a n b e r r a ,   A C T   0 2 0 0 ,   A u s t r a l i a . 	 l i n d a . b u t l e r @ a n u . e d u . a u ;   i a n . m c a l l i s t e r @ a n u . e d u . a u 	 	 	 	 	 B u t l e r   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 2 4 - 1 ;   C o u n c i l   f o r   t h e   H u m a n i t i e s   A r t s   a n d   S o c i a l   S c i e n c e s   ( C H A S S ) ,   2 0 0 5 ,   M E A S   Q U A L   I M P   P U B L   F ;   * C H A S S ,   2 0 0 6 ,   C H A S S   B I B L   P R O J   P O L ;   D E S T ,   2 0 0 6 ,   R E S   Q U A L   F R A M   A S S   Q U ;   * D F E S ,   2 0 0 6 ,   D F E S   C O N S   R E F   H I G H   E ;   * D F E S ,   2 0 0 6 ,   R E F   R E S   A S S   F U N D ;   * D F E S ,   2 0 0 6 ,   D F E S   R E F   H I G H   E D   R E S ;   G e u n a   A ,   2 0 0 3 ,   M I N E R V A ,   V 4 1 ,   P 2 7 7 ,   D O I   1 0 . 1 0 2 3 / B : M I N E . 0 0 0 0 0 0 5 1 5 5 . 7 0 8 7 0 . b d ;   H I R S C H   J ,   2 0 0 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ;   J a c k m a n   R W ,   1 9 9 6 ,   P S ,   V 2 9 ,   P 1 5 5 ,   D O I   1 0 . 2 3 0 7 / 4 2 0 6 9 3 ;   L E S T E R   J P ,   1 9 9 0 ,   P S ,   V 2 3 ,   P 4 4 5 ,   D O I   1 0 . 2 3 0 7 / 4 1 9 8 0 5 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C . ,   2 0 0 3 ,   J   D O C ,   V 5 6 ,   P 7 0 9 ;   * R A E ,   2 0 0 1 ,   P A N   C R I T   W O R K   M E T H   3 ;   * R A E ,   2 0 0 1 ,   R E P   D I S C   P A N   3 9   P O L 	 1 5 	 2 1 	 2 1 	 3 	 1 4 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 4 7 8 - 9 2 9 9 	 1 4 7 8 - 9 3 0 2 	 	 P O L I T   S T U D   R E V 	 P o l i t .   S t u d .   R e v . 	 J A N 	 2 0 0 9 	 7 	 1 	 	 	 	 	 3 	 1 7 	 	 1 0 . 1 1 1 1 / j . 1 4 7 8 - 9 2 9 9 . 2 0 0 8 . 0 0 1 6 7 . x 	 	 1 5 	 P o l i t i c a l   S c i e n c e 	 G o v e r n m e n t   &   L a w 	 V 1 5 N G 	 W O S : 0 0 0 2 0 7 8 0 8 1 0 0 0 0 2 	 	 
 
 J 	 S m i t h ,   D R 	 	 	 	 S m i t h ,   D e r e k   R . 	 	 	 A   3 0 - Y e a r   C i t a t i o n   A n a l y s i s   o f   B i b l i o m e t r i c   T r e n d s   a t   t h e   A r c h i v e s   o f   E n v i r o n m e n t a l   H e a l t h ,   1 9 7 5 - 2 0 0 4 	 A R C H I V E S   O F   E N V I R O N M E N T A L   &   O C C U P A T I O N A L   H E A L T H 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   c i t a t i o n   t r e n d s ;   i m p a c t   f a c t o r ;   o c c u p a t i o n a l   h e a l t h ;   s c i e n t i f i c   j o u r n a l 	 J O U R N A L   I M P A C T - F A C T O R ;   R E S P I R A T O R Y   S Y S T E M   M O R T A L I T Y ;   N A T U R A L   B A C K G R O U N D - R A D I A T I O N ;   H U M A N - F E T A L   D E V E L O P M E N T ;   D O S E   E Q U I V A L E N T   R A T E ;   P A S T   1 0   Y E A R S ;   O C C U P A T I O N A L - M E D I C I N E ;   T R O P I C A L - M E D I C I N E ;   A I R - P O L L U T I O N ;   P S Y C H O L O G Y   J O U R N A L S 	 T h i s   a r t i c l e   d e s c r i b e s   a   3 0 - y e a r   c i t a t i o n   a n a l y s i s   o f   t h e   A r c h i v e s   o f   E n v i r o n m e n t a l   H e a l t h   ( A E H ) ,   f r o m   t h e   e a r l i e s t   a v a i l a b l e   d a t a   i n   1 9 7 5 ,   t o   2 0 0 4 ,   w h e n   i t   b e c a m e   t h e   A r c h i v e s   o f   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h   ( A E O H ) .   L o n g i t u d i n a l   t r e n d s   w e r e   e x a m i n e d   r e g a r d i n g   t h e   n u m b e r   o f   i t e m s   p u b l i s h e d ,   t h e   n u m b e r   o f   c i t a t i o n s   r e c e i v e d ,   t h e   i m m e d i a c y   i n d e x ,   a n d   t h e   j o u r n a l ' s   i m p a c t   f a c t o r .   A   l i s t   o f   t h e   5   m o s t   h i g h l y   c i t e d   a r t i c l e s   w a s   a l s o   e s t a b l i s h e d ,   i n c l u d i n g   c i t a t i o n   f r e q u e n c y   a n d   c i t a t i o n   l a g   t i m e s .   O v e r a l l ,   t h i s   s t u d y   d e m o n s t r a t e s   t h a t   c i t a t i o n   a n a l y s i s   c a n   p r o v i d e   a n   i n t e r e s t i n g   l o o k   a t   t h e   d e v e l o p m e n t   o f   a   j o u r n a l   o v e r   t i m e .   T h e   e x a m i n a t i o n   o f   w h a t   a r t i c l e s ,   t h e m e s ,   a n d   t o p i c s   w e r e   b e i n g   p u b l i s h e d ,   c i t e d ,   o r   i g n o r e d   a l s o   o f f e r s   a   u n i q u e   i n s i g h t   i n t o   t h e   d i r e c t i o n   o f   n o t   o n l y   1   p a r t i c u l a r   j o u r n a l ,   b u t   a l s o   t h e   d i s c i p l i n e   w i t h i n   w h i c h   i t   e x i s t s . 	 U n i v   N e w c a s t l e ,   F a c   H l t h ,   S c h   H l t h   S c i ,   W o r k C o v e r   N e w   S   W a l e s   R e s   C t r   E x c e l l e n c e ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a 	 S m i t h ,   D R   ( r e p r i n t   a u t h o r ) ,   U n i v   N e w c a s t l e ,   F a c   H l t h ,   S c h   H l t h   S c i ,   W o r k C o v e r   N e w   S   W a l e s   R e s   C t r   E x c e l l e n c e ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a . 	 d e r e k . s m i t h @ n e w c a s t l e . e d u . a u 	 S m i t h ,   D e r e k / F - 4 8 4 4 - 2 0 1 0 ;   	 S m i t h ,   D e r e k / 0 0 0 0 - 0 0 0 2 - 8 2 0 2 - 2 5 2 3 	 	 	 A d a i r   W .   C . ,   1 9 5 5 ,   A M   D O C ,   V 6 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 0 6 0 1 0 5 ;   A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A l l e n   E   S ,   1 9 2 9 ,   S c i e n c e ,   V 7 0 ,   P 5 9 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 7 0 . 1 8 2 5 . 5 9 2 ;   A S A I   I ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 3 ;   B a l t u s s e n   A ,   2 0 0 4 ,   I N T E N S   C A R E   M E D ,   V 3 0 ,   P 9 0 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 4 - 2 1 9 5 - 7 ;   B a l t u s s e n   A ,   2 0 0 4 ,   A N E S T H   A N A L G ,   V 9 8 ,   P 4 4 3 ,   D O I   1 0 . 1 2 1 3 / 0 1 . A N E . 0 0 0 0 0 9 6 1 8 5 . 1 3 4 7 4 . 0 A ;   B A R B I E R I   R L ,   1 9 8 6 ,   F E R T I L   S T E R I L ,   V 4 5 ,   P 8 9 2 ;   B a r e n d s e   W i l l i a m ,   2 0 0 7 ,   B i o m e d   D i g i t   L i b r ,   V 4 ,   P 3 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 4 - 3 ;   B e n i t e z - B r i b i e s c a   L ,   2 0 0 2 ,   A R C H   M E D   R E S ,   V 3 3 ,   P 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 8 8 - 4 4 0 9 ( 0 1 ) 0 0 3 7 3 - 3 ;   B e r n s t a m   E V ,   2 0 0 6 ,   J   A M   M E D   I N F O R M   A S S N ,   V 1 3 ,   P 9 6 ,   D O I   1 0 . 1 1 9 7 / j a m i a . M 1 9 0 9 ;   B O H A N N O N   R W ,   1 9 8 6 ,   P H Y S   T H E R ,   V 6 6 ,   P 5 4 0 ;   B o l d t   J ,   2 0 0 0 ,   A C T A   A N A E S T H   S C A N D ,   V 4 4 ,   P 8 4 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 0 . 4 4 0 7 1 0 . x ;   B O O R   M ,   1 9 8 2 ,   A M   P S Y C H O L ,   V 3 7 ,   P 9 7 5 ,   D O I   1 0 . 1 0 3 7 / / 0 0 0 3 - 0 6 6 X . 3 7 . 8 . 9 7 5 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B R E N N E N   P W ,   1 9 7 8 ,   B   M E D   L I B R   A S S O C ,   V 6 6 ,   P 2 4 ;   B r o d m a n   E ,   1 9 4 4 ,   B u l l   M e d   L i b r   A s s o c ,   V 3 2 ,   P 4 7 9 ;   B R O W N   L D ,   1 9 8 5 ,   J   A C C O U N T I N G   R E S ,   V 2 3 ,   P 8 4 ,   D O I   1 0 . 2 3 0 7 / 2 4 9 0 9 0 8 ;   B U F F A R D I   L C ,   1 9 8 1 ,   A M   P S Y C H O L ,   V 3 6 ,   P 1 4 5 3 ,   D O I   1 0 . 1 0 3 7 / / 0 0 0 3 - 0 6 6 X . 3 6 . 1 1 . 1 4 5 3 ;   B u r d o r f   A ,   2 0 0 7 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 3 ,   P 3 1 8 ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C h e w   M ,   2 0 0 7 ,   J   R O Y   S O C   M E D ,   V 1 0 0 ,   P 1 4 2 ,   D O I   1 0 . 1 2 5 8 / j r s m . 1 0 0 . 3 . 1 4 2 ;   C H O   Y J ,   1 9 7 7 ,   A M   J   V E T   R E S ,   V 3 8 ,   P 1 3 1 ;   C h u n g   K C ,   2 0 0 7 ,   P L A S T   R E C O N S T R   S U R G ,   V 1 2 0 ,   P 2 0 9 2 ,   D O I   1 0 . 1 0 9 7 / 0 1 . p r s . 0 0 0 0 2 9 6 0 4 8 . 3 8 5 7 4 . 1 3 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   D a l t o n   C   T ,   1 9 8 2 ,   P a   M e d ,   V 8 5 ,   P 1 4 ;   D a l z i e l   C F ,   1 9 3 7 ,   L I B R   Q U A R T ,   V 7 ,   P 3 5 4 ;   D a r m o n i   S J ,   2 0 0 0 ,   B   M E D   L I B R   A S S O C ,   V 8 8 ,   P 1 5 2 ;   D a r m o n i   S t e f a n   J ,   2 0 0 6 ,   B M C   M e d   I n f o r m   D e c i s   M a k ,   V 6 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 6 - 7 ;   D E L L O N   A L ,   1 9 9 2 ,   P L A S T   R E C O N S T R   S U R G ,   V 9 0 ,   P 7 1 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 5 3 4 - 1 9 9 2 1 0 0 0 0 - 0 0 0 2 8 ;   D I O D A T O   V ,   1 9 9 4 ,   D I C T   B I B L I O M E T R I C S ,   P 1 8 5 ;   D o n g   P e n g ,   2 0 0 5 ,   B i o m e d   D i g i t   L i b r ,   V 2 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 2 - 7 ;   D U B I N   D ,   1 9 9 3 ,   A R C H   D E R M A T O L ,   V 1 2 9 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 0 1 / a r c h d e r m . 1 2 9 . 9 . 1 1 2 1 ;   F a l a g a s   M E ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 2 4 - 5 ;   F a l a g a s   M E ,   2 0 0 8 ,   A M   J   M E D   S C I ,   V 3 3 5 ,   P 1 8 8 ,   D O I   1 0 . 1 0 9 7 / M A J . 0 b 0 1 3 e 3 1 8 1 4 5 a b b 9 ;   F a l a g a s   M E ,   2 0 0 6 ,   M A Y O   C L I N   P R O C ,   V 8 1 ,   P 1 4 0 1 ;   F A L C K   F ,   1 9 9 2 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 7 ,   P 1 4 3 ;   F a n   J C ,   2 0 0 8 ,   C L I N   E X P   O P H T H A L M O L ,   V 3 6 ,   P 5 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 9 0 7 1 . 2 0 0 8 . 0 1 6 7 4 . x ;   F a v a l o r o   E J ,   2 0 0 8 ,   S E M I N   T H R O M B   H E M O S T ,   V 3 4 ,   P 7 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 8 - 1 0 6 6 0 3 0 ;   F E L T O N   J   S ,   1 9 5 7 ,   I n d   M e d   S u r g ,   V 2 6 ,   P 2 6 0 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G A R F I E L D   E ,   1 9 7 6 ,   N A T U R E ,   V 2 6 4 ,   P 6 0 9 ,   D O I   1 0 . 1 0 3 8 / 2 6 4 6 0 9 a 0 ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G a r f i e l d   E ,   2 0 0 1 ,   C o r t e x ,   V 3 7 ,   P 5 7 5 ;   G a r f i e l d   E ,   1 9 9 9 ,   O C C U P   M E D - O X F O R D ,   V 4 9 ,   P 5 7 1 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / 4 9 . 8 . 5 7 1 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   2 0 0 5 ,   I N T   C   P E E R   R E V   B I O M ;   G a r f i e l d   E ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ,   P 6 ;   G a r f i e l d   E ,   1 9 7 2 ,   E S S A Y S   I N F O R M   S C I ,   V 1 ,   P 3 1 7 ;   G a r f i e l d   E . ,   1 9 7 7 ,   E S S A Y S   I N F O R M   S C I ,   V 3 ,   P 1 ;   G a r f i e l d   E ,   1 9 7 6 ,   E S S A Y S   I N F O R M   S C I ,   V 2 ,   P 5 5 6 ;   G A R F I E L D   E ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ,   P 1 ;   G e h a n n o   J F ,   2 0 0 7 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 3 ,   P 2 4 5 ;   G e h a n n o   J F ,   2 0 0 0 ,   O C C U P   E N V I R O N   M E D ,   V 5 7 ,   P 7 0 6 ,   D O I   1 0 . 1 1 3 6 / o e m . 5 7 . 1 0 . 7 0 6 ;   G e h a n n o   J F ,   1 9 9 8 ,   O C C U P   E N V I R O N   M E D ,   V 5 5 ,   P 5 6 2 ;   G E N T I L E   J M ,   1 9 8 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 0 ,   P 5 ;   G l o v e r   S W ,   2 0 0 4 ,   T R O P   M E D   I N T   H E A L T H ,   V 9 ,   P 1 3 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 5 6 . 2 0 0 4 . 0 1 3 3 1 . x ;   G o w r i s h a n k a r   J ,   1 9 9 9 ,   N A T U R E ,   V 4 0 1 ,   P 3 2 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 7 6 8 ;   G r e g o r y   J ,   1 9 3 7 ,   B u l l   M e d   L i b r   A s s o c ,   V 2 5 ,   P 1 7 2 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   G U I D O T T I   T L ,   H D B   O C C U P A T I O N A L   E N V ;   H e r s k o v i c   J o r g e   R ,   2 0 0 5 ,   A M I A   A n n u   S y m p   P r o c ,   P 3 1 6 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o e f f e l   C ,   1 9 9 8 ,   A L L E R G Y ,   V 5 3 ,   P 1 2 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 8 . t b 0 3 8 4 8 . x ;   H u a   Y ,   2 0 0 5 ,   M E M   I   O S W A L D O   C R U Z ,   V 1 0 0 ,   P 8 0 5 ,   D O I   1 0 . 1 5 9 0 / S 0 0 7 4 - 0 2 7 6 2 0 0 5 0 0 0 7 0 0 0 2 3 ;   H u t h   E J ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 2 8 5 ;   J a c s o   P ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 2 - 6 ;   J o s e p h   K S ,   2 0 0 3 ,   B R I T   M E D   J ,   V 3 2 6 ,   P 2 8 3 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 6 . 7 3 8 3 . 2 8 3 ;   K A S L   S V ,   1 9 6 6 ,   A R C H   E N V I R O N   H E A L T H ,   V 1 2 ,   P 2 4 6 ;   K e i s e r   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 2 7 - 3 ;   K e t c h a m   C M ,   2 0 0 7 ,   L A B   I N V E S T ,   V 8 7 ,   P 1 1 7 4 ,   D O I   1 0 . 1 0 3 8 / l a b i n v e s t . 3 7 0 0 6 8 8 ;   K I L B U R N   K H ,   1 9 8 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 0 ,   P 2 2 9 ;   L A N C R A N J A N   I ,   1 9 7 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 3 0 ,   P 3 9 6 ;   L A N S I N G   P S ,   1 9 8 5 ,   J   A M   D I E T   A S S O C ,   V 8 5 ,   P 5 6 ;   L e e   J D ,   2 0 0 5 ,   H U M   F A C T O R S ,   V 4 7 ,   P 7 5 3 ,   D O I   1 0 . 1 5 1 8 / 0 0 1 8 7 2 0 0 5 7 7 5 5 7 0 9 7 0 ;   L I L I S   R ,   1 9 8 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 0 ,   P 3 8 ;   L i n d e   A ,   1 9 9 8 ,   E U R   J   O R A L   S C I ,   V 1 0 6 ,   P 5 2 5 ;   L o p e z - A b e n t e   G ,   2 0 0 5 ,   B M C   P U B L I C   H E A L T H ,   V 5 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 5 8 - 5 - 2 4 ;   L O W R Y   O H ,   1 9 5 1 ,   J   B I O L   C H E M ,   V 1 9 3 ,   P 2 6 5 ;   M A C E   K C ,   1 9 7 3 ,   A M   P S Y C H O L ,   V 2 8 ,   P 1 8 4 ,   D O I   1 0 . 1 0 3 7 / h 0 0 3 8 0 7 8 ;   M A R G O L I S   J ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 5 ,   P 1 2 1 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 5 . 3 7 6 7 . 1 2 1 3 ;   M C C U N N E Y   R J ,   1 9 9 2 ,   J   O C C U P   E N V I R O N   M E D ,   V 3 4 ,   P 2 7 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 3 7 6 4 - 1 9 9 2 0 3 0 0 0 - 0 0 0 1 2 ;   M C C U N N E Y   R J ,   1 9 9 2 ,   E N V I R O N   R E S ,   V 5 9 ,   P 1 1 4 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 3 - 9 3 5 1 ( 0 5 ) 8 0 2 3 0 - 0 ;   M e h o   L I ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 2 7 ;   M e h o   L I ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 2 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 2 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - N ;   M e h o   L I ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 7 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 7 4 ;   M I L L E R   M D ,   1 9 8 2 ,   J   M E D   E D U C ,   V 5 7 ,   P 7 9 7 ;   M u s s i   C ,   2 0 0 2 ,   A G I N G   C L I N   E X P   R E S ,   V 1 4 ,   P 6 4 ;   N o r r i s   D A ,   1 9 8 9 ,   J   I N V E S T   D E R M A T O L ,   V 9 2 ,   p 1 4 7 S ,   D O I   1 0 . 1 1 1 1 / 1 5 2 3 - 1 7 4 7 . e p 1 3 0 7 5 2 4 4 ;   O g d e n   T L ,   2 0 0 8 ,   A N N   O C C U P   H Y G ,   V 5 2 ,   P 7 3 ,   D O I   1 0 . 1 0 9 3 / a n n h y g / m e n 0 0 2 ;   P E A R S O N   R E ,   1 9 8 1 ,   D R U G   I N T E L   C L I N   P H A R ,   V 1 5 ,   P 2 7 2 ;   P i l k e y   O . H . ,   1 9 8 1 ,   J   S E D I M E N T   P E T R O L ,   V 5 0 ,   P 1 0 4 4 ;   P O P E   C A ,   1 9 9 2 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 7 ,   P 2 1 1 ;   P O P E   C A ,   1 9 9 1 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 6 ,   P 9 0 ;   P o r t a   M i q u e l ,   2 0 0 3 ,   C a d   S a u d e   P u b l i c a ,   V 1 9 ,   P 1 8 4 7 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 2 - 3 1 1 X 2 0 0 3 0 0 0 6 0 0 0 3 0 ;   P R I C E   D J ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 ,   P 2 9 2 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   R A I S I G   L M ,   1 9 6 2 ,   B   M E D   L I B R   A S S O C ,   V 5 0 ,   P 4 5 0 ;   R A I S I G   L M ,   1 9 6 0 ,   S C I E N C E ,   V 1 3 1 ,   P 1 4 1 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 1 . 3 4 1 1 . 1 4 1 7 ;   R I C H M O N D   G W ,   1 9 8 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 0 ,   P 2 0 ;   R o u s s e a u   R ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 3 - 1 ;   R u b i n s t e i n   R . ,   2 0 0 4 ,   F D N   L I B   I N F   S C I ,   P 1 ;   R U S H T O N   J P ,   1 9 7 8 ,   A M   P S Y C H O L ,   V 3 3 ,   P 5 2 0 ,   D O I   1 0 . 1 0 3 7 / / 0 0 0 3 - 0 6 6 X . 3 3 . 5 . 5 2 0 ;   S A B I N   A B ,   1 9 6 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 1 7 3 ,   P 1 5 2 1 ;   S a w a d a   S ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 5 0 1 ;   S c u l l y   C ,   2 0 0 7 ,   C O M M U N I T Y   D E N T   H L T H ,   V 2 4 ,   P 1 3 0 ;   S H A M B E R G E R   R J ,   1 9 7 6 ,   A R C H   E N V I R O N   H E A L T H ,   V 3 1 ,   P 2 3 1 ;   S H E I K H   K ,   1 9 8 6 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 1 ,   P 5 6 ;   S H Y   C M ,   1 9 7 3 ,   A R C H   E N V I R O N   H E A L T H ,   V 2 7 ,   P 1 2 4 ;   S H Y   C M ,   1 9 7 9 ,   A M   J   E P I D E M I O L ,   V 1 1 0 ,   P 6 6 1 ;   S i m s   J L ,   2 0 0 3 ,   C L I N   E X P   O P H T H A L M O L ,   V 3 1 ,   P 1 4 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 2 - 9 0 7 1 . 2 0 0 3 . 0 0 6 1 0 . x ;   S l o a n   P ,   2 0 0 0 ,   B R I T   D E N T   J ,   V 1 8 9 ,   P 1 ,   D O I   1 0 . 1 0 3 8 / s j . b d j . 4 8 0 0 5 8 3 a ;   S m i t   M P J ,   2 0 0 8 ,   J   S O I L   S E D I M E N T ,   V 8 ,   P 8 0 ,   D O I   1 0 . 1 0 6 5 / j s s 2 0 0 8 . 0 3 . 2 8 0 ;   S m i t h   B G ,   1 9 0 8 ,   B I O L   B U L L - U S ,   V 1 5 ,   P 9 ,   D O I   1 0 . 2 3 0 7 / 1 5 3 5 5 6 0 ;   S m i t h   D R ,   2 0 0 8 ,   A U S T   V E T   J ,   V 8 6 ,   P 3 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 5 1 - 0 8 1 3 . 2 0 0 8 . 0 0 3 3 0 . x ;   S m i t h   D R ,   2 0 0 8 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 3 ,   P 1 1 4 ,   D O I   1 0 . 3 2 0 0 / A E O H . 6 3 . 3 . 1 1 4 - 1 2 2 ;   S m i t h   D R ,   2 0 0 8 ,   M E M   I   O S W A L D O   C R U Z ,   V 1 0 3 ,   P 3 1 0 ,   D O I   1 0 . 1 5 9 0 / S 0 0 7 4 - 0 2 7 6 2 0 0 8 0 0 5 0 0 0 0 1 4 ;   S m i t h   D R ,   2 0 0 8 ,   O C C U P   M E D - O X F O R D ,   V 5 8 ,   P 8 0 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / k q m 1 5 4 ;   S m i t h   D R ,   2 0 0 8 ,   A U S T   N Z   J   P U B L   H E A L ,   V 3 2 ,   P 1 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 5 3 - 6 4 0 5 . 2 0 0 8 . 0 0 1 8 3 . x ;   S m i t h   D e r e k   R . ,   2 0 0 5 ,   K u r u m e   M e d i c a l   J o u r n a l ,   V 5 2 ,   P 1 1 1 ,   D O I   1 0 . 2 7 3 9 / k u r u m e m e d j . 5 2 . 1 1 1 ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 3 0 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 3 0 ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 1 7 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 1 7 ;   S m i t h   D R ,   2 0 0 7 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 3 ,   P 3 9 7 ;   S m i t h   D e r e k   R ,   2 0 0 7 ,   N   Z   M e d   J ,   V 1 2 0 ,   p U 2 8 7 1 ;   S m i t h   D R ,   2 0 0 9 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 4 ,   P 1 8 ,   D O I   1 0 . 1 0 8 0 / 1 9 3 3 8 2 4 0 9 0 3 2 8 4 1 7 7 ;   S m i t h   D R ,   2 0 0 9 ,   J   T R A V E L   M E D ,   V 1 6 ,   P 3 6 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 0 8 - 8 3 0 5 . 2 0 0 9 . 0 0 3 5 6 . x ;   S m i t h   D R ,   2 0 0 9 ,   M A N U A L   T H E R ,   V 1 4 ,   P 4 5 6 ,   D O I   1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 1 1 . 0 0 4 ;   S m i t h   D R ,   2 0 0 8 ,   I N D   H E A L T H ,   V 4 6 ,   P 5 1 9 ;   S m i t h   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 6 3 ;   S m i t h s o n   S F ,   2 0 0 9 ,   C L I N   D Y S M O R P H O L ,   V 1 8 ,   P 3 1 ,   D O I   1 0 . 1 0 9 7 / M C D . 0 b 0 1 3 e 3 2 8 3 1 8 9 7 6 2 ;   S o l a r i   A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 6 0 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 0 2 0 2 9 6 1 ;   S o m b a t s o m p o p   N ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 7 9 4 . 9 8 8 5 4 . f 6 ;   T a k a h a s h i   K ,   1 9 9 9 ,   O C C U P   M E D - O X F O R D ,   V 4 9 ,   P 5 7 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / 4 9 . 1 . 5 7 - a ;   T a l b o t t   J H ,   1 9 6 0 ,   A R C H   E N V I R O N   H E A L T H ,   V 1 ,   P 1 1 ;   T e l l e z - Z e n t e n o   J F ,   2 0 0 7 ,   R E V   M E D   C H I L E ,   V 1 3 5 ,   P 4 8 0 ;   T e r a j i m a   K ,   2 0 0 3 ,   A C T A   A N A E S T H   S C A N D ,   V 4 7 ,   P 6 5 5 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 3 7 . x ;   T H I R I O N   B ,   1 9 9 2 ,   L A N C E T ,   V 3 4 0 ,   P 3 0 8 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 2 ) 9 2 3 9 8 - Y ;   T h i r i o n   B e n o i t ,   2 0 0 7 ,   A M I A   A n n u   S y m p   P r o c ,   P 1 1 3 2 ;   * T H O M S   R E U T ,   G L O S S   T H O M S   S C I   T E R M ;   T o b i n   M J ,   2 0 0 4 ,   A M   J   R E S P   C R I T   C A R E ,   V 1 7 0 ,   P 3 5 1 ,   D O I   1 0 . 1 1 6 4 / r c c m . 2 4 0 6 0 0 5 ;   U e h a r a   M ,   2 0 0 3 ,   J   O C C U P   H E A L T H ,   V 4 5 ,   P 2 4 8 ,   D O I   1 0 . 1 5 3 9 / j o h . 4 5 . 2 4 8 ;   U J E N O   Y ,   1 9 8 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 0 ,   P 1 7 7 ;   U J E N O   Y ,   1 9 8 5 ,   A R C H   E N V I R O N   H E A L T H ,   V 4 0 ,   P 1 8 1 ;   v a n   D r i e l   M L ,   2 0 0 8 ,   A U S T   F A M   P H Y S I C I A N ,   V 3 7 ,   P 7 7 0 ;   W A D E   N ,   1 9 7 5 ,   S C I E N C E ,   V 1 8 8 ,   P 4 2 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 8 . 4 1 8 7 . 4 2 9 ;   W H I T E   M J ,   1 9 7 7 ,   A M   P S Y C H O L ,   V 3 2 ,   P 3 0 1 ,   D O I   1 0 . 1 0 3 7 / / 0 0 0 3 - 0 6 6 X . 3 2 . 5 . 3 0 1 ;   W I N K E L S T . W ,   1 9 6 9 ,   A R C H   E N V I R O N   H E A L T H ,   V 1 8 ,   P 5 4 4 ;   W I N K E L S T E I N   W ,   1 9 6 9 ,   A R C H   E N V I R O N   H E A L T H ,   V 1 8 ,   P 7 6 0 ;   W I N K E L S T E I N   W ,   1 9 6 7 ,   A R C H   E N V I R O N   H E A L T H ,   V 1 4 ,   P 1 6 2 ;   W I N K E L S T E I N   W ,   1 9 6 8 ,   A R C H   E N V I R O N   H E A L T H ,   V 1 6 ,   P 4 0 1 ;   X h i g n e s s e   L V ,   1 9 6 7 ,   A M   P S Y C H O L ,   V 2 2 ,   P 7 7 9 ;   Z w a h l e n   M ,   2 0 0 4 ,   S O Z   P R A V E N T I V   M E D ,   V 4 9 ,   P 1 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 3 8 - 0 0 3 - 0 0 3 3 - 2 ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 2 6 	 1 5 7 	 2 1 	 2 1 	 3 	 1 8 	 R O U T L E D G E   J O U R N A L S ,   T A Y L O R   &   F R A N C I S   L T D 	 A B I N G D O N 	 4   P A R K   S Q U A R E ,   M I L T O N   P A R K ,   A B I N G D O N   O X 1 4   4 R N ,   O X F O R D S H I R E ,   E N G L A N D 	 1 9 3 3 - 8 2 4 4 	 2 1 5 4 - 4 7 0 0 	 	 A R C H   E N V I R O N   O C C U P   H 	 A r c h .   E n v i r o n .   O c c u p .   H e a l t h 	 	 2 0 0 9 	 6 4 	 	 	 1 	 	 	 4 3 	 5 4 	 	 	 	 1 2 	 E n v i r o n m e n t a l   S c i e n c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 5 4 0 F K 	 W O S : 0 0 0 2 7 3 3 1 6 5 0 0 0 0 6 	 2 0 0 0 7 1 1 6 	 
 
 J 	 Z h a o ,   D Z ;   S t r o t m a n n ,   A 	 	 	 	 Z h a o ,   D a n g z h i ;   S t r o t m a n n ,   A n d r e a s 	 	 	 C o m p a r i n g   a l l - a u t h o r   a n d   f i r s t - a u t h o r   c o - c i t a t i o n   a n a l y s e s   o f   i n f o r m a t i o n   s c i e n c e 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a u t h o r   c o - c i t a t i o n   a n a l y s i s ;   b i b l i o m e t r i c s ;   i n f o r m a t i o n   s c i e n c e ;   S c o p u s ;   c i t a t i o n   a n a l y s i s 	 W E B 	 A l t h o u g h   i t   i s   g e n e r a l l y   u n d e r s t o o d   t h a t   d i f f e r e n t   c i t a t i o n   c o u n t i n g   m e t h o d s   c a n   p r o d u c e   q u i t e   d i f f e r e n t   a u t h o r   r a n k i n g s ,   a n d   a l t h o u g h   " o p t i m a l "   a u t h o r   c o - c i t a t i o n   c o u n t i n g   m e t h o d s   h a v e   b e e n   i d e n t i f i e d   t h e o r e t i c a l l y ,   s t u d i e s   t h a t   c o m p a r e   a u t h o r   c o - c i t a t i o n   c o u n t i n g   m e t h o d s   i n   a u t h o r   c o - c i t a t i o n   a n a l y s i s   ( A C A )   s t u d i e s   a r e   s t i l l   r a r e .   T h e   p r e s e n t   s t u d y   a p p l i e s   s t r i c t   a l l - a u t h o r - b a s e d   A C A   t o   t h e   I n f o r m a t i o n   S c i e n c e   ( I S )   f i e l d ,   i n   t h a t   a l l   a u t h o r s   o f   a l l   c i t e d   r e f e r e n c e s   i n   a   c l a s s i c   I S   d a t a s e t   a r e   c o u n t e d ,   a n d   i n   t h a t   e v e n   t h e   d i a g o n a l   v a l u e s   o f   t h e   c o - c i t a t i o n   m a t r i x   a r e   c o m p u t e d   i n   t h e i r   t h e o r e t i c a l l y   o p t i m a l   f o r m .   U s i n g   S c o p u s   i n s t e a d   o f   S S C I   a s   t h e   d a t a   s o u r c e ,   w e   f i n d   t h a t   r e s u l t s   f r o m   a   t h e o r e t i c a l l y   o p t i m a l   a l l - a u t h o r   A C A   a p p e a r   t o   b e   e x c e l l e n t   i n   p r a c t i c e ,   t o o ,   a l t h o u g h   i n   a   f i e l d   l i k e   I S   w h e r e   c o - a u t h o r s h i p   l e v e l s   a r e   r e l a t i v e l y   l o w ,   i t s   a d v a n t a g e s   o v e r   c l a s s i c   f i r s t - a u t h o r   A C A   a p p e a r   c o n s i d e r a b l y   s m a l l e r   t h a n   i n   t h e   m o r e   h i g h l y   c o l l a b o r a t i v e   o n e s   t a r g e t e d   b e f o r e .   N e v e r t h e l e s s ,   w e   d o   f i n d   s o m e   d i f f e r e n c e s   b e t w e e n   t h e   t w o   a p p r o a c h e s ,   i n   t h a t   f i r s t - a u t h o r   A C A   a p p e a r s   t o   f a v o r   t h e o r i s t s   w h o   p r e s u m a b l y   t e n d   t o   w o r k   a l o n e ,   w h i l e   a l l - a u t h o r   A C A   a p p e a r s   t o   p a i n t   a   s o m e w h a t   m o r e   r e c e n t   p i c t u r e   o f   t h e   f i e l d ,   a n d   t o   p i c k   o u t   s o m e   c o l l a b o r a t i v e   a u t h o r   c l u s t e r s .   ( C )   2 0 0 8   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ Z h a o ,   D a n g z h i ]   U n i v   A l b e r t a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   E d m o n t o n ,   A B   T 6 G   2 J 4 ,   C a n a d a ;   [ S t r o t m a n n ,   A n d r e a s ]   U n i v   A l b e r t a ,   S c h   B u s i n e s s ,   E d m o n t o n ,   A B   T 6 G   2 R 6 ,   C a n a d a 	 Z h a o ,   D Z   ( r e p r i n t   a u t h o r ) ,   U n i v   A l b e r t a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   3 - 2 0   R u t h e r f o r d   S ,   E d m o n t o n ,   A B   T 6 G   2 J 4 ,   C a n a d a . 	 d z h a o @ u a l b e r t a . c a ;   a n d r e a s . s t r o t m a n n @ u a l b e r t a . c a 	 	 S t r o t m a n n ,   A n d r e a s / 0 0 0 0 - 0 0 0 2 - 0 6 7 9 - 6 4 9 8 	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   B A T A G E L J   V ,   2 0 0 7 ,   P A J E K   P R O G R A M   A N A L   V ;   E o m   S ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 9 . 0 0 1 ;   H A I R   J ,   1 9 9 8 ,   M U L T I V A R I A T E   D A T A   A N ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 3 5 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   P e r s s o n   O ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 4 0 0 9 4 2 8 ;   R o u s s e a u   R ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 5 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 4 0 1 ;   S c h n e i d e r   J W ,   2 0 0 7 ,   P r o c e e d i n g s   o f   I S S I   2 0 0 7 :   1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l   S o c i e t y   f o r   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s ,   V o l s   I   a n d   I I ,   P 6 9 6 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 3 . 9 1 4 0 1 . 9 b ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 5 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   Z h a o   D . ,   2 0 0 3 ,   T H E S I S   F L O R I D A   S T A T E ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 9 9 ;   Z h a o   D Z ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 7 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 2 	 1 7 	 2 1 	 2 3 	 0 	 2 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J U L 	 2 0 0 8 	 2 	 3 	 	 	 	 	 2 2 9 	 2 3 9 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 4 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 2 7 Z Q 	 W O S : 0 0 0 2 5 7 7 6 7 4 0 0 0 0 7 	 	 
 
 J 	 S c h i l d t ,   H A ;   M a t t s s o n ,   J T 	 	 	 	 S c h i l d t ,   H A ;   M a t t s s o n ,   J T 	 	 	 A   d e n s e   n e t w o r k   s u b - g r o u p i n g   a l g o r i t h m   f o r   c o - c i t a t i o n   a n a l y s i s   a n d   i t s   i m p l e m e n t a t i o n   i n   t h e   s o f t w a r e   t o o l   S i t k i s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S T R A T E G I C   M A N A G E M E N T   R E S E A R C H ;   W O R D   A N A L Y S I S ;   E C O N O M I C S ;   J O U R N A L S ;   A R T I C L E S ;   S C I E N C E ;   E N T R E P R E N E U R S H I P ;   B I B L I O M E T R I C S ;   I N D I C A T O R S ;   S C H O L A R S 	 C l u s t e r i n g   a l g o r i t h m s   a r e   u s e d   p r o m i n e n t l y   i n   c o - c i t a t i o n   a n a l y s i s   b y   a n a l y s t s   a i m i n g   t o   r e v e a l   r e s e a r c h   s t r e a m s   w i t h i n   a   f i e l d .   H o w e v e r ,   c l u s t e r i n g   o f   w i d e l y   c i t e d   a r t i c l e s   i s   n o t   r o b u s t   t o   s m a l l   v a r i a t i o n s   i n   c i t a t i o n   p a t t e r n s .   W e   p r o p o s e   a n   a l t e r n a t i v e   a l g o r i t h m ,   d e n s e   n e t w o r k   s u b - g r o u p i n g ,   w h i c h   i d e n t i f i e s   d e n s e   g r o u p s   o f   c o - c i t e d   r e f e r e n c e s .   W e   d e m o n s t r a t e   t h e   a l g o r i t h m   u s i n g   a   d a t a   s e t   f r o m   t h e   f i e l d   o f   f a m i l y   b u s i n e s s   r e s e a r c h   a n d   c o m p a r e   i t   t o   t w o   a l t e r n a t i v e   m e t h o d s ,   m u l t i d i m e n s i o n a l   s c a l i n g   a n d   c l u s t e r i n g .   W e   a l s o   i n t r o d u c e   a   f r e e   s o f t w a r e   t o o l ,   S i t k i s .   t h a t   i m p l e m e n t s   t h e   a l g o r i t h m   a n d   o t h e r   c o m m o n   b i b l i o m e t r i c   m e t h o d s .   T h e   s o f t w a r e   i d e n t i f i e s   j o u r n a l - ,   c o u n t r y -   a n d   u n i v e r s i t y - s p e c i f i c   c i t a t i o n   p a t t e r n s   a n d   c o - c i t a t i o n   g r o u p s ,   e n a b l i n g   t h e   i d e n t i f i c a t i o n   o f   " i n v i s i b l e   c o l l e g e s . " . 	 H e l s i n k i   U n i v   T e c h n o l ,   I n s t   S t r a t e g y   &   I n t   B u s i n e s s ,   D e p t   I n d   E n g n   &   M a n a g e m e n t ,   F I N - 0 2 1 5 0   E s p o o ,   F i n l a n d 	 S c h i l d t ,   H A   ( r e p r i n t   a u t h o r ) ,   P O B   5 5 0 0 ,   E s p o o   0 2 0 1 5 ,   F i n l a n d . 	 h e n r i . s c h i l d t @ h u t . f i 	 	 	 	 	 B E R L E   J R   A D O L F   A . ,   1 9 3 2 ,   M O D E R N   C O R P O R A T I O N   P ;   B o r g   I . ,   1 9 9 7 ,   M O D E R N   M U L T I D I M E N S I O ;   B o r g a t t i   S .   P . ,   2 0 0 2 ,   N E T D R A W   G R A P H   V I S U A L ;   F r e e m a n   L .   C . ,   2 0 0 2 ,   U C I N E T   W I N D O W S   S O F T W ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   B o r o k h o v i c h   K A ,   2 0 0 0 ,   J   F I N A N C ,   V 5 5 ,   P 1 4 5 7 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 2 5 4 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B u s e n i t z   L W ,   2 0 0 3 ,   J   M A N A G E ,   V 2 9 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 0 6 3 ( 0 3 ) 0 0 0 1 3 - 8 ;   C a h l i k   T ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 3 8 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 3 5 0 6 0 6 1 ;   C A W K E L L   A E ,   1 9 7 6 ,   I N F O R M   S C I E N T I S T ,   V 1 0 ,   P 3 ;   C H U N G   K H ,   1 9 9 0 ,   J   F I N A N C ,   V 4 5 ,   P 3 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 2 8 8 2 4 ;   C O E   R ,   1 9 8 4 ,   A C A D   M A N A G E   J ,   V 2 7 ,   P 6 6 0 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 0 5 3 ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   D e r y   R ,   1 9 9 6 ,   C A N   J   A D M   S C I ,   V 1 3 ,   P 2 8 5 ;   D i o d a t o   V .   P ,   1 9 9 4 ,   D I C T   B I B L I O M E T R I C S ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O M E T R I C S   Q U ;   E v e r i t t   B S ,   1 9 8 1 ,   C L U S T E R   A N A L ;   E X T E J T   M M ,   1 9 9 0 ,   J   M A N A G E ,   V 1 6 ,   P 5 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 0 0 1 6 0 0 3 0 2 ;   G A R F I E L D   E ,   1 9 8 0 ,   C U R R   C O N T E N T S ,   P 5 ;   G A R F I E L D   E ,   1 9 6 5 ,   U S E   C I T A T I O N   D A T A   W R ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G m u r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 1 9 5 0 3 0 0 5 ;   H A I R   J ,   1 9 9 8 ,   M U L T I V A R I A T E   D A T A   A N ;   H I N Z E   S ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 3 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 3 3 4 4 5 ;   H O L L M A N   K W ,   1 9 9 1 ,   J   R I S K   I N S U R ,   V 5 8 ,   P 7 1 4 ,   D O I   1 0 . 2 3 0 7 / 2 5 3 0 8 2 ;   J e n s e n   M . C . ,   1 9 7 6 ,   J   F I N A N C   E C O N ,   V 3 ,   P 3 0 3 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 7 6 ) 9 0 0 2 5 - 8 ;   J O H N S O N   J L ,   1 9 9 4 ,   A C A D   M A N A G E   J ,   V 3 7 ,   P 1 3 9 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 6 7 9 ;   K e t c h e n   D J ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 4 4 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 6 0 6 ) 1 7 : 6 < 4 4 1 : : A I D - S M J 8 1 9 > 3 . 0 . C O ; 2 - G ;   L o r r   M . ,   1 9 8 3 ,   C L U S T E R   A N A L   S O C I A L ;   M A C M I L L A N   I C ,   1 9 9 1 ,   S T R A T E G I C   M A N A G E   J ,   V 1 2 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 2 0 2 0 7 ;   M A R T I N   B R ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 0 5 - 7 ;   M a r t i n s o n s   M G ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 1 4 2 3 3 5 9 0 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   O l i v e r   A L ,   1 9 9 8 ,   O R G A N   S T U D ,   V 1 9 ,   P 5 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 8 0 1 9 0 0 4 0 2 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   P a s a d e o s   Y ,   1 9 9 8 ,   J   A D V E R T I S I N G ,   V 2 7 ,   P 5 3 ;   P i e t e r s   R ,   2 0 0 2 ,   J   E C O N   L I T ,   V 4 0 ,   P 4 8 3 ,   D O I   1 0 . 1 2 5 7 / 0 0 2 2 0 5 1 0 2 3 2 0 1 6 1 3 4 8 ;   P O D S A K O F F   P M ,   1 9 8 7 ,   J   M A N A G E ,   V 1 3 ,   P 4 1 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 8 7 0 1 3 0 0 2 1 3 ;   P o r t e r   M . ,   1 9 8 0 ,   C O M P E T I T I V E   S T R A T E G Y ;   P o r t e r   M . E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V A N T A G ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R a t n a t u n g a   J ,   1 9 9 7 ,   J   B U S   V E N T U R I N G ,   V 1 2 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 9 6 ) 0 0 0 6 2 - 6 ;   S c h i l d t   H .   A . ,   2 0 0 5 ,   S I T K I S   S O F T W A R E   T O O L ;   S C H W E R T   G W ,   1 9 9 3 ,   J   F I N A N C   E C O N ,   V 3 3 ,   P 3 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 9 3 ) 9 0 0 1 2 - Z ;   S h a r m a   P . ,   2 0 0 4 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 7 ,   P 1 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 2 0 0 4 . 0 0 0 0 1 . X ;   S h a r m a   P . ,   1 9 9 7 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 0 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 9 7 . 0 0 0 0 1 . x ;   S h a r m a   S ,   1 9 9 6 ,   A P P L   M U L T I V A R I A T E   T E ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 ;   S o b r e r o   M ,   1 9 9 8 ,   O R G A N   S T U D ,   V 1 9 ,   P 5 8 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 8 0 1 9 0 0 4 0 3 ;   T U S S E N   R J W ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 9 8 ;   U S D I K E N   B ,   1 9 9 5 ,   O R G A N   S T U D ,   V 1 6 ,   P 5 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 5 0 1 6 0 0 3 0 6 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 	 5 7 	 2 1 	 2 5 	 4 	 2 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 0 6 	 6 7 	 1 	 	 	 	 	 1 4 3 	 1 6 3 	 	 1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 9 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 2 0 J E 	 W O S : 0 0 0 2 3 5 9 0 4 0 0 0 0 0 9 	 	 
 
 J 	 B u t c h e r ,   J ;   J e f f r e y ,   P 	 	 	 	 B u t c h e r ,   J ;   J e f f r e y ,   P 	 	 	 T h e   u s e   o f   b i b l i o m e t r i c   i n d i c a t o r s   t o   e x p l o r e   i n d u s t r y - a c a d e m i a   c o l l a b o r a t i o n   t r e n d s   o v e r   t i m e   i n   t h e   f i e l d   o f   m e m b r a n e   u s e   f o r   w a t e r   t r e a t m e n t 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   i n d u s t r y - a c a d e m i c   c o l l a b o r a t i o n ;   i n n o v a t i o n ;   m e m b r a n e   s c i e n c e ;   w a t e r 	 D E V E L O P M E N T   N E T W O R K S ;   N E T H E R L A N D S ;   S C I E N C E S 	 I n d u s t r y - a c a d e m i a   c o l l a b o r a t i o n   h a s   b e c o m e   a   s u b j e c t   o f   g r e a t   i n t e r e s t   t o   a c a d e m i c s ,   i n d u s t r y   l e a d e r s   a n d   p o l i c y m a k e r s ,   a s   i t   i s   n o w   a c k n o w l e d g e d   t h a t   s u c h   r e l a t i o n s h i p s   a r e   v a l u a b l e   f o r   i n n o v a t i o n .   T h e   a i m   o f   t h e   s t u d y   r e p o r t e d   h e r e   i s   t o   e x p l o r e   c o l l a b o r a t i o n   t r e n d s   o v e r   t i m e   i n   t h e   f i e l d   o f   m e m b r a n e   u s e   f o r   w a t e r   t r e a t m e n t   b y   c a r r y i n g   o u t   b i b l i o m e t r i c   a n a l y s i s   o f   s c i e n t i f i c   p u b l i c a t i o n s   r e l a t e d   t o   t h e   f i e l d .   I t   i s   p a r t   o f   a   b r o a d e r   p r o j e c t   l o o k i n g   a t   f a c t o r s   t h a t   i n f l u e n c e   i n d u s t r y - a c a d e m i a   c o l l a b o r a t i v e   r e s e a r c h   i n   t h e   w a t e r   s e c t o r .   T h o u s a n d   s i x   h u n d r e d   a n d   s e v e n t y   e i g h t   p a p e r s   f r o m   e i g h t   j o u r n a l s   f r o m   t h e   y e a r s   1 9 6 7   t o   2 0 0 1   w e r e   a n a l y s e d   f o r   c o - a u t h o r s h i p   p a t t e r n s .   T h o u s a n d   t h r e e   h u n d r e d   a n d   s e v e n t y   p a p e r s   f r o m   t h e   l a s t   d e c a d e   w e r e   e x a m i n e d   f o r   a   s n a p s h o t   v i e w   o f   i n t e r - i n s t i t u t i o n a l ,   c r o s s - d i s c i p l i n a r y ,   i n d u s t r y - a c a d e m i c   a n d   i n t e r n a t i o n a l   c o l l a b o r a t i o n   t r e n d s .   R e s u l t s   s h o w   t h a t   t h e   f i e l d   i s   h i g h l y   c o l l a b o r a t i v e   w i t h   t h e   m a j o r i t y   ( 8 7 % )   o f   p a p e r s   i n v o l v i n g   t w o   o r   m o r e   a u t h o r s .   I n   t e r m s   o f   i n d u s t r y - a c a d e m i c   c o l l a b o r a t i o n ,   t h e r e   w a s   a n   i n c r e a s e   i n   t h e   n u m b e r   o f   p a p e r s   f r o m   1 9 9 4   o n w a r d s ,   a n d   a   v e r y   h i g h   p r o p o r t i o n   ( 9 1 % )   w e r e   c r o s s - d i s c i p l i n a r y .   ( c )   2 0 0 4   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 C r a n f i e l d   U n i v ,   S c h   W a t e r   S c i ,   C r a n f i e l d   M 4 3   0 A L ,   B e d s ,   E n g l a n d 	 J e f f r e y ,   P   ( r e p r i n t   a u t h o r ) ,   C r a n f i e l d   U n i v ,   S c h   W a t e r   S c i ,   C r a n f i e l d   M 4 3   0 A L ,   B e d s ,   E n g l a n d . 	 p j . j e f f r e y @ c r a n f i e l d . a c . u k 	 J e f f r e y ,   P a u l / A - 1 9 3 4 - 2 0 1 0 ;   	 J e f f r e y ,   P a u l / 0 0 0 0 - 0 0 0 1 - 6 6 1 8 - 0 8 1 5 	 	 	 * A U R I L ,   1 9 9 7 ,   R E S   P A R T N   I N D   U   G U I D ;   B a r n e s   T . ,   2 0 0 2 ,   E U R O P E A N   M A N A G E M E N T ,   V 2 0 ,   P 2 7 2 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 6 3 - 2 3 7 3 ( 0 2 ) 0 0 0 4 4 - 0 ;   C A L V E R T   J ,   2 0 0 2 ,   U   I N D   R E S   C O L L   U K ;   F A S S B I N D E R   W ,   1 9 9 1 ,   N E P H R O L   D I A L   T R A N S P L ,   V 6 ,   P 5 ;   H a m e r i   A P ,   1 9 9 6 ,   T E C H N O V A T I O N ,   V 1 6 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 4 9 7 2 ( 9 5 ) 0 0 0 3 0 - 5 ;   H i c k s   D M ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 3 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 3 0 - 6 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K O C H   N ,   2 0 0 0 ,   I N F O R M I N G   S C I ,   V 3 ,   P 1 5 7 ;   K O N E C N Y   E ,   1 9 9 5 ,   U   I N D   R E S ;   M A C L E A N   A ,   2 0 0 1 ,   N E T W O R K   C O N T R O L   P R E V ;   M a r t i n - S e m p e r e   M J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 7 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 6 2 7 1 2 9 2 3 ;   M e y e r - K r a h m e r   F ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 4 - 8 ;   O E C D ,   1 9 8 4 ,   I N D   U   N E W   F O R M S   C O O P ;   P O L T   W ,   2 0 0 1 ,   B E N C H M   I N D   S C I   R E L   E ;   Q i n   J ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 9 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 8 9 3 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - X ;   Q I N   J ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 2 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 9 7 4 ;   R A H M   D ,   2 0 0 0 ,   U   I N D   R   D   C O L L   U S   U K ,   V 1 ;   R a p p e r t   B ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 8 7 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 2 8 - 1 ;   S c o t t   A . ,   2 0 0 1 ,   E C   R E T U R N S   B A S I C   R E S ;   S E N K E R   J ,   1 9 9 8 ,   C A P I T A L I Z I N G   K N O W L E D ,   P 1 1 1 ;   S T E W A R T   G ,   1 9 9 9 ,   P A R T N E R S H I P   S C I   I N D ;   T i j s s e n   R J W ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 6 ,   P 7 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 6 0 - 7 ;   T i j s s e n   R J W ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 2 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 0 8 - 0 	 2 3 	 2 1 	 2 1 	 3 	 2 8 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 1 6 6 - 4 9 7 2 	 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 N O V 	 2 0 0 5 	 2 5 	 1 1 	 	 	 	 	 1 2 7 3 	 1 2 8 0 	 	 1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 4 . 0 6 . 0 0 3 	 	 8 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 9 5 7 Y N 	 W O S : 0 0 0 2 3 1 4 0 9 6 0 0 0 0 4 	 	 
 
 J 	 S c h n e i d e r ,   J W ;   B o r l u n d ,   P 	 	 	 	 S c h n e i d e r ,   J W ;   B o r l u n d ,   P 	 	 	 I n t r o d u c t i o n   t o   b i b l i o m e t r i c s   f o r   c o n s t r u c t i o n   a n d   m a i n t e n a n c e   o f   t h e s a u r i   -   M e t h o d i c a l   c o n s i d e r a t i o n s 	 J O U R N A L   O F   D O C U M E N T A T I O N 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 k n o w l e d g e   m a n a g e m e n t ;   c o n t r o l l e d   l a n g u a g e   c o n s t r u c t i o n ;   c a t a l o g u i n g 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   C I T A T I O N   A N A L Y S I S ;   W O R D   A N A L Y S I S ;   P R O B A B I L I S T I C   T H E O R Y ;   I N F O R M A T I O N - S C I E N C E ;   S I M I L A R I T Y   M E A S U R E ;   S C I E N T I F I C   P A P E R S ;   D O M A I N   A N A L Y S I S ;   I M P A C T   F A C T O R S ;   H A L F - L I F E 	 T h e   p a p e r   i n t r o d u c e s   b i b l i o m e t r i c s   t o   t h e   r e s e a r c h   a r e a   o f   k n o w l e d g e   o r g a n i z a t i o n - m o r e   p r e c i s e l y   i n   r e l a t i o n   t o   c o n s t r u c t i o n   a n d   m a i n t e n a n c e   o f   t h e s a u r i .   A s   s u c h ,   t h e   p a p e r   r e v i e w s   r e l a t e d   w o r k   t h a t   h a s   b e e n   o f   i n s p i r a t i o n   f o r   t h e   a s s e m b l y   o f   a   s e m i - a u t o m a t i c ,   b i b l i o m e t r i c - b a s e d ,   a p p r o a c h   f o r   c o n s t r u c t i o n   a n d   m a i n t e n a n c e .   S i m i l a r l y ,   t h e   p a p e r   d i s c u s s e s   t h e   m e t h o d i c a l   c o n s i d e r a t i o n s   b e h i n d   t h e   a p p r o a c h .   E v e n t u a l l y ,   t h e   s e m i - a u t o m a t i c   a p p r o a c h   i s   u s e d   t o   v e r i f y   t h e   a p p l i c a b i l i t y   o f   b i b l i o m e t r i c   m e t h o d s   a s   a   s u p p l e m e n t   t o   c o n s t r u c t i o n   a n d   m a i n t e n a n c e   o f   t h e s a u r i .   I n   t h e   c o n t e x t   o f   k n o w l e d g e   o r g a n i z a t i o n ,   t h e   p a p e r   o u t l i n e s   t w o   f u n d a m e n t a l   a p p r o a c h e s   t o   k n o w l e d g e   o r g a n i z a t i o n ,   t h a t   i s ,   t h e   m a n u a l   i n t e l l e c t u a l   a p p r o a c h   a n d   t h e   a u t o m a t i c   a l g o r i t h m i c   a p p r o a c h .   B i b l i o m e t r i c   m e t h o d s   b e l o n g   t o   t h e   a u t o m a t i c   a l g o r i t h m i c   a p p r o a c h ,   t h o u g h   b i b l i o m e t r i c s   d o   h a v e   s p e c i a l   c h a r a c t e r i s t i c s   t h a t   a r e   s u b s t a n t i a l l y   d i f f e r e n t   f r o m   o t h e r   m e t h o d s   w i t h i n   t h i s   a p p r o a c h . 	 R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   A a l b o r g ,   D e n m a r k 	 S c h n e i d e r ,   J W   ( r e p r i n t   a u t h o r ) ,   R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   A a l b o r g ,   D e n m a r k . 	 	 S c h n e i d e r ,   J e s p e r / C - 5 2 9 3 - 2 0 0 8 ;   S c h n e i d e r ,   J e s p e r   W i b o r g / J - 9 0 6 8 - 2 0 1 2 	 S c h n e i d e r ,   J e s p e r   W i b o r g / 0 0 0 0 - 0 0 0 1 - 5 5 5 6 - 0 9 1 9 	 	 	 A d a i r   W .   C . ,   1 9 5 5 ,   A M   D O C ,   V 6 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 0 6 0 1 0 5 ;   A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   A i t c h i s o n   J . ,   2 0 0 0 ,   T H E S A U R U S   C O N S T R U C T I ;   A n d e r s o n   A ,   2 0 0 1 ,   I N T   J   O S T E O A R C H A E O L ,   V 1 1 ,   P 2 ,   D O I   1 0 . 1 0 0 2 / o a . 5 3 9 ;   A n d e r s o n   J D ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 2 6 - 1 ;   A N D E R S O N   J D ,   1 9 9 7 ,   I N T   E N C Y   I N F O R M A T I O N ,   P 3 3 6 ;   B I B E X C E L ,   2 0 0 1 ,   B I B E X C E L   S O F T W A R E   T O ;   B l a i r   D a v i d   C . ,   1 9 9 0 ,   L A N G U A G E   R E P R E S E N T A T ;   B O R G M A N   C L ,   2 0 0 2 ,   I N   P R E S S   A N N   R E V   I N O ,   V 3 6 ;   B o r g m a n   C . L . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   B O R N E R   K ,   2 0 0 3 ,   I N   P R E S S   A N N   R E V   I N F ,   V 3 7 ;   B o y a c k   K W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 7 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 6 6 ;   B r a a m   R .   R . ,   1 9 8 8 ,   I n f o r m e t r i c s   8 7 / 8 8 .   S e l e c t   P r o c e e d i n g s   o f   t h e   F i r s t   I n t e r n a t i o n a l   C o n f e r e n c e   o n   B i b l i o m e t r i c s   a n d   T h e o r e t i c a l   A s p e c t s   o f   I n f o r m a t i o n   R e t r i e v a l ,   P 1 5 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 5 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 5 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - G ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C h e n   C . ,   2 0 0 3 ,   M A P P I N G   S C I   F R O N T I E R ;   C h e n   C M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 6 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 5 ;   C h e n   C M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 3 1 5 ,   D O I   1 0 . 1 0 0 2 / 1 5 3 2 - 2 8 9 0 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 7 4 > 3 . 3 . C O ; 2 - U ;   C H E N   H C ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 1 7 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 4 ) 4 6 : 3 < 1 7 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - U ;   C o l e   S . ,   1 9 9 2 ,   M A K I N G   S C I   N A T U R E   S O ;   C O Z Z E N S   S E ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 3 3 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C R O U C H   C J ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 6 2 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 1 0 6 - C ;   E G G H E   L ,   1 9 9 0 ,   I N T R O   I N F R O M E T R I C S ;   E V E R I T T   B S ,   1 9 9 8 ,   C L U S T E R   A N A L ;   F R A N K F O R T N A C H M I . C ,   1 9 9 7 ,   R E S   M E T H O D S   S O C I A L   S ;   G a r f i e l d   E ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 9 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 9 6 2 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - X ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R   C O M M E N T S ,   P 3 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 6 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 7 5 ,   C U R R   C O N T E N T S ,   P 5 ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G A R F I E L D   E ,   1 9 9 4 ,   C U R R   C O N T E N T S ,   V 4 1 ,   P 3 ;   G a r f i e l d   E ,   1 9 6 5 ,   S T A T   A S S   M E T H O D S   M E C ,   P 1 8 9 ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 1 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 7 ;   G L A N Z E L   W ,   1 9 9 5 ,   5   B I E N N   C   I N T   S O C   S C ,   P 1 6 7 ;   G r e f e n s t e t t e   G r e g o r y ,   1 9 9 4 ,   E X P L O R A T I O N S   A U T O M A T ;   H a n   J . ,   2 0 0 0 ,   D A T A   M I N I N G   C O N C E P T S ;   H E A R S T   M ,   1 9 9 8 ,   E L E C T   L E X I C A L   D A T A B A ;   H i n d l e   D . ,   1 9 9 0 ,   P   2 8   A N N   M   A S S   C O M P ;   H j o r l a n d   B ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 4 2 2 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 3 1 1 3 6 ;   H J O R L A N D   B ,   1 9 9 8 ,   K N O W L   O R G A N ,   V 2 4 ,   P 1 6 2 ;   H J O R L A N D   B ,   1 9 9 7 ,   A C T I V I T Y   T H E O R E T I C A L ;   H j o r l a n d   B i r g e r ,   2 0 0 2 ,   C H A L L   K N O W L   R E P R   O R G ,   P 4 5 0 ;   I n g w e r s e n   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 ;   J i n g   Y ,   1 9 9 4 ,   P   R I A O   9 4 ,   P 1 4 6 ;   K E S S L E R   M M ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 9 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K O S T O F F   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 ;   K O W A L S K I   G J ,   2 0 0 0 ,   I N F O R M A T I O N   S T O R A G E ;   K r u s k a l   J .   B . ,   1 9 7 7 ,   C L A S S I F I C A T I O N   C L U S T ,   P 1 7 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   K W O K   K L ,   1 9 8 5 ,   P   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 5 9 ;   K W O K   K L ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 1 0 ;   L A N C A S T E R   F W ,   1 9 9 8 ,   I N D E X I N G   A B S T R   T H E O R ;   L a t o u r   B . ,   1 9 8 7 ,   S C I   A C T I O N ;   L A W R E N C E   S ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 7 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   L e y d e s d o r f f   L ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 3 7 8 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   L E Y D E S D O R F F   L ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 2 8 1 ;   L I N E   M B ,   1 9 9 3 ,   L I B R   T R E N D S ,   V 4 1 ,   P 6 6 5 ;   L I U   S X ,   1 9 9 3 ,   A C T A   C R Y S T A L L O G R   C ,   V 4 9 ,   P 4 ,   D O I   1 0 . 1 1 0 7 / S 0 1 0 8 2 7 0 1 9 2 0 0 3 5 5 X ;   L u u k k o n e n   T ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 1 1 2 1 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 1 6 ,   P 1 5 1 ;   M A N D A L A   R ,   1 9 9 9 ,   P   2 2   A N N   A C M   S I G I R   C ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M i l l e r   U ,   1 9 9 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 3 ,   P 4 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 0 9 - 5 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N o y o n s   E C M ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 2 < 1 1 5 : : A I D - A S I 3 > 3 . 3 . C O ; 2 - A ;   N o y o n s   E C M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 7 ;   N o y o n s   E C M ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 < 6 8 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - Z ;   O C O N N O R   J ,   1 9 8 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 9 ,   P 3 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 3 ) 9 0 0 5 3 - 5 ;   P A O   M L ,   1 9 8 8 ,   P   A S I S   A N N U   M E E T ,   V 2 5 ,   P 1 7 7 ;   P A O   M L ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 2 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 2 6 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 6 ;   P E A T   H J ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 7 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 7 8 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - 8 ;   P E R I T Z   B C ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 4 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 4 4 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   R a s m u s s e n   E . ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ,   P 4 1 9 ;   R E E S P O T T E R   L K ,   1 9 8 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 5 ,   P 6 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 9 ) 9 0 1 0 1 - 5 ;   R E E S P O T T E R   L K ,   1 9 8 7 ,   T H E S I S   U   W   O N T A R I O   O ;   R U G E   G ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 7 8 - E ;   S A L T O N   G ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M A ;   S A N D E R S O N   M ,   1 9 9 9 ,   P   2 2   A N N   A C M   S I G I R   C ,   V 1 5 ,   P 2 0 6 ;   S C H N E I D E R   J W ,   2 0 0 2 ,   P   4   I N T   C   C O N C   L I B R ,   P 1 5 1 ;   S c h u t z e   H ,   1 9 9 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 3 ,   P 3 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 6 ) 0 0 0 6 8 - 4 ;   S c h v a n e v e l d t   R .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ;   S c o t t   J ,   2 0 0 0 ,   S O C I A L   N E T W O R K   A N A L ;   S e g l e n   P O ,   1 9 9 8 ,   A C T A   O R T H O P   S C A N D ,   V 6 9 ,   P 2 2 4 ,   D O I   1 0 . 3 1 0 9 / 1 7 4 5 3 6 7 9 8 0 9 0 0 0 9 2 0 ;   S H A W   W M ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 6 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 0 4 6 - 5 ;   S m a l l   H ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 0 3 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 ;   S M A L L   H ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 8 9 ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M A L L   H G ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 7 0 0 7 0 0 2 0 2 ;   S M I T H   R L ,   1 9 8 1 ,   J   I N D   E C O N ,   V 3 0 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 8 0 8 3 ;   S o e r g e l   D ,   1 9 7 4 ,   I N D E X I N G   L A N G U A G E S   T ;   S r i n i v a s a n   P . ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ,   P 1 6 1 ;   S z a v a - K o v a t s   E ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 0 9 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 0 5 ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   v a n   L e e u w e n   T N ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 4 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 6 0 5 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 2 9 ;   V i n k l e r   P ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 0 0 ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 5 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 ;   W h i t e   M D ,   1 9 9 7 ,   L I B R   Q U A R T ,   V 6 7 ,   P 1 2 2 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   W O O D S   W A ,   1 9 9 7 ,   T R 9 7 6 1   S U N   M I C R   L A B 	 1 2 7 	 2 1 	 2 3 	 2 	 2 3 	 E M E R A L D   G R O U P   P U B L I S H I N G   L I M I T E D 	 B R A D F O R D 	 6 0 / 6 2   T O L L E R   L A N E ,   B R A D F O R D   B D 8   9 B Y ,   W   Y O R K S H I R E ,   E N G L A N D 	 0 0 2 2 - 0 4 1 8 	 	 	 J   D O C 	 J .   D o c . 	 	 2 0 0 4 	 6 0 	 5 	 	 	 	 	 5 2 4 	 5 4 9 	 	 1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 6 0 6 0 9 	 	 2 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 6 7 V Y 	 W O S : 0 0 0 2 2 4 8 7 1 9 0 0 0 0 5 	 	 
 
 J 	 T a n g ,   R ;   T h e l w a l l ,   M 	 	 	 	 T a n g ,   R ;   T h e l w a l l ,   M 	 	 	 P a t t e r n s   o f   n a t i o n a l   a n d   i n t e r n a t i o n a l   W e b   i n l i n k s   t o   U S   a c a d e m i c   d e p a r t m e n t s :   A n   a n a l y s i s   o f   d i s c i p l i n a r y   v a r i a t i o n s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 9 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m a t i c s 	 A U G ,   2 0 0 3 	 B e i j i n g ,   P E O P L E S   R   C H I N A 	 	 	 	 I M P A C T   F A C T O R S ;   S I T E   I N T E R L I N K I N G ;   C R I T I C A L - V I E W ;   L I N K S ;   C O M M U N I C A T I O N ;   B I B L I O M E T R I C S ;   W E B O M E T R I C S ;   S C I E N C E 	 A n   i n v e s t i g a t i o n   o f   l i n k s   t o   8 9   U S   a c a d e m i c   d e p a r t m e n t s   f r o m   t h r e e   d i f f e r e n t   d i s c i p l i n e s   g a v e   i n s i g h t s   i n t o   t h e   k i n d s   o f   i n t e r n a t i o n a l   r e g i o n s   a n d   n a t i o n a l   d o m a i n s   t h a t   l i n k e d   t o   t h e m .   W h i l e   s i g n i f i c a n t   c o r r e l a t i o n s   w e r e   f o u n d   b e t w e e n   t o t a l   c o u n t s   o f   i n t e r n a t i o n a l   i n l i n k s   a n d   t o t a l   p u b l i c a t i o n   i m p a c t   i n   P s y c h o l o g y   a n d   C h e m i s t r y ,   c o u n t s   o f   i n t e r n a t i o n a l   i n l i n k s   t o   H i s t o r y   d e p a r t m e n t s   w e r e   t o o   s m a l l   t o   g i v e   a   s i g n i f i c a n t   r e s u l t .   T h e   c o r r e l a t i o n s   s u g g e s t   t h a t   i n t e r n a t i o n a l   l i n k s   m a y   r e f l e c t ,   t o   a   c e r t a i n   e x t e n t ,   p a t t e r n s   o f   s c h o l a r l y   c o m m u n i c a t i o n .   E v e n   t h o u g h   H i s t o r y   d e p a r t m e n t s   a t t r a c t e d   a   s i g n i f i c a n t l y   l o w e r   p e r c e n t a g e   o f   i n t e r n a t i o n a l   i n l i n k s   t h a n   t h o s e   o f   C h e m i s t r y   a n d   P s y c h o l o g y ,   t h e   m a i n   s o u r c e   o f   l i n k s   f o r   a l l   t h r e e   d i s c i p l i n e s   w a s   f r o m   E u r o p e .   A n a l y s e s   o f   n a t i o n a l   i n l i n k s ,   c h a r a c t e r i z e d   b y   g T L D s   ( g e n e r i c   T o p   L e v e l   D o m a i n s ) ,   s h o w e d   t h a t   t h e   m a j o r   s o u r c e   o f   l i n k s   f o r   a l l   d i s c i p l i n e s   w a s   . e d u   s i t e s ,   f o l l o w e d   b y   . c o m ,   . o r g ,   . n e t .   A s   a   w h o l e ,   i n t e r n a t i o n a l   r e g i o n a l   d i f f e r e n c e s   i n   d i s c i p l i n e s   w e r e   s t r o n g e r   t h a n   g T L D   d i f f e r e n c e s ,   a l t h o u g h   i n   b o t h   c a s e s   d i s c r e p a n c i e s   w e r e   n o t   o f   a   l a r g e   s c a l e . 	 C a t h o l i c   U n i v   A m e r ,   S c h   L i b   &   I n f o r m a t   S c i ,   W a s h i n g t o n ,   D C   2 0 0 6 4   U S A ;   W o l v e r h a m p t o n   U n i v ,   S c h   C o m p   &   I n f o r m a t   T e c h n o l ,   W o l v e r h a m p t o n ,   E n g l a n d 	 T a n g ,   R   ( r e p r i n t   a u t h o r ) ,   C a t h o l i c   U n i v   A m e r ,   S c h   L i b   &   I n f o r m a t   S c i ,   6 2 0   M i c h i g a n   A v e   N E ,   W a s h i n g t o n ,   D C   2 0 0 6 4   U S A . 	 t a n g r @ c u a . e d u 	 T h e l w a l l ,   M i k e / C - 1 4 4 9 - 2 0 1 3 	 T h e l w a l l ,   M i k e / 0 0 0 0 - 0 0 0 1 - 6 0 6 5 - 2 0 5 X 	 	 	 A g u i l l o   I .   F . ,   1 9 9 8 ,   O n l i n e   I n f o r m a t i o n   9 8 .   P r o c e e d i n g s ,   P 2 3 9 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B a r - I l a n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 2 1 0 2 7 6 8 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   F U R N E R   J ,   1 9 9 9 ,   A C M   C O M P U T   S U R V ,   P 3 1 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 1 3 2 1 7 2 3 ;   * I A N A ,   2 0 0 3 ,   G E N   T O P   L E V   D O M ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K l i n g   R ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 3 0 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 4 7 > 3 . 0 . C O ; 2 - T ;   L A N G E   L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 6 ;   L i   X M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 1 8 9 7 0 2 4 6 3 ;   P o l a n c o   X . ,   2 0 0 1 ,   C L U S T E R I N G   M A P P I N G   W ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S ,   V 1 ;   R o u s s e a u   R ,   1 9 9 9 ,   C Y B E R M E T R I C S ,   V 2 ;   S m i t h   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 3 0 4 1 5 8 2 2 ;   S m i t h   A G ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 5 7 7 ;   S n y d e r   H ,   1 9 9 9 ,   J   D O C ,   V 5 5 ,   P 3 7 5 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 5 1 ;   T a n g   R ,   2 0 0 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 0 3 ) 0 0 0 5 3 - 7 ;   T h e l w a l l   M ,   2 0 0 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 0 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 8 3 - 3 ;   T h e l w a l l   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 4 1 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 8 7 1 0 5 9 0 4 ;   T h e l w a l l   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 1 0 7 2 8 8 5 2 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   D O C ,   V 5 8 ,   P 5 6 3 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 2 1 0 4 4 1 5 8 6 ;   T h e l w a l l   M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 5 ;   T h e l w a l l   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 5 3 ;   T h o m a s   O ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 3 8 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   W i l k i n s o n   D . ,   2 0 0 3 ,   J   I N F O R M A T I O N   S C I ,   V 2 9 ,   P 5 9 	 2 9 	 2 1 	 2 3 	 1 	 9 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 4 	 6 0 	 3 	 	 	 	 	 4 7 5 	 4 8 5 	 	 1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 8 . 7 0 5 9 4 . c c 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 3 5 Q Y 	 W O S : 0 0 0 2 2 2 5 0 1 8 0 0 0 1 7 	 	 
 
 J 	 C r o n i n ,   B 	 	 	 	 C r o n i n ,   B 	 	 	 S e m i o t i c s   a n d   e v a l u a t i v e   b i b l i o m e t r i c s 	 J O U R N A L   O F   D O C U M E N T A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 A S S E S S M E N T   E X E R C I S E   R A T I N G S ;   I N F O R M A T I O N - S C I E N C E ;   C I T A T I O N   A N A L Y S I S ;   C O M M U N I C A T I O N ;   D O C U M E N T S ;   G E N E T I C S ;   C O U N T S 	 T h e   r e c i p r o c a l   r e l a t i o n s h i p   b e t w e e n   b i b l i o g r a p h i c   r e f e r e n c e s   a n d   c i t a t i o n s   i n   t h e   c o n t e x t   o f   t h e   s c h o l a r l y   c o m m u n i c a t i o n   s y s t e m   i s   e x a m i n e d .   S e m i o t i c   a n a l y s i s   o f   r e f e r e n c i n g   b e h a v i o u r s   a n d   c i t a t i o n   c o u n t i n g   r e v e a l s   t h e   c o m p l e x i t y   o f   p r e v a i l i n g   s i g n   s y s t e m s   a n d   a s s o c i a t e d   s y m b o l i c   p r a c t i c e s . 	 I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 1   U S A 	 C r o n i n ,   B   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 1   U S A . 	 	 	 	 	 	 B a u d r i l l a r d   J e a n ,   1 9 8 1 ,   C R I T I Q U E   P O L I T I C A L   E ;   B E N A R I   E ,   1 9 8 7 ,   J   A N T H R O P O L   R E S ,   V 4 3 ,   P 6 3 ;   B o u r d i e u   P . ,   1 9 9 1 ,   L A N G U A G E   S Y M B O L I C   P O ;   B r o d k e y   L . ,   1 9 8 7 ,   A C A D   W R I T I N G   S O C I A L ;   C O L L I N I   S ,   1 9 8 9 ,   T I M E S   H I G H E R   E D   0 2 0 3 ,   P 1 3 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 0 < 9 5 3 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - C ;   C R O N I N   B ,   1 9 9 3 ,   1 4 T H   N A T I O N A L   O N L I N E   M E E T I N G   :   P R O C E E D I N G S   1 9 9 3 ,   P 9 3 ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 5 3 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 8 ) 4 5 : 7 < 5 3 7 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - Q ;   C R O N I N   B ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 3 ;   C r o n i n   B . ,   1 9 9 5 ,   S C H O L A R S   C O U R T E S Y   R O ;   C U N N I N G H A M   D J ,   1 9 9 9 ,   C O G N I T I O N   S E M I O S I S   R ;   C Z A R N I A W S K A J O E R . B ,   1 9 9 8 ,   N A R R A T I V E   A P P R O A C H   O ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   F i s h   S t a n l e y ,   1 9 8 9 ,   D O I N G   W H A T   C O M E S   N A T ;   F O U C A U L T   M ,   1 9 9 7 ,   D I S C I P L I N E   P U N I S H   B R ;   F U L L E R   S ,   1 9 9 6 ,   C O M M U N I C A T I O N ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 0 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G l u c k   M ,   1 9 9 7 ,   I N F O R M A T I O N   S E E K I N G   I N   C O N T E X T ,   P 5 3 ;   G r a f t o n   A n t h o n y ,   1 9 9 7 ,   F O O T N O T E   C U R I O U S   H I S ;   H a l s e y   A . ,   1 9 9 5 ,   D E C L I N E   D O N N I S H   D O M I ;   H E A L E Y   P ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 7 3 ;   H I C K S   D ,   1 9 9 1 ,   S O C   S T U D   S C I ,   V 2 1 ,   P 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 1 0 2 1 0 0 3 0 0 3 ;   H o d g e s   S ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 2 2 9 ;   L A W R E N C E   S ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 7 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   M A C R O B E R T S   M H ,   1 9 8 6 ,   S O C   S T U D   S C I ,   V 1 6 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 6 0 1 6 0 0 1 0 0 8 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M C C A I N   K W ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 4 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 4 0 4 ;   M e a d o w s   A .   J . ,   1 9 9 8 ,   C O M M U N I C A T I N G   R E S ;   M e r t o n   R .   K ,   1 9 7 7 ,   S O C I O L O G Y   S C I   E U R O P E ,   P 3 ;   M O E D   H F ,   1 9 8 5 ,   R E S   P O L I C Y ,   V 1 4 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 5 ) 9 0 0 1 2 - 5 ;   O P P E N H E I M   C ,   1 9 9 5 ,   J   D O C ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 4 0 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   S E B E O K   T A ,   1 9 9 4 ,   S I G N S   I N T R O   S E M I O T I C ,   P 3 ;   S M A L L   H ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 5 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S O S T E R I C   M ,   1 9 9 9 ,   R A D I C A L   P E D A G O G Y ,   P 1 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 2 9 ;   W A R N E R   J ,   1 9 9 0 ,   J   D O C ,   V 4 6 ,   P 1 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 5 0 ;   W E B S T E R   F ,   1 9 9 5 ,   T H E O R I E S   I N F O R M A T I O N ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 8 4 ;   W i l l i a m s   N ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 1 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 2 9 6 . 1 8 ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ;   W O U T E R S   P ,   1 9 9 3 ,   W R I T I N G   H I S T   S C I E N T O 	 4 7 	 2 1 	 2 1 	 0 	 1 0 	 A S L I B 	 L O N D O N 	 S T A P L E   H A L L ,   S T O N E   H O U S E   C O U R T ,   L O N D O N   E C 3 A   7 P B ,   E N G L A N D 	 0 0 2 2 - 0 4 1 8 	 	 	 J   D O C 	 J .   D o c . 	 J U L 	 2 0 0 0 	 5 6 	 4 	 	 	 	 	 4 4 0 	 4 5 3 	 	 1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 2 3 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 2 6 V D 	 W O S : 0 0 0 0 8 7 7 5 6 9 0 0 0 0 6 	 	 
 
 J 	 B h a t t a c h a r y y a ,   N ;   S h a p i r o ,   N L 	 	 	 	 B h a t t a c h a r y y a ,   N ;   S h a p i r o ,   N L 	 	 	 I n c r e a s e d   f e m a l e   a u t h o r s h i p   i n   o t o l a r y n g o l o g y   o v e r   t h e   p a s t   t h r e e   d e c a d e s 	 L A R Y N G O S C O P E 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 M e e t i n g   o f   t h e   W e s t e r n   S e c t i o n   o f   t h e   A m e r i c a n - L a r y n g o l o g i c a l - R h i n o l o g i c a l - a n d - O t o l o g i c a l - S o c i e t y 	 J A N   0 8 - 0 9 ,   2 0 0 0 	 S A N   F R A N C I S C O ,   C A L I F O R N I A 	 A m e r   L a r y n g o l   R h i n o l   &   O t o l o g   S o c ,   W e s t e r n   S e c t 	 	 s t a t i s t i c s ;   p e r i o d i c a l   p u b l i c a t i o n s ;   b i b l i o m e t r i c s 	 O R D E R 	 O b j e c t i v e :   T o   i d e n t i f y   c h a n g i n g   t r e n d s   i n   f e m a l e   a u t h o r s h i p   a n d   p u b l i c a t i o n   i n   t h e   o t o l a r y n g o l o g y   l i t e r a t u r e .   M e t h o d s :   A l l   a r t i c l e s   p u b l i s h e d   i n   t h e   f o u r   m a j o r   o t o l a r y n g o l o g y   j o u r n a l s   i n   e a c h   o f   t h e   y e a r s   1 9 7 8 ,   1 9 8 8 ,   a n d   1 9 9 8   w e r e   r e v i e w e d   T h e   a u t h o r s h i p   p a n e l   o f   e a c h   a r t i c l e   w a s   e x a m i n e d   f o r   n u m b e r   o f   a u t h o r s ,   g e n d e r ,   e d u c a t i o n a l   d e g r e e   c a t e g o r y ,   a n d   s u b s p e c i a l t y   a r e a   o f   p u b l i c a t i o n .   D a t a   w e r e   a n a l y z e d   f o r   t r e n d s   i n   f e m a l e   a u t h o r s h i p   a n d   t h e   a s s o c i a t i o n   o f   g e n d e r   w i t h   t h e   o t h e r   d e s i g n   v a r i a b l e s .   R e s u l t s :   A   t o t a l   o f   2 , 4 6 3   a r t i c l e s   w e r e   a n a l y z e d .   T h e   a v e r a g e   p e r c e n t a g e   o f   f e m a l e   a u t h o r s h i p   i n c r e a s e d   f r o m   4 . 1 %   i n   1 9 7 8   t o   8 . 7 %   i n   1 9 8 8   a n d   1 2 . 4 %   i n   1 9 9 8 ,   a n d   t h e   p e r c e n t a g e   o f   a r t i c l e s   w i t h   a   f e m a l e   " f i r s t   a u t h o r "   i n c r e a s e d   f r o m   3 . 2 %   t o   7 . 4 %   a n d   1 1 . 4 %   f o r   t h e   s a m e   y e a r s ,   r e s p e c t i v e l y .   E a c h   o f   t h e s e   i n c r e a s e s   w a s   s t a t i s t i c a l l y   s i g n i f i c a n t   ( P   < . 0 0 1 ) .   T h e   w e i g h t e d   r a n k   o f   f e m a l e   a u t h o r s h i p   a l s o   i n c r e a s e d   f r o m   0 . 0 6 3   t o   0 . 1 6 4   a n d   0 . 2 4 3   f o r   t h e   s a m e   y e a r s ,   r e s p e c t i v e l y   ( P   < . 0 0 1 ) .   W i t h   r e s p e c t   t o   s u b s p e c i a l t y   p u b l i c a t i o n ,   w o m e n   w e r e   f i r s t   a u t h o r s   o f   1 4 . 7 %   o f   a r t i c l e s   c o n c e r n i n g   p e d i a t r i c   o t o l a r y n g o l o g y   b u t   a c c o u n t e d   f o r   9 . 9 %   o r   l e s s   o f   t h e   f i r s t   a u t h o r s   i n   t h e   o t h e r   s u b s p e c i a l t y   a r e a s   ( P   < . 0 0 1 ) .   F e m a l e   a u t h o r s   w e r e   a l s o   m u c h   m o r e   l i k e l y   t o   b e   n o n p h y s i c i a n s   ( P   < . 0 0 1 )   t h a n   m e n .   C o n c l u s i o n s :   T h e r e   h a s   b e e n   a   s i g n i f i c a n t   t r e n d   t o w a r d   i n c r e a s e d   f e m a l e   a u t h o r s h i p   i n   t h e   o t o l a r y n g o l o g y   l i t e r a t u r e .   A   s i g n i f i c a n t   p o r t i o n   o f   t h i s   i s   a c c o u n t e d   f o r   b y   n o n p h y s i c i a n   f e m a l e   a u t h o r s ,   a n d   f e m a l e   a u t h o r s h i p   t e n d s   t o   b e   c o n c e n t r a t e d   i n   p e d i a t r i c   o t o l a r y n g o l o g y . 	 H a r v a r d   U n i v ,   B r i g h a m   &   W o m e n s   H o s p ,   S c h   M e d ,   D i v   O t o l a r y n g o l ,   B o s t o n ,   M A   0 2 1 1 5   U S A ;   H a r v a r d   U n i v ,   S c h   M e d ,   D e p t   O t o l   &   L a r y n g o l ,   B o s t o n ,   M A   0 2 1 1 5   U S A 	 B h a t t a c h a r y y a ,   N   ( r e p r i n t   a u t h o r ) ,   J o i n t   C t r   O t o l a r y n g o l ,   3 3 3   L o n g w o o d   A v e ,   B o s t o n ,   M A   0 2 1 1 5   U S A . 	 	 	 	 	 	 * A M   A C   O T ,   1 9 9 9 ,   B U L L E T I N ,   V 6 ,   P 2 4 ;   B h a t t a c h a r y y a   N ,   1 9 9 9 ,   L A R Y N G O S C O P E ,   V 1 0 9 ,   P 6 4 0 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 5 5 3 7 - 1 9 9 9 0 4 0 0 0 - 0 0 0 2 3 ;   H o e n   W P ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 7 ;   N a d o l   J B ,   1 9 9 9 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 2 1 ,   P 2 1 4 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 4 - 5 9 9 8 ( 9 9 ) 7 0 1 7 4 - 9 ;   N I C K E R S O N   K G ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 4 ,   P 1 8 1 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 4 . 1 4 . 1 8 1 3 ;   R I E S E N B E R G   D ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 4 ,   P 1 8 5 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 4 . 1 4 . 1 8 5 7 ;   R O S E N F E L D   R M ,   1 9 9 1 ,   A R C H   O T O L A R Y N G O L ,   V 1 1 7 ,   P 1 6 4 ;   S H A P I R O   D W ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 1 ,   P 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 1 . 6 . 4 3 8 ;   W i l c o x   L J ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 2 1 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 3 . 2 1 6 	 9 	 2 1 	 2 2 	 0 	 1 	 L I P P I N C O T T   W I L L I A M S   &   W I L K I N S 	 P H I L A D E L P H I A 	 5 3 0   W A L N U T   S T ,   P H I L A D E L P H I A ,   P A   1 9 1 0 6 - 3 6 2 1   U S A 	 0 0 2 3 - 8 5 2 X 	 	 	 L A R Y N G O S C O P E 	 L a r y n g o s c o p e 	 M A R 	 2 0 0 0 	 1 1 0 	 3 	 1 	 	 	 	 3 5 8 	 3 6 1 	 	 1 0 . 1 0 9 7 / 0 0 0 0 5 5 3 7 - 2 0 0 0 0 3 0 0 0 - 0 0 0 0 5 	 	 4 	 M e d i c i n e ,   R e s e a r c h   &   E x p e r i m e n t a l ;   O t o r h i n o l a r y n g o l o g y 	 R e s e a r c h   &   E x p e r i m e n t a l   M e d i c i n e ;   O t o r h i n o l a r y n g o l o g y 	 2 9 1 Q R 	 W O S : 0 0 0 0 8 5 7 4 8 0 0 0 0 0 5 	 1 0 7 1 8 4 1 9 	 
 
 J 	 S N Y D E R ,   H ;   C R O N I N ,   B ;   D A V E N P O R T ,   E 	 	 	 	 S N Y D E R ,   H ;   C R O N I N ,   B ;   D A V E N P O R T ,   E 	 	 	 W H A T S   T H E   U S E   O F   C I T A T I O N   -   C I T A T I O N   A N A L Y S I S   A S   A   L I T E R A T U R E   T O P I C   I N   S E L E C T E D   D I S C I P L I N E S   O F   T H E   S O C I A L - S C I E N C E S 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 B I B L I O M E T R I C S ;   C O M M U N I C A T I O N ;   I N F O R M A T I O N ;   N E T W O R K S 	 T h i s   s t u d y   s e e k s   t o   i n v e s t i g a t e   t h e   p l a c e   a n d   r o l e   o f   c i t a t i o n   a n a l y s i s   i n   o u r   o w n   d i s c i p l i n e   a n d   o t h e r   d i s c i p l i n e s ,   T h e   a u t h o r s   h a v e   e x a m i n e d   t h e   r e s e a r c h   l i t e r a t u r e   o f   i n f o r m a t i o n   s c i e n c e   a n d   o t h e r   d i s c i p l i n e s   i n   o r d e r   t o :   d e t e r m i n e   w h a t   p r o p o r t i o n   i s   d e v o t e d   t o   c i t a t i o n   a n a l y s i s ,   d e v e l o p   a n   i n d u c t i v e   t y p o l o g y   t o   c a t e g o r i z e   t h e   m a j o r   f o c i   o f   r e s e a r c h   b e i n g   c o n d u c t e d   u n d e r   t h e   r u b r i c   o f   c i t a t i o n   a n a l y s i s ,   a n d   u s e   t h e   t y p o l o g y   t o   d e t e r m i n e   h o w   c i t a t i o n   a n a l y s i s   i s   a p p l i e d   w i t h i n   i n f o r m a t i o n   s c i e n c e   a n d   o t h e r   d i s c i p l i n e s .   B y   i s o l a t i n g   c i t a t i o n   f r o m   b i b l i o m e t r i c s   i n   g e n e r a l ,   a n d   b y   e x p l o r i n g   t h e   t o p i c   a c r o s s   l i t e r a t u r e s ,   t h e   a u t h o r s   d i f f e r e n t i a t e   t h e i r   w o r k   f r o m   p r e v i o u s   s t u d i e s ,   A n a l y s i s   o f   d a t a   f r o m   a   t e n - y e a r   s a m p l e   o f   t r a n s d i s c i p l i n a r y   s o c i a l   s c i e n c e s   l i t e r a t u r e   s u g g e s t s   t h a t   t w o   a p p l i c a t i o n   a r e a s   p r e d o m i n a t e :   t h e   v a l i d i t y   o f   c i t a t i o n   a s   a n   e v a l u a t i o n   t o o l ,   a n d   i m p a c t   o r   p e r f o r m a n c e   s t u d i e s   o f   a u t h o r s ,   j o u r n a l s   a n d   i n s t i t u t i o n s . 	 Q U E E N   M A R G A R E T   C O L L , E D I N B U R G H , M I D L O T H I A N , S C O T L A N D 	 S N Y D E R ,   H   ( r e p r i n t   a u t h o r ) ,   I N D I A N A   U N I V , S C H   L I B   &   I N F O R M A T   S C I , B L O O M I N G T O N , I N   4 7 4 0 5 ,   U S A . 	 	 	 	 	 	 B E N A R I   E ,   1 9 8 7 ,   J   A N T H R O P O L   R E S ,   V 4 3 ,   P 6 3 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C h u b i n   D .   R . ,   1 9 9 0 ,   P E E R L E S S   S C I   P E E R   R E ;   C O L L I N S   H M ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 2 0 3 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   C O Z Z E N S   S E ,   1 9 8 4 ,   N E W   D I R E C T I O N S   S O C I O ;   C R O N I N   B ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 3 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 2 8 3 1 5 3 9 0 0 1 6 0 0 6 0 6 ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   I r v i n e   J ,   1 9 8 4 ,   F O R E S I G H T   S C I ;   I R V I N E   J ,   1 9 8 0 ,   S C I   Y U G O S L A V I C A ,   V 6 ,   P 8 3 ;   J A R V E L I N   K ,   1 9 9 1 ,   C O N C E P T I O N S   L I B R A R Y ,   P 1 0 9 ;   L I U   M X ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 3 7 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 2 0 ;   M a r t i n   B . ,   1 9 8 9 ,   R E S   F O R E S I G H T   P R I O R I ;   M C C A I N   K W ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 4 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 4 0 4 ;   P A I S L E Y   W ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 7 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 1 0 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 4 2 7 ;   S t e m p e l   I I I   G .   H . ,   1 9 5 2 ,   J O U R N A L I S M   Q U A R T ,   V 2 9 ,   P 3 3 3 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   1 9 9 3 ,   B U S I N E S S   W E E K       0 8 0 9 ,   P 5 7 	 2 0 	 2 1 	 2 1 	 2 	 1 5 	 B O W K E R - S A U R   L T D 	 E   G R I N S T E A D 	 M A Y P O L E   H O U S E ,   M A Y P O L E   R D ,   E   G R I N S T E A D ,   W   S U S S E X ,   E N G L A N D   R H 1 9   1 H H 	 1 3 5 2 - 7 4 6 0 	 	 	 J   I N F O R M   S C I 	 J .   I n f .   S c i . 	 	 1 9 9 5 	 2 1 	 2 	 	 	 	 	 7 5 	 8 5 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 5 0 2 1 0 0 2 0 2 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 Q U 8 3 0 	 W O S : A 1 9 9 5 Q U 8 3 0 0 0 0 0 2 	 	 
 
 J 	 M e r i g o ,   J M ;   G i l - L a f u e n t e ,   A M ;   Y a g e r ,   R R 	 	 	 	 M e r i g o ,   J o s e   M . ;   G i l - L a f u e n t e ,   A n n a   M . ;   Y a g e r ,   R o n a l d   R . 	 	 	 A n   o v e r v i e w   o f   f u z z y   r e s e a r c h   w i t h   b i b l i o m e t r i c   i n d i c a t o r s 	 A P P L I E D   S O F T   C O M P U T I N G 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   F u z z y   r e s e a r c h ;   H - i n d e x ;   W e b   o f   s c i e n c e 	 C O M P U T A T I O N A L   I N T E L L I G E N C E   F I E L D ;   C I T A T I O N   A N A L Y S I S ;   R E S E A R C H   O U T P U T ;   K N O W L E D G E - B A S E ;   I M P A C T   F A C T O R ;   I N F O R M E T R I C S ;   P R O D U C T I V I T Y ;   M A N A G E M E N T ;   E V O L U T I O N ;   J O U R N A L S 	 B i b l i o m e t r i c s   i s   a   d i s c i p l i n e   t h a t   a n a l y z e s   b i b l i o g r a p h i c   m a t e r i a l   f r o m   a   q u a n t i t a t i v e   p e r s p e c t i v e .   I t   i s   v e r y   u s e f u l   f o r   c l a s s i f y i n g   i n f o r m a t i o n   a c c o r d i n g   t o   d i f f e r e n t   v a r i a b l e s ,   i n c l u d i n g   j o u r n a l s ,   i n s t i t u t i o n s   a n d   c o u n t r i e s .   T h i s   p a p e r   p r e s e n t s   a   g e n e r a l   o v e r v i e w   o f   r e s e a r c h   i n   t h e   f u z z y   s c i e n c e s   u s i n g   b i b l i o m e t r i c   i n d i c a t o r s .   T h e   m a i n   a d v a n t a g e   i s   t h a t   t h e s e   i n d i c a t o r s   p r o v i d e   a   g e n e r a l   p i c t u r e ,   i d e n t i f y i n g   s o m e   o f   t h e   m o s t   i n f l u e n t i a l   r e s e a r c h   i n   t h i s   a r e a .   T h e   a n a l y s i s   i s   d i v i d e d   i n t o   k e y   s e c t i o n s   f o c u s e d   o n   r e l e v a n t   j o u r n a l s ,   p a p e r s ,   a u t h o r s ,   i n s t i t u t i o n s   a n d   c o u n t r i e s .   M o s t   o f   t h e   r e s u l t s   a r e   i n   a c c o r d a n c e   w i t h   o u r   c o m m o n   k n o w l e d g e ,   a l t h o u g h   s o m e   u n e x p e c t e d   r e s u l t s   a r e   a l s o   f o u n d .   N o t e   t h a t   t h e   a i m   o f   t h i s   p a p e r   i s   t o   b e   i n f o r m a t i v e ,   a n d   t h e s e   i n d i c a t o r s   i d e n t i f y   m o s t   o f   t h e   f u n d a m e n t a l   r e s e a r c h   i n   t h i s   f i e l d .   H o w e v e r ,   s o m e   v e r y   i n f l u e n t i a l   i s s u e s   m a y   b e   o m i t t e d   i f   t h e y   a r e   n o t   i n c l u d e d   i n   t h e   W e b   o f   S c i e n c e   d a t a b a s e ,   w h i c h   i s   u s e d   f o r   c a r r y i n g   o u t   t h e   b i b l i o m e t r i c   a n a l y s i s .   C r o w n   C o p y r i g h t   ( C )   2 0 1 4   P u b l i s h e d   b y   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ M e r i g o ,   J o s e   M . ]   U n i v   M a n c h e s t e r ,   M a n c h e s t e r   S c h   B u s i n e s s ,   B o o t h   S t   W e s t ,   M a n c h e s t e r   M 1 5   6 P B ,   L a n c s ,   E n g l a n d ;   [ M e r i g o ,   J o s e   M . ]   U n i v   C h i l e ,   D e p t   M a n a g e m e n t   C o n t r o l   &   I n f o r m a t   S y s t ,   S a n t i a g o   8 3 3 0 0 1 5 ,   C h i l e ;   [ G i l - L a f u e n t e ,   A n n a   M . ]   U n i v   B a r c e l o n a ,   D e p t   B u s i n e s s   A d m ,   B a r c e l o n a   0 8 0 3 4 ,   S p a i n ;   [ Y a g e r ,   R o n a l d   R . ]   I o n a   C o l l ,   M a c h i n e   I n t e l l i g e n c e   I n s t ,   N e w   R o c h e l l e ,   N Y   1 0 8 0 1   U S A 	 M e r i g o ,   J M   ( r e p r i n t   a u t h o r ) ,   U n i v   M a n c h e s t e r ,   M a n c h e s t e r   S c h   B u s i n e s s ,   B o o t h   S t   W e s t ,   M a n c h e s t e r   M 1 5   6 P B ,   L a n c s ,   E n g l a n d . 	 j o s e . m e r i g o l i n d a h l @ m b s . a c . u k ;   a m g i l @ u b . e d u ;   y a g e r @ p a n i x . c o m 	 M e r i g o ,   J o s e   M . / G - 3 6 1 4 - 2 0 1 0 	 M e r i g o ,   J o s e   M . / 0 0 0 0 - 0 0 0 2 - 4 6 7 2 - 6 9 6 1 	 S p a n i s h   M i n i s t r y   o f   F o r e i g n   A f f a i r s   ( A E C I D )   [ A / 0 1 6 2 3 9 / 0 8 ] ;   E u r o p e a n   C o m m i s s i o n   [ P I E F - G A - 2 0 1 1 - 3 0 0 0 6 2 ] 	 W e   w o u l d   l i k e   t o   t h a n k   F r a n c i s c o   H e r r e r a ,   E n r i q u e   H e r r e r a - V i e d m a   a n d   t h e   a n o n y m o u s   r e v i e w e r s   f o r   v a l u a b l e   c o m m e n t s   i n   p r e v i o u s   d r a f t s   t h a t   h a v e   i m p r o v e d   t h e   q u a l i t y   o f   t h e   p a p e r .   S u p p o r t   f r o m   t h e   S p a n i s h   M i n i s t r y   o f   F o r e i g n   A f f a i r s   ( A E C I D )   ( p r o j e c t   A / 0 1 6 2 3 9 / 0 8 )   a n d   t h e   E u r o p e a n   C o m m i s s i o n   ( P I E F - G A - 2 0 1 1 - 3 0 0 0 6 2 )   i s   g r a t e f u l l y   a c k n o w l e d g e d . 	 A l i e v   R . A . ,   2 0 0 1 ,   S O F T   C O M P U T I N G   I T S   A ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B a l t a g i   B H ,   2 0 0 7 ,   E C O N O M E T   T H E O R ,   V 2 3 ,   P 9 5 2 ,   D O I   1 0 . 1 0 1 7 / S 0 2 6 6 4 6 6 6 0 7 0 7 0 5 1 X ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B u s t i n c e   H . ,   2 0 0 8 ,   F U Z Z Y   S E T S   T H E I R   E X T ;   C o b o   M J ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 1 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 2 ;   D e n g   G F ,   2 0 1 2 ,   E X P E R T   S Y S T   A P P L ,   V 3 9 ,   P 6 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . e s w a . 2 0 1 1 . 1 2 . 0 0 1 ;   D u b o i s   D .   J . ,   1 9 8 0 ,   F U Z Z Y   S E T S   S Y S T E M S   T ;   F a g e r b e r g   J ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 3 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 0 8 ;   G a r c i a - C a s t r i l l o   P ,   2 0 0 2 ,   A P P L   E C O N ,   V 3 4 ,   P 1 4 5 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 0 3 6 8 4 0 1 1 0 1 0 2 7 7 0 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G e n e s t   C ,   2 0 0 2 ,   C A N   J   S T A T ,   V 3 0 ,   P 3 2 9 ,   D O I   1 0 . 2 3 0 7 / 3 3 1 5 9 5 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o e p n e r   A G F ,   2 0 1 2 ,   E C O L   E C O N ,   V 7 7 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 1 2 . 0 3 . 0 0 2 ;   H o l s a p p l e   C W ,   2 0 1 0 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 8 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 9 . 0 8 . 0 0 2 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   H s i e h   P N ,   2 0 0 9 ,   I N T   J   P R O D   E C O N ,   V 1 2 0 ,   P 5 4 0 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 9 . 0 3 . 0 1 5 ;   K l i r   G . J . ,   1 9 9 5 ,   F U Z Z Y   S E T S   F U Z Z Y   S E T ;   L a n d s t r o m   H ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 1 1 5 4 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 2 . 0 3 . 0 0 9 ;   L e o n e   R P ,   2 0 1 2 ,   J   B U S   R E S ,   V 6 5 ,   P 1 0 1 0 ,   D O I   1 0 . 1 0 1 6 / j . j b u s r e s . 2 0 1 1 . 0 4 . 0 0 7 ;   L i u   J S ,   2 0 1 3 ,   O M E G A - I N T   J   M A N A G E   S ,   V 4 1 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 1 0 . 1 2 . 0 0 6 ;   L o p e z - H e r r e r a   A G ,   2 0 0 9 ,   I N F O R M   R E S ,   V 1 4 ;   M a r t i n e z   M A ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 9 8 ,   P 1 9 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 1 5 5 - 9 ;   P i l k i n g t o n   A ,   2 0 0 9 ,   J   O P E R   M A N A G ,   V 2 7 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 8 . 0 8 . 0 0 1 ;   P o d s a k o f f   P M ,   2 0 0 8 ,   J   M A N A G E ,   V 3 4 ,   P 6 4 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 8 3 1 9 5 3 3 ;   S e g g i e   S H ,   2 0 0 9 ,   J   M A R K E T I N G ,   V 7 3 ,   P 1 2 2 ,   D O I   1 0 . 1 5 0 9 / j m k g . 7 3 . 1 . 1 2 2 ;   S t o n e b r a k e r   J S ,   2 0 1 2 ,   J   O P E R   M A N A G ,   V 3 0 ,   P 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 1 1 . 0 5 . 0 0 2 ;   V a n   E c k   N J ,   2 0 0 7 ,   I N T   J   U N C E R T A I N   F U Z Z ,   V 1 5 ,   P 6 2 5 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 4 8 8 5 0 7 0 0 4 9 1 1 ;   v a n   E c k   N J ,   2 0 0 6 ,   I E E E   C O M P U T   I N T E L L   M ,   V 1 ,   P 6 ,   D O I   1 0 . 1 1 0 9 / C I - M . 2 0 0 6 . 2 4 8 0 4 3 ;   W a g s t a f f   A ,   2 0 1 2 ,   J   H E A L T H   E C O N ,   V 3 1 ,   P 4 0 6 ,   D O I   1 0 . 1 0 1 6 / j . j h e a l e c o . 2 0 1 2 . 0 3 . 0 0 2 ;   Y a g e r   R R ,   2 0 1 3 ,   S T U D   F U Z Z   S O F T   C O M P ,   V 2 9 1 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 6 4 2 - 3 4 9 2 2 - 5 ;   Y A G E R   R R ,   1 9 8 8 ,   I E E E   T   S Y S T   M A N   C Y B ,   V 1 8 ,   P 1 8 3 ,   D O I   1 0 . 1 1 0 9 / 2 1 . 8 7 0 6 8 ;   Y i n   M S ,   2 0 1 3 ,   E X P E R T   S Y S T   A P P L ,   V 4 0 ,   P 2 7 6 7 ,   D O I   1 0 . 1 0 1 6 / j . e s w a . 2 0 1 2 . 1 1 . 0 0 2 ;   Z a d e h   L .   A . ,   1 9 7 8 ,   F u z z y   S e t s   a n d   S y s t e m s ,   V 1 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 5 - 0 1 1 4 ( 7 8 ) 9 0 0 2 9 - 5 ;   Z A D E H   L A ,   1 9 7 5 ,   I N F O R M   S C I E N C E S ,   V 8 ,   P 1 9 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 5 5 ( 7 5 ) 9 0 0 3 6 - 5 ;   Z A D E H   L A ,   1 9 9 4 ,   C O M M U N   A C M ,   V 3 7 ,   P 7 7 ,   D O I   1 0 . 1 1 4 5 / 1 7 5 2 4 7 . 1 7 5 2 5 5 ;   Z A D E H   L A ,   1 9 6 5 ,   I N F O R M   C O N T R O L ,   V 8 ,   P 3 3 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 6 5 ) 9 0 2 4 1 - X ;   Z a d e h   L A ,   2 0 0 8 ,   I N F O R M   S C I E N C E S ,   V 1 7 8 ,   P 2 7 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i n s . 2 0 0 8 . 0 2 . 0 1 2 ;   Z i m m e r m a n n   H J ,   1 9 8 5 ,   F U Z Z Y   S E T   T H E O R Y   I T S 	 3 9 	 2 0 	 2 0 	 6 	 6 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 5 6 8 - 4 9 4 6 	 1 8 7 2 - 9 6 8 1 	 	 A P P L   S O F T   C O M P U T 	 A p p l .   S o f t .   C o m p u t . 	 F E B 	 2 0 1 5 	 2 7 	 	 	 	 	 	 4 2 0 	 4 3 3 	 	 1 0 . 1 0 1 6 / j . a s o c . 2 0 1 4 . 1 0 . 0 3 5 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   A r t i f i c i a l   I n t e l l i g e n c e ;   C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s 	 C o m p u t e r   S c i e n c e 	 A X 3 R M 	 W O S : 0 0 0 3 4 6 8 5 6 6 0 0 0 3 4 	 	 
 
 J 	 L i u ,   X J ;   Z h a n ,   F B ;   H o n g ,   S ;   N i u ,   B B ;   L i u ,   Y L 	 	 	 	 L i u ,   X i n g j i a n ;   Z h a n ,   F .   B e n j a m i n ;   H o n g ,   S o n g ;   N i u ,   B e i b e i ;   L i u ,   Y a o l i n 	 	 	 A   b i b l i o m e t r i c   s t u d y   o f   e a r t h q u a k e   r e s e a r c h :   1 9 0 0 - 2 0 1 0 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   E v a l u a t i o n ;   E a r t h q u a k e ;   R e s e a r c h   p e r f o r m a n c e 	 C A N N O T 	 W e   e v a l u a t e d   e a r t h q u a k e   r e s e a r c h   p e r f o r m a n c e   b a s e d   o n   a   b i b l i o m e t r i c   a n a l y s i s   o f   8 4 , 0 5 1   d o c u m e n t s   p u b l i s h e d   i n   j o u r n a l s   a n d   o t h e r   o u t l e t s   c o n t a i n e d   i n   t h e   S c i e n t i f i c   C i t a t i o n   I n d e x   ( S C I )   a n d   S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S S C I )   b i b l i o g r a p h i c   d a t a b a s e s   f o r   t h e   p e r i o d   o f   1 9 0 0 - 2 0 1 0 .   W e   s u m m a r i z e d   s i g n i f i c a n t   p u b l i c a t i o n   i n d i c a t o r s   i n   e a r t h q u a k e   r e s e a r c h ,   e v a l u a t e d   n a t i o n a l   a n d   i n s t i t u t i o n a l   r e s e a r c h   p e r f o r m a n c e ,   a n d   p r e s e n t e d   e a r t h q u a k e   r e s e a r c h   d e v e l o p m e n t   f r o m   a   s u p p l e m e n t a r y   p e r s p e c t i v e .   R e s e a r c h   o u t p u t   d e s c r i p t o r s   s u g g e s t e d   a   s o l i d   d e v e l o p m e n t   i n   e a r t h q u a k e   r e s e a r c h ,   i n   t e r m s   o f   i n c r e a s i n g   s c i e n t i f i c   p r o d u c t i o n   a n d   r e s e a r c h   c o l l a b o r a t i o n .   W e   i d e n t i f i e d   l e a d i n g   a u t h o r s ,   i n s t i t u t i o n s ,   a n d   n a t i o n s   i n   e a r t h q u a k e   r e s e a r c h ,   a n d   t h e r e   w a s   a n   u n e v e n   d i s t r i b u t i o n   o f   p u b l i c a t i o n s   a t   a u t h o r i a l ,   i n s t i t u t i o n a l ,   a n d   n a t i o n a l   l e v e l s .   T h e   m o s t   c o m m o n l y   u s e d   k e y w o r d s   a p p e a r e d   i n   t h e   a r t i c l e s   w e r e   e v o l u t i o n ,   C a l i f o r n i a ,   d e f o r m a t i o n ,   m o d e l ,   i n v e r s i o n ,   s e i s m i c i t y ,   t e c t o n i c s ,   c r u s t a l   s t r u c t u r e ,   f a u l t ,   z o n e ,   l i t h o s p h e r e ,   a n d   a t t e n u a t i o n . 	 [ L i u ,   X i n g j i a n ;   H o n g ,   S o n g ;   N i u ,   B e i b e i ;   L i u ,   Y a o l i n ]   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a ;   [ L i u ,   X i n g j i a n ]   U n i v   C a m b r i d g e ,   D e p t   G e o g ,   C a m b r i d g e   C B 2   3 E N ,   E n g l a n d ;   [ Z h a n ,   F .   B e n j a m i n ]   S W   T e x a s   S t a t e   U n i v ,   D e p t   G e o g ,   T e x a s   C t r   G e o g   I n f o r m a t   S c i ,   S a n   M a r c o s ,   T X   7 8 6 6 6   U S A 	 L i u ,   Y L   ( r e p r i n t   a u t h o r ) ,   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a . 	 y a o l i n 6 1 0 @ 1 6 3 . c o m 	 	 	 N a t i o n a l   H i g h - t e c h   R & D   P r o g r a m   o f   C h i n a   [ 2 0 0 9 A A 1 2 2 0 0 1 ,   2 0 1 1 A A 1 2 0 3 0 4 ] 	 T h e   a u t h o r s   a r e   t h a n k f u l   t o   P r o f .   Y u h - S h a n   H o   ( P e k i n g   U n i v e r s i t y ,   C h i n a )   f o r   h i s   p i o n e e r i n g   w o r k   i n   t h e   b i b l i o m e t r i c   m e t h o d s   t h a t   w e r e   e m p l o y e d   i n   t h i s   s t u d y .   T h e   a u t h o r s   w o u l d   l i k e   t o   t h a n k   f u n d i n g   s u p p o r t   f r o m   N a t i o n a l   H i g h - t e c h   R & D   P r o g r a m   o f   C h i n a   ( 2 0 0 9 A A 1 2 2 0 0 1 ;   2 0 1 1 A A 1 2 0 3 0 4 ) .   C o m m e n t s   f r o m   t h e   a n o n y m o u s   r e f e r e e s   a n d   t h e   e d i t o r   a r e   a l s o   g r a t e f u l l y   a p p r e c i a t e d .   A l l   e r r o r s   r e m a i n   t h e   a u t h o r s '   o w n . 	 A n d r e s   A ,   2 0 0 9 ,   M E A S U R I N G   A C A D E M I C   R E S E A R C H :   H O W   T O   U N D E R T A K E   A   B I B L I O M E T R I C   S T U D Y ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 1 8 2 ;   B R U N E   J N ,   1 9 7 0 ,   J   G E O P H Y S   R E S ,   V 7 5 ,   P 4 9 9 7 ,   D O I   1 0 . 1 0 2 9 / J B 0 7 5 i 0 2 6 p 0 4 9 9 7 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h i u   W T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 1 5 2 3 - 1 ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R   C O N T E N T S ,   V 3 2 ,   P 5 ;   G e l l e r   R J ,   1 9 9 7 ,   G E O P H Y S   J   I N T ,   V 1 3 1 ,   P 4 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 4 6 X . 1 9 9 7 . t b 0 6 5 8 8 . x ;   G e l l e r   R J ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 1 6 1 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 6 . 1 6 1 6 ;   G o k c e o g l u   C ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 4 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 1 3 - x ;   H o u g h   S . ,   2 0 0 9 ,   P R E D I C T I N G   U N P R E D I C T ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   L i   Y o u p i n g ,   2 0 0 9 ,   J   E v i d   B a s e d   M e d ,   V 2 ,   P 2 5 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 5 6 - 5 3 9 1 . 2 0 0 9 . 0 1 0 4 3 . x ;   L i n d e l l   M K ,   2 0 0 0 ,   E N V I R O N   B E H A V ,   V 3 2 ,   P 4 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 3 9 1 6 0 0 2 1 9 7 2 6 2 1 ;   L i u   X J ,   2 0 1 1 ,   B I O D I V E R S   C O N S E R V ,   V 2 0 ,   P 8 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 1 0 - 9 9 8 1 - z ;   M C D O N O U G H   W F ,   1 9 9 5 ,   C H E M   G E O L ,   V 1 2 0 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 9 - 2 5 4 1 ( 9 4 ) 0 0 1 4 0 - 4 ;   M i k k i   S ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 8 - 6 ;   N E D E R H O F   A J ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 3 ;   O k a d a   Y ,   2 0 0 4 ,   E A R T H   P L A N E T S   S P A C E ,   V 5 6 ,   p X V ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R o s a s   S R ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 7 4 2 8 ;   S h e e b a   J . ,   2 0 1 1 ,   I N T   J   A C T I O N   R E S   E N G ,   V 2 ,   P 5 5 5 ;   S l y d e r   J B ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 9 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 6 7 - x ;   T a s k i n   Z ,   2 0 1 0 ,   C O M M   C O M   I N F   S C ,   V 9 6 ,   P 2 2 2 ;   T h o m s o n   R e u t e r ,   2 0 1 0 ,   S P E C   T O P   E A R T H Q   T O P ;   T s a y   M Y ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 5 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 6 0 - 4 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 8 ,   P 8 1 ;   W a l t m a n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 6 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 7 . 0 0 2 ;   W E L L S   D L ,   1 9 9 4 ,   B   S E I S M O L   S O C   A M ,   V 8 4 ,   P 9 7 4 ;   W y s s   M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 8 ,   P 4 8 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 8 . 5 3 3 7 . 4 8 7 ;   Z h a n   F B ,   2 0 1 1 ,   G E O S P A T I A L   I N F O R M   S C ,   V 1 4 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 8 0 6 - 0 1 1 - 0 4 4 0 - 0 ;   Z h u   Y Q ,   2 0 1 0 ,   B   S E I S M O L   S O C   A M ,   V 1 0 0 ,   P 2 8 1 5 ,   D O I   1 0 . 1 7 8 5 / 0 1 2 0 1 0 0 0 8 1 	 3 0 	 2 0 	 2 2 	 3 	 7 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 2 0 1 2 	 9 2 	 3 	 	 	 	 	 7 4 7 	 7 6 5 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 9 9 - z 	 	 1 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 8 8 U Z 	 W O S : 0 0 0 3 0 7 5 1 7 5 0 0 0 1 5 	 	 
 
 J 	 C o s t a s ,   R ;   v a n   L e e u w e n ,   T N 	 	 	 	 C o s t a s ,   R o d r i g o ;   v a n   L e e u w e n ,   T h e d   N . 	 	 	 A p p r o a c h i n g   t h e   " r e w a r d   t r i a n g l e " :   G e n e r a l   a n a l y s i s   o f   t h e   p r e s e n c e   o f   f u n d i n g   a c k n o w l e d g m e n t s   a n d   " p e e r   i n t e r a c t i v e   c o m m u n i c a t i o n "   i n   s c i e n t i f i c   p u b l i c a t i o n s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   p u b l i c a t i o n s ;   c i t a t i o n   a n a l y s i s 	 S O C I A L - S C I E N C E S ;   C O L L A B O R A T I O N ;   A U T H O R S H I P ;   P A T T E R N S ;   C I T A T I O N ;   2 0 T H - C E N T U R Y ;   C O O P E R A T I O N ;   H U M A N I T I E S ;   I S S U E S 	 U n d e r s t a n d i n g   t h e   r o l e   o f   a c k n o w l e d g m e n t s   g i v e n   b y   r e s e a r c h e r s   i n   t h e i r   p u b l i c a t i o n s   h a s   b e e n   a   r e c u r r e n t   c h a l l e n g e   i n   t h e   b i b l i o m e t r i c   f i e l d ,   b u t   r e l a t i v e l y   u n e x p l o r e d   u n t i l   n o w .   T h i s   s t u d y   p r e s e n t s   a   g e n e r a l   b i b l i o m e t r i c   a n a l y s i s   o n   t h e   n e w   f u n d i n g   a c k n o w l e d g m e n t   ( F A )   i n f o r m a t i o n   a v a i l a b l e   i n   t h e   W e b   o f   S c i e n c e .   A l l   p u b l i c a t i o n s   c o v e r e d   b y   t h e   d a t a b a s e   i n   2 0 0 9   h a v e   b e e n   a n a l y z e d .   T h e   p r e s e n c e   a n d   l e n g t h   o f   t h e   F A   t e x t ,   a s   w e l l   a s   t h e   p r e s e n c e   o f   p e e r   i n t e r a c t i v e   c o m m u n i c a t i o n   i n   t h e   a c k n o w l e d g m e n t s ,   a r e   r e l a t e d   t o   i m p a c t   i n d i c a t o r s ,   d i s t r i b u t i o n   o f   p a p e r s   b y   f i e l d s ,   c o u n t r i e s   o f   t h e   a u t h o r s ,   a n d   c o l l a b o r a t i o n   l e v e l   o f   t h e   p a p e r s .   I t   i s   o b s e r v e d   t h a t   p u b l i c a t i o n s   w i t h   F A s   p r e s e n t   a   h i g h e r   i m p a c t   a s   c o m p a r e d   w i t h   p u b l i c a t i o n s   w i t h o u t   t h e m .   T h e r e   a r e   a l s o   d i f f e r e n c e s   a c r o s s   c o u n t r i e s   a n d   d i s c i p l i n e s   i n   t h e   s h a r e   o f   p u b l i c a t i o n s   w i t h   F A s   a n d   t h e   a c k n o w l e d g m e n t   o f   p e e r   i n t e r a c t i v e   c o m m u n i c a t i o n .   C h i n a   i s   t h e   c o u n t r y   w i t h   t h e   h i g h e s t   s h a r e   o f   p u b l i c a t i o n s   a c k n o w l e d g i n g   f u n d i n g ,   w h i l e   t h e   p r e s e n c e   o f   F A s   i n   t h e   h u m a n i t i e s   a n d   s o c i a l   s c i e n c e s   i s   v e r y   l o w   c o m p a r e d   t o   t h e   m o r e   b a s i c   d i s c i p l i n e s .   T h e   p r e s e n c e   o f   p e e r   i n t e r a c t i v e   c o m m u n i c a t i o n   i n   a c k n o w l e d g m e n t s   c a n   b e   l i n k e d   t o   c o u n t r i e s   t h a t   h a v e   a   s t r o n g   s c i e n t i f i c   t r a d i t i o n   a n d   a r e   i n c o r p o r a t e d   i n   s c i e n t i f i c   n e t w o r k s .   P e e r   i n t e r a c t i v e   c o m m u n i c a t i o n   i s   a l s o   c o m m o n   i n   t h e   f i e l d s   o f   h u m a n i t i e s   a n d   s o c i a l   s c i e n c e s   a n d   c a n   b e   l i n k e d   t o   l o w e r   l e v e l s   o f   c o - a u t h o r s h i p .   O b s e r v e d   p a t t e r n s   a r e   e x p l a i n e d   a n d   t o p i c s   o f   f u t u r e   r e s e a r c h   a r e   p r o p o s e d . 	 [ C o s t a s ,   R o d r i g o ;   v a n   L e e u w e n ,   T h e d   N . ]   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   N L - 2 3 3 3   A L   L e i d e n ,   N e t h e r l a n d s 	 C o s t a s ,   R   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s   C W T S ,   W a s s e n a a r s e w e g   6 2 A ,   N L - 2 3 3 3   A L   L e i d e n ,   N e t h e r l a n d s . 	 r c o s t a s @ c w t s . l e i d e n u n i v . n l ;   l e e u w e n @ c w t s . l e i d e n u n i v . n l 	 	 	 A u s t r a l i a n   D e p a r t m e n t   o f   I n n o v a t i o n ,   I n d u s t r y ,   S c i e n c e   a n d   R e s e a r c h 	 W e   a r e   v e r y   g r a t e f u l   t o   A n d r e w   F o r d   a n d   W a n g   C h a n   f r o m   t h e   A u s t r a l i a n   D e p a r t m e n t   o f   I n n o v a t i o n ,   I n d u s t r y ,   S c i e n c e   a n d   R e s e a r c h   f o r   t h e i r   i n s i g h t s   i n t o   t h e   C h i n e s e   s c i e n t i f i c   s y s t e m   a n d   t h e   r o l e   o f   f u n d i n g   a c k n o w l e d g m e n t s   i n   t h a t   c o u n t r y ;   a n d   a l s o   t o   S a r a h   d e   R i j c k e   a n d   C l i f f o r d   T a t u m   f r o m   C W T S   a n d   J u e   W a n g   f r o m   t h e   G e o r g i a   I n s t i t u t e   o f   T e c h n o l o g y   f o r   t h e i r   v a l u a b l e   c o m m e n t s   a n d   s u g g e s t i o n s .   T h e   r e f e r e e s   o f   t h e   j o u r n a l   a l s o   c o n t r i b u t e d   s i g n i f i c a n t l y   t o   t h e   i m p r o v e m e n t   o f   t h e   o r i g i n a l   m a n u s c r i p t . 	 A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A r u n a c h a l a m   S . ,   2 0 0 5 ,   H D B   Q U A N T I T A T I V E   S C I ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 2 7 5 5 - 9 _ 8 ;   A t k i n s o n   D . ,   1 9 9 9 ,   S C I   D I S C O U R S E   S O C I O H ;   B E N A R I   E ,   1 9 8 7 ,   J   A N T H R O P O L   R E S ,   V 4 3 ,   P 6 3 ;   B o r d o n s   M . ,   1 9 9 3 ,   R E S   E V A L U A T ,   V 3 ,   P 1 9 ;   B u i l d i n g   R u r a l   C o m m u n i t i e s   F u n d ,   2 0 1 1 ,   B U I L D   R U R   C O M M   F U N D ;   B u t l e r   L ,   2 0 0 1 ,   R E S   E V A L U A T ,   V 1 0 ,   P 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 1 7 8 1 7 7 7 1 4 1 ;   B u t l e r   L ,   1 9 9 8 ,   A U S T R   B I O M E D I C A L   R E S ;   B u t l e r   L ,   2 0 0 5 ,   N H M R C   S U P P O R T E D   R E S ;   C H O N e ,   2 0 1 1 ,   F U N D   A C K N   S T A N D   T E X T ;   C l a x t o n   L D ,   2 0 0 5 ,   M U T A T   R E S - R E V   M U T A T ,   V 5 8 9 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / j . m r r e v . 2 0 0 4 . 0 7 . 0 0 2 ;   C o s t a s   R . ,   2 0 1 1 ,   P   1 6   N O R D   W O R K S H   B I B ;   C r o n i n   B ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 5 3 ;   C r o n i n   B ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 7 8 ;   C R O N I N   B ,   1 9 9 3 ,   J   D O C ,   V 4 9 ,   P 2 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 0 9 ;   C R O N I N   B ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 4 0 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 0 8 ) 4 4 : 7 < 4 0 6 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 8 ;   C R O N I N   B ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 1 0 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 9 3 ;   C r o n i n   B l a i s e ,   1 9 9 5 ,   R E V   E S P   D O C   C I E N T ,   V 1 8 ,   P 1 7 2 ,   D O I   1 0 . 3 9 8 9 / r e d c . 1 9 9 5 . v 1 8 . i 2 . 6 5 4 ;   D A V I S   C H ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 5 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 1 2 ) 4 4 : 1 0 < 5 9 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - U ;   R i g b y   J . ,   2 0 0 4 ,   R E S   N E T W O R K   P R O G R A M M ;   G a r f i e l d   E . ,   1 9 8 2 ,   E S S A Y S   I N F O R M   S C I ,   V 3 ,   P 2 1 5 ;   G e s u a t o   S . ,   2 0 0 4 ,   L I N G U A   I N G L E S E   M E D I A ,   P 2 7 3 ;   G i l e s   C L ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 1 7 5 9 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 7 7 4 3 1 0 1 ;   G r o t h   P . ,   2 0 1 0 ,   P   W E B S C I 1 0   E X T   F R O N T ;   H y l a n d   K ,   2 0 0 4 ,   E N G L   S P E C I F   P U R P ,   V 2 3 ,   P 3 0 3 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 9 - 4 9 0 6 ( 0 3 ) 0 0 0 5 1 - 6 ;   I n t e r n a t i o n a l   C o m m i t t e e   o f   M e d i c a l   J o u r n a l   E d i t o r s ,   2 0 1 1 ,   B I O M E D I C A L   J   U N P U B ;   K A S S I R E R   J P ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 5 ,   P 1 5 1 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 1 1 2 1 3 2 5 2 1 1 2 ;   K a t z   J S ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 5 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 9 ;   L a u d e l   G ,   2 0 0 2 ,   R E S   E V A L U A T ,   V 1 1 ,   P 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 2 7 8 1 7 7 6 9 6 1 ;   L e v i t t   J M ,   2 0 1 1 ,   P R O   I N T   C O N F   S C I   I N F ,   P 1 0 1 3 ;   L u o   A . ,   2 0 0 6 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 4 3 0 1 1 8 7 ;   M C C A I N   K W ,   1 9 9 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 6 ,   P 4 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 1 0 1 6 0 0 4 0 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   N a t i o n a l   S c i e n c e   F o u n d a t i o n ,   2 0 0 9 ,   G R A N T   P O L   M A N   N S F   0 5 ;   N i c o l a i s e n   J e p p e ,   2 0 0 7 ,   I N F O R M   R E S ,   V 1 2 ;   N i c o l a i s e n   J ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 6 0 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 2 0 ;   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   2 0 1 1 ,   A C K N   N I H   S U P P ;   P E T E R S   H P F ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 9 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Q ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   P r i e m   J . ,   2 0 1 0 ,   1   M O N D A Y ,   V 1 5 ;   P r i e m   J . ,   2 0 1 0 ,   A L M E T R I C S   M A N I F E S T O ;   R e n n i e   D ,   1 9 9 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 8 ,   P 5 7 9 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 8 . 7 . 5 7 9 ;   R i g b y   J ,   2 0 1 1 ,   R E S   E V A L U A T ,   V 2 0 ,   P 3 6 5 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 1 1 X 1 3 1 6 4 3 8 9 6 7 0 3 9 2 ;   R o n s   N ,   2 0 1 1 ,   P R O   I N T   C O N F   S C I   I N F ,   P 1 0 4 9 ;   T h e   R o y a l   S o c i e t y ,   2 0 1 1 ,   K N O W L   N E T W   N A T ;   S a l a g e r - M e y e r   F ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 7 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 2 9 - y ;   S a l i t a   J .   T . ,   2 0 1 0 ,   J   E U R O P E A N   M E D   W R I T E ,   V 1 9 ,   P 3 6 ;   S c i e n c e - M e t r i x ,   2 0 1 0 ,   3 0   Y E A R S   S C I   S E C   M O V ;   S h a p i r a   P ,   2 0 1 0 ,   N A T U R E ,   V 4 6 8 ,   P 6 2 7 ,   D O I   1 0 . 1 0 3 8 / 4 6 8 6 2 7 a ;   S m i t s   P . ,   1 9 8 5 ,   I N T   J   E D U C   D E V ,   V 5 ,   P 1 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 7 3 8 - 0 5 9 3 ( 8 5 ) 9 0 0 0 3 - 3 ;   T h o m s o n   R e u t e r s ,   2 0 1 1 ,   F U N D   A C K N ;   T i e w   W .   S . ,   2 0 0 2 ,   M a l a y s i a n   J o u r n a l   o f   L i b r a r y   &   I n f o r m a t i o n   S c i e n c e ,   V 7 ,   P 4 3 ;   v a n   L e e u w e n   T N ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 2 6 - y ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 ;   W a n g   J ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 5 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 2 - 5 ;   W a n g   X W ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 1 ,   P 5 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 7 6 - 6 ;   W A N N E R   R A ,   1 9 8 1 ,   S O C I O L   E D U C ,   V 5 4 ,   P 2 3 8 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 5 6 6 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I S M   C O N ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 6 	 6 0 	 2 0 	 2 0 	 3 	 5 4 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 A U G 	 2 0 1 2 	 6 3 	 8 	 	 	 	 	 1 6 4 7 	 1 6 6 1 	 	 1 0 . 1 0 0 2 / a s i . 2 2 6 9 2 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 7 8 P X 	 W O S : 0 0 0 3 0 6 7 5 8 6 0 0 0 1 2 	 	 
 
 J 	 S m i t h ,   D R 	 	 	 	 S m i t h ,   D e r e k   R . 	 	 	 I m p a c t   f a c t o r s ,   s c i e n t o m e t r i c s   a n d   t h e   h i s t o r y   o f   c i t a t i o n - b a s e d   r e s e a r c h 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I m p a c t   f a c t o r ;   H i s t o r y ;   B i b l i o m e t r i c s ;   S c i e n t o m e t r i c s ;   C i t a t i o n   i n d e x i n g 	 J O U R N A L   I M P A C T ;   O C C U P A T I O N A L - H E A L T H ;   S C I E N T I F I C   J O U R N A L S ;   C O R E   J O U R N A L S ;   F A C T O R   T R E N D S ;   N U R S I N G   S C H O L A R S H I P ;   S C I E N C E ;   B I B L I O M E T R I C S ;   E R G O N O M I C S ;   I N D E X E S 	 F e w   c o n t e m p o r a r y   i n v e n t i o n s   h a v e   i n f l u e n c e d   a c a d e m i c   p u b l i s h i n g   a s   m u c h   a s   j o u r n a l   i m p a c t   f a c t o r s .   O n   t h e   o t h e r   h a n d ,   d e b a t e s   a n d   d i s c u s s i o n   o n   t h e   p o t e n t i a l   l i m i t a t i o n s   o f ,   a n d   a p p r o p r i a t e   u s e s   f o r ,   j o u r n a l   p e r f o r m a n c e   i n d i c a t o r s   a r e   a l m o s t   a s   l o n g   a s   t h e   h i s t o r y   o f   t h e   m e a s u r e s   t h e m s e l v e s .   G i v e n   t h a t   s c i e n t o m e t r i c s   i s   o f t e n   u n d e r t a k e n   u s i n g   b i b l i o m e t r i c   t e c h n i q u e s ,   t h e   h i s t o r y   o f   t h e   f o r m e r   i s   i n e x t r i c a b l y   l i n k e d   t o   t h e   l a t t e r .   A s   w i t h   a n y   c o n t r o v e r s y   i t   i s   d i f f i c u l t   t o   s e p a r a t e   a n   i n v e n t i o n   f r o m   i t s   h i s t o r y ,   a n d   f o r   t h e s e   r e a s o n s ,   t h e   c u r r e n t   a r t i c l e   p r o v i d e s   a n   o v e r v i e w   o f   s o m e   k e y   h i s t o r i c a l   e v e n t s   o f   r e l e v a n c e   t o   t h e   i m p a c t   f a c t o r .   W h e n   h e   f i r s t   p r o p o s e d   t h e   c o n c e p t   o v e r   h a l f   a   c e n t u r y   a g o ,   G a r f i e l d   d i d   n o t   r e a l i s e   t h a t   i m p a c t   f a c t o r s   w o u l d   o n e   d a y   b e c o m e   t h e   s u b j e c t   o f   s u c h   w i d e s p r e a d   c o n t r o v e r s y .   A s   t h e   c u r r e n t   S p e c i a l   I s s u e   o f   S c i e n t o m e t r i c s   s u g g e s t s ,   t h i s   d e b a t e   c o n t i n u e s   t o d a y . 	 U n i v   N e w c a s t l e ,   S c h   H l t h   S c i ,   F a c   H l t h ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a 	 S m i t h ,   D R   ( r e p r i n t   a u t h o r ) ,   U n i v   N e w c a s t l e ,   S c h   H l t h   S c i ,   F a c   H l t h ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a . 	 d e r e k . s m i t h @ n e w c a s t l e . e d u . a u 	 S m i t h ,   D e r e k / F - 4 8 4 4 - 2 0 1 0 ;   	 S m i t h ,   D e r e k / 0 0 0 0 - 0 0 0 2 - 8 2 0 2 - 2 5 2 3 	 	 	 A d a i r   W .   C . ,   1 9 5 5 ,   A M   D O C ,   V 6 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 0 6 0 1 0 5 ;   A l t h o u s e   B M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 3 6 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 3 6 - x ;   [ A n o n y m o u s ] ,   1 9 1 4 ,   L I B R A R Y ,   V 1 0 ,   P 9 5 ;   B o n i t z   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 1 0 7 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a u n   T ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 1 0 1 ;   B r a u n   T . ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 1 0 2 ;   B r a u n   T . ,   1 9 9 5 ,   C H E M   I N T E L L I G E N C E R ,   V 1 ,   P 3 1 ;   B r o d m a n   E ,   1 9 4 4 ,   B u l l   M e d   L i b r   A s s o c ,   V 3 2 ,   P 4 7 9 ;   B r o w n   H ,   2 0 0 7 ,   B R I T   M E D   J ,   V 3 3 4 ,   P 5 6 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 9 1 4 2 . 4 5 4 0 8 6 . A D ;   B u s h   V . ,   1 9 4 5 ,   A T L A N T I C   M O N T H L Y ,   V 1 7 6 ,   P 1 0 1 ;   C A W K E L L   A E ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 1 0 7 ;   C H U N G   K H ,   1 9 9 0 ,   J   F I N A N C ,   V 4 5 ,   P 3 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 2 8 8 2 4 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C o r o n a d o   R A ,   2 0 1 1 ,   P H Y S   T H E R ,   V 9 1 ,   P 6 4 2 ,   D O I   1 0 . 2 5 2 2 / p t j . 2 0 1 0 0 2 6 7 ;   C r o o k e s   P .   A . ,   2 0 0 9 ,   N U R S   E D U C   T O D A Y ,   V 3 0 ,   P 4 2 0 ;   D u l   J ,   2 0 0 5 ,   H U M   F A C T O R   E R G O N   M A N ,   V 1 5 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / h f m . 2 0 0 2 9 ;   D u l   J ,   2 0 0 4 ,   A P P L   E R G O N ,   V 3 5 ,   P 3 0 1 ,   D O I   1 0 . 1 0 1 6 / j . a p e r g o . 2 0 0 4 . 0 3 . 0 0 2 ;   E l k i n s   M R ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 6 2 - 0 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E ,   2 0 1 2 ,   W E B S I T E   E   G A R F I E L D ;   G a r f i e l d   E ,   1 9 8 0 ,   C U R R E N T   C O M M E N T S ,   V 1 9 ,   P 4 7 6 ;   G a r f i e l d   E ,   1 9 7 6 ,   E S S A Y S   I N F O R M   S C I ,   V 2 ,   P 5 5 6 ;   G a r f i e l d   E ,   2 0 0 7 ,   1 1   I N T   C   I N T   S O C   S C I ,   P 2 1 ;   G a r f i e l d   E ,   2 0 0 7 ,   I N T   M I C R O B I O L ,   V 1 0 ,   P 6 5 ,   D O I   1 0 . 2 4 3 6 / 2 0 . 1 5 0 1 . 0 1 . 1 0 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G l a n z e l   W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 3 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 6 6 - 9 ;   G r a v e l l   F .   W ,   1 9 5 4 ,   L I B   A S S   R E C O R D ,   V 5 6 ,   P 5 0 0 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   H u l m e   E . ,   1 9 2 3 ,   S T A T   B I B L I O   R E L A T I O N ;   H u l m e   E .   W . ,   1 9 2 5 ,   N A T U R E ,   V 1 1 6 ,   P 1 2 9 ;   H U T T O N   R S ,   1 9 6 1 ,   J   D O C ,   V 1 7 ,   P 3 ;   K e t e f i a n   S ,   2 0 1 0 ,   N U R S   H E A L T H   S C I ,   V 1 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 1 0 . 0 0 5 1 9 . x ;   L e h m a n n   S ,   2 0 0 6 ,   N A T U R E ,   V 4 4 4 ,   P 1 0 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 4 1 0 0 3 a ;   L e y d e s d o r f f   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 3 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 9 2 1 0 6 0 5 9 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M o g i l   J S ,   2 0 0 9 ,   P A I N ,   V 1 4 2 ,   P 4 8 ,   D O I   1 0 . 1 0 1 6 / j . p a i n . 2 0 0 8 . 1 1 . 0 1 2 ;   O g d e n   T L ,   2 0 0 8 ,   A N N   O C C U P   H Y G ,   V 5 2 ,   P 7 3 ,   D O I   1 0 . 1 0 9 3 / a n n h y g / m e n 0 0 2 ;   P r i c e   D .   J .   S . ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R o u s s e a u   R ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 4 9 - 1 ;   S e r i n g h a u s   M R ,   2 0 0 7 ,   B M C   B I O I N F O R M A T I C S ,   V 8 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 1 0 5 - 8 - 1 7 ;   S H A P I R O   F R ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 6 ) 4 3 : 5 < 3 3 7 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - T ;   S h a p i r o   F r e d   R . ,   1 9 9 1 ,   Y A L E   L A W   J ,   V 1 0 0 ,   P 1 4 4 9 ,   D O I   1 0 . 2 3 0 7 / 7 9 6 6 9 6 ;   S m i t h   D R ,   2 0 0 8 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 3 ,   P 1 1 4 ,   D O I   1 0 . 3 2 0 0 / A E O H . 6 3 . 3 . 1 1 4 - 1 2 2 ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 3 0 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 3 0 ;   S m i t h   D R ,   2 0 1 1 ,   N U R S   H E A L T H   S C I ,   V 1 3 ,   P 3 8 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 1 1 . 0 0 6 5 2 . x ;   S m i t h   D R ,   2 0 1 0 ,   I N T   J   N U R S   S T U D ,   V 4 7 ,   P 1 4 9 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 1 0 . 0 5 . 0 0 6 ;   S m i t h   D R ,   2 0 1 0 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 5 ,   P 1 7 3 ,   D O I   1 0 . 1 0 8 0 / 1 9 3 3 8 2 4 1 0 0 3 7 3 0 9 5 2 ;   S m i t h   D R ,   2 0 1 0 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 5 ,   P 1 0 6 ,   D O I   1 0 . 1 0 8 0 / 1 9 3 3 8 2 4 1 0 0 3 7 3 0 9 4 5 ;   S m i t h   D R ,   2 0 1 0 ,   H U M   F A C T O R   E R G O N   M A N ,   V 2 0 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / h f m . 2 0 1 6 5 ;   S m i t h   D R ,   2 0 0 9 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 4 ,   P 1 8 ,   D O I   1 0 . 1 0 8 0 / 1 9 3 3 8 2 4 0 9 0 3 2 8 4 1 7 7 ;   S m i t h   D R ,   2 0 0 9 ,   M A N U A L   T H E R ,   V 1 4 ,   P 4 5 6 ,   D O I   1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 1 1 . 0 0 4 ;   T a b e r   D F ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 9 ,   P 2 1 6 6 ;   T a k a h a s h i   K ,   1 9 9 6 ,   O C C U P   E N V I R O N   M E D ,   V 5 3 ,   P 4 3 3 ;   T H O M P S O N   A M ,   1 9 9 3 ,   J   H U M A N I S T   P S Y C H O L ,   V 3 3 ,   P 8 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 2 2 1 6 7 8 9 3 0 3 3 3 0 0 8 ;   T u r a l e   S ,   2 0 1 0 ,   N U R S   H E A L T H   S C I ,   V 1 2 ,   P 3 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 1 0 . 0 0 5 7 0 . x ;   V a n c l a y   J K ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 6 1 - 0 ;   V a n c l a y   J K ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 7 7 8 - 4 ;   W e i n b e r g   B H ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 3 1 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 4 ) 4 8 : 4 < 3 1 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - Z ;   W e i n b e r g   B e l l a   H a s s ,   1 9 9 9 ,   I N D E X E R ,   V 2 1 ,   P 1 1 1 ;   W e i n b e r g   B .   H . ,   2 0 0 0 ,   I N D E X E R   I N T   J   I N D E X I ,   V 2 2 ,   P 2 ;   W e i n b e r g   B .   H . ,   2 0 0 0 ,   W H O   I N V   I N D   A N   A G   R E ;   W i l e s   L ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 6 3 - 2 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 7 5 	 2 0 	 2 0 	 6 	 7 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A U G 	 2 0 1 2 	 9 2 	 2 	 	 	 S I 	 	 4 1 9 	 4 2 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 8 5 - x 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 7 5 Y F 	 W O S : 0 0 0 3 0 6 5 4 7 0 0 0 0 2 1 	 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 R e v i s i t i n g   s i z e   e f f e c t s   i n   h i g h e r   e d u c a t i o n   r e s e a r c h   p r o d u c t i v i t y 	 H I G H E R   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e t u r n s   t o   s i z e ;   R e s e a r c h   p r o d u c t i v i t y ;   R e t u r n s   t o   s c a l e ;   U n i v e r s i t i e s ;   B i b l i o m e t r i c s ;   I t a l y 	 E C O N O M I E S ;   S C A L E ;   S C O P E ;   U N I V E R S I T I E S ;   C O L L A B O R A T I O N ;   S C I E N T I S T S ;   E F F I C I E N C Y 	 T h e   p o t e n t i a l   o c c u r r e n c e   o f   v a r i a b l e   r e t u r n s   t o   s i z e   i n   r e s e a r c h   a c t i v i t y   i s   a   f a c t o r   t o   b e   c o n s i d e r e d   i n   c h o i c e s   a b o u t   t h e   s i z e   o f   r e s e a r c h   o r g a n i z a t i o n s   a n d   a l s o   i n   t h e   p l a n n i n g   o f   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s ,   s o   a s   t o   a v o i d   f a v o r i n g   t h o s e   o r g a n i z a t i o n s   t h a t   w o u l d   b e n e f i t   f r o m   s u c h   o c c u r r e n c e .   T h e   a i m   o f   t h e   c u r r e n t   w o r k   i s   t o   i m p r o v e   o n   w e a k n e s s e s   i n   p a s t   i n q u i r i e s   c o n c e r n i n g   r e t u r n s   t o   s i z e   t h r o u g h   a p p l i c a t i o n   o f   a   r e s e a r c h   p r o d u c t i v i t y   m e a s u r e m e n t   m e t h o d o l o g y   t h a t   i s   m o r e   a c c u r a t e   a n d   r o b u s t .   T h e   m e t h o d   i n v o l v e s   f i e l d - s t a n d a r d i z e d   m e a s u r e m e n t s   t h a t   a r e   f r e e   o f   t h e   t y p i c a l   d i s t o r t i o n s   o f   a g g r e g a t e   m e a s u r e m e n t   b y   d i s c i p l i n e   o r   o r g a n i z a t i o n .   T h e   a n a l y s i s   i s   c o n d u c t e d   f o r   1 8 3   h a r d   s c i e n c e   f i e l d s   i n   a l l   7 7   I t a l i a n   u n i v e r s i t i e s   ( t i m e   p e r i o d   2 0 0 4 - 2 0 0 8 )   a n d   a l l o w s   d e t e c t i o n   o f   p o t e n t i a l   d i f f e r e n c e s   b y   f i e l d . 	 [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y   I A S I   C N R ,   I n s t   S y s t   A n a l   &   C o m p   S c i ,   I - 0 0 1 8 5   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   c i c e r o @ d i i . u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b b o t t   M ,   2 0 0 3 ,   E C O N   E D U C   R E V ,   V 2 2 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 7 7 5 7 ( 0 1 ) 0 0 0 6 8 - 1 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 1 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 1 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 6 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 5 - 4 ;   A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A d a m s   J D ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 1 . 0 1 4 ;   A d a m s   J .   D . ,   1 9 9 8 ,   A N N   E C   S T A T ,   V 4 9 ;   A v r i k a n   N . ,   2 0 0 1 ,   S O C I O E C O N O M I C   P L A N N I ,   V 3 5 ,   P 5 7 ;   B o n a c c o r s i   A ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 0 5 - 3 ;   C O H N   E ,   1 9 8 9 ,   R E V   E C O N   S T A T ,   V 7 1 ,   P 2 8 4 ,   D O I   1 0 . 2 3 0 7 / 1 9 2 6 9 7 4 ;   D ' A n g e l o   C .   A . ,   2 0 1 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 2 ,   P 2 5 7 ;   D U N D A R   H ,   1 9 9 5 ,   E C O N   E D U C   R E V ,   V 1 4 ,   P 1 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 2 - 7 7 5 7 ( 9 5 ) 9 0 3 9 3 - M ;   D u t c h - B r o w n   N . ,   2 0 1 0 ,   D O C U M E N T   T R E B A L L   B A R ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   G o l d e n   J . ,   1 9 9 2 ,   E C O N   E D U C   R E V ,   V 1 1 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 2 - 7 7 5 7 ( 9 2 ) 9 0 0 0 7 - P ;   H a r a   N ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 9 1 ;   H a s h i m o t o   K . ,   1 9 9 7 ,   E D   E C ,   V 5 ,   P 1 0 7 ,   D O I   1 0 . 1 0 8 0 / 0 9 6 4 5 2 9 9 7 0 0 0 0 0 0 1 0 ;   I z a d i   H ,   2 0 0 2 ,   E C O N   E D U C   R E V ,   V 2 1 ,   P 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 7 7 5 7 ( 0 0 ) 0 0 0 4 4 - 3 ;   J o r d a n   J .   M . ,   1 9 8 8 ,   E C O N   E D U C   R E V ,   V 7 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 2 - 7 7 5 7 ( 8 8 ) 9 0 0 4 9 - 0 ;   J o r d a n   J .   M . ,   1 9 8 9 ,   E C O N   E D U C   R E V ,   V 8 ,   P 3 4 5 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 2 - 7 7 5 7 ( 8 9 ) 9 0 0 2 0 - 4 ;   K o s h a l   R K ,   1 9 9 9 ,   E C O N   E D U C   R E V ,   V 1 8 ,   P 2 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 7 7 5 7 ( 9 8 ) 0 0 0 3 5 - 1 ;   L a b a n d   D N ,   2 0 0 3 ,   S O U T H   E C O N   J ,   V 7 0 ,   P 1 7 2 ,   D O I   1 0 . 2 3 0 7 / 1 0 6 1 6 3 8 ;   L e w i s   D . ,   1 9 9 9 ,   H D B   T H E O R Y   R E S ;   L o n g l o n g   H . ,   2 0 0 9 ,   E C O N   E D U C   R E V ,   V 2 8 ,   P 5 0 5 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   N E W E L L   A ,   1 9 8 2 ,   S C I E N C E ,   V 2 1 5 ,   P 8 4 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 1 5 . 4 5 3 4 . 8 4 3 ;   S e g l e n   P .   O . ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 9 ,   P 1 2 3 ;   V T R ,   2 0 0 6 ,   I T   T R I E N N   R E S   E V   V T R ;   W a g n e r   C S ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 1 6 0 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 2 ;   W I L L I A M S   D A ,   1 9 7 6 ,   B I O M E T R I K A ,   V 6 3 ,   P 3 3 ,   D O I   1 0 . 1 0 9 3 / b i o m e t / 6 3 . 1 . 3 3 ;   W o r t h i n g t o n   A C ,   2 0 1 1 ,   H I G H   E D U C ,   V 6 1 ,   P 3 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 1 0 - 9 3 3 7 - 3 ;   Z i t t   M ,   2 0 0 4 ,   4   P R O X   C   P R O X   N E T W   C ,   P 1 5 	 3 4 	 2 0 	 2 0 	 5 	 4 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 0 1 8 - 1 5 6 0 	 	 	 H I G H   E D U C 	 H i g h .   E d u c . 	 J U N 	 2 0 1 2 	 6 3 	 6 	 	 	 	 	 7 0 1 	 7 1 7 	 	 1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 1 1 - 9 4 7 1 - 6 	 	 1 7 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 9 3 5 I X 	 W O S : 0 0 0 3 0 3 5 1 3 5 0 0 0 0 3 	 	 
 
 J 	 H u n g ,   J L 	 	 	 	 H u n g ,   J u i - l o n g 	 	 	 T r e n d s   o f   e - l e a r n i n g   r e s e a r c h   f r o m   2 0 0 0   t o   2 0 0 8 :   U s e   o f   t e x t   m i n i n g   a n d   b i b l i o m e t r i c s 	 B R I T I S H   J O U R N A L   O F   E D U C A T I O N A L   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 T h i s   s t u d y   i n v e s t i g a t e d   t h e   l o n g i t u d i n a l   t r e n d s   o f   e - l e a r n i n g   r e s e a r c h   u s i n g   t e x t   m i n i n g   t e c h n i q u e s .   S i x   h u n d r e d   a n d   e i g h t y - n i n e   ( 6 8 9 )   r e f e r e e d   j o u r n a l   a r t i c l e s   a n d   p r o c e e d i n g s   w e r e   r e t r i e v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   d a t a b a s e   i n   t h e   p e r i o d   f r o m   2 0 0 0   t o   2 0 0 8 .   A l l   e - l e a r n i n g   p u b l i c a t i o n s   w e r e   g r o u p e d   i n t o   t w o   d o m a i n s   w i t h   f o u r   g r o u p s / 1 5   c l u s t e r s   b a s e d   o n   a b s t r a c t   a n a l y s i s .   T h r e e   a d d i t i o n a l   v a r i a b l e s :   s u b j e c t   a r e a s ,   p r o l i f i c   c o u n t r i e s   a n d   p r o l i f i c   j o u r n a l s   w e r e   a p p l i e d   t o   d a t a   a n a l y s i s   a n d   d a t a   i n t e r p r e t a t i o n .   C o n c l u s i o n s   i n c l u d e   t h a t   e - l e a r n i n g   r e s e a r c h   i s   a t   t h e   e a r l y   m a j o r i t y   s t a g e   a n d   f o c i   h a v e   s h i f t e d   f r o m   i s s u e s   o f   t h e   e f f e c t i v e n e s s   o f   e - l e a r n i n g   t o   t e a c h i n g   a n d   l e a r n i n g   p r a c t i c e s .   E d u c a t i o n a l   s t u d i e s   a n d   p r o j e c t s   a n d   e - l e a r n i n g   a p p l i c a t i o n   i n   m e d i c a l   e d u c a t i o n   a n d   t r a i n i n g   a r e   g r o w i n g   f i e l d s   w i t h   t h e   h i g h e s t   p o t e n t i a l   f o r   f u t u r e   r e s e a r c h .   A p p r o a c h e s   t o   e - l e a r n i n g   d i f f e r   b e t w e e n   l e a d i n g   c o u n t r i e s   a n d   e a r l y   a d o p t e r   c o u n t r i e s ,   a n d   g o v e r n m e n t   p o l i c i e s   p l a y   a n   i m p o r t a n t   r o l e   i n   s h a p i n g   t h e   r e s u l t s . 	 B o i s e   S t a t e   U n i v ,   D e p t   E d u c   T e c h n o l ,   B o i s e ,   I D   8 3 7 2 5   U S A 	 H u n g ,   J L   ( r e p r i n t   a u t h o r ) ,   B o i s e   S t a t e   U n i v ,   D e p t   E d u c   T e c h n o l ,   1 9 1 0   U n i v   D r ,   B o i s e ,   I D   8 3 7 2 5   U S A . 	 a n d y h u n g @ b o i s e s t a t e . e d u 	 H u n g ,   A n d y / A - 2 1 4 4 - 2 0 1 1 	 	 	 	 A m b i e n t   I n s i g h t   R e s e a r c h ,   2 0 0 9 ,   R E P   G L O B   S E L F   P A C   E ;   C o n o l e   G ,   2 0 0 7 ,   O P E N   F L E X   L E A R N   S E R ,   P 1 ;   F a y y a d   U .   M . ,   1 9 9 6 ,   A D V   K N O W L E D G E   D I S C O V ;   F e l d m a n   R . ,   1 9 9 5 ,   P   1   I N T   C   K N O W L   D I S C ,   P 1 1 2 ;   F e l d m a n   R . ,   2 0 0 7 ,   T E X T   M I N I N G   H D B   A D V ;   F l e m   J .   A . ,   2 0 0 4 ,   A S S E S S M E N T   E F F E C T I V E ,   V 2 9 ,   P 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 7 3 7 2 4 7 7 0 4 0 2 9 0 0 2 0 4 ;   G o v i n d a s a m y   T . ,   2 0 0 1 ,   I n t e r n e t   a n d   H i g h e r   E d u c a t i o n ,   V 4 ,   P 2 8 7 ,   D O I   1 0 . 1 0 1 6 / S 1 0 9 6 - 7 5 1 6 ( 0 1 ) 0 0 0 7 1 - 9 ;   H u n g   D . ,   2 0 0 2 ,   J o u r n a l   o f   I n t e r a c t i v e   L e a r n i n g   R e s e a r c h ,   V 1 3 ,   P 3 9 3 ;   J a i n   A K ,   1 9 9 9 ,   A C M   C O M P U T   S U R V ,   V 3 1 ,   P 2 6 4 ,   D O I   1 0 . 1 1 4 5 / 3 3 1 4 9 9 . 3 3 1 5 0 4 ;   K e s h a v a ,   2 0 0 8 ,   I n f o r m a t i o n   S t u d i e s ,   V 1 4 ;   K o s t o f f   R N ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 7 1 2 4 ;   L o c k w o o d   F ,   2 0 0 7 ,   O P E N   F L E X   L E A R N   S E R ,   p X V I ;   M a g o u l a s   G . ,   2 0 0 6 ,   A D V   W E B   B A S E D   E D   P E R ;   M a s i e   E . ,   2 0 0 8 ,   A S T D   H D B   W O R K P L A C E   L ,   P 3 7 7 ;   M i h a l c a   L . ,   2 0 0 7 ,   C O G N I T I O N   B R A I N   B E H A ,   V 1 1 ,   P 1 1 5 ;   N i c h o l s o n   P ,   2 0 0 7 ,   C o m p u t e r s   a n d   E d u c a t i o n :   E - L e a r n i n g ,   F r o m   T h e o r y   t o   P r a c t i c e ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 1 - 4 0 2 0 - 4 9 1 4 - 9 _ 1 ;   O K U B O   Y ,   1 9 9 7 ,   S T I   W O R K I N G   P A P E R S ,   V 1 9 9 7 / 1 ;   O u   S ,   2 0 0 8 ,   J   I N F   S C I ,   V 3 4 ,   P 3 0 8 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 8 4 6 3 0 ;   R o g e r s   E . ,   2 0 0 3 ,   D I F F U S I O N   I N N O V A T I O N ;   R o s e n b e r g   M . J . ,   2 0 0 1 ,   E   L E A R N I N G   S T R A T E G I E ;   S h i h   M L ,   2 0 0 8 ,   C O M P U T   E D U C ,   V 5 1 ,   P 9 5 5 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 7 . 1 0 . 0 0 4 ;   T h e l w a l l   M ,   2 0 0 8 ,   J   I N F   S C I ,   V 3 4 ,   P 6 0 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 8 7 2 3 8 ;   W e n t l i n g   T .   L . ,   2 0 0 0 ,   E   L E A R N I N G   R E V   L I T ;   H i s t o r y   o f   V i r t u a l   L e a r n i n g   E n v i r o n m e n t s ,   2 0 0 9 ,   H I S T   V I R T   L E A R N   E N V ;   W i n n   W .   D . ,   2 0 0 2 ,   E D U C   P S Y C H O L   R E V ,   V 1 ,   P 3 3 1 ;   H u n g   J .   L . ,   2 0 0 6 ,   I N T   J   I N F O R M   C O M M U N I ,   V 2 ,   P 3 7 ,   D O I   1 0 . 4 0 1 8 / j i c t e . 2 0 0 6 0 1 0 1 0 4 ;   Z h a n g   K . ,   2 0 0 5 ,   G L O B A L   P E R S P E C T I V E S ,   P 2 1 ;   Z h a n g   K . ,   2 0 0 9 ,   I N T   J   E   L E A R N I N G ,   V 8 ,   P 4 9 	 2 8 	 2 0 	 2 1 	 3 	 5 1 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 0 0 0 7 - 1 0 1 3 	 	 	 B R I T   J   E D U C   T E C H N O L 	 B r .   J .   E d u c .   T e c h n o l . 	 J A N 	 2 0 1 2 	 4 3 	 1 	 	 	 	 	 5 	 1 6 	 	 1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 5 3 5 . 2 0 1 0 . 0 1 1 4 4 . x 	 	 1 2 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 8 6 7 T C 	 W O S : 0 0 0 2 9 8 4 7 6 2 0 0 0 1 9 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C ;   D i   C o s t a ,   F 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a 	 	 	 N a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s :   a   c o m p a r i s o n   o f   p e e r   r e v i e w   a n d   b i b l i o m e t r i c s   r a n k i n g s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 R e s e a r c h   a s s e s s m e n t ;   B i b l i o m e t r i c s ;   P e e r   r e v i e w ;   R e s e a r c h   p r o d u c t i v i t y ;   U n i v e r s i t y ;   I t a l y 	 I N D I C A T O R S 	 D e v e l o p m e n t   o f   b i b l i o m e t r i c   t e c h n i q u e s   h a s   r e a c h e d   s u c h   a   l e v e l   a s   t o   s u g g e s t   t h e i r   i n t e g r a t i o n   o r   t o t a l   s u b s t i t u t i o n   f o r   c l a s s i c   p e e r   r e v i e w   i n   t h e   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s ,   a s   f a r   a s   t h e   h a r d   s c i e n c e s   a r e   c o n c e r n e d .   I n   t h i s   w o r k   w e   c o m p a r e   r a n k i n g s   l i s t s   o f   u n i v e r s i t i e s   c a p t u r e d   b y   t h e   f i r s t   I t a l i a n   e v a l u a t i o n   e x e r c i s e ,   t h r o u g h   p e e r   r e v i e w ,   w i t h   t h e   r e s u l t s   o f   b i b l i o m e t r i c   s i m u l a t i o n s .   T h e   c o m p a r i s o n   s h o w s   t h e   g r e a t   d i f f e r e n c e s   b e t w e e n   p e e r   r e v i e w   a n d   b i b l i o m e t r i c   r a n k i n g s   f o r   e x c e l l e n c e   a n d   p r o d u c t i v i t y . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   I A S I   C N R ,   N a t l   R e s   C o u n c i l   I t a l y ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t ;   d i . c o s t a @ d i i . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 ;   A b r a m o   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 7 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 3 8 - 0 ;   A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   E R A ,   2 0 1 0 ,   E X C   R E S   A U S T R   I N ;   F r a n c e s c h e t   M ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 7 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 2 . 0 0 2 ;   H O R R O B I N   D F ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 4 3 8 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M o x a m   H . ,   1 9 9 2 ,   S C I   T E C H N O L O G Y   P O L I C ,   V 5 ,   P 7 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C . ,   2 0 0 3 ,   J   D O C ,   V 5 6 ,   P 7 0 9 ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   R E F ,   2 0 0 9 ,   R E P   P I L   E X   D E V   B I B L ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   * V T R ,   2 0 0 6 ,   V A L   T R I E N N   2 0 0 1   2 0 0 3 	 2 1 	 2 0 	 2 0 	 2 	 4 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 D E C 	 2 0 1 1 	 8 9 	 3 	 	 	 	 	 9 2 9 	 9 4 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 5 9 - x 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 4 0 X C 	 W O S : 0 0 0 2 9 6 4 7 4 4 0 0 0 1 2 	 	 
 
 J 	 P a g e l ,   P S ;   H u d e t z ,   J A 	 	 	 	 P a g e l ,   P a u l   S . ;   H u d e t z ,   J u d i t h   A . 	 	 	 S c h o l a r l y   P r o d u c t i v i t y   o f   U n i t e d   S t a t e s   A c a d e m i c   C a r d i o t h o r a c i c   A n e s t h e s i o l o g i s t s :   I n f l u e n c e   o f   F e l l o w s h i p   A c c r e d i t a t i o n   a n d   T r a n s e s o p h a g e a l   E c h o c a r d i o g r a p h i c   C r e d e n t i a l s   o n   h - I n d e x   a n d   O t h e r   C i t a t i o n   B i b l i o m e t r i c s 	 J O U R N A L   O F   C A R D I O T H O R A C I C   A N D   V A S C U L A R   A N E S T H E S I A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c a r d i o t h o r a c i c   a n e s t h e s i a ;   h - i n d e x ;   p e r f o r m a n c e   m e a s u r e s ;   s c h o l a r s h i p 	 I M P A C T ;   J O U R N A L S 	 O b j e c t i v e :   T h e   h - i n d e x   a l l o w s   t h e   e v a l u a t i o n   o f   s c h o l a r l y   o u t p u t   i n   a c a d e m i c s ,   b u t   t h i s   b i b l i o m e t r i c   s t a t i s t i c   h a s   n o t   b e e n   a p p l i e d   e x t e n s i v e l y   t o   m e a s u r e   p r o d u c t i v i t y   i n   a n e s t h e s i o l o g y .   T h e   a u t h o r s   t e s t e d   t h e   h y p o t h e s i s   t h a t   t h e   h - i n d e x   i s   d e p e n d e n t   o n   a c a d e m i c   r a n k ,   A m e r i c a n   C o l l e g e   o f   G r a d u a t e   M e d i c a l   E d u c a t i o n   ( A C G M E )   a c c r e d i t a t i o n   o f   t h e   t r a i n i n g   p r o g r a m ,   a n d   N a t i o n a l   B o a r d   o f   E c h o c a r d i o g r a p h y   c r e d e n t i a l s   i n   p e r i o p e r a t i v e   t r a n s e s o p h a g e a l   e c h o c a r d i o g r a p h y   ( T E E )   i n   U n i t e d   S t a t e s   a c a d e m i c   c a r d i o t h o r a c i c   a n e s t h e s i o l o g i s t s .   D e s i g n :   O b s e r v a t i o n a l .   S e t t i n g :   I n t e r n e t   a n a l y s i s .   P a r t i c i p a n t s :   U n i t e d   S t a t e s   a c a d e m i c   c a r d i o t h o r a c i c   a n e s t h e s i o l o g i s t s .   I n t e r v e n t i o n s :   N o n e .   M e a s u r e m e n t s   a n d   M a i n   R e s u l t s :   F a c u l t y   m e m b e r s   f r o m   3 0   r a n d o m l y   s e l e c t e d   f e l l o w s h i p   p r o g r a m s   w i t h   o r   w i t h o u t   a c c r e d i t a t i o n   w e r e   i d e n t i f i e d   u s i n g   t h e   S o c i e t y   o f   C a r d i o v a s c u l a r   A n e s t h e s i o l o g i s t s   w e b   s i t e .   T h e   s t a t u s   o f   e a c h   f a c u l t y   m e m b e r ' s   c r e d e n t i a l s   i n   p e r i o p e r a t i v e   T E E   w a s   d e f i n e d   u s i n g   t h e   " v e r i f y   c e r t i f i c a t i o n "   f u n c t i o n   o n   t h e   N a t i o n a l   B o a r d   o f   E c h o c a r d i o g r a p h y   w e b   s i t e .   P u b l i c a t i o n s ,   c i t a t i o n s ,   c i t a t i o n s / p u b l i c a t i o n ,   a n d   t h e   h - i n d e x   f o r   e a c h   f a c u l t y   m e m b e r   w e r e   o b t a i n e d   u s i n g   S c o p u s .   T w o   h u n d r e d   f i f t y - n i n e   c a r d i o t h o r a c i c   a n e s t h e s i o l o g i s t s   ( 2 0 4   m e n   a n d   5 5   w o m e n )   w e r e   i d e n t i f i e d   ( 8   i n s t r u c t o r s   [ 3 % ] ,   1 2 3   a s s i s t a n t   p r o f e s s o r s   [ 4 8 % ] ,   5 6   a s s o c i a t e   p r o f e s s o r s   [ 2 2 % ] ,   6 3   p r o f e s s o r s   [ 2 4 % ] ,   a n d   9   c h a i r p e r s o n s   [ 3 % ] ) .   T h e   a v e r a g e   c a r d i o t h o r a c i c   a n e s t h e s i o l o g i s t   h a d   a n   h - i n d e x   o f   6   + / -   7   w i t h   2 8   + / -   4 6   p u b l i c a t i o n s ,   4 9 9   + / -   9 8 8   t o t a l   c i t a t i o n s ,   a n d   1 3   + / -   1 8   c i t a t i o n s   p e r   p u b l i c a t i o n .   T h e   h - i n d e x   i n c r e a s e d   s i g n i f i c a n t l y   ( p   <   0 . 0 5 )   a m o n g   r a n k s   ( i n s t r u c t o r s   [ 1   + / -   1 ] ,   a s s i s t a n t   p r o f e s s o r s   [ 3   + / -   3 ] ,   a s s o c i a t e   p r o f e s s o r s   [ 7   + / -   5 ] ,   p r o f e s s o r s   [ 1 2   + / -   8 ] ,   a n d   c h a i r p e r s o n s   [ 1 8   + / -   1 3 ] ) .   S i g n i f i c a n t   d i f f e r e n c e s   i n   t h e   n u m b e r   o f   p u b l i c a t i o n s   a n d   t o t a l   c i t a t i o n s   a l s o   w e r e   o b s e r v e d   a m o n g   r a n k s .   D i f f e r e n c e s   i n   t h e   h - i n d e x   a m o n g   r a n k s   w e r e   o b s e r v e d   r e g a r d l e s s   o f   p r o g r a m   a c c r e d i t a t i o n   s t a t u s   o r   t r a n s e s o p h a g e a l   e c h o c a r d i o g r a p h i c   c r e d e n t i a l s .   F a c u l t y   m e m b e r s   w o r k i n g   i n   A m e r i c a n   C o l l e g e   o f   G r a d u a t e   M e d i c a l   E d u c a t i o n   a c c r e d i t e d   p r o g r a m s   h a d   m o r e   p u b l i c a t i o n s   a n d   c i t a t i o n s   a n d   h i g h e r   h - i n d i c e s   t h a n   t h e i r   c o u n t e r p a r t s   i n   p r o g r a m s   t h a t   w e r e   n o t   a c c r e d i t e d .   E x c e p t   f o r   p r o g r a m   d i r e c t o r s ,   t h e   s c h o l a r l y   o u t p u t   o f   a c a d e m i c   c a r d i o t h o r a c i c   a n e s t h e s i o l o g i s t s   w i t h   o r   w i t h o u t   t r a n s e s o p h a g e a l   e c h o c a r d i o g r a p h i c   c r e d e n t i a l s   w a s   s i m i l a r   w i t h i n   e a c h   a c a d e m i c   r a n k .   C o n c l u s i o n s :   T h e   r e s u l t s   s h o w   t h a t   t h e   h - i n d e x   i n c r e a s e s   p r o g r e s s i v e l y   w i t h   a c a d e m i c   r a n k   a n d   i s   d e p e n d e n t   o n   f e l l o w s h i p   p r o g r a m   a c c r e d i t a t i o n   s t a t u s   b u t   n o t   t r a n s e s o p h a g e a l   e c h o c a r d i o g r a p h i c   c r e d e n t i a l s   i n   U n i t e d   S t a t e s   a c a d e m i c   c a r d i o t h o r a c i c   a n e s t h e s i o l o g i s t s .   ( C )   2 0 1 1   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ P a g e l ,   P a u l   S . ;   H u d e t z ,   J u d i t h   A . ]   C l e m e n t   J   Z a b l o c k i   V e t   A f f a i r s   M e d   C t r ,   A n e s t h e s i a   S e r v ,   M i l w a u k e e ,   W I   5 3 2 9 5   U S A 	 P a g e l ,   P S   ( r e p r i n t   a u t h o r ) ,   C l e m e n t   J   Z a b l o c k i   V e t   A f f a i r s   M e d   C t r ,   A n e s t h e s i a   S e r v ,   5 0 0 0   W   N a t l   A v e ,   M i l w a u k e e ,   W I   5 3 2 9 5   U S A . 	 p s p a g e l @ m c w . e d u 	 	 	 	 	 B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   C a s t i l l o   M ,   2 0 1 0 ,   A M   J   N E U R O R A D I O L ,   V 3 1 ,   P 7 8 3 ,   D O I   1 0 . 3 1 7 4 / a j n r . A 1 8 8 8 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   F a l a g a s   M E ,   2 0 0 6 ,   F A S E B   J ,   V 2 0 ,   P 1 0 3 9 ,   D O I   1 0 . 1 0 9 6 / f j . 0 6 - 0 6 0 3 u f m ;   F u l l e r   C l i f t o n   D ,   2 0 0 9 ,   J   A m   C o l l   R a d i o l ,   V 6 ,   P 1 1 2 ,   D O I   1 0 . 1 0 1 6 / j . j a c r . 2 0 0 8 . 0 7 . 0 0 4 ;   * H E A R T   G R O U P ,   2 0 0 8 ,   C I R C   R E S ,   V 1 0 2 ,   p E 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I n t e r n a t i o n a l   C o m m i t t e e   o f   M e d i c a l   J o u r n a l   E d i t o r s ,   2 0 0 6 ,   A N N   S U R G ,   V 2 4 3 ,   P 7 1 3 ;   J e a n g   K T ,   2 0 0 7 ,   R E T R O V I R O L O G Y ,   V 4 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 4 6 9 0 - 4 - 4 2 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K e l l y   C D ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 c ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   O ' L e a r y   J D ,   2 0 1 0 ,   C A N   J   A N A E S T H ,   V 5 7 ,   P 5 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 2 6 3 0 - 0 1 0 - 9 2 9 2 - 6 ;   P a t s o p o u l o s   N A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 3 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 3 . 1 9 . 2 3 6 2 ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   S p e a r m a n   C M ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 9 2 9 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ;   T h o m p s o n   D F ,   2 0 0 9 ,   A M   J   P H A R M   E D U C ,   V 7 3 ;   v a n   H a s e l e n   R ,   2 0 0 7 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 7 . 1 0 . 0 0 4 ;   W e n d l   M C ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 b 	 2 0 	 2 0 	 2 0 	 1 	 9 	 W   B   S A U N D E R S   C O - E L S E V I E R   I N C 	 P H I L A D E L P H I A 	 1 6 0 0   J O H N   F   K E N N E D Y   B O U L E V A R D ,   S T E   1 8 0 0 ,   P H I L A D E L P H I A ,   P A   1 9 1 0 3 - 2 8 9 9   U S A 	 1 0 5 3 - 0 7 7 0 	 	 	 J   C A R D I O T H O R   V A S C   A N 	 J .   C a r d i o t h o r a c .   V a s c .   A n e s t h . 	 O C T 	 2 0 1 1 	 2 5 	 5 	 	 	 	 	 7 6 1 	 7 6 5 	 	 1 0 . 1 0 5 3 / j . j v c a . 2 0 1 1 . 0 3 . 0 0 3 	 	 5 	 A n e s t h e s i o l o g y ;   C a r d i a c   &   C a r d i o v a s c u l a r   S y s t e m s ;   R e s p i r a t o r y   S y s t e m ;   P e r i p h e r a l   V a s c u l a r   D i s e a s e 	 A n e s t h e s i o l o g y ;   C a r d i o v a s c u l a r   S y s t e m   &   C a r d i o l o g y ;   R e s p i r a t o r y   S y s t e m 	 8 2 9 F U 	 W O S : 0 0 0 2 9 5 5 6 4 8 0 0 0 0 2 	 2 1 5 4 6 2 7 1 	 
 
 J 	 F a l a g a s ,   M E ;   K o u r a n o s ,   V D ;   M i c h a l o p o u l o s ,   A ;   R o d o p o u l o u ,   S P ;   B a t s i o u ,   M A ;   K a r a g e o r g o p o u l o s ,   D E 	 	 	 	 F a l a g a s ,   M .   E . ;   K o u r a n o s ,   V .   D . ;   M i c h a l o p o u l o s ,   A . ;   R o d o p o u l o u ,   S .   P . ;   B a t s i o u ,   M .   A . ;   K a r a g e o r g o p o u l o s ,   D .   E . 	 	 	 C o m p a r i s o n   o f   t h e   d i s t r i b u t i o n   o f   c i t a t i o n s   r e c e i v e d   b y   a r t i c l e s   p u b l i s h e d   i n   h i g h ,   m o d e r a t e ,   a n d   l o w   i m p a c t   f a c t o r   j o u r n a l s   i n   c l i n i c a l   m e d i c i n e 	 I N T E R N A L   M E D I C I N E   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b i b l i o g r a p h i c   d a t a b a s e ;   s t a t i s t i c a l   d i s t r i b u t i o n ;   c i t a t i o n   a n a l y s i s ;   p u b l i c a t i o n 	 	 B a c k g r o u n d :   W h e t h e r   t h e   j o u r n a l   i m p a c t   f a c t o r   ( J I F )   i n d i c a t o r   r e f l e c t s   t h e   n u m b e r   o f   c i t a t i o n s   t o   a n   a v e r a g e   a r t i c l e   o f   a   j o u r n a l   i n   d i f f e r e n t   s u b j e c t   c a t e g o r i e s   i s   c o n t r o v e r s i a l .   W e   s o u g h t   t o   f u r t h e r   i n v e s t i g a t e   t h i s   i s s u e   i n   g e n e r a l   a n d   i n t e r n a l   m e d i c i n e   j o u r n a l s .   M e t h o d s :   W e   s e l e c t e d   t o   e v a l u a t e   t h r e e   j o u r n a l s   o f   t h e   a b o v e   s u b j e c t   c a t e g o r y ,   i n   e a c h   o f   t h r e e   d i f f e r e n t   J I F   l e v e l s   ( h i g h :   1 5 . 5 - 2 8 . 6 ,   m o d e r a t e :   4 . 4 - 4 . 9   a n d   l o w :   1 . 6 ) .   U s i n g   t h e   S c o p u s   d a t a b a s e ,   w e   r e t r i e v e d   t h e   o r i g i n a l   r e s e a r c h   a r t i c l e s   ( a f t e r   d e t a i l e d   s c r e e n i n g )   a n d   r e v i e w   a r t i c l e s   ( a s   c l a s s i f i e d   b y   S c o p u s )   t h a t   w e r e   p u b l i s h e d   i n   t h e   s e l e c t e d   j o u r n a l s   i n   2 0 0 5   a l o n g   w i t h   t h e   n u m b e r   o f   c i t a t i o n s   t h e y   r e c e i v e d   i n   2 0 0 6   a n d   2 0 0 7 .   W e   p o o l e d   t h e   c i t a t i o n s   f o r   a r t i c l e s   o f   t h e   s a m e   t y p e   i n   j o u r n a l s   w i t h   t h e   s a m e   J I F   l e v e l   i n t o   d i s t i n c t   v a r i a b l e s .   R e s u l t s :   T h e r e   w a s   n o   m a r k e d   a s s o c i a t i o n   b e t w e e n   t h e   d i s t r i b u t i o n   o f   c i t a t i o n s   p e r   a r t i c l e   p u b l i s h e d   i n   g e n e r a l   m e d i c a l   j o u r n a l s   a n d   t h e i r   J I F .   A l l   d i s t r i b u t i o n s   s t u d i e d   w e r e   s k e w e d   t o   t h e   r i g h t   ( h i g h e r   n u m b e r   o f   c i t a t i o n s ) .   S p e c i f i c a l l y ,   1 6 - 2 2 %   o f   t h e   o r i g i n a l   r e s e a r c h   a r t i c l e s   a c c o u n t e d   f o r   5 0 %   o f   t h e   t o t a l   c i t a t i o n s   t o   t h i s   t y p e   o f   a r t i c l e   f o r   a l l   t h r e e   c a t e g o r i e s   o f   s t u d i e d   j o u r n a l s ;   3 4 - 3 7 %   o f   o r i g i n a l   r e s e a r c h   a r t i c l e s   a c c o u n t e d   f o r   7 5 %   o f   c i t a t i o n s .   T h e   r e s p e c t i v e   v a l u e s   f o r   r e v i e w   a r t i c l e s   w e r e   1 2 - 1 8 %   a n d   2 9 - 3 9 % .   C o n c l u s i o n :   T h e   d i s t r i b u t i o n   o f   c i t a t i o n s   r e c e i v e d   b y   a r t i c l e s   p u b l i s h e d   i n   h i g h ,   m o d e r a t e   a n d   l o w   i m p a c t   f a c t o r   j o u r n a l s   i n   c l i n i c a l   m e d i c i n e   s e e m s   s i m i l a r .   T h e   J I F   i s   n o t   a n   a c c u r a t e   i n d i c a t o r   o f   t h e   c i t a t i o n s   t h e   a v e r a g e   a r t i c l e   r e c e i v e s ;   a r t i c l e s   p u b l i s h e d   i n   l o w   i m p a c t   f a c t o r   j o u r n a l s   c a n   s t i l l   b e   h i g h l y   c i t e d   a n d   v i c e   v e r s a . 	 [ F a l a g a s ,   M .   E . ;   K o u r a n o s ,   V .   D . ;   K a r a g e o r g o p o u l o s ,   D .   E . ]   N a t l   T e c h   U n i v   A t h e n s ,   A l f a   I n s t   B i o m e d   S c i ,   D e p t   M e d ,   A t h e n s   1 5 1 2 3 ,   G r e e c e ;   [ M i c h a l o p o u l o s ,   A . ]   N a t l   T e c h   U n i v   A t h e n s ,   A l f a   I n s t   B i o m e d   S c i ,   D e p t   C r i t   C a r e ,   A t h e n s   1 5 1 2 3 ,   G r e e c e ;   [ F a l a g a s ,   M .   E . ]   N a t l   T e c h   U n i v   A t h e n s ,   H e n r y   D u n a n t   H o s p ,   D e p t   M e d ,   A t h e n s   1 5 1 2 3 ,   G r e e c e ;   [ M i c h a l o p o u l o s ,   A . ]   N a t l   T e c h   U n i v   A t h e n s ,   H e n r y   D u n a n t   H o s p ,   I n t e n s   C a r e   U n i t ,   A t h e n s   1 5 1 2 3 ,   G r e e c e ;   [ R o d o p o u l o u ,   S .   P . ;   B a t s i o u ,   M .   A . ]   N a t l   T e c h   U n i v   A t h e n s ,   S c h   A p p l   M a t h   &   P h y s   S c i ,   A t h e n s   1 5 1 2 3 ,   G r e e c e ;   [ F a l a g a s ,   M .   E . ]   T u f t s   U n i v ,   S c h   M e d ,   D e p t   M e d ,   B o s t o n ,   M A   0 2 1 1 1   U S A 	 F a l a g a s ,   M E   ( r e p r i n t   a u t h o r ) ,   N a t l   T e c h   U n i v   A t h e n s ,   A l f a   I n s t   B i o m e d   S c i ,   D e p t   M e d ,   9   N e a p o l e o s   S t ,   A t h e n s   1 5 1 2 3 ,   G r e e c e . 	 m . f a l a g a s @ a i b s . g r 	 	 M i c h a l o p o u l o s ,   A r g y r i s / 0 0 0 0 - 0 0 0 2 - 6 9 0 4 - 1 6 4 X ;   K o u r a n o s ,   V a s i l e i o s / 0 0 0 0 - 0 0 0 2 - 2 7 2 3 - 0 9 2 8 	 	 	 F a l a g a s   M E ,   2 0 0 7 ,   I N T   J   I M P O T   R E S ,   V 1 9 ,   P 4 4 3 ,   D O I   1 0 . 1 0 3 8 / s i . i j i r . 3 9 0 1 5 8 3 ;   F a l a g a s   M E ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 2 4 - 5 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 2 6 2 3 ,   D O I   1 0 . 1 0 9 6 / f j . 0 8 - 1 0 7 9 3 8 ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   M i n g e r s   J ,   2 0 0 8 ,   J   O P E R   R E S   S O C ,   V 5 9 ,   P 1 0 1 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j o r s . 2 6 0 2 4 2 8 ;   R o s t a m i - H o d j e g a n   A ,   2 0 0 1 ,   B R I T   J   C L I N   P H A R M A C O ,   V 5 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 1 2 5 . 2 0 0 1 . 0 1 3 4 9 . x ;   R o u s s e a u   R ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 4 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 3 - 1 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S m i t h   R ,   2 0 0 8 ,   J   B O N E   J O I N T   S U R G   B R ,   V 9 0 B ,   P 1 2 5 ,   D O I   1 0 . 1 3 0 2 / 0 3 0 1 - 6 2 0 X . 9 0 B 2 . 2 0 2 5 8 ;   W e a l e   A n d y   R ,   2 0 0 4 ,   B M C   M e d   R e s   M e t h o d o l ,   V 4 ,   P 1 4 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 4 - 1 4 	 1 2 	 2 0 	 2 1 	 1 	 9 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 4 4 4 - 0 9 0 3 	 	 	 I N T E R N   M E D   J 	 I n t e r n .   M e d .   J . 	 A U G 	 2 0 1 0 	 4 0 	 8 	 	 	 	 	 5 8 7 	 5 9 1 	 	 1 0 . 1 1 1 1 / j . 1 4 4 5 - 5 9 9 4 . 2 0 1 0 . 0 2 2 4 7 . x 	 	 5 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 6 4 0 P U 	 W O S : 0 0 0 2 8 1 0 6 4 7 0 0 0 0 8 	 2 0 7 1 8 8 8 3 	 
 
 J 	 P r a t h a p ,   G 	 	 	 	 P r a t h a p ,   G a n g a n 	 	 	 T h e   1 0 0   m o s t   p r o l i f i c   e c o n o m i s t s   u s i n g   t h e   p - i n d e x 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   h - i n d e x ;   g - i n d e x ;   p - i n d e x 	 H I R S C H - T Y P E   I N D E X E S ;   H - I N D E X ;   I N D I C A T O R S ;   O U T P U T 	 I n   t h i s   p a p e r ,   a   n e w   i n d i c a t o r   c a l l e d   t h e   p e r f o r m a n c e   i n d e x   ( p - i n d e x )   i s   u s e d   t o   r a n k   a   1 0 0   m o s t   p r o l i f i c   e c o n o m i s t s .   T h e   p - i n d e x   s t r i k e s   t h e   b e s t   b a l a n c e   b e t w e e n   a c t i v i t y   ( t o t a l   c i t a t i o n s   C )   a n d   e x c e l l e n c e   ( m e a n   c i t a t i o n   r a t e   C / P ) .   T h e   s u r p r i s e   i s   t h a t   t h e   h - i n d e x ,   w h i c h   i s   n o w   u n i v e r s a l l y   a c c e p t e d   a l m o s t   a s   a   c a n o n i c a l   t o o l   f o r   r e s e a r c h   a s s e s s m e n t   o f   i n d i v i d u a l s ,   r e s e a r c h   f a c u l t i e s   a n d   i n s t i t u t i o n s   a n d   e v e n   f o r   c o m p a r i n g   p e r f o r m a n c e   o f   j o u r n a l s   a n d   c o u n t r i e s ,   i s   a c t u a l l y   a   p o o r   i n d i c a t o r   o f   p e r f o r m a n c e . 	 [ P r a t h a p ,   G a n g a n ]   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a 	 P r a t h a p ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   D r   K S   K r i s h n a n   M a r g ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a . 	 g p @ c m m a c s . e r n e t . i n 	 P r a t h a p ,   G a n g a n / C - 1 1 7 3 - 2 0 0 9 	 P r a t h a p ,   G a n g a n / 0 0 0 0 - 0 0 0 3 - 1 4 7 2 - 6 3 5 8 	 	 	 A n d e r s o n   T R ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 5 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 7 1 - 2 ;   C s a j b o k   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 9 - 9 ;   G l a n z e l   W ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 8 9 - 0 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L i n d s e y   D . ,   1 9 7 8 ,   S C I   P U B L I C A T I O N   S Y S T ;   L i u   Y X ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 4 1 5 - 1 ;   P r a t h a p   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 6 6 - 2 ;   S c h u b e r t   A ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 2 ;   T o l   R S J ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 7 9 - 7 ;   V i n k l e r   P ,   2 0 0 7 ,   J   I N F   S C I ,   V 3 3 ,   P 4 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 7 2 1 6 5 	 1 1 	 2 0 	 2 0 	 2 	 3 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 2 0 1 0 	 8 4 	 1 	 	 	 	 	 1 6 7 	 1 7 2 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 6 8 - 0 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 0 4 G I 	 W O S : 0 0 0 2 7 8 2 6 7 1 0 0 0 1 5 	 	 
 
 J 	 C l a r k e ,   A ;   G a t i n e a u ,   M ;   T h o r o g o o d ,   M ;   W y n - R o b e r t s ,   N 	 	 	 	 C l a r k e ,   A . ;   G a t i n e a u ,   M . ;   T h o r o g o o d ,   M . ;   W y n - R o b e r t s ,   N . 	 	 	 H e a l t h   p r o m o t i o n   r e s e a r c h   l i t e r a t u r e   i n   E u r o p e   1 9 9 5 - 2 0 0 5 	 E U R O P E A N   J O U R N A L   O F   P U B L I C   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 4 t h   E u r o p e a n   P u b l i c   H e a l t h   R e s e a r c h   C o n f e r e n c e 	 N O V ,   2 0 0 6 	 M o n t r e u x ,   S W I T Z E R L A N D 	 	 	 b i b l i o m e t r i c s ;   E u r o p e ;   h e a l t h   p r o m o t i o n ;   l i t e r a t u r e   r e v i e w ;   p u b l i c   h e a l t h   r e s e a r c h 	 	 B a c k g r o u n d :   T o   u n d e r t a k e   a n   o v e r v i e w   o f   h e a l t h   p r o m o t i o n   r e s e a r c h   i n   t h e   E E A   t o   i n f o r m   t h e   c o l l a b o r a t i v e   s t u d y - S P H E R E   ( S t r e n g t h e n i n g   P u b l i c   H e a l t h   R e s e a r c h   i n   E u r o p e ) .   M e t h o d s :   A   ' f i l t e r '   ( s e a r c h   s t r a t e g y )   w a s   u s e d   t o   s e a r c h   M e d l i n e   a n d   E m b a s e   f o r   a   1 0 - y e a r   p e r i o d   f r o m   1 9 9 5   t o   2 0 0 5 .   A   3 2 %   ( 6 0 0 0 )   s a m p l e   o f   t h e   f i l t e r   o u t p u t   w a s   a s s e s s e d   f o r   p r o p o r t i o n   c o n s t i t u t i n g   h e a l t h   p r o m o t i o n .   O u t p u t   w a s   a n a l y s e d   b y   c o u n t r y ,   p o p u l a t i o n ,   g r o s s   d o m e s t i c   p r o d u c t   ( G D P )   a n d   h e a l t h   n e e d   ( d i s a b i l i t y - a d j u s t e d   l i f e   y e a r s ,   D A L Y s ) .   D i s e a s e   p r e v e n t i o n   ( s c r e e n i n g   a n d   i m m u n i z a t i o n )   a n d   h e a l t h   i m p r o v e m e n t   p a p e r s   w e r e   s e p a r a t e l y   i d e n t i f i e d .   T h e   l a t t e r   w e r e   c l a s s i f i e d   b y   m e t h o d o l o g y ,   l e v e l   o f   i n t e r v e n t i o n   a n d   t o p i c   a r e a .   R e s u l t s :   1 8 8 6 2   p a p e r s   w e r e   i d e n t i f i e d .   O n e - t h i r d   w a s   i d e n t i f i e d   a s   h e a l t h   p r o m o t i o n   ( 2 2 0 6 / 6 0 0 0 ,   3 6 . 7 % )   e q u i v a l e n t   t o   6 9 3 5   ( C I   6 6 5 1 - 7 2 3 0 ) .   P r o d u c t i o n   v a r i e d :   N o r d i c   c o u n t r i e s   w e r e   h i g h e s t   p r o d u c e r s   p e r   m i l l i o n   p o p u l a t i o n ;   t h e   U K   t h e   l a r g e s t   n e t   p r o d u c e r .   T h e r e   w a s   a   w e a k   r e l a t i o n s h i p   b e t w e e n   h e a l t h   p r o m o t i o n   p u b l i c a t i o n   a n d   p o p u l a t i o n   s i z e   ( r ( 2 ) = 0 . 3 8 ) ;   a   w e a k   i n v e r s e   r e l a t i o n s h i p   w i t h   r e l a t i v e   h e a l t h   ( D A L Y s   p e r   m i l l i o n   p o p u l a t i o n )   ( r ( 2 ) = 0 . 0 7 )   a n d   a   s l i g h t l y   s t r o n g e r   r e l a t i o n s h i p   w i t h   G D P   ( r ( 2 ) = 0 . 4 5 ) .   T w e n t y - e i g h t   p e r c e n t   ( 6 2 6 / 2 2 0 6 )   o f   t h e   p a p e r s   i d e n t i f i e d   w e r e   d i s e a s e   p r e v e n t i o n   ( s c r e e n i n g   a n d   i m m u n i z a t i o n ) .   T h e   l a r g e s t   t o p i c   a r e a s   o f   t h e   r e m a i n d e r   ( 1 5 8 0 )   w e r e   d i e t   a n d   e x e r c i s e ,   s m o k i n g   a n d   t o b a c c o ,   a n d   c a r d i o v a s c u l a r   d i s e a s e   r e d u c t i o n .   A c c i d e n t s   a n d   v i o l e n c e ,   a l c o h o l   a n d   m e n t a l   h e a l t h   e a c h   a c c o u n t e d   f o r   < 5 %   o f   t o t a l   o u t p u t .   I n t e r v e n t i o n   s t u d i e s   w e r e   a   m i n o r i t y ;   w i t h   l e s s   a i m e d   a t   t h e   r e g i o n a l / n a t i o n a l   o r   p o l i c y   o r   l e g a l   a n d   f i s c a l   l e v e l s .   C o n c l u s i o n :   H e a l t h   p r o m o t i o n   r e s e a r c h   p r o d u c t i o n   v a r i e s   a c r o s s   E u r o p e .   R e s e a r c h   c o m m i s s i o n i n g   s h o u l d   s t r e s s   i n t e r v e n t i o n a l   a n d   p o l i c y   l e v e l   r e s e a r c h . 	 U n i v   W a r w i c k ,   H l t h   S e r v   R e s   I n s t ,   C o v e n t r y   C V 4   7 A L ,   W   M i d l a n d s ,   E n g l a n d ;   P u b l   H l t h   R e s o u r c e   U n i t ,   O x f o r d ,   E n g l a n d ;   U n i v   O x f o r d ,   H e a l t h c a r e   L i b ,   O x f o r d ,   E n g l a n d 	 C l a r k e ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   W a r w i c k ,   H l t h   S e r v   R e s   I n s t ,   M e d   S c h   B l d g , G i b b e t   H i l l   C a m p u s ,   C o v e n t r y   C V 4   7 A L ,   W   M i d l a n d s ,   E n g l a n d . 	 a i l e e n . c l a r k e @ w a r w i c k . a c . u k 	 R o b e r t s ,   N i a   W y n / F - 9 8 4 2 - 2 0 1 0 ;   	 R o b e r t s ,   N i a   W y n / 0 0 0 0 - 0 0 0 2 - 1 1 4 2 - 6 4 4 0 ;   C l a r k e ,   A i l e e n / 0 0 0 0 - 0 0 0 1 - 8 2 9 9 - 3 1 4 6 	 	 	 M c C a r t h y   M ,   2 0 0 7 ,   E U R   J   P U B L I C   H E A L T H ,   V 1 7 ,   P 1 ,   D O I   1 0 . 1 0 9 3 / e u r p u b / c k m 0 7 5 ;   M i l l w a r d   L . ,   2 0 0 3 ,   P U B L I C   H L T H   I N T E R V E N ;   M u r r a y   C J ,   2 0 0 2 ,   S U M M A R Y   M E A S U R E S   P O P ;   M u r r a y   C .   J .   L . ,   1 9 9 6 ,   G L O B A L   B U R D E N   D I S ;   R a h m a n   M ,   2 0 0 3 ,   P U B L I C   H E A L T H ,   V 1 1 7 ,   P 2 7 4 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 3 - 3 5 0 6 ( 0 3 ) 0 0 0 6 8 - 4 ;   W o r l d   H e a l t h   O r g a n i z a t i o n ,   1 9 8 6 ,   1   I N T   C   H L T H   P R O M   O T ;   * W H O ,   W H O   S I T   H L T H   S T A T   H L 	 7 	 2 0 	 2 0 	 0 	 8 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 1 1 0 1 - 1 2 6 2 	 	 	 E U R   J   P U B L I C   H E A L T H 	 E u r .   J .   P u b l i c   H e a l t h 	 	 2 0 0 7 	 1 7 	 	 	 1 	 	 	 2 4 	 2 8 	 	 1 0 . 1 0 9 3 / e u r p u b / c k m 0 6 2 	 	 5 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 2 1 1 K F 	 W O S : 0 0 0 2 4 9 5 2 2 0 0 0 0 0 8 	 1 7 6 6 6 4 1 8 	 
 
 J 	 D u r a n d o ,   P ;   S t i c c h i ,   L ;   S a s s o ,   L ;   G a s p a r i n i ,   R 	 	 	 	 D u r a n d o ,   P . ;   S t i c c h i ,   L a u r a ;   S a s s o ,   L o r e d a n a ;   G a s p a r i n i ,   R . 	 	 	 P u b l i c   h e a l t h   r e s e a r c h   l i t e r a t u r e   o n   i n f e c t i o u s   d i s e a s e s :   c o v e r a g e   a n d   g a p s   i n   E u r o p e 	 E U R O P E A N   J O U R N A L   O F   P U B L I C   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 4 t h   E u r o p e a n   P u b l i c   H e a l t h   R e s e a r c h   C o n f e r e n c e 	 N O V ,   2 0 0 6 	 M o n t r e u x ,   S W I T Z E R L A N D 	 	 	 e u r o p e ;   i n f e c t i o u s   d i s e a s e s ;   p u b l i c   h e a l t h ;   s c i e n t i f i c   r e s e a r c h 	 I N E Q U A L I T I E S ;   C H I L D R E N ;   V A C C I N E 	 B a c k g r o u n d :   I n   t h i s   s t u d y ,   b i b l i o m e t r i c   m e t h o d s   w e r e   u s e d   t o   i n v e s t i g a t e   p r e v e n t i o n   a n d   c o n t r o l   o f   i n f e c t i o u s   d i s e a s e s   ( I D s ) .   T h e   a i m   w a s   t o   g a i n   a n   o v e r a l l   v i e w   o f   p u b l i s h e d   r e s e a r c h   o n   I D s   i n   E u r o p e   a s   p a r t   o f   t h e   c o l l a b o r a t i v e   s t u d y   S P H E R E   ( S t r e n g t h e n i n g   P u b l i c   H e a l t h   R e s e a r c h   i n   E u r o p e ) .   M e t h o d s :   A   f r a m e w o r k   f o r   r e s e a r c h   o n   l D s   a n d   p u b l i c   h e a l t h   w a s   d e v e l o p e d   w i t h   d e f i n i t i o n s ,   k e y w o r d s ,   i n c l u s i o n   a n d   e x c l u s i o n   c r i t e r i a .   A   d e t a i l e d   w e b   s e a r c h   s t r a t e g y   b a s e d   o n   t h e   f r a m e w o r k   w a s   d e s i g n e d ,   p i l o t e d   a n d   r e f i n e d .   T h e   P u b M e d   e l e c t r o n i c   d a t a b a s e   w a s   s e a r c h e d   f o r   ' i n f e c t i o u s   d i s e a s e s '   a s   a   w h o l e ,   a n d   f o r   s e v e r a l   s u b t o p i c   a r e a s ,   a c r o s s   J u l y   1 9 9 5   a n d   J u n e   2 0 0 5 .   N u m b e r s   o f   p u b l i c a t i o n s   b y   y e a r ,   c o u n t r y ,   p o p u l a t i o n   a n d   G r o s s   D o m e s t i c   P r o d u c t   w e r e   c a l c u l a t e d .   R e s u l t s :   N e a r l y   2 1 0 0 0   p u b l i c a t i o n s   o n   t h e   m a i n   t o p i c   a n d   s u b - t o p i c s   w e r e   f o u n d ,   w i t h   a   p r o g r e s s i v e   i n c r e a s e   p a r t i c u l a r l y   s i n c e   2 0 0 0 .   T h e r e   w a s   a   m a r k e d   h e t e r o g e n e i t y   b e t w e e n   c o u n t r i e s .   F r a n c e ,   I t a l y ,   T h e   N e t h e r l a n d s ,   S p a i n ,   G e r m a n y ,   S w i t z e r l a n d ,   S w e d e n ,   U K   a n d   B e l g i u m   w e r e   t h e   m o s t   p r o l i f i c ,   a n d   E a s t e r n   E u r o p e a n   c o u n t r i e s   l e s s   s o .   ' V a c c i n e - p r e v e n t a b l e   d i s e a s e s ' ,   ' S e x u a l l y   t r a n s m i t t e d   d i s e a s e s ' ,   ' D r u g - r e s i s t a n t   i n f e c t i o n s ' ,   ' I n s e c t - a r t h r o p o d - r e l a t e d   d i s e a s e s '   a n d   ' C h i l d h o o d   d i s e a s e s '   w e r e   t h e   m a i n   f i e l d s   o f   s c i e n t i f i c   p r o d u c t i o n .   R e s e a r c h   o n   ' E p i d e m i o l o g y   a n d   S u r v e i l l a n c e '   a p p e a r e d ,   i n   g e n e r a l ,   t o   b e   b e t t e r   r e p r e s e n t e d   t h a n   r e s e a r c h   o n   ' P r e v e n t i o n   a n d   C o n t r o l ' .   D i s c u s s i o n :   T h i s   i s   t h e   f i r s t   t i m e   s u c h   a   b r o a d   a p p r o a c h   h a s   b e e n   u s e d   t o   d e s c r i b e   p u b l i c   h e a l t h   r e s e a r c h   o n   I D s   a c r o s s   E u r o p e .   A   p r i o r i t y   s h o u l d   b e   c o o p e r a t i o n   b e t w e e n   E u r o p e a n   s t a t e s   w h e r e   t h e r e   i s   l i t t l e   o r   n o ,   s c i e n t i f i c   p r o d u c t i o n .   B i b l i o m e t r i c s   h a s   l i m i t a t i o n s ,   b u t   i s   o f   v a l u e   t o   i n d i c a t e   a   g e n e r a l   p a t t e r n . 	 U n i v   G e n o a ,   S e c t   H y g   &   P r e v e n t   M e d ,   D e p t   H l t h   S c i ,   S a n   M a r t i n o   H o s p ,   I - 1 6 1 3 2   G e n o a ,   I t a l y ;   U n i v   G e n o a ,   S e c t   H y g   &   P r e v e n t   M e d ,   D e p t   H l t h   S c i ,   I - 1 6 1 3 2   G e n o a ,   I t a l y 	 D u r a n d o ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   G e n o a ,   S e c t   H y g   &   P r e v e n t   M e d ,   D e p t   H l t h   S c i ,   V i a   A   P a s t o r e   1 ,   I - 1 6 1 3 2   G e n o a ,   I t a l y . 	 d u r a n d o @ u n i g e . i t 	 S a s s o ,   L o r e d a n a / K - 1 5 0 4 - 2 0 1 6 ;   B a g n a s c o ,   A n n a m a r i a / J - 9 8 3 4 - 2 0 1 6 ;   	 S a s s o ,   L o r e d a n a / 0 0 0 0 - 0 0 0 1 - 5 8 8 6 - 5 9 3 7 ;   B a g n a s c o ,   A n n a m a r i a / 0 0 0 0 - 0 0 0 2 - 9 0 7 9 - 8 4 6 0 ;   G a s p a r i n i ,   R o b e r t o / 0 0 0 0 - 0 0 0 2 - 1 0 1 2 - 6 9 1 3 	 	 	 C a r t w r i g h t   K ,   2 0 0 2 ,   E U R   J   P E D I A T R ,   V 1 6 1 ,   P 1 8 8 ,   D O I   1 0 . 1 0 0 7 / s 0 0 4 3 1 - 0 0 1 - 0 9 0 7 - 3 ;   C h e n e   G ,   2 0 0 3 ,   L A N C E T ,   V 3 6 2 ,   P 6 7 9 ;   E x w o r t h y   M ,   2 0 0 3 ,   H E A L T H   S E R V   R E S ,   V 3 8 ,   P 1 9 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 6 7 7 3 . 2 0 0 3 . 0 0 2 0 8 . x ;   F i n c h   R ,   2 0 0 6 ,   J   A n t i m i c r o b   C h e m o t h e r ,   V 5 8   S u p p l   1 ,   p i 3 ,   D O I   1 0 . 1 0 9 3 / j a c / d k l 3 7 3 ;   G r o s e   C ,   2 0 0 5 ,   J   C L I N   V I R O L ,   V 3 3 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / j . j c v . 2 0 0 5 . 0 2 . 0 0 3 ;   H a d d y   R I ,   2 0 0 5 ,   P E D I A T R   I N F E C T   D I S   J ,   V 2 4 ,   P 3 2 0 ,   D O I   1 0 . 1 0 9 7 / 0 1 . i n f . 0 0 0 0 1 5 7 0 9 0 . 4 0 7 1 9 . 9 b ;   H I N M A N   A R ,   1 9 9 0 ,   L A N C E T ,   V 3 3 5 ,   P 7 0 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 0 ) 9 0 8 1 4 - L ;   L a z a r u s   J e f f r e y   V . ,   2 0 0 6 ,   C e n t r a l   E u r o p e a n   J o u r n a l   o f   P u b l i c   H e a l t h ,   V 1 4 ,   P 5 5 ;   M o s s i a l o s   E ,   2 0 0 2 ,   E U R O P E A N   O B S E R V A T O R Y ;   N a v a r r o   V ,   2 0 0 1 ,   I N T   J   H E A L T H   S E R V ,   V 3 1 ,   P 1 ;   P E A B O D Y   D S ,   2 0 0 7 ,   D R U G   D E V   I N D   P H A R M ,   V 3 3 ,   P 9 9 ,   D O I   1 0 . 1 0 8 0 / 0 3 6 3 9 0 4 0 6 0 0 6 8 3 6 7 5 ;   P e d a l i n o   B ,   2 0 0 2 ,   E u r o   S u r v e i l l ,   V 7 ,   P 1 0 3 ;   P l o t k i n   S A ,   2 0 0 4 ,   V A C C I N E S ,   P 1 ;   S i q u e i r a   C   E d u a r d o ,   2 0 0 2 ,   N e w   S o l u t ,   V 1 2 ,   P 2 3 7 ,   D O I   1 0 . 2 1 9 0 / T N R P - 8 2 A 2 - 8 K 3 F - 2 W 1 3 ;   S m i t h   J ,   2 0 0 4 ,   B   W O R L D   H E A L T H   O R G A N ,   V 8 2 ,   P 2 4 ;   S t i v e r   H   G r a n t ,   2 0 0 4 ,   E x p e r t   R e v   V a c c i n e s ,   V 3 ,   P 3 5 ,   D O I   1 0 . 1 5 8 6 / 1 4 7 6 0 5 8 4 . 3 . 1 . 3 5 ;   T r o t t e r   C L ,   2 0 0 4 ,   L A N C E T ,   V 3 6 4 ,   P 3 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 4 ) 1 6 7 2 5 - 1 ;   V e l a t i   C ,   2 0 0 5 ,   E u r o   S u r v e i l l ,   V 1 0 ,   P 1 2 ;   V i t a l e   F r a n c e s c o ,   2 0 0 5 ,   I g   S a n i t a   P u b b l ,   V 6 1 ,   P 4 7 ;   W H A R T O N   M ,   2 0 0 4 ,   V A C C I N E S ,   P 2 1 1 ;   * W H O ,   2 0 0 1 ,   E U R   H L T H   R E P   S U M M   P R 	 2 1 	 2 0 	 2 0 	 2 	 9 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 1 1 0 1 - 1 2 6 2 	 	 	 E U R   J   P U B L I C   H E A L T H 	 E u r .   J .   P u b l i c   H e a l t h 	 	 2 0 0 7 	 1 7 	 	 	 1 	 	 	 1 9 	 2 3 	 	 1 0 . 1 0 9 3 / e u r p u b / c k m 0 6 6 	 	 5 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 2 1 1 K F 	 W O S : 0 0 0 2 4 9 5 2 2 0 0 0 0 0 7 	 1 7 6 6 6 4 1 7 	 
 
 J 	 B i r k e n ,   C S ;   P a r k i n ,   P C 	 	 	 	 B i r k e n ,   C S ;   P a r k i n ,   P C 	 	 	 I n   w h i c h   j o u r n a l s   w i l l   p e d i a t r i c i a n s   f i n d   t h e   b e s t   e v i d e n c e   f o r   c l i n i c a l   p r a c t i c e ? 	 P E D I A T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e v i d e n c e - b a s e d   m e d i c i n e ;   m e d i c a l   e d u c a t i o n ;   c l i n i c a l   p e d i a t r i c s ;   i n f o r m a t i o n   s e r v i c e s ;   b i b l i o m e t r i c s 	 I M P A C T   F A C T O R S 	 O b j e c t i v e .   T h e   o b j e c t i v e   o f   t h i s   s t u d y   w a s   t o   i d e n t i f y   t h e   j o u r n a l s   t h a t   c o n t a i n   t h e   b e s t   e v i d e n c e   r e l a t i n g   t o   c l i n i c a l   p e d i a t r i c   p r a c t i c e ,   t h u s   e n a b l i n g   g e n e r a l   p e d i a t r i c i a n s   a n d   p e d i a t r i c   t r a i n e e s   t o   i d e n t i f y   t h e   b e s t   q u a l i t y   e v i d e n c e   m o r e   e f f i c i e n t l y   a n d   t o   s e l e c t   j o u r n a l s   f o r   g e n e r a l   r e a d i n g   m o r e   j u d i c i o u s l y .   M e t h o d s .   I n   t h e   f i r s t   o f   t h r e e   s t r a t e g i e s ,   j o u r n a l   c i t a t i o n s   f r o m   c o m p l e t e d   s y s t e m a t i c   r e v i e w s   u s i n g   t o p i c   h e a d i n g s   o f   p e d i a t r i c ( s ) ,   c h i l d ,   i n f a n t ( s ) ,   n e w b o r n ,   n e o n a t e ( s ) ,   n e o n a t o l o g y ,   a n d   a d o l e s c e n t ( s )   i n   t h e   C o c h r a n e   D a t a b a s e   o f   S y s t e m a t i c   R e v i e w s   ( C D S R )   i n   t h e   1 9 9 7 ,   I s s u e   4 ,   C o c h r a n e   L i b r a r y   w e r e   c o l l e c t e d .   I n   t h e   s e c o n d   s t r a t e g y ,   j o u r n a l   c i t a t i o n s   f r o m   A m e r i c a n   A c a d e m y   o f   P e d i a t r i c s '   ( A A P )   p o l i c y   s t a t e m e n t s   f r o m   1 9 9 4   t o   1 9 9 6   f o u n d   i n   t h e   A A P   p o l i c y   r e f e r e n c e   g u i d e   w e r e   c o l l e c t e d .   I n   t h e   t h i r d   s t r a t e g y ,   j o u r n a l   c i t a t i o n s   f r o m   t h e   C a n a d i a n   P a e d i a t r i c   S o c i e t y   ( C P S )   s t a t e m e n t s   f r o m   1 9 9 0   t o   1 9 9 7   f o u n d   i n   P e d i a t r i c s   a n d   C h i l d   H e a l t h   w e r e   c o l l e c t e d .   T o p i c s   r e l a t e d   t o   t e r t i a r y   n e o n a t o l o g y ,   n o n p h y s i c i a n   h e a l t h   c a r e   p r o f e s s i o n a l s ,   p u b l i c   h e a l t h   p o l i c y ,   e t h i c s ,   a n d   n o n - j o u r n a l   c i t a t i o n   s o u r c e s   w e r e   e x c l u d e d .   A l l   s t a t e m e n t s   w i t h   n o   r e f e r e n c e s   w e r e   e x c l u d e d .   J o u r n a l   c i t a t i o n s   i n   C D S R   w i t h   n o   p e d i a t r i c   s u b j e c t s   a n d   c i t a t i o n   o f   A A P   p o l i c y   s t a t e m e n t s   c i t e d   i n   A A P   p o l i c y   s t a t e m e n t s   w e r e   e x c l u d e d .   T h e   n u m b e r   o f   c i t a t i o n s   f r o m   t h e   j o u r n a l   c i t e d   m o s t   f r e q u e n t l y ,   f r o m   j o u r n a l s   t h a t   r e p r e s e n t e d   s i m i l a r   t o   1 0 %   o f   a l l   c i t a t i o n s   a n d   f r o m   t h e   1 0   j o u r n a l s   c i t e d   m o s t   f r e q u e n t l y   w e r e   e x p r e s s e d   a s   a   p e r c e n t   o f   t o t a l   c i t a t i o n s   a n d   a   9 5 %   C I   w a s   c a l c u l a t e d .   R e s u l t s .   U s i n g   a l l   t h r e e   s t r a t e g i e s   ( C D S R ,   A A P ,   a n d   C P S ) ,   t h e   j o u r n a l   c i t e d   m o s t   f r e q u e n t l y   w a s   P e d i a t r i c s .   U s i n g   t h e   C D S R   s t r a t e g y   ( n   =   2 3 4 ) ,   c i t a t i o n s   f r o m   P e d i a t r i c s   r e p r e s e n t e d   6 . 0 %   o f   t h e   t o t a l   ( 9 5 %   C I :   3 . 0 % ,   9 . 0 % ) ,   u s i n g   t h e   A A P   s t r a t e g y   ( n   =   9 3 0 ) ,   c i t a t i o n s   f r o m   P e d i a t r i c s   r e p r e s e n t e d   1 1 . 4 %   o f   t h e   t o t a l   ( 9 5 %   C I :   9 . 4 % ,   1 3 . 4 % ) ,   a n d   u s i n g   t h e   C P S   s t r a t e g y   ( n   =   8 7 3 ) ,   c i t a t i o n s   f r o m   P e d i a t r i c s   r e p r e s e n t e d   1 1 . 9 %   o f   t h e   t o t a l   ( 9 5 %   C I :   9 . 8 ,   1 4 . 1 ) .   U s i n g   t h e   C D S R   s t r a t e g y ,   c i t a t i o n s   f r o m   t h e   1 0   j o u r n a l s   c i t e d   m o s t   f r e q u e n t l y   m a d e   u p   3 8 . 9 %   o f   t h e   t o t a l   c i t a t i o n s   ( 9 5 %   C I :   3 2 . 7 % ,   4 5 . 1 % ) ,   u s i n g   t h e   A A P   s t r a t e g y ,   c i t a t i o n s   f r o m   t h e   1 0   j o u r n a l s   c i t e d   m o s t   f r e q u e n t l y   m a d e   u p   4 2 . 3 %   o f   t h e   t o t a l   c i t a t i o n s   ( 9 5 %   C I :   3 9 . 3 % ,   4 5 . 3 % ) ,   a n d   u s i n g   t h e   C P S   s t r a t e g y ,   c i t a t i o n s   f r o m   t h e   1 0   j o u r n a l s   c i t e d   m o s t   f r e q u e n t l y   m a d e   u p   6 0 . 6 %   o f   t h e   t o t a l   c i t a t i o n s   ( 9 5 %   C I :   5 7 . 4 ,   6 3 . 8 ) .   I n   t h e   C P S   s t r a t e g y ,   c i t a t i o n s   f r o m   t h e   J o u r n a l   o f   P e d i a t r i c s   r e p r e s e n t e d   1 0 . 2 %   o f   t h e   t o t a l   c i t a t i o n s   ( 9 5 %   C I :   8 . 2 ,   1 2 . 2 )   a n d   c i t a t i o n s   f r o m   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e   r e p r e s e n t e d   9 . 5 %   o f   t h e   t o t a l   c i t a t i o n s   ( 9 5 %   C I :   7 . 6 ,   1 1 . 5 ) .   A   t o t a l   o f   7   j o u r n a l s   w e r e   f o u n d   t o   b e   a m o n g   t h e   1 0   c i t e d   m o s t   f r e q u e n t l y   u s i n g   a l l   t h r e e   s t r a t e g i e s   ( i n   a l p h a b e t i c a l   o r d e r ) :   A r c h i v e s   o f   D i s e a s e s   i n   C h i l d h o o d ,   B r i t i s h   M e d i c a l   J o u r n a l ,   J o u r n a l   o f   t h e   A m e r i c a n   M e d i c a l   A s s o c i a t i o n ,   J o u r n a l   o f   P e d i a t r i c s ,   L a n c e t ,   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e ,   a n d   P e d i a t r i c s .   C o n c l u s i o n s .   T h i s   s t u d y   p r o v i d e s   t h e   g e n e r a l   p e d i a t r i c i a n   a n d   p e d i a t r i c   t r a i n e e   w i t h   a   s t r a t e g y   t o   i d e n t i f y   e f f i c i e n t l y   a   s i g n i f i c a n t   p r o p o r t i o n   o f   t h e   b e s t   e v i d e n c e   o n   p e d i a t r i c   p r a c t i c e   b y   r e s t r i c t i n g   s e a r c h e s   a n d   r e a d i n g   t o   a   l i m i t e d   n u m b e r   o f   j o u r n a l s .   I t   a l s o   h i g h l i g h t s   t h e   f a c t   t h a t   t h e   b e s t   q u a l i t y   e v i d e n c e   o n   p e d i a t r i c   p r a c t i c e   i s   f o u n d   i n   a   l a r g e   n u m b e r   o f   m e d i c a l   j o u r n a l s . 	 H o s p   S i c k   C h i l d r e n ,   D i v   P e d i a t   M e d ,   T o r o n t o ,   O N   M 5 G   1 X 8 ,   C a n a d a ;   H o s p   S i c k   C h i l d r e n ,   R e s   I n s t ,   T o r o n t o ,   O N   M 5 G   1 X 8 ,   C a n a d a ;   U n i v   T o r o n t o ,   F a c   M e d ,   D e p t   P e d i a t ,   T o r o n t o ,   O N   M 5 G   1 X 8 ,   C a n a d a 	 P a r k i n ,   P C   ( r e p r i n t   a u t h o r ) ,   H o s p   S i c k   C h i l d r e n ,   D e p t   P e d i a t ,   5 5 5   U n i v   A v e ,   T o r o n t o ,   O N   M 5 G   1 X 8 ,   C a n a d a . 	 	 	 	 	 	 * A M   A C   P E D ,   1 9 9 7 ,   P O L   R E F   G U I D   A M   A C   P ;   B E R O   L ,   1 9 9 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 4 ,   P 1 9 3 5 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 4 . 2 4 . 1 9 3 5 ;   * C A N   P A E D   S O C ,   1 9 7 5 ,   S T A T   B O O K ;   E V A N S   J T ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 3 5 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 3 5 3 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G a r f i e l d   E . ,   1 9 9 4 ,   C U R R   C O N T E N T S ,   V 2 5 ,   P 3 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   O X M A N   A D ,   1 9 9 3 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 0 ,   P 2 0 9 3 ;   S a c k e t t   D L ,   1 9 9 5 ,   J   R O Y   S O C   M E D ,   V 8 8 ,   P 6 2 0 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   W e n n e r a s   C ,   1 9 9 7 ,   N A T U R E ,   V 3 8 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 3 8 / 3 8 7 3 4 1 a 0 	 1 1 	 2 0 	 2 1 	 0 	 4 	 A M E R   A C A D   P E D I A T R I C S 	 E L K   G R O V E   V I L L A G E 	 1 4 1   N O R T H - W E S T   P O I N T   B L V D , ,   E L K   G R O V E   V I L L A G E ,   I L   6 0 0 0 7 - 1 0 9 8   U S A 	 0 0 3 1 - 4 0 0 5 	 	 	 P E D I A T R I C S 	 P e d i a t r i c s 	 M A Y 	 1 9 9 9 	 1 0 3 	 5 	 	 	 	 	 9 4 1 	 9 4 7 	 	 1 0 . 1 5 4 2 / p e d s . 1 0 3 . 5 . 9 4 1 	 	 7 	 P e d i a t r i c s 	 P e d i a t r i c s 	 1 9 3 J Z 	 W O S : 0 0 0 0 8 0 1 3 4 3 0 0 0 0 1 	 1 0 2 2 4 1 6 9 	 
 
 J 	 B r a c h o R i q u e l m e ,   R L ;   P e s c a d o r S a l a s ,   N ;   R e y e s R o m e r o ,   M A 	 	 	 	 B r a c h o R i q u e l m e ,   R L ;   P e s c a d o r S a l a s ,   N ;   R e y e s R o m e r o ,   M A 	 	 	 B i b l i o m e t r i c   r e p e r c u s s i o n s   o f   a d o p t i n g   E n g l i s h   a s   t h e   l a n g u a g e   o f   p u b l i c a t i o n 	 R E V I S T A   D E   I N V E S T I G A C I O N   C L I N I C A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 p e r i o d i c a l s ;   s t a t i s t i c s   a n d   n u m e r i c a l   d a t a ;   b i b l i o m e t r i c s ;   F r e n c h ;   E n g l i s h 	 	 O b j e c t i v e .   T o   d e t e r m i n e   t h e   e f f e c t   t h a t   t h e   c h a n g e   f r o m   F r e n c h   t o   E n g l i s h   h a d   o n   t h e   i m p a c t   o f   t h e   A n n a l e s   d e   I ' I n s t i t u t   P a s t e u r .   T e o r e t i c a l   r e f e r e n c e .   T h e   P a s t e u r   I n s t i t u t e   j o u r n a l s   h a v e   a   p r e s t i g e   o f   o v e r   1 0 0   y e a r s   o f   e x i s t e n c e   a n d   e i g h t   N o b e l   P r i z e   w i n n e r s   i n   P h y s i o l o g y   a n d   M e d i c i n e .   C h a n g e s   t h r o u g h   t i m e   o n   t h e   i m p a c t   o f   t h e s e   j o u r n a l s   c a n   b e   m o n i t o r e d   a s   t h e y   a r e   i n c l u d e d   i n   d a t a b a s e s   o f   t h e   I S I   ( I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ) .   M e t h o d s .   A   y e a r   b y   y e a r   a n a l y s i s   f r o m   1 9 7 4   t o   1 9 9 2   w a s   d o n e   u s i n g   s i m p l e   r e g r e s s i o n   b e t w e e n   p e r c e n t a g e   o f   a r t i c l e s   p u b l i s h e d   i n   E n g l i s h   a n d :   a )   t h e i r   i m p a c t   f a c t o r ;   b )   t h e i r   r a n k i n g   a m o n g   j o u r n a l s   o f   t h e   s a m e   f i e l d .   R e s u l t s .   T h e   d e t e r m i n a t i o n   c o e f f i c i e n t   ( r ( 2 ) )   b e t w e e n   t h e   p e r c e n t a g e   i n   E n g l i s h   a n d   t h e   i m p a c t   f a c t o r   w a s   0 . 1 0 8 ; a n d   t h a t   b e t w e e n   p e r c e n t a g e   i n   E n g l i s h   a n d   t h e   j o u r n a l ' s   r a n k   i n   s i m i l a r   p u b l i c a t i o n s   w a s   0 . 1 7 8   f o r   t h e   A n n   M i c r o b i o l ,   0 . 0 4 5   f o r   t h e   A n n   I m m u n o l   a n d   0 . 1 2 2   f o r   t h e   A n n   V i r o l .   C o n c l u s i o n s .   T h e   c h a n g e   o f   l a n g u a g e   d i d   n o t   i n c r e a s e   t h e   i m p a c t   f a c t o r   o f   t h e   F r e n c h   j o u r n a l s . 	 	 B r a c h o R i q u e l m e ,   R L   ( r e p r i n t   a u t h o r ) ,   U N I V   J U A R E Z   E S T A D O   D U R A N G O , I N S T   I N V E S T   C I E N T , D U R A N G O , M E X I C O . 	 	 	 	 	 	 A V A N T P R O P O S ,   1 9 7 3 ,   A N N   I M M U N O L   I   P A S T E U ,   V 1 2 4 ,   P 3 ;   B r o w n e r   W S ,   1 9 9 3 ,   D I S E N O   I N V E S T I G A C I O N ,   P 1 5 3 ;   D A N I E L   W W ,   1 9 9 6 ,   B I O E S T A D I S T I C A   B A S E ,   P 4 5 3 ;   F R I D M A N   W H ,   1 9 8 8 ,   A N N   I N S T   P A S T E U R   I M M ,   V 1 3 9 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 7 6 9 - 2 6 2 5 ( 8 8 ) 9 0 1 2 7 - 4 ;   G A R F I E L D   E ,   1 9 8 1 ,   S C I   J   C I T A T I O N   R E P O R ;   G A R F I E L D   E ,   1 9 9 2 ,   C U R R E N T   C O N T E N T   1 2 0 7 ,   P 3 ;   G A R F I E L D   E ,   1 9 9 0 ,   C U R R E N T   C O N T E N T   0 5 2 8 ,   P 5 ;   H a n n o u n   C ,   1 9 8 8 ,   A n n   I n s t   P a s t e u r   V i r o l ,   V 1 3 9 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 6 9 - 2 6 1 7 ( 8 8 ) 8 0 0 0 1 - 7 ;   * I   P A S T ,   1 9 9 5 ,   I N T E R F A C E   C I E N C I A   T E ,   V 8 ,   P 3 ;   * I   S C I   I N F ,   1 9 7 4 ,   S C I   J   C I T A T I O N   R E P O R ;   M A D R A Z O   I ,   1 9 9 0 ,   A R C H   I N V E S T   M E D ,   V 2 1 ,   P 7 7 ;   M e n d e z S a n c h e z   N ,   1 9 9 5 ,   R E V   I N V E S T   C L I N ,   V 4 7 ,   P 5 0 7 ;   * N I H ,   1 9 9 6 ,   C D   M E D ;   P A S A N T E S   H ,   1 9 9 4 ,   B   A C A D   I N V E S T   C I E N T ,   V 2 0 ,   P 5 ;   T A U B E S   G ,   1 9 9 3 ,   S C I E N C E ,   V 2 6 0 ,   P 8 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 8 4 9 3 5 1 6 	 1 5 	 2 0 	 2 1 	 1 	 5 	 I N S T   N A C I O N A L   N U T R I C I O N 	 T L A L P A N 	 V A S C O   D E   Q U I R O Z A   # 1 5 ,   T L A L P A N   1 4 0 0 0   D   F ,   M E X I C O 	 0 0 3 4 - 8 3 7 6 	 	 	 R E V   I N V E S T   C L I N 	 R e v .   I n v e s t .   C l i n . 	 S E P - O C T 	 1 9 9 7 	 4 9 	 5 	 	 	 	 	 3 6 9 	 3 7 2 	 	 	 	 4 	 M e d i c i n e ,   G e n e r a l   &   I n t e r n a l 	 G e n e r a l   &   I n t e r n a l   M e d i c i n e 	 Y J 1 1 7 	 W O S : A 1 9 9 7 Y J 1 1 7 0 0 0 0 4 	 9 5 2 7 6 9 6 	 
 
 J 	 K O S T O F F ,   R N 	 	 	 	 K O S T O F F ,   R N 	 	 	 F E D E R A L ,   R E S E A R C H   I M P A C T   A S S E S S M E N T   -   A X I O M S ,   A P P R O A C H E S ,   A P P L I C A T I O N S 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 	 T h i s   p a p e r   d e s c r i b e s   t h e   p r a c t i c e   o f   F e d e r a l   r e s e a r c h   i m p a c t   a s s e s s m e n t .   E v a l u a t i o n   o f   r e s e a r c h   i m p a c t   i s   d e s c r i b e d   f o r   t h r e e   c a s e s :   R e s e a r c h   s e l e c t i o n ,   w h e r e   t h e   w o r k   h a s   n o t   y e t   b e e n   p e r f o r m e d ;   R e s e a r c h   r e v i e w ,   w h e r e   w o r k   a n d   r e s u l t s   a r e   o n g o i n g ;   a n d   E x - p o s t   r e s e a r c h   a s s e s s m e n t ,   w h e r e   r e s e a r c h   h a s   b e e n   c o m p l e t e d   a n d   r e s u l t s   c a n   b e   t r a c k e d .   R e t r o s p e c t i v e   m e t h o d s   ( s u c h   a s   p r o j e c t s   H i n d s i g h t   a n   T R A C E S ) ,   q u a l i t a t i v e   m e t h o d s   ( s u c h   a s   p e e r   r e v i e w ) ,   a n d   q u a n t i t a t i v e   m e t h o d s   ( s u c h   a s   c o s t - b e n e f i t   a n a l y s i s   a n d   b i b l i o m e t r i c s )   a r e   d e s c r i b e d .   W h i l e   p e e r   r e v i e w   i n   i t s   b r o a d e s t   s e n s e   i s   t h e   m o s t   w i d e l y   u s e d   m e t h o d   i n   r e s e a r c h   s e l e c t i o n ,   r e v i e w ,   a n d   e x - p o s t   a s s e s s m e n t ,   i t   h a s   i t s   d e f i c i e n c i e s ,   a n d   t h e r e   i s   n o   s i n g l e   m e t h o d   w h i c h   p r o v i d e s   a   c o m p l e t e   i m p a c t   e v a l u a t i o n . 	 	 O F F   N A V A L   R E S ,   8 0 0   N   Q U I N C Y   S T ,   A R L I N G T O N ,   V A   2 2 2 1 7   U S A . 	 	 	 	 	 	 A V E R C H   H ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   A V E R C H   H ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ;   A V E R C H   H ,   1 9 8 7 ,   J   P O L I C Y   A N A L   M A N A G E ,   V 6 ;   B A R K E R   K ,   1 9 9 2 ,   E C   H D B   E V A L U A T I O N ;   B a t t e l l e - C o l u m b u s   L a b o r a t o r i e s ,   1 9 7 3 ,   I N T   S C I   T E C H N   I N N   P R ;   B O R N S T E I N   R F ,   1 9 9 1 ,   J   M I N D   B E H A V I O U R ,   V 1 2 ;   B O R N S T E I N   R F ,   1 9 9 1 ,   B E H A V I O R A L   B R A I N   S C I ,   V 1 4 ,   P 1 ;   B O Z E M A N   B ,   1 9 9 3 ,   A S S E S S I N G   R   D   I M P A C T ;   B R A U N   T ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 1 ;   B R A U N   T ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   B R A U N   T ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 2 ;   B R A U N   T ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 1 ;   B R A U N   T ,   1 9 9 0 ,   J   I N F O R M A T I O N   S C I ,   V 1 6 ;   B R O W N   G E ,   1 9 9 2 ,   5 6 8 1 9   U S   H O U S   R E P R   C ;   C a r n e g i e   C o m m i s s i o n   o n   S c i e n c e   T e c h n o l o g y   a n d   G o v e r n m e n t ,   1 9 9 2 ,   E N   F U T   L I N K   S C I   T E C H ;   C A R P E N T E R   M ,   1 9 8 0 ,   R E S   M A N A G E ,   V 1 3 ,   P 2 ;   C A R P E N T E R   M P ,   1 9 8 3 ,   W O R L D   P A T E N T   I N F O R M A ,   V 5 ;   C H U B I N   D E ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   C h u b i n   D .   R . ,   1 9 9 0 ,   P E E R L E S S   S C I   P E E R   R E ;   C I C C H E T T I   D V ,   1 9 9 1 ,   B E H A V I O R A L   B R A I N   S C I ,   V 1 4 ,   P 1 ;   C O L E   J ,   1 9 8 1 ,   P B 8 2 1 8 2 1 3 0 ;   C O L E   S ,   1 9 7 8 ,   P B 8 3 1 9 2 1 6 1 ;   C O L E   S ,   1 9 8 1 ,   S C I E N C E ,   V 2 1 4 ;   C O L L I N S   P ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ;   C O Z Z E N S   S E ,   1 9 8 7 ,   S C I   P U B L   P O L I C Y ,   V 1 4 ,   P 2 ;   * D O D ,   1 9 6 9 ,   D T I C   A D 4 9 5 9 0 5 ;   * D O D ,   D T I C 8 8 4 1 9 0 4 4   A C C ;   * D O E ,   1 9 7 8 ,   D O E E T 0 0 4 7 ;   * D O E ,   1 9 8 2 ,   D O E E R 0 1 2 3   R E P ;   * D O E ,   1 9 8 3 ,   D O E E R 0 1 9 4   R E P ;   * D O E ,   1 9 9 3 ,   D O E S T 0 0 0 7 P   R E P ;   * D O E ,   1 9 8 6 ,   D O E E R 0 2 7 5   R E P ;   E N G E L S M A N   E C ,   1 9 9 1 ,   C W T S 9 1 0 2   M I N   E C   A F F ;   F R A M E   J D ,   1 9 8 3 ,   I E E E   T   E N G   M A N A G E M E N ,   V 3 0 ;   F R A Z I E R   S P ,   1 9 8 7 ,   G A O R C E D 8 7 8 7 F S   U S   G E N ;   G E O R G H I O U   L ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   G R I L I C H E S   Z ,   1 9 9 4 ,   A M   E C O N   R E V ,   V 8 4 ,   P 1 ;   G r i l i c h e s   Z . ,   1 9 7 9 ,   B E L L   J   E C ,   P 1 0 ;   H I C K S   D ,   1 9 8 6 ,   R   D   M A N A G E M E N T ,   V 1 6 ;   * I   D E F   A N ,   1 9 9 1 ,   P 2 4 2 9   P A P ,   V 2 ;   * I   D E F   A N ,   1 9 9 1 ,   P 2 5 3 8   P A P ,   V 3 ;   * I   D E F   A N ,   1 9 9 0 ,   P 2 1 9 2   P A P ,   V 1 ;   I l l i n o i s   I n s t i t u t e   o f   T e c h n o l o g y   R e s e a r c h   I n s t i t u t e ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ;   I R V I N E   J ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M A T I O N   S C I ,   V 1 3 ;   K I N G S L E Y   G ,   1 9 9 3 ,   A S S E S S I N G   R   D   I M P A C T ;   K o s t o f f   R .   N . ,   1 9 8 3 ,   J o u r n a l   o f   F u s i o n   E n e r g y ,   V 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 0 5 2 6 4 5 ;   K O S T O F F   R N ,   1 9 8 8 ,   I E E E   T   E N G   M A N A G E ,   V 3 5 ,   P 2 7 1 ,   D O I   1 0 . 1 1 0 9 / 1 7 . 7 4 5 0 ;   K O S T O F F   R N ,   1 9 9 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 4 ) 9 0 0 9 3 - 0 ;   K O S T O F F   R N ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 4 . x ;   K O S T O F F   R N ,   1 9 9 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 4 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 3 ) 9 0 0 7 0 - N ;   K O S T O F F   R N ,   1 9 9 4 ,   S P E C I A L   I S S U E   T E C H N O ,   V 5 ,   P 1 ;   K O S T O F F   R N ,   1 9 9 3 ,   A S S E S S I N G   R   D   I M P A C T ;   K O S T O F F   R N ,   1 9 9 2 ,   3 R D   P   I N T   C   M A N   T E C H ;   K O S T O F F   R N ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   K o s t o f f   R .   N . ,   1 9 9 5 ,   H D B   R E S   I M P A C T   A S S E S ;   K R U Y T B O S C H   C ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   L I N K   A ,   1 9 9 3 ,   A S S E S S I N G   R   D   I M P A C T ;   L O G S D O N   J M ,   1 9 8 5 ,   O V E R V I E W   F E D E R A L   R E S ;   L O G S D O N   J M ,   1 9 8 5 ,   F E D E R A L   R E S   E V A L U A T I ;   L U U K K O N E N   T ,   1 9 9 0 ,   R E S   P O L I C Y ,   V 1 9 ;   L u u k k o n e n   T . ,   1 9 9 2 ,   S C I   T E C H N O L O G Y   H U M A N ,   V 1 7 ;   L U U K K O N E N   T ,   1 9 9 0 ,   A N N   M E D ,   V 2 2 ;   M A N S F I E L D   E ,   1 9 8 0 ,   A M   E C   R E V ,   V 7 0 ;   M A N S F I E L D   E ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ;   M A R T I N   B R ,   1 9 9 0 ,   S C I   P U B L   P O L I C Y ,   V 1 7 ,   P 1 ;   M C A L L I S T E R   P R ,   1 9 8 3 ,   I E E E   T   E N G   M A N A G E M E N ,   V 3 0 ;   M I L L E R   Z ,   1 9 9 2 ,   N E T W O R K S ,   V 2 2 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / n e t . 3 2 3 0 2 2 0 1 0 2 ;   M O E D   H F ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   M U L L I N S   N ,   1 9 8 7 ,   S C I   P U B L I C   P O L I C Y ,   V 1 4 ;   M U L L I N S   N ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   N A R I N   F ,   1 9 7 6 ,   P B 2 5 2 3 3 9 A S ;   N a r i n   F . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   N A R I N   F ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ;   N A R I N   F ,   1 9 8 4 ,   I E E E   T   E N G   M A N A G E M E N ,   V 3 1 ;   N A R I N   F ,   1 9 9 2 ,   N O V   V P P   P R O F   M   N U R N B ;   N A R I N   F ,   1 9 9 2 ,   R E S   P O L I C Y ,   V 2 1 ,   P 3 ;   N A R I N   F ,   1 9 9 4 ,   S P E C I A L   I S S U E S   R E S   I ,   V 1 8 ,   P 1 ;   N A R I N   F ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   N A R I N   F ,   1 9 8 7 ,   S C I   P U B L   P O L I C Y ,   V 1 4 ,   P 2 ;   * N A T   A C   S C I ,   1 9 9 2 ,   G O V   R O L   C I V   T E C H N   B U ;   * N A T   B O A R D   E M P L   E D ,   1 9 9 3 ,   2 1   C O M M   R E P ;   N E L S O N   K S ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   N I C H O L S O N   R S ,   1 9 8 7 ,   P B 8 8 1 6 3 5 7 1 ;   * N I S T ,   1 9 9 1 ,   1 9 9 0   A N N   R E P ;   * N S F ,   1 9 8 9 ,   N S B 8 9 1   N S B 8 9 1   N A T   S C ;   O B E R S K I   J E J ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   O D E Y A L E   C O ,   1 9 9 3 ,   T H E S I S   W A L D E N   U ;   O D E Y A L E   C O ,   1 9 9 4 ,   H E U R I S T I C S   J   K N O W L E D ,   V 7 ,   P 1 ;   O R M A L A   E ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ;   O R M A L A   E ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   R O B B   W L ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   R O E S S N E R   J D ,   1 9 9 3 ,   A S S E S S I N G   R   D   I M P A C T ;   R O Y   R ,   1 9 8 5 ,   S C I   T E C H N O L ,   V 1 0 ,   P 3 ;   S A L A S I N   J ,   1 9 8 0 ,   M I T R E   M T R 8 0 W 1 2 3   T E C H ;   S C H U B E R T   A ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 ;   S C H U B E R T   A ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 3 ,   P 1 ;   S C H U L Z   P ,   1 9 8 6 ,   W O M E N   S T U D   I N T   F O R U M ,   V 9 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 7 - 5 3 9 5 ( 8 6 ) 9 0 0 7 0 - 1 ;   T E R L E C K Y J   N ,   1 9 8 5 ,   N O V   N A S   W O R K S H   F E D   R ;   T E R L E C K Y J   N ,   1 9 7 7 ,   S T A T E   S C I   R E S   S O M E   N ;   T I J S S E N   R ,   1 9 9 4 ,   S P E C I A L   I S S U E   R E S   I M ,   V 1 8 ,   P 1 ;   * U S   C ,   1 9 9 1 ,   O T A S E T 4 9 0 ;   * U S   C ,   1 9 8 9 ,   O T A I S C 4 2 0 ;   * U S   C ,   1 9 8 8 ,   O T A I S C 3 7 4 ;   * U S   C ,   1 9 8 6 ,   O T A T M S E T 3 6 ;   V A N R A A N   A F J ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ;   V A N R R A N   A F J ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ;   V A N V I A N E N   B G ,   1 9 9 0 ,   S C I   P O L I C Y ,   V 1 9 ;   W A L L M A R K   J T ,   1 9 8 6 ,   I E E E   T   E N G   M A N A G E M E N ,   V 3 3 ;   W H I T E   H D ,   1 9 8 9 ,   A N N   R E V   I N F O R M A T I O N ,   V 2 4 	 1 1 0 	 2 0 	 2 0 	 1 	 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 O C T 	 1 9 9 5 	 3 4 	 2 	 	 	 	 	 1 6 3 	 2 0 6 	 	 1 0 . 1 0 0 7 / B F 0 2 0 2 0 4 2 0 	 	 4 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 T H 5 9 0 	 W O S : A 1 9 9 5 T H 5 9 0 0 0 0 0 3 	 	 
 
 J 	 V A N H O O Y D O N K ,   G ;   G E V A E R T ,   R ;   M I L I S P R O O S T ,   G ;   V A N D E S O M P E L ,   H ;   D E B A C K E R E ,   K 	 	 	 	 V A N H O O Y D O N K ,   G ;   G E V A E R T ,   R ;   M I L I S P R O O S T ,   G ;   V A N D E S O M P E L ,   H ;   D E B A C K E R E ,   K 	 	 	 A   B I B L I O T H E C O N O M I C   A N A L Y S I S   O F   T H E   I M P A C T   F A C T O R S   O F   S C I E N T I F I C   D I S C I P L I N E S 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 4 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   B i b l i o m e t r i c s ,   I n f o r m e t r i c s   a n d   S c i e n t o m e t r i c s ,   i n   M e m o r y   o f   D e r e k   J o h n   d e   S o l l a   P r i c e   ( 1 9 2 2 - 1 9 8 3 ) 	 S E P   1 1 - 1 5 ,   1 9 9 3 	 B E R L I N ,   G E R M A N Y 	 M i n i s t e r   S c i   &   R e s   L a n d   B e r l i n 	 	 	 J O U R N A L   C O S T S ;   B I B L I O M E T R I C S 	 A n   a t t e m p t   i s   m a d e   t o   c o r r e l a t e   b i b l i o m e t r i c   d a t a   o f   j o u r n a l s   ( i m p a c t   f a c t o r s ,   h a l f - l i f e )   f o r   s c i e n t i f i c   d i s c i p l i n e s   i n   t h e   e x a c t   s c i e n c e s   t o   b i b l i o t h e c o n o m i c   d a t a   ( s u b s c r i p t i o n   p r i c e s ,   p r i c e s   p e r   a r t i c l e   a n d   h o l d i n g s ) .   D a t a   a r e   p r e s e n t e d   f o r   5 3 9 9   j o u r n a l s   i n   1 3 1   d i s c i p l i n e s ,   a s   m e n t i o n e d   i n   t h e   J o u r n a l   C i t a t i o n   R e p o r t s   1 9 9 0   ( S c i e n c e   C i t a t i o n   I n d e x ) . 	 S T A T E   U N I V   G H E N T , S C H   M A N A G E M E N T , B - 9 0 5 0   G H E N T , B E L G I U M 	 V A N H O O Y D O N K ,   G   ( r e p r i n t   a u t h o r ) ,   G H E N T   U N I V   L A B , R O Z I E R   9 , B - 9 0 0 0   G H E N T , B E L G I U M . 	 	 V a n   H o o y d o n k ,   G u i d o / B - 1 1 2 5 - 2 0 1 1 	 V a n   H o o y d o n k ,   G u i d o / 0 0 0 0 - 0 0 0 1 - 5 5 3 3 - 7 7 4 1 	 	 	 B U D D   J M ,   1 9 9 1 ,   L I B R   A C Q U I S   P R A C T   T H ,   V 1 5 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 6 4 - 6 4 0 8 ( 9 1 ) 9 0 0 8 7 - U ;   B Y R D   G D ,   1 9 7 8 ,   B   M E D   L I B R   A S S O C ,   V 6 6 ,   P 3 9 7 ;   C U B B E R L E Y   C ,   1 9 9 3 ,   J   A C A D   L I B R ,   V 1 9 ,   P 1 6 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 9 - 1 3 3 3 ( 9 3 ) 9 0 6 9 3 - Y ;   F E R R E I R O   L ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 4 7 8 ;   G A R F I E L D   E ,   1 9 9 0 ,   S C I   C I T A T I O N   I N D E X   J ;   G A R S I D E   D B ,   1 9 7 2 ,   S P E C   L I B R ,   V 6 3 ,   p A 1 0 ;   G U H A   M ,   1 9 8 9 ,   N A T U R E ,   V 3 4 1 ,   P 2 7 6 ,   D O I   1 0 . 1 0 3 8 / 3 4 1 2 7 6 c 0 ;   H E P F E R   C ,   1 9 8 8 ,   S E R I A L S   L I B R ,   V 1 5 ,   P 1 4 1 ;   H I R S T   G ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 4 0 3 ;   M C G O U R T Y   C ,   1 9 8 9 ,   N A T U R E ,   V 3 4 1 ,   P 2 6 8 ;   M O L I N E   S R ,   1 9 9 1 ,   S E R I A L S   L I B R ,   V 2 0 ,   P 6 5 ,   D O I   1 0 . 1 3 0 0 / J 1 2 3 v 2 0 n 0 4 _ 0 5 ;   P E T E R S E N   H C ,   1 9 9 2 ,   C O L L   R E S   L I B R ,   V 5 3 ,   P 1 7 6 ;   R A S H I D   H F ,   1 9 9 1 ,   S E R I A L S   L I B R ,   V 2 0 ,   P 5 5 ,   D O I   1 0 . 1 3 0 0 / J 1 2 3 v 2 0 n 0 2 _ 0 5 ;   R I B B E   P H ,   1 9 9 0 ,   2 5 T H   P   M   G E O S C   I N F   S ,   V 2 1 ;   S C A N L A N   B D ,   1 9 8 7 ,   S E R I A L S   L I B R ,   V 1 3 ,   P 5 7 ;   S E N G U P T A   I N ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 ;   S N I G G E R   K ,   1 9 9 1 ,   S E R I A L S   R E V ,   V 1 7 ,   P 4 1 ;   T O D O R O V   R ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 6 7 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 1 0 9 - F ;   V A N H O O Y D O N K   G ,   U N P U B ;   Y O U N G   P R ,   1 9 9 0 ,   L I B R   J ,   V 1 1 5 ,   P 5 0 ;   L I B R A R I A N S   H D B   1 9 9 0 ;   1 9 9 1 ,   T I J D S C H R I F T E N C A T A L O G ;   1 9 9 1 ,   U L R I C H S   I N T   P E R I O D I C ;   1 9 9 0 ,   L I B R   A S S O C   R E C ,   V 9 2 ,   P 3 8 4 	 2 4 	 2 0 	 2 0 	 0 	 6 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A Y 	 1 9 9 4 	 3 0 	 1 	 	 	 	 	 6 5 	 8 1 	 	 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 N R 5 4 2 	 W O S : A 1 9 9 4 N R 5 4 2 0 0 0 0 6 	 	 
 
 J 	 S E L L E N ,   M K 	 	 	 	 S E L L E N ,   M K 	 	 	 B I B L I O M E T R I C S   I N   I N F O R M A T I O N - S C I E N C E   -   A   C I T A T I O N   A N A L Y S I S   O F   2   A C A D E M I C - L I B R A R Y   J O U R N A L S 	 C O L L E G E   &   R E S E A R C H   L I B R A R I E S 	 	 	 E n g l i s h 	 N o t e 	 	 	 	 	 	 	 	 	 	 S E L L E N ,   M K   ( r e p r i n t   a u t h o r ) ,   P E N N   S T A T E   U N I V , B E H R E N D   C O L L   L I B , E R I E , P A   1 6 5 6 3 ,   U S A . 	 	 	 	 	 	 B R A C E   W ,   1 9 7 6 ,   L I B R A R Y   I N F O R M A T I O N ,   V 2 ,   P 1 6 ;   L A B O R I E   T ,   1 9 7 6 ,   J   E D U C   L I B R A R I A N S H I P ,   V 1 6 ,   P 2 7 1 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 2 4 6 5 ;   P e r i t z   B .   C . ,   1 9 8 1 ,   L I B R   R E S ,   V 3 ,   P 4 7 ;   S W I S H E R   R ,   1 9 8 2 ,   C O L L   R E S   L I B R ,   V 4 3 ,   P 5 1 ;   W I N D S O R   D A ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 5 0 9 	 5 	 2 0 	 2 0 	 0 	 1 	 A S S O C   C O L L   R E S E A R C H   L I B R A R I E S 	 C H I C A G O 	 5 0   E   H U R O N   S T ,   C H I C A G O ,   I L   6 0 6 1 1 	 0 0 1 0 - 0 8 7 0 	 	 	 C O L L   R E S   L I B R 	 C o l l .   R e s .   L i b r . 	 	 1 9 8 4 	 4 5 	 2 	 	 	 	 	 1 2 9 	 1 3 2 	 	 	 	 4 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 S S 1 1 9 	 W O S : A 1 9 8 4 S S 1 1 9 0 0 0 0 6 	 	 
 
 J 	 C r a m e r ,   H ;   L a u c h e ,   R ;   D o b o s ,   G 	 	 	 	 C r a m e r ,   H o l g e r ;   L a u c h e ,   R o m y ;   D o b o s ,   G u s t a v 	 	 	 C h a r a c t e r i s t i c s   o f   r a n d o m i z e d   c o n t r o l l e d   t r i a l s   o f   y o g a :   a   b i b l i o m e t r i c   a n a l y s i s 	 B M C   C O M P L E M E N T A R Y   A N D   A L T E R N A T I V E   M E D I C I N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 Y o g a ;   C o m p l e m e n t a r y   t h e r a p i e s ;   R a n d o m i z e d   c o n t r o l l e d   t r i a l s ;   B i b l i o m e t r i c s ;   R e v i e w 	 Q U A L I T Y - O F - L I F E ;   L O W - B A C K - P A I N ;   B R E A S T - C A N C E R   P A T I E N T S ;   H E A R T - R A T E - V A R I A B I L I T Y ;   C H R O N I C   N E C K   P A I N ;   S T Y L E   M O D I F I C A T I O N   P R O G R A M ;   C O R O N A R Y - A R T E R Y - D I S E A S E ;   C O N T R O L L E D   P I L O T   T R I A L ;   P R O G R E S S I V E   M U S C L E - R E L A X A T I O N ;   P R O F E S S I O N A L   C O M P U T E R   U S E R S 	 B a c k g r o u n d :   A   g r o w i n g   n u m b e r   o f   r a n d o m i z e d   c o n t r o l l e d   t r i a l s   ( R C T s )   h a v e   i n v e s t i g a t e d   t h e   t h e r a p e u t i c   v a l u e   o f   y o g a   i n t e r v e n t i o n s .   T h i s   b i b l i o m e t r i c   a n a l y s i s   a i m e d   t o   p r o v i d e   a   c o m p r e h e n s i v e   r e v i e w   o f   t h e   c h a r a c t e r i s t i c s   o f   t h e   t o t a l i t y   o f   a v a i l a b l e   r a n d o m i z e d   y o g a   t r i a l s .   M e t h o d s :   A l l   R C T s   o f   y o g a   w e r e   e l i g i b l e .   M e d l i n e / P u b M e d ,   S c o p u s ,   t h e   C o c h r a n e   L i b r a r y ,   I n d M E D ,   a n d   t h e   t a b l e s   o f   c o n t e n t   o f   y o g a   s p e c i a l t y   j o u r n a l s   n o t   l i s t e d   i n   m e d i c a l   d a t a b a s e s   w e r e   s c r e e n e d   t h r o u g h   F e b r u a r y   2 0 1 4 .   B i b l i o m e t r i c   d a t a ,   d a t a   o n   p a r t i c i p a n t s ,   a n d   i n t e r v e n t i o n   w e r e   e x t r a c t e d   a n d   a n a l y z e d   d e s c r i p t i v e l y .   R e s u l t s :   P u b l i s h e d   b e t w e e n   1 9 7 5   a n d   2 0 1 4 ,   a   t o t a l   o f   3 6 6   p a p e r s   w e r e   i n c l u d e d ,   r e p o r t i n g   3 1 2   R C T s   f r o m   2 3   d i f f e r e n t   c o u n t r i e s   w i t h   2 2 , 5 4 8   p a r t i c i p a n t s .   T h e   m e d i a n   s t u d y   s a m p l e   s i z e   w a s   5 9   ( r a n g e   8 - 4 1 0 ,   i n t e r q u a r t i l e   r a n g e   =   3 1 ,   9 3 ) .   T w o   h u n d r e d   s i x t y - f o u r   R C T s   ( 8 4 . 6 % )   w e r e   c o n d u c t e d   w i t h   a d u l t s ,   1 0 5   ( 3 3 . 7 % )   w i t h   o l d e r   a d u l t s   a n d   3 1   ( 9 . 9 % )   w i t h   c h i l d r e n .   E i g h t y - f o u r   R C T s   ( 2 6 . 9 % )   w e r e   c o n d u c t e d   w i t h   h e a l t h y   p a r t i c i p a n t s .   O t h e r   t r i a l s   e n r o l l e d   p a t i e n t s   w i t h   o n e   o f   6 3   v a r i e d   m e d i c a l   c o n d i t i o n s ;   t h e   m o s t   c o m m o n   b e i n g   b r e a s t   c a n c e r   ( 1 7   R C T s ,   5 . 4 % ) ,   d e p r e s s i o n   ( 1 4   R C T s ,   4 . 5 % ) ,   a s t h m a   ( 1 4   R C T s ,   4 . 5 % )   a n d   t y p e   2   d i a b e t e s   m e l l i t u s   ( 1 3   R C T s ,   4 . 2 % ) .   W h i l s t   1 1 9   R C T s   ( 3 8 . 1 % )   d i d   n o t   d e f i n e   t h e   s t y l e   o f   y o g a   u s e d ,   3 5   R C T s   ( 1 1 . 2 % )   u s e d   H a t h a   y o g a   a n d   3 0   R C T s   ( 9 . 6 % )   y o g a   b r e a t h i n g .   T h e   r e m a i n i n g   1 2 8   R C T s   ( 4 1 . 0 % )   u s e d   4 6   v a r i e d   y o g a   s t y l e s ,   w i t h   a   m e d i a n   i n t e r v e n t i o n   l e n g t h   o f   9   w e e k s   ( r a n g e   1   d a y   t o   1   y e a r ;   i n t e r q u a r t i l e   r a n g e   =   5 ,   1 2 ) .   T w o   h u n d r e d   a n d   f o r t y - f o u r   R C T s   ( 7 8 . 2 % )   u s e d   y o g a   p o s t u r e s ,   2 3 2   R C T s   ( 7 4 . 4 % )   u s e d   b r e a t h   c o n t r o l ,   1 5 3   R C T s   ( 4 9 . 0 % )   u s e d   m e d i t a t i o n   a n d   3 2   R C T s   ( 1 0 . 3 % )   u s e d   p h i l o s o p h y   l e c t u r e s .   O n e   h u n d r e d   a n d   s e v e n t y - f o u r   R C T s   ( 5 5 . 6 % )   c o m p a r e d   y o g a   w i t h   n o   s p e c i f i c   t r e a t m e n t ;   2 1   v a r i e d   c o n t r o l   i n t e r v e n t i o n s   w e r e   u s e d   i n   t h e   r e m a i n i n g   R C T s .   C o n c l u s i o n s :   T h i s   b i b l i o m e t r i c   a n a l y s i s   p r e s e n t s   t h e   m o s t   c o m p l e t e   u p - t o - d a t e   o v e r v i e w   o n   p u b l i s h e d   r a n d o m i z e d   y o g a   t r i a l s .   W h i l e   t h e   a v a i l a b l e   r e s e a r c h   e v i d e n c e   i s   s p a r s e   f o r   m o s t   c o n d i t i o n s ,   t h e r e   w a s   a   m a r k e d   i n c r e a s e   i n   p u b l i s h e d   R C T s   i n   r e c e n t   y e a r s . 	 [ C r a m e r ,   H o l g e r ;   L a u c h e ,   R o m y ;   D o b o s ,   G u s t a v ]   U n i v   D u i s b u r g   E s s e n ,   D e p t   I n t e r n a l   &   I n t e g r a t   M e d ,   K l i n i k e n   E s s e n   M i t t e ,   F a c   M e d ,   D - 4 5 2 7 6   E s s e n ,   G e r m a n y 	 C r a m e r ,   H   ( r e p r i n t   a u t h o r ) ,   U n i v   D u i s b u r g   E s s e n ,   D e p t   I n t e r n a l   &   I n t e g r a t   M e d ,   K l i n i k e n   E s s e n   M i t t e ,   F a c   M e d ,   D e i m e l s b e r g   3 4 a ,   D - 4 5 2 7 6   E s s e n ,   G e r m a n y . 	 h . c r a m e r @ k l i n i k e n - e s s e n - m i t t e . d e 	 	 L a u c h e ,   R o m y / 0 0 0 0 - 0 0 0 2 - 4 1 7 1 - 7 9 3 5 ;   C r a m e r ,   H o l g e r / 0 0 0 0 - 0 0 0 2 - 3 6 4 0 - 8 0 4 6 	 	 	 A d e s   P A ,   2 0 0 5 ,   J   A P P L   P H Y S I O L ,   V 9 8 ,   P 1 2 8 0 ,   D O I   1 0 . 1 1 5 2 / j a p p l p h y s i o l . 0 0 3 6 0 . 2 0 0 4 ;   A d e s   P A ,   2 0 0 3 ,   M E D   S C I   S P O R T   E X E R ,   V 3 5 ,   P 1 2 6 5 ,   D O I   1 0 . 1 2 4 9 / 0 1 . M S S . 0 0 0 0 0 7 9 0 4 4 . 2 1 8 2 8 . 0 E ;   A f o n s o   R F ,   2 0 1 2 ,   M E N O P A U S E ,   V 1 9 ,   P 1 8 6 ,   D O I   1 0 . 1 0 9 7 / g m e . 0 b 0 1 3 e 3 1 8 2 2 8 2 2 5 f ;   A g a r w a l   B B ,   2 0 1 2 ,   J   I N T   M E D   S C I   A C A D ,   V 2 5 ,   P 4 3 ;   A g r a w a l   R P ,   2 0 0 3 ,   I N T   J   D I A B E T E S   D E V   C ,   V 2 3 ,   P 1 3 0 ;   A h m a d i   A ,   2 0 1 3 ,   I R A N   R E D   C R E S C E N T   M E ,   V 1 5 ,   P 4 4 9 ,   D O I   1 0 . 5 8 1 2 / i r c m j . 3 5 9 7 ;   A h m a d i   A ,   2 0 1 0 ,   J   H U M   K I N E T ,   V 2 3 ,   P 7 1 ;   A j a i k u m a r   B S ,   2 0 0 8 ,   J   C L I N   O N C O L ,   V 2 6 ,   P 5 1 5 ;   A l j a s i r   B ,   2 0 1 0 ,   E V I D - B A S E D   C O M P L   A L T ,   V 7 ,   P 3 9 9 ,   D O I   1 0 . 1 0 9 3 / e c a m / n e n 0 2 7 ;   A m i t a   S ,   2 0 0 9 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 3 ,   P 9 7 ;   A n d e r z e n - C a r l s s o n   A ,   2 0 1 4 ,   I N T   J   Q U A L   S T U D   H E A L ,   V 9 ,   D O I   1 0 . 3 4 0 2 / q h w . v 9 . 2 3 0 3 3 ;   A n n a p o o r n a   K ,   2 0 1 1 ,   A S I A N   J   P S Y C H I A T   S 1 ,   V 4 ,   p S 4 5 ;   A r m s t r o n g   W J ,   2 0 0 3 ,   C L I N   K I N E S I O L ,   V 5 7 ,   P 1 ;   A r y a   V ,   2 0 1 0 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 6 ,   P 1 2 6 9 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 1 6 6 ;   A s l a n   U B ,   2 0 0 2 ,   F I Z Y O T E R A P I   R E H A B I L I ,   V 1 3 ,   P 2 4 ;   A t t a n a y a k e   A M P ,   2 0 1 0 ,   A Y U ,   V 3 1 ,   P 2 4 5 ;   A v i s   N E ,   2 0 1 4 ,   M E N O P A U S E ,   V 2 1 ,   P 8 4 6 ,   D O I   [ 1 0 . 1 0 9 7 / G M E . 0 0 0 0 0 0 0 0 0 0 0 0 0 1 9 1 ,   1 0 . 1 0 9 7 / g m e . 0 0 0 0 0 0 0 0 0 0 0 0 0 1 9 1 ] ;   B a d s h a   H ,   2 0 0 9 ,   R H E U M A T O L   I N T ,   V 2 9 ,   P 1 4 1 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 9 6 - 0 0 9 - 0 8 7 1 - 1 ;   B a k e r   J ,   2 0 1 1 ,   N C T 0 1 4 7 0 5 6 0 ;   B a l i   Y ,   2 0 1 2 ,   I N T   J   R E S   A Y U R V E D A   P ,   V 3 ,   P 2 2 7 ;   B a n a s i k   J ,   2 0 1 1 ,   J   A M   A C A D   N U R S E   P R A C ,   V 2 3 ,   P 1 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 5 - 7 5 9 9 . 2 0 1 0 . 0 0 5 7 3 . x ;   B a n e r j e e   B ,   2 0 0 7 ,   I N T E G R   C A N C E R   T H E R ,   V 6 ,   P 2 4 2 ,   D O I   1 0 . 1 1 7 7 / 1 5 3 4 7 3 5 4 0 7 3 0 6 2 1 4 ;   B a n k a r   M a n g e s h   A ,   2 0 1 3 ,   J   A y u r v e d a   I n t e g r   M e d ,   V 4 ,   P 2 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 5 - 9 4 7 6 . 1 0 9 5 4 8 ;   B a r n e s   P a t r i c i a   M ,   2 0 0 8 ,   N a t l   H e a l t h   S t a t   R e p o r t ,   P 1 ;   B a r n e s   P M ,   2 0 0 4 ,   A D V   D A T A ,   V 2 7 ,   P 1 ,   D O I   D O I   1 0 . 1 0 1 6 / J . S I G M . 2 0 0 4 . 0 7 . 0 0 3 ;   B e d e k a r   N i l i m a ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 1 1 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 8 2 2 6 ;   B e h e r e   R V ,   2 0 1 1 ,   A C T A   P S Y C H I A T   S C A N D ,   V 1 2 3 ,   P 1 4 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 4 4 7 . 2 0 1 0 . 0 1 6 0 5 . x ;   B e l l a d   A S ,   2 0 1 2 ,   B I O M E D I C I N E   I N D I A ,   V 3 2 ,   P 2 2 2 ;   B e r a   T .   K . ,   1 9 9 3 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 3 7 ,   P 2 2 5 ;   B e r g e r   D L ,   2 0 0 9 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 5 ,   P 3 6 ;   B e r n a r d i   L ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 1 4 4 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 3 . 7 3 2 7 . 1 4 4 6 ;   B h a n d a r i   R ,   2 0 0 9 ,   I N D   J   B I O M E C H A N I C S ,   P 1 7 5 ;   B h a n d a r i   R ,   2 0 1 0 ,   I F M B E   P R O C ,   V 3 1 ,   P 2 9 0 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 6 4 2 - 1 4 5 1 5 - 5 _ 7 5 ;   B h a t   P o o k a l a   S h i v a r a m ,   2 0 1 2 ,   I n d   P s y c h i a t r y   J ,   V 2 1 ,   P 9 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 2 - 6 7 4 8 . 1 1 9 5 9 2 ;   B h a v a n a n i   A n a n d a   B a l a y o g i ,   2 0 1 1 ,   I n t   J   Y o g a ,   V 4 ,   P 7 1 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 8 5 4 8 9 ;   B h e n d e   A M ,   2 0 1 1 ,   I N T   J   B I O M E D I C A L   H E A ,   V 1 ,   P 1 ;   B i d w e l l   A J ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 7 4 9 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 0 7 9 ;   B i l d e r b e c k   A C ,   2 0 1 3 ,   J   P S Y C H I A T R   R E S ,   V 4 7 ,   P 1 4 3 8 ,   D O I   1 0 . 1 0 1 6 / j . j p s y c h i r e s . 2 0 1 3 . 0 6 . 0 1 4 ;   B i n d a l   V D ,   2 0 0 7 ,   J   E X E R C I S E   S C I   P H Y S I ,   V 3 ,   P 1 6 0 ;   B i s w a s   D ,   2 0 1 2 ,   J   D A T T A   M E G H E   I   M E D ,   V 7 ,   P 2 4 7 ;   B l a c k   D S ,   2 0 1 2 ,   P S Y C H O N E U R O E N D O C R I N O ,   V 3 8 ,   P 3 4 8 ,   D O I   D O I   1 0 . 1 0 1 6 / J . P S Y N E U E N . 2 0 1 2 . 0 6 . 0 1 1 ;   B l a n k   S E ,   2 0 0 3 ,   I N T   J   Y O G A   T H E R ,   V 1 3 ,   P 5 1 ;   B l o m   K ,   2 0 1 2 ,   C A N   J   C A R D I O L ,   V 2 8 ,   p S 4 1 8 ;   B l o m   K C ,   2 0 1 1 ,   J   C L I N   H Y P E R T E N S   S 1 ,   V 1 3 ,   p A 1 4 1 ;   B l o m   K ,   2 0 1 4 ,   A M   J   H Y P E R T E N S ,   V 2 7 ,   P 1 2 2 ,   D O I   1 0 . 1 0 9 3 / a j h / h p t 1 3 4 ;   B L U M E N T H A L   J A ,   1 9 8 9 ,   J   G E R O N T O L ,   V 4 4 ,   p M 1 4 7 ;   B L U M E N T H A L   J A ,   1 9 9 1 ,   J   A M   G E R I A T R   S O C ,   V 3 9 ,   P 1 0 6 5 ;   B L U M E N T H A L   J A ,   1 9 9 1 ,   A M   J   C A R D I O L ,   V 6 7 ,   P 6 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 2 - 9 1 4 9 ( 9 1 ) 9 0 9 0 4 - Y ;   B l u m e n t h a l   J A ,   1 9 9 1 ,   J   G E R O N T O L ,   V 4 6 ,   P 3 5 2 ;   B o c k   B C ,   2 0 1 2 ,   J   W O M E N S   H E A L T H ,   V 2 1 ,   P 2 4 0 ,   D O I   1 0 . 1 0 8 9 / j w h . 2 0 1 1 . 2 9 6 3 ;   B o n u r a   K B ,   2 0 1 3 ,   J   P H Y S   A C T   H L T H ;   B o s c h   P R ,   2 0 0 9 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 5 ,   P 2 4 ;   B o w d e n   D ,   2 0 1 2 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 2 3 4 7 1 3 ;   B o w e r   J E ,   2 0 1 2 ,   C A N C E R - A M   C A N C E R   S O C ,   V 1 1 8 ,   P 3 7 6 6 ,   D O I   1 0 . 1 0 0 2 / c n c r . 2 6 7 0 2 ;   B o w m a n   A J ,   1 9 9 7 ,   E U R   J   C L I N   I N V E S T ,   V 2 7 ,   P 4 4 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 3 6 2 . 1 9 9 7 . 1 3 4 0 6 8 1 . x ;   B r a z i e r   A ,   2 0 0 6 ,   A M   J   H E A L T H   P R O M O T ,   V 2 0 ,   P 1 9 2 ;   B r o o t a   A ,   1 9 9 0 ,   J   P E R S   C L I N   S T U D ,   V 6 ,   P 8 3 ;   B r y a n   S ,   2 0 1 2 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 8 ,   P 5 0 ;   B u k o w s k i   E l a i n e   L ,   2 0 0 6 ,   I n t   Q   C o m m u n i t y   H e a l t h   E d u c ,   V 2 6 ,   P 2 8 7 ,   D O I   1 0 . 2 1 9 0 / I Q . 2 6 . 3 . f ;   B u l a v i n   V V ,   1 9 9 3 ,   V O P R O S Y   K U R O R T O L O G I I ,   V 4 ,   P 7 ;   B u r k h a r t   J ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 1 6 ;   B u t l e r   L D ,   2 0 0 8 ,   J   C L I N   P S Y C H O L ,   V 6 4 ,   P 8 0 6 ,   D O I   1 0 . 1 0 0 2 / j c l p . 2 0 4 9 6 ;   C a d e   W T ,   2 0 1 0 ,   H I V   M E D ,   V 1 1 ,   P 3 7 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 1 2 9 3 . 2 0 0 9 . 0 0 8 0 1 . x ;   C a d m u s - B e r t r a m   L ,   2 0 1 3 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 9 ,   P 7 5 1 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 2 . 0 1 1 8 ;   C a r d o z o   B ,   2 0 0 6 ,   A Y U ,   V 2 7 ,   P 9 4 ;   C a r e i   T R ,   2 0 1 0 ,   J   A D O L E S C E N T   H E A L T H ,   V 4 6 ,   P 3 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j a d o h e a l t h . 2 0 0 9 . 0 8 . 0 0 7 ;   C a r l s o n   L E ,   2 0 0 4 ,   P S Y C H O N E U R O E N D O C R I N O ,   V 2 9 ,   P 4 4 8 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 3 0 ( 0 3 ) 0 0 0 5 4 - 4 ;   C a r l s o n   L E ,   2 0 1 3 ,   J   C L I N   O N C O L ,   V 3 1 ,   P 3 1 1 9 ,   D O I   1 0 . 1 2 0 0 / J C O . 2 0 1 2 . 4 7 . 5 2 1 0 ;   C a r s o n   J W ,   2 0 1 0 ,   P A I N ,   V 1 5 1 ,   P 5 3 0 ,   D O I   1 0 . 1 0 1 6 / j . p a i n . 2 0 1 0 . 0 8 . 0 2 0 ;   C a r s o n   J W ,   2 0 0 9 ,   S U P P O R T   C A R E   C A N C E R ,   V 1 7 ,   P 1 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 5 2 0 - 0 0 9 - 0 5 8 7 - 5 ;   C a r t e r   J J ,   2 0 1 3 ,   J   T R A U M A T   S T R E S S   D I S ,   V 2 ,   P 5 7 ;   C e b r i a   I I M D ,   2 0 1 3 ,   J   G E R I A T R   P H Y S   T H E R ,   V 3 7 ,   P 6 5 ;   C e b r i a   I I M D ,   2 0 1 4 ,   R E V   E S P   G E R I A T R   G E R O ;   C h a n   W L ,   2 0 1 2 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 8 ,   P 3 4 ;   C h a n d w a n i   K a v i t a   D ,   2 0 1 0 ,   J   S o c   I n t e g r   O n c o l ,   V 8 ,   P 4 3 ;   C h a t t h a   R ,   2 0 0 8 ,   B J O G - I N T   J   O B S T E T   G Y ,   V 1 1 5 ,   P 9 9 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 1 - 0 5 2 8 . 2 0 0 8 . 0 1 7 4 9 . x ;   C h a t t h a   R ,   2 0 0 8 ,   M E N O P A U S E ,   V 1 5 ,   P 8 6 2 ,   D O I   1 0 . 1 0 9 7 / g m e . 0 b 0 1 3 e 3 1 8 1 6 7 b 9 0 2 ;   C h a y a   M S ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 1 1 6 1 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 5 7 9 ;   C h e e m a   B S ,   2 0 1 3 ,   B M C   C O M P L E M   A L T E R N   M ,   V 1 3 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 8 8 2 - 1 3 - 8 2 ;   C h e e m a   B S ,   2 0 1 1 ,   B M C   P U B L I C   H E A L T H ,   V 1 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 5 8 - 1 1 - 5 7 8 ;   C h e n   K M ,   2 0 0 8 ,   J   C L I N   N U R S ,   V 1 7 ,   P 2 6 3 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 0 2 . 2 0 0 8 . 0 2 3 3 8 . x ;   C h e n   K M ,   2 0 1 0 ,   N U R S   R E S ,   V 5 9 ,   P 3 6 4 ,   D O I   1 0 . 1 0 9 7 / N N R . 0 b 0 1 3 e 3 1 8 1 e f 3 7 d 5 ;   C h e n   K M ,   2 0 1 0 ,   J   N U R S   R E S ,   V 1 8 ,   P 5 3 ,   D O I   1 0 . 1 0 9 7 / J N R . 0 b 0 1 3 e 3 1 8 1 c e 5 1 8 9 ;   C h e n   K M ,   2 0 0 9 ,   I N T   J   N U R S   S T U D ,   V 4 6 ,   P 1 5 4 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 8 . 0 9 . 0 0 5 ;   C h e o n g   K J ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 2 7 ;   C h o u d h a r y   A ,   2 0 1 3 ,   I N T   J   P H A R M   B I O   S C I ,   V 4 ,   p B 2 0 7 ;   C h o u d h a r y   R ,   2 0 1 2 ,   A R C H   B U D O ,   V 8 ,   P 1 1 7 ;   C h u a n g   L H ,   2 0 1 2 ,   S P I N E ,   V 3 7 ,   P 1 5 9 3 ,   D O I   1 0 . 1 0 9 7 / B R S . 0 b 0 1 3 e 3 1 8 2 5 4 5 9 3 7 ;   C h u n g   S C ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 5 8 9 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 0 3 8 ;   C h u n t h a r a p a t   S o n g p o r n ,   2 0 0 8 ,   C o m p l e m e n t   T h e r   C l i n   P r a c t ,   V 1 4 ,   P 1 0 5 ,   D O I   1 0 . 1 0 1 6 / j . c t c p . 2 0 0 7 . 1 2 . 0 0 7 ;   C l a r k   P G ,   2 0 1 2 ,   J   E V I D E N C E   B A S E D   C O M ,   V 1 7 ,   P 1 6 1 ;   C o h e n   B e t h   E . ,   2 0 0 8 ,   M e t a b o l i c   S y n d r o m e   a n d   R e l a t e d   D i s o r d e r s ,   V 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 8 9 / m e t . 2 0 0 8 . 0 0 1 6 ;   C o h e n   D .   L . ,   2 0 1 1 ,   E V I D - B A S E D   C O M P L   A L T ,   V 2 0 1 1 ;   C o h e n   L ,   2 0 0 6 ,   J   C L I N   O N C O L ,   V 2 4 ,   p 4 6 9 S ;   C o h e n   L ,   2 0 0 4 ,   C A N C E R ,   V 1 0 0 ,   P 2 2 5 3 ,   D O I   1 0 . 1 0 0 2 / c n c r . 2 0 2 3 6 ;   C o h e n   L ,   2 0 0 8 ,   J   C L I N   O N C O L ,   V 2 6 ;   C o h e n   L ,   2 0 0 8 ,   B R E A S T   D I S ,   V 1 9 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / S 1 0 4 3 - 3 2 1 X ( 0 8 ) 8 0 0 7 8 - 1 ;   C o l g r o v e   Y S ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 1 2 ,   D O I   D O I   1 0 . 4 1 7 2 / 2 1 5 7 - 7 5 9 5 . 1 0 0 0 1 1 2 ;   C o o p e r   S ,   2 0 0 3 ,   T H O R A X ,   V 5 8 ,   P 6 7 4 ,   D O I   1 0 . 1 1 3 6 / t h o r a x . 5 8 . 8 . 6 7 4 ;   C o o t e   S ,   2 0 0 9 ,   B M C   N E U R O L ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 3 7 7 - 9 - 3 4 ;   C o x   H e l e n ,   2 0 1 0 ,   C o m p l e m e n t   T h e r   C l i n   P r a c t ,   V 1 6 ,   P 1 8 7 ,   D O I   1 0 . 1 0 1 6 / j . c t c p . 2 0 1 0 . 0 5 . 0 0 7 ;   C r a m e r   H ,   2 0 1 4 ,   A M   J   H Y P E R T E N S ,   V 2 7 ,   P 1 1 4 6 ,   D O I   1 0 . 1 0 9 3 / a j h / h p u 0 7 8 ;   C r a m e r   H ,   2 0 1 4 ,   A N N   A L L E R G   A S T H M A   I M ,   V 1 1 2 ,   P 5 0 3 ,   D O I   1 0 . 1 0 1 6 / j . a n a i . 2 0 1 4 . 0 3 . 0 1 4 ;   C r a m e r   H ,   2 0 1 4 ,   I N T   J   C A R D I O L ,   V 1 7 3 ,   P 1 7 0 ,   D O I   1 0 . 1 0 1 6 / j . i j c a r d . 2 0 1 4 . 0 2 . 0 1 7 ;   C r a m e r   H ,   2 0 1 3 ,   D E P R E S S   A N X I E T Y ,   V 3 0 ,   P 1 0 6 8 ,   D O I   1 0 . 1 0 0 2 / d a . 2 2 1 6 6 ;   C r a m e r   H ,   2 0 1 3 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 9 ,   P 5 3 6 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 8 8 5 ;   C r a m e r   H ,   2 0 1 3 ,   P A I N   M E D ,   V 1 4 ,   P 5 4 1 ,   D O I   1 0 . 1 1 1 1 / p m e . 1 2 0 5 3 ;   C r a m e r   H ,   2 0 1 3 ,   C L I N   J   P A I N ,   V 2 9 ,   P 4 5 0 ,   D O I   1 0 . 1 0 9 7 / A J P . 0 b 0 1 3 e 3 1 8 2 5 e 1 4 9 2 ;   C r a m e r   H ,   2 0 1 3 ,   B M C   P S Y C H I A T R Y ,   V 1 3 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 4 X - 1 3 - 3 2 ;   C r a m e r   H ,   2 0 1 3 ,   C L I N   J   P A I N ,   V 2 9 ,   P 2 1 6 ,   D O I   1 0 . 1 0 9 7 / A J P . 0 b 0 1 3 e 3 1 8 2 5 1 0 2 6 c ;   C r a m e r   H ,   2 0 1 2 ,   B M C   C A N C E R ,   V 1 2 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 0 7 - 1 2 - 4 1 2 ;   C r a m e r   H ,   2 0 1 2 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 8 6 3 9 0 5 ;   C r a m e r   H ,   2 0 1 2 ,   A C T A   O N C O L ,   V 5 1 ,   P 5 5 9 ,   D O I   1 0 . 3 1 0 9 / 0 2 8 4 1 8 6 X . 2 0 1 1 . 6 3 7 9 6 0 ;   C u l o s - R e e d   S N ,   2 0 0 6 ,   P S Y C H O - O N C O L ,   V 1 5 ,   P 8 9 1 ,   D O I   1 0 . 1 0 0 2 / p o n . 1 0 2 1 ;   C u l o s - R e e d   S N   E C L ,   2 0 0 4 ,   I N T   J   Y O G A   T H E R A P ,   V 1 4 ,   P 4 5 ;   C u r t i s   K ,   2 0 1 2 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 7 1 5 9 4 2 ;   C u s u m a n o   J A ,   1 9 9 2 ,   A P P L   P S Y C H O L ,   V 4 2 ,   P 7 7 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 4 6 4 - 0 5 9 7 . 1 9 9 3 . T B 0 0 7 2 5 . X ;   D a   S i l v a   G D ,   2 0 0 7 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 3 ,   P 1 1 0 7 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 0 7 . 0 6 1 5 ;   B e r n a r d i   M L D ,   2 0 1 3 ,   C I E N C   S A U D E   C O L E T I V A ,   V 1 8 ,   P 3 6 2 1 ,   D O I   1 0 . 1 5 9 0 / S 1 4 1 3 - 8 1 2 3 2 0 1 3 0 0 1 2 0 0 0 1 8 ;   D a n g e r f i e l d   A ,   2 0 0 9 ,   B B C   N E W S   M A G A Z I   0 1 2 3 ;   D a n h a u e r   S C ,   2 0 0 9 ,   P S Y C H O - O N C O L ,   V 1 8 ,   P 3 6 0 ,   D O I   1 0 . 1 0 0 2 / p o n . 1 5 0 3 ;   D a n h a u e r   S u z a n n e   C ,   2 0 0 8 ,   J   S o c   I n t e g r   O n c o l ,   V 6 ,   P 4 7 ;   D a s h   M a n o j ,   1 9 9 9 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 3 ,   P 4 5 8 ;   D A T E Y   K K ,   1 9 6 9 ,   A N G I O L O G Y ,   V 2 0 ,   P 3 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 3 3 1 9 7 6 9 0 2 0 0 0 6 0 2 ;   d e   G o d o y   D a g o b e r t o   V a n o n i ,   2 0 0 6 ,   J   B r a s   P n e u m o l ,   V 3 2 ,   P 1 3 0 ,   D O I   1 0 . 1 5 9 0 / S 1 8 0 6 - 3 7 1 3 2 0 0 6 0 0 0 2 0 0 0 0 8 ;   D e b a r   L L ,   2 0 1 2 ,   P E D I A T R I C S ,   V 1 2 9 ,   p E 6 1 1 ,   D O I   1 0 . 1 5 4 2 / p e d s . 2 0 1 1 - 0 8 6 3 ;   D e   M i c h a e l i s   E ,   2 0 0 5 ,   H I S T   M O D E R N   Y A G A   P A T ;   D e s h p a n d e   C   S ,   2 0 1 3 ,   A n n   M e d   H e a l t h   S c i   R e s ,   V 3 ,   P 3 4 1 ,   D O I   1 0 . 4 1 0 3 / 2 1 4 1 - 9 2 4 8 . 1 1 7 9 3 3 ;   D e s h p a n d e   S u d h e e r ,   2 0 0 8 ,   I n t   J   Y o g a ,   V 1 ,   P 7 6 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 4 1 0 3 4 ;   D e s h p a n d e   S u d h e e r ,   2 0 0 8 ,   I n t   J   Y o g a ,   V 1 ,   P 2 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 3 6 7 8 5 ;   D e s h p a n d e   S u d h e e r ,   2 0 0 9 ,   I n t   J   Y o g a ,   V 2 ,   P 1 3 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 4 3 2 8 7 ;   D h a m a l e   M ,   2 0 0 9 ,   A Y U B ,   V 3 0 ,   P 2 8 4 ;   D h a m e j a   K ,   2 0 1 3 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 9 ,   P 2 4 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 9 0 8 ;   D h a n a n j a i   S ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 6 6 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 0 5 9 4 9 ;   D h i k a v   V ,   2 0 0 7 ,   J   S E X   M E D ,   V 4 ,   P 1 7 2 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 3 - 6 1 0 9 . 2 0 0 7 . 0 0 6 0 3 . x ;   D h r u v a   A ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 4 7 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 5 5 5 ;   D i P i e t r o   L ,   1 9 9 8 ,   J   A M   G E R I A T R   S O C ,   V 4 6 ,   P 8 7 5 ;   d o   R o s a r i o   J o s e   L u i s   P i m e n t e l ,   2 0 1 3 ,   J   B o d y w   M o v   T h e r ,   V 1 7 ,   P 4 6 9 ,   D O I   1 0 . 1 0 1 6 / j . j b m t . 2 0 1 3 . 0 3 . 0 0 4 ;   D o n e s k y   D ,   2 0 1 2 ,   I N T   J   Y O G A   T H E R A P ,   V 2 2 ,   P 2 3 ;   D o n e s k y - C u e n c o   D ,   2 0 0 9 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 0 8 . 0 3 8 9 ;   D o n o h u e   B ,   2 0 0 6 ,   B R I T   J   S P O R T   M E D ,   V 4 0 ,   P 6 0 ,   D O I   1 0 . 1 1 3 6 / b j s m . 2 0 0 5 . 0 2 0 0 2 4 ;   D o u l a t a b a d   S h a h l a   N a j a f i ,   2 0 1 2 ,   A f r   J   T r a d i t   C o m p l e m e n t   A l t e r n   M e d ,   V 1 0 ,   P 4 9 ;   D u r a i s w a m y   G ,   2 0 0 7 ,   A C T A   P S Y C H I A T   S C A N D ,   V 1 1 6 ,   P 2 2 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 4 4 7 . 2 0 0 7 . 0 1 0 3 2 . x ;   D u r u   O K ,   2 0 1 0 ,   J   A M   G E R I A T R   S O C ,   V 5 8 ,   P 1 8 6 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 2 - 5 4 1 5 . 2 0 1 0 . 0 3 0 8 2 . x ;   E b n e z a r   J ,   2 0 1 2 ,   Y O G A   P H Y S   T H E R A P Y ,   V 2 ,   P 1 1 4 ;   E b n e z a r   J ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 4 6 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 3 2 0 ;   E b n e z a r   J o h n ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 2 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 1 7 0 8 ;   E b n e z a r   J o h n ,   2 0 1 1 ,   I n t   J   Y o g a ,   V 4 ,   P 5 5 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 8 5 4 8 6 ;   E l a v s k y   S ,   2 0 0 7 ,   A M   J   H E A L T H   P R O M O T ,   V 2 2 ,   P 8 3 ;   E l a v s k y   S ,   2 0 0 7 ,   A N N   B E H A V   M E D ,   V 3 3 ,   P 1 3 2 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 8 7 9 8 9 4 ;   E l a v s   S ,   2 0 0 7 ,   M E N O P A U S E ,   V 1 4 ,   P 5 3 5 ,   D O I   1 0 . 1 0 9 7 / 0 1 . g m e . 0 0 0 0 2 4 3 5 6 8 . 7 0 9 4 6 . d 4 ;   E l a v s k y   S ,   2 0 0 9 ,   P E R S   I N D I V   D I F F E R ,   V 4 6 ,   P 1 2 3 ,   D O I   1 0 . 1 0 1 6 / j . p a i d . 2 0 0 8 . 0 9 . 0 1 4 ;   E l i b e r o   A ,   2 0 1 1 ,   N I C O T I N E   T O B   R E S ,   V 1 3 ,   P 1 1 4 0 ,   D O I   1 0 . 1 0 9 3 / n t r / n t r 1 6 3 ;   E M E R Y   C F ,   1 9 9 0 ,   G E R O N T O L O G I S T ,   V 3 0 ,   P 5 1 6 ;   E v a n s   S ,   2 0 1 3 ,   C L I N   J   P A I N ,   V 2 9 ,   P 9 8 8 ,   D O I   1 0 . 1 0 9 7 / A J P . 0 b 0 1 3 e 3 1 8 2 7 d a 3 8 1 ;   F a n   J T ,   2 0 1 1 ,   I N T   P S Y C H O G E R I A T R ,   V 2 3 ,   P 1 2 2 2 ,   D O I   1 0 . 1 0 1 7 / S 1 0 4 1 6 1 0 2 1 1 0 0 0 2 8 7 ;   F e u e r s t e i n   G . ,   1 9 9 8 ,   Y O G A   T R A D I T I O N ;   F i e l d   T ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 2 4 ;   F i e l d   T i f f a n y ,   2 0 1 3 ,   J   B o d y w   M o v   T h e r ,   V 1 7 ,   P 3 9 7 ,   D O I   1 0 . 1 0 1 6 / j . j b m t . 2 0 1 3 . 0 3 . 0 1 0 ;   F i e l d   T ,   2 0 1 3 ,   C O M P L E M E N T   T H E R   C L I N ,   V 1 9 ,   P 6 ,   D O I   1 0 . 1 0 1 6 / j . c t c p . 2 0 1 2 . 1 0 . 0 0 1 ;   F i e l d   T i f f a n y ,   2 0 1 2 ,   J   B o d y w   M o v   T h e r ,   V 1 6 ,   P 2 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j b m t . 2 0 1 1 . 0 8 . 0 0 2 ;   F i e l d s   K B ,   2 0 0 6 ,   B R I T   J   S P O R T   M E D ,   V 4 0 ,   P 6 3 ;   F l e g a l   K   E ,   2 0 0 7 ,   B M C   C o m p l e m e n t   A l t e r n   M e d ,   V 7 ,   P 3 7 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 8 8 2 - 7 - 3 7 ;   F l u g e   T ,   1 9 9 4 ,   P n e u m o l o g i e ,   V 4 8 ,   P 4 8 4 ;   F r a n z b l a u   S H ,   2 0 0 8 ,   J   I N T E R P E R S   V I O L E N C E ,   V 2 3 ,   P 1 8 0 0 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 6 2 6 0 5 0 8 3 1 4 3 2 9 ;   G a l a n t i n o   M L ,   2 0 0 4 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 0 ,   P 5 6 ;   G a n g a d h a r   B N ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 3 6 9 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 1 2 ;   G A R F I N K E L   M S ,   1 9 9 4 ,   J   R H E U M A T O L ,   V 2 1 ,   P 2 3 4 1 ;   G a r f i n k e l   M S ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 1 6 0 1 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 1 8 . 1 6 0 1 ;   G a r r e t t   M ,   2 0 1 3 ,   M U L T   S C L E R   J ,   V 1 9 ,   P 7 8 2 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 2 4 5 8 5 1 2 4 6 1 9 6 6 ;   G a r r e t t   M ,   2 0 1 3 ,   M U L T   S C L E R   J ,   V 1 9 ,   P 7 9 0 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 2 4 5 8 5 1 2 4 6 1 3 9 0 ;   G h a s e m i   G h o l a m   A ,   2 0 1 3 ,   I n t   J   P r e v   M e d ,   V 4 ,   p S 1 3 3 ;   G h o n c h e h   S ,   2 0 0 4 ,   J   C L I N   P S Y C H O L ,   V 6 0 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 2 / j c l p . 1 0 1 9 4 ;   G o r i n g   A ,   2 0 1 3 ,   D E U T   Z   S P O R T M E D ,   V 6 4 ,   P 2 8 0 ,   D O I   1 0 . 5 9 6 0 / d z s m . 2 0 1 2 . 0 8 0 ;   G o n c a l v e s   L C ,   2 0 1 1 ,   A R C H   G E R O N T O L   G E R I A T ,   V 5 3 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . a r c h g e r . 2 0 1 0 . 1 0 . 0 2 8 ;   G o p a l   A r a v i n d ,   2 0 1 1 ,   I n t   J   Y o g a ,   V 4 ,   P 2 6 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 7 8 1 7 8 ;   G o p i n a t h a n   G ,   2 0 1 2 ,   A y u ,   V 3 3 ,   P 5 4 3 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 4 - 8 5 2 0 . 1 1 0 5 3 4 ;   G o r d o n   L ,   2 0 0 8 ,   A M   J   B I O C H   B I O T E C H N O ,   V 4 ,   P 3 5 ;   F r a s e r   Y . T ,   2 0 0 8 ,   B M C   C O M P L E M   A L T E R N   M ,   V 1 3 ,   P 8 ;   G o r d o n   L o r e n z o ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 3 1 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 0 5 9 4 4 ;   G o r d o n   L o r e n z o ,   2 0 1 2 ,   J   L a b   P h y s i c i a n s ,   V 4 ,   P 1 7 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 4 - 2 7 2 7 . 9 8 6 6 5 ;   G o r d o n   L ,   2 0 0 8 ,   A R C H   M E D   S C I ,   V 4 ,   P 4 2 7 ;   G o s e w a d e   N i t i n   B ,   2 0 1 3 ,   J   C l i n   D i a g n   R e s ,   V 7 ,   P 1 8 7 0 ,   D O I   1 0 . 7 8 6 0 / J C D R / 2 0 1 3 / 6 3 2 4 . 3 3 3 8 ;   G o u l d   L F ,   2 0 1 2 ,   J   C O M M U N I T Y   P S Y C H O L ,   V 4 0 ,   P 9 6 8 ,   D O I   1 0 . 1 0 0 2 / j c o p . 2 1 5 0 5 ;   G r a n a t h   J e n s ,   2 0 0 6 ,   C o g n i t i v e   B e h a v i o u r   T h e r a p y ,   V 3 5 ,   P 3 ,   D O I   1 0 . 1 0 8 0 / 1 6 5 0 6 0 7 0 5 0 0 4 0 1 2 9 2 ;   G r e e n d a l e   G A ,   2 0 0 9 ,   J   A M   G E R I A T R   S O C ,   V 5 7 ,   P 1 5 6 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 2 - 5 4 1 5 . 2 0 0 9 . 0 2 3 9 1 . x ;   G u p t a   S h i l p a   S ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 1 2 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 8 2 3 2 ;   H A B E R   D ,   1 9 8 3 ,   I N T   J   A G I N G   H U M   D E V ,   V 1 7 ,   P 1 6 9 ,   D O I   1 0 . 2 1 9 0 / H U 5 C - 3 2 F H - A P V U - N 6 F Y ;   H a f f n e r   J ,   2 0 0 6 ,   Z   K I N D E R   J U G - P S Y C H ,   V 3 4 ,   P 3 7 ,   D O I   1 0 . 1 0 2 4 / 1 4 2 2 - 4 9 1 7 . 3 4 . 1 . 3 7 ;   H a g i n s   M ,   2 0 1 3 ,   E V I D - B A S E D   C O M P L   A L T ,   V 2 0 1 3 ,   D O I   D O I   1 0 . 1 1 5 5 / 2 0 1 3 / 6 4 9 8 3 6 ;   H a g i n s   M ,   2 0 1 4 ,   J   C L I N   H Y P E R T E N S ,   V 1 6 ,   P 5 4 ,   D O I   1 0 . 1 1 1 1 / j c h . 1 2 2 4 4 ;   H a g i n s   M ,   2 0 1 3 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 3 / 6 0 7 1 3 4 ;   H a r b a n s   S ,   2 0 1 1 ,   I N D I A N   J   T R A D I T   K N O W ,   V 1 0 ,   P 6 5 1 ;   H a r i n a t h   K ,   2 0 0 4 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 0 ,   P 2 6 1 ,   D O I   1 0 . 1 0 8 9 / 1 0 7 5 5 5 3 0 4 3 2 3 0 6 2 2 5 7 ;   H a r i p r a s a d   V R ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 3 5 7 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 0 8 ;   H a r i p r a s a d   V R ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 3 6 4 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 1 0 ;   H a r t   C E F ,   2 0 0 8 ,   J   S T R E N G T H   C O N D   R E S ,   V 2 2 ,   P 1 6 5 9 ,   D O I   1 0 . 1 5 1 9 / J S C . 0 b 0 1 3 e 3 1 8 1 8 2 0 0 d d ;   H a r t f i e l   N ,   2 0 1 2 ,   O C C U P   M E D - O X F O R D ,   V 6 2 ,   P 6 0 6 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / k q s 1 6 8 ;   H a r t f i e l   N ,   2 0 1 1 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 7 ,   P 7 0 ,   D O I   1 0 . 5 2 7 1 / s j w e h . 2 9 1 6 ;   H A S L O C K   I ,   1 9 9 4 ,   B R I T   J   R H E U M A T O L ,   V 3 3 ,   P 7 8 7 ;   H e g d e   S V ,   2 0 1 3 ,   C O M P L E M E N T   T H E R   M E D ,   V 2 1 ,   P 5 7 1 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 1 3 . 0 8 . 0 1 3 ;   H e g d e   S V ,   2 0 1 1 ,   D I A B E T E S   C A R E ,   V 3 4 ,   P 2 2 0 8 ,   D O I   1 0 . 2 3 3 7 / d c 1 0 - 2 4 3 0 ;   H i g g i n s   J P T ,   2 0 0 8 ,   C O C H R A N E   H D B   S Y S T E M A ;   H o g a n   N ,   2 0 1 4 ,   M U L T   S C L E R   I N T ,   V 2 0 1 4 ;   H o l t z m a n   S ,   2 0 1 3 ,   P A I N   R E S   M A N A G ,   V 1 8 ,   P 2 6 7 ;   H o v s e p i a n   V ,   2 0 1 3 ,   P A K   J   M E D   S C I ,   V 2 9 ,   P 3 1 7 ,   D O I   1 0 . 1 2 6 6 9 / p j m s . 2 9 1 ( S u p p l ) . 3 5 2 4 ;   H u a n g   A ,   2 0 1 2 ,   L E S S   I N C   L E A R N   Y O G   L ;   H u a n g   F J ,   2 0 1 3 ,   J   N U R S   R E S ,   V 2 1 ,   P 5 9 ,   D O I   1 0 . 1 0 9 7 / j n r . 0 b 0 1 3 e 3 1 8 2 8 2 9 d 6 d ;   I d e   M R ,   2 0 0 8 ,   I N T   J   R H E U M   D I S ,   V 1 1 ,   P 1 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 5 6 - 1 8 5 X . 2 0 0 8 . 0 0 3 4 8 . x ;   I k a i   S ,   2 0 1 3 ,   J   P S Y C H I A T R   R E S ,   V 4 7 ,   P 1 7 4 4 ,   D O I   1 0 . 1 0 1 6 / j . j p s y c h i r e s . 2 0 1 3 . 0 7 . 0 1 7 ;   I n n e s   K ,   2 0 1 2 ,   B M C   C O M P L E M E N T   A L   S 1 ,   V 1 2 ,   p O 5 5 ;   I n n e s   K E ,   2 0 1 2 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 2 9 4 0 5 8 ;   I n n e s   K E ,   2 0 1 1 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 7 ,   P 4 5 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 4 0 1 ;   I y e n g a r   B K S ,   1 9 6 6 ,   L I G H T   Y O G A ;   J a n a k i r a m a i a h   N ,   2 0 0 0 ,   J   A F F E C T   D I S O R D E R S ,   V 5 7 ,   P 2 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 0 3 2 7 ( 9 9 ) 0 0 0 7 9 - 8 ;   J a t u p o r n   S ,   2 0 0 3 ,   C L I N   H E M O R H E O L   M I C R O ,   V 2 9 ,   P 4 2 9 ;   J a v a d e k a r   P ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 1 0 ;   J a v n b a k h t   M ,   2 0 0 9 ,   C o m p l e m e n t   T h e r   C l i n   P r a c t ,   V 1 5 ,   P 1 0 2 ,   D O I   1 0 . 1 0 1 6 / j . c t c p . 2 0 0 9 . 0 1 . 0 0 3 ;   J a y a r a m   N ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 4 0 9 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 1 8 ;   J a y a s h r e e   R ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 3 9 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 0 5 9 4 5 ;   J e l l e s m a   F r a n c i n e   C ,   2 0 1 2 ,   J   H o l i s t   N u r s ,   V 3 0 ,   P 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 8 0 1 0 1 1 1 4 1 8 1 1 7 ;   J e n s e n   P a u l i n e   S ,   2 0 0 4 ,   J   A t t e n   D i s o r d ,   V 7 ,   P 2 0 5 ,   D O I   1 0 . 1 1 7 7 / 1 0 8 7 0 5 4 7 0 4 0 0 7 0 0 4 0 3 ;   J o h n   P J ,   2 0 0 7 ,   H E A D A C H E ,   V 4 7 ,   P 6 5 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 6 - 4 6 1 0 . 2 0 0 7 . 0 0 7 8 9 . x ;   J o s h i   M e e s h a ,   2 0 0 8 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 2 ,   P 1 9 7 ;   J o s h i   S u l a b h a ,   2 0 1 1 ,   M e n o p a u s e   I n t ,   V 1 7 ,   P 7 8 ,   D O I   1 0 . 1 2 5 8 / m i . 2 0 1 1 . 0 1 1 0 2 0 ;   J o s h i   V i d y a   S ,   2 0 1 1 ,   I n d i a n   J   M e d   S c i ,   V 6 5 ,   P 4 2 4 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 3 5 9 . 1 0 9 2 5 6 ;   J y o t s n a   V i v e k a   P ,   2 0 1 3 ,   I n d i a n   J   E n d o c r i n o l   M e t a b ,   V 1 7 ,   P 4 8 0 ,   D O I   1 0 . 4 1 0 3 / 2 2 3 0 - 8 2 1 0 . 1 1 1 6 4 5 ;   J y o t s n a   V i v e k a   P ,   2 0 1 2 ,   I n d i a n   J   E n d o c r i n o l   M e t a b ,   V 1 6 ,   P 4 2 3 ,   D O I   1 0 . 4 1 0 3 / 2 2 3 0 - 8 2 1 0 . 9 5 6 9 2 ;   K a b a t - Z i n n   J . ,   1 9 9 0 ,   F U L L   C A T A S T R O P H E   L I V ;   K a l a y i l   J A ,   1 9 8 9 ,   D I S S   A B S T R   I N T ,   V 4 9 ,   P 3 6 2 6 ;   K a n a y a   A M ,   2 0 1 3 ,   J   D I A B E T E S   C O M P L I C A T ,   V 2 8 ,   P 4 0 6 ;   K a n d u l a   N R ,   2 0 1 3 ,   C O N T E M P   C L I N   T R I A L S ,   V 3 6 ,   P 4 7 9 ,   D O I   1 0 . 1 0 1 6 / j . c c t . 2 0 1 3 . 0 9 . 0 0 7 ;   K a n n a p p a n   R ,   2 0 0 8 ,   J   I N D I A N   A C A D   A P P L   P ;   K a n o j i a   S a r i t a ,   2 0 1 3 ,   J   C l i n   D i a g n   R e s ,   V 7 ,   P 2 1 3 3 ,   D O I   1 0 . 7 8 6 0 / J C D R / 2 0 1 3 / 6 9 1 2 . 3 4 5 1 ;   K a t i y a r   S K ,   2 0 0 6 ,   I N D I A N   J   A L L E R G Y   A S T ,   V 2 0 ,   P 9 8 ;   K a t z m a n   M a r t i n   A ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 5 7 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 1 7 1 6 ;   K a u t s   A m i t ,   2 0 0 9 ,   I n t   J   Y o g a ,   V 2 ,   P 3 9 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 5 3 8 6 0 ;   K e r r   D ,   2 0 0 2 ,   P R A C T I C A L   D I A B E T E S   I ,   V 1 9 ,   P 1 6 4 ,   D O I   1 0 . 1 0 0 2 / p d i . 3 5 7 ;   K h a l s a   S a t   B i r   S ,   2 0 0 4 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 4 8 ,   P 2 6 9 ;   K h a l s a   S B S ,   2 0 1 3 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 9 ,   P 3 4 ;   K h a l s a   S B S ,   2 0 1 2 ,   J   B E H A V   H E A L T H   S E R   R ,   V 3 9 ,   P 8 0 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 1 4 - 0 1 1 - 9 2 4 9 - 8 ;   K h a l s a   S B S ,   2 0 0 9 ,   A P P L   P S Y C H O P H Y S   B I O F ,   V 3 4 ,   P 2 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 4 8 4 - 0 0 9 - 9 1 0 3 - 4 ;   K h a s k y   A D ,   1 9 9 9 ,   P E R C E P T   M O T O R   S K I L L ,   V 8 8 ,   P 4 0 9 ,   D O I   1 0 . 2 4 6 6 / P M S . 8 8 . 2 . 4 0 9 - 4 1 6 ;   K h a t r i   D e e p a l i ,   2 0 0 7 ,   D i a b e t e s   R e s   C l i n   P r a c t ,   V 7 8 ,   p e 9 ,   D O I   1 0 . 1 0 1 6 / j . d i a b r e s . 2 0 0 7 . 0 5 . 0 0 2 ;   K h e m k a   S u s h i l k u m a r   S ,   2 0 0 9 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 3 ,   P 6 7 ;   K h u m a r   S S ,   1 9 9 3 ,   I N D I A N   J   C L I N   P S Y C H O ,   V 2 0 ,   P 8 2 ;   K i m   H N ,   2 0 1 3 ,   J   S E X   M E D ,   V 1 0 ,   P 2 7 4 1 ,   D O I   1 0 . 1 1 1 1 / j s m . 1 2 2 8 3 ;   K i m   S ,   2 0 1 2 ,   J   S P O R T   S C I   M E D ,   V 1 1 ,   P 3 2 2 ;   K i n s e r   P A ,   2 0 1 3 ,   A R C H   P S Y C H I A T   N U R S ,   V 2 7 ,   P 1 3 7 ,   D O I   1 0 . 1 0 1 6 / j . a p n u . 2 0 1 3 . 0 1 . 0 0 3 ;   K i n s e r   P A ,   2 0 1 3 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 3 / 1 4 0 4 6 7 ;   K j e l l g r e n   A n e t t e ,   2 0 0 7 ,   B M C   C o m p l e m e n t   A l t e r n   M e d ,   V 7 ,   P 4 3 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 8 8 2 - 7 - 4 3 ;   K l i g l e r   B ,   2 0 1 1 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 7 ,   P 1 0 ;   K o c h u p i l l a i   V ,   2 0 0 5 ,   A N N   N Y   A C A D   S C I ,   V 1 0 5 6 ,   P 2 4 2 ,   D O I   1 0 . 1 1 9 6 / a n n a l s . 1 3 5 2 . 0 3 9 ;   K o h n   M ,   2 0 1 3 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 3 / 2 1 5 3 4 8 ;   K o v a c i c   T ,   2 0 1 3 ,   J   C O M P L E M E N T   I N T E G R ,   V 1 0 ,   P 1 5 3 ;   K o v a c i c   T ,   2 0 1 1 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 7 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 6 5 3 ;   K o v a c i c   T ,   2 0 1 1 ,   I N T E G R   C A N C E R   T H E R ,   V 1 0 ,   P 1 6 ,   D O I   1 0 . 1 1 7 7 / 1 5 3 4 7 3 5 4 1 0 3 8 7 4 1 8 ;   K o z a s a   E H ,   2 0 0 8 ,   P S Y C H O L   R E P ,   V 1 0 3 ,   P 2 7 1 ,   D O I   1 0 . 2 4 6 6 / P R 0 . 1 0 3 . 1 . 2 7 1 - 2 7 4 ;   K r i s h n a   B a n d i   H a r i ,   2 0 1 4 ,   J   C l i n   D i a g n   R e s ,   V 8 ,   P 1 4 ,   D O I   1 0 . 7 8 6 0 / J C D R / 2 0 1 4 / 7 8 4 4 . 3 9 8 3 ;   K r i s h n a m u r t h y   M a n j u n a t h ,   2 0 0 7 ,   M e d   S c i   M o n i t ,   V 1 3 ,   p L E 1 9 ;   K R O N E R H E R W I G   B ,   1 9 9 5 ,   J   P S Y C H O S O M   R E S ,   V 3 9 ,   P 1 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 3 9 9 9 ( 9 4 ) 0 0 0 9 8 - P ;   K u l k a r n i   P r a s a d   V ,   2 0 1 3 ,   A y u ,   V 3 4 ,   P 4 2 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 4 - 8 5 2 0 . 1 1 5 4 4 5 ;   K u l m a t y c k i   L ,   2 0 1 2 ,   S E N S E ,   V 2 ,   P 9 3 ;   K u l m a t y c k i   L ,   2 0 0 7 ,   P O S T E P Y   R E H A B I L I T A C J ,   V 2 1 ,   P 2 3 ;   K u m a r   N e e t a ,   2 0 1 3 ,   I n d i a n   J   P a l l i a t   C a r e ,   V 1 9 ,   P 1 8 0 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 1 0 7 5 . 1 2 1 5 3 7 ;   K u t t n e r   L e o r a ,   2 0 0 6 ,   P a i n   R e s   M a n a g ,   V 1 1 ,   P 2 1 7 ;   K y i z o m   T ,   2 0 1 0 ,   I N D I A N   J   M E D   R E S ,   V 1 3 1 ,   P 6 3 6 ;   L a C r o i x   A Z ,   2 0 1 2 ,   M E N O P A U S E   N E W   Y O R K   N ,   V 1 9 ,   P 1 4 0 2 ;   L a k k i r e d d y   D ,   2 0 1 3 ,   J   A M   C O L L   C A R D I O L ,   V 6 1 ,   P 1 1 7 7 ,   D O I   1 0 . 1 0 1 6 / j . j a c c . 2 0 1 2 . 1 1 . 0 6 0 ;   L a n s k y   E P ,   2 0 0 6 ,   E P I L E P S Y   B E H A V ,   V 9 ,   P 3 9 4 ,   D O I   1 0 . 1 0 1 6 / j . y e b e h . 2 0 0 6 . 0 4 . 0 1 9 ;   L a t h a   E ,   1 9 9 1 ,   J   I N D   P S Y C H ,   V 9 ,   P 3 6 ;   L a v r e t s k y   H ,   2 0 1 3 ,   I N T   J   G E R I A T R   P S Y C H ,   V 2 8 ,   P 5 7 ,   D O I   1 0 . 1 0 0 2 / g p s . 3 7 9 0 ;   L e e   J A ,   2 0 1 2 ,   M E N O P A U S E ,   V 1 9 ,   P 2 9 6 ,   D O I   1 0 . 1 0 9 7 / g m e . 0 b 0 1 3 e 3 1 8 2 2 d 5 9 a 2 ;   L e e   M S ,   2 0 0 9 ,   M E N O P A U S E ,   V 1 6 ,   P 6 0 2 ,   D O I   1 0 . 1 0 9 7 / g m e . 0 b 0 1 3 e 3 1 8 1 8 f f e 3 9 ;   L i t t m a n   A J ,   2 0 1 2 ,   S U P P O R T   C A R E   C A N C E R ,   V 2 0 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 5 2 0 - 0 1 0 - 1 0 6 6 - 8 ;   L o u d o n   A ,   2 0 1 2 ,   B M C   C O M P L E M   A L T E R N   M ,   V 1 2 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 8 8 2 - 1 2 - 6 6 ;   [ bSfN  L U   C h a n g y a ] ,   2 0 0 7 ,   [ -NV^
Y;Sf[Bg_,   C h i n e s e   J o u r n a l   o f   R e h a b i l i t a t i o n   M e d i c i n e ] ,   V 2 2 ,   P 8 8 5 ;   L u n d g r e n   T ,   2 0 0 8 ,   E P I L E P S Y   B E H A V ,   V 1 3 ,   P 1 0 2 ,   D O I   1 0 . 1 0 1 6 / j . y e b e h . 2 0 0 8 . 0 2 . 0 0 9 ;   M a d a n m o h a n   M S K ,   2 0 0 8 ,   I N D I A N   J   P H Y S L   P H A R M ,   V 5 2 ,   P 1 6 4 ;   M a d a n m o h a n   U d u p a   K ,   2 0 0 5 ,   I N D I A N   J   P H Y S L   P H A R M ,   V 4 9 ,   P 3 1 3 ;   M a d a n m o h a n   U K ,   2 0 0 3 ,   I N D I A N   J   P H Y S L   P H A R M ,   V 4 7 ,   P 2 7 ;   M A D D E N   D J ,   1 9 8 9 ,   P S Y C H O L   A G I N G ,   V 4 ,   P 3 0 7 ,   D O I   1 0 . 1 0 3 7 / / 0 8 8 2 - 7 9 7 4 . 4 . 3 . 3 0 7 ;   M a h a j a n   A   S ,   1 9 9 9 ,   I n d i a n   H e a r t   J ,   V 5 1 ,   P 3 7 ;   M a h a p u r e   H e m a n t   H ,   2 0 0 8 ,   I n t   J   Y o g a ,   V 1 ,   P 2 1 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 3 6 7 9 2 ;   M A L A T H I   A ,   1 9 8 9 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 3 3 ,   P 1 1 0 ;   M a l a t h i   A ,   1 9 9 8 ,   I n d i a n   J   P s y c h i a t r y ,   V 4 0 ,   P 3 5 ;   M a l a t h i   A . ,   1 9 9 9 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 3 ,   P 2 1 8 ;   M a l h o t r a   V a r u n ,   2 0 0 2 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 6 ,   P 3 1 3 ;   M a l h o t r a   V a r u n ,   2 0 0 2 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 6 ,   P 2 9 8 ;   M a m i d i   P r a s a d ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 1 1 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 1 3 4 0 8 ;   M a n c h a n d a   S   C ,   2 0 0 0 ,   J   A s s o c   P h y s i c i a n s   I n d i a ,   V 4 8 ,   P 6 8 7 ;   M a n c h a n d a   S C ,   2 0 1 3 ,   J   Y O G A   P H Y S   T H E R ,   V 3 ,   P 1 3 2 ,   D O I   [ 1 0 . 4 1 7 2 / 2 1 5 7 - 7 5 9 5 . 1 0 0 0 1 3 2 ,   D O I   1 0 . 4 1 7 2 / 2 1 5 7 - 7 5 9 5 . 1 0 0 0 1 3 2 ] ;   M a n d a n m o h a n   J L ,   2 0 0 3 ,   I N D I A N   J   P H Y S L   P H A R M ,   V 4 7 ,   P 3 8 7 ;   M a n j u n a t h   N K ,   2 0 0 7 ,   M E D   S C I   M O N I T O R ,   V 1 3 ,   p L E 1 9 ;   M a n j u n a t h   N   K ,   2 0 0 4 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 4 8 ,   P 3 5 3 ;   M a n j u n a t h   N .   K . ,   2 0 0 1 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 5 ,   P 3 5 1 ;   M a n j u n a t h   N K ,   2 0 0 5 ,   I N D I A N   J   M E D   R E S ,   V 1 2 1 ,   P 6 8 3 ;   M a n j u n a t h   N K ,   2 0 1 2 ,   S E N S E ,   V 2 ,   P 3 2 ;   M a n j u n a t h   R B ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 3 7 4 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 1 4 ;   M a n o c h a   R ,   2 0 0 2 ,   T H O R A X ,   V 5 7 ,   P 1 1 0 ,   D O I   1 0 . 1 1 3 6 / t h o r a x . 5 7 . 2 . 1 1 0 ;   M a n o c h a   R . ,   2 0 1 1 ,   E V I D - B A S E D   C O M P L   A L T ,   V 2 0 1 1 ,   D O I   1 0 . 1 1 5 5 / 2 0 1 1 / 9 6 0 5 8 3 ;   M a r e f a t   M ,   2 0 1 1 ,   P R O C D   S O C   B E H V ,   V 3 0 ,   D O I   1 0 . 1 0 1 6 / j . s b s p r o . 2 0 1 1 . 1 0 . 2 8 9 ;   M a r k i l   N ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 9 5 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 3 3 1 ;   M a r t i n s   R F ,   2 0 1 4 ,   J   A L T E R N   C O M P L E M   M E D ,   V 2 0 ,   P 2 4 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 2 . 0 7 1 5 ;   M a t s u m o t o   M ,   2 0 0 1 ,   J   C L I N   P S Y C H O L ,   V 5 7 ,   P 1 5 5 1 ,   D O I   1 0 . 1 0 0 2 / j c l p . 1 1 1 7 ;   M c C a f f r e y   R u t h ,   2 0 0 5 ,   H o l i s t   N u r s   P r a c t ,   V 1 9 ,   P 1 7 3 ;   M c D e r m o t t   K ,   2 0 1 2 ,   B M C   C O M P L E M E N T   A L   S 1 ,   V 1 2 ,   p P 1 8 0 ;   M c I v e r   S ,   2 0 1 0 ,   F O C U S   A L T E R N   C O M P L E M ,   V 1 5 ,   P 4 3 ;   M c I v e r   S ,   2 0 0 9 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 7 ,   P 1 9 6 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 9 . 0 5 . 0 0 2 ;   M e k o n n e n   D e m e k e ,   2 0 1 0 ,   E t h i o p   J   H e a l t h   S c i ,   V 2 0 ,   P 1 0 7 ;   M e n d e l s o n   T ,   2 0 1 0 ,   J   A B N O R M   C H I L D   P S Y C H ,   V 3 8 ,   P 9 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 0 2 - 0 1 0 - 9 4 1 8 - x ;   M i c h a l s e n   A ,   2 0 1 2 ,   J   P A I N ,   V 1 3 ,   P 1 1 2 2 ,   D O I   1 0 . 1 0 1 6 / j . j p a i n . 2 0 1 2 . 0 8 . 0 0 4 ;   M i c h a l s e n   A ,   2 0 1 2 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 4 0 8 7 2 7 ;   M i t c h e l l   K S ,   2 0 0 7 ,   I N T   J   E A T   D I S O R D E R ,   V 4 0 ,   P 1 2 0 ,   D O I   1 0 . 1 0 0 2 / e a t 2 0 2 8 2 ;   M i z u n o   J u l i o ,   2 0 1 3 ,   J   B o d y w   M o v   T h e r ,   V 1 7 ,   P 3 5 ,   D O I   1 0 . 1 0 1 6 / j . j b m t . 2 0 1 2 . 1 0 . 0 0 7 ;   M o a d e l   A B ,   2 0 0 7 ,   J   C L I N   O N C O L ,   V 2 5 ,   P 4 3 8 7 ,   D O I   1 0 . 1 2 0 0 / J C O . 2 0 0 6 . 0 6 . 6 0 2 7 ;   M o e m e n i   M ,   2 0 1 2 ,   L I F E   S C I   J ,   V 9 ,   P 1 1 3 3 ;   M o h e r   D ,   2 0 0 9 ,   B M J - B R I T   M E D   J ,   V 2 1 ,   P 3 3 9 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . B 2 5 3 5 ;   M o n i k a   S U ,   2 0 1 2 ,   I N D I A N   J   P H Y S L   P H A R M ,   V 5 6 ,   P 1 6 1 ;   M o n r o   R ,   1 9 9 2 ,   C O M P L E M E N T A R Y   M E D   R E ,   V 6 ,   P 6 6 ;   M o u r y a   M ,   2 0 0 9 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 5 ,   P 7 1 1 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 0 8 . 0 6 0 9 ;   M u r u g e s a n   R . ,   2 0 0 0 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 4 ,   P 2 0 7 ;   M u s t i a n   K M ,   2 0 1 3 ,   J   C L I N   O N C O L ,   V 3 1 ,   P 3 2 3 3 ,   D O I   1 0 . 1 2 0 0 / J C O . 2 0 1 2 . 4 3 . 7 7 0 7 ;   M u s t i a n   K M ,   2 0 1 1 ,   J   C L I N   O N C O L ;   N a g a m a t s u   T ,   2 0 1 2 ,   B   P H Y S   F I T   R E S   I ,   V 1 1 0 ,   P 1 ;   N a g a m a t s u   T o s h i y a ,   2 0 0 8 ,   B u l l e t i n   o f   t h e   P h y s i c a l   F i t n e s s   R e s e a r c h   I n s t i t u t e ,   P 1 ;   N a g a r a t h n a   R ,   2 0 1 2 ,   I N T   J   D I A B E T E S   D E V   C ,   V 3 2 ,   P 1 2 2 ,   D O I   1 0 . 1 0 0 7 / s 1 3 4 1 0 - 0 1 2 - 0 0 7 8 - y ;   N A G A R A T H N A   R ,   1 9 8 5 ,   B R I T   M E D   J ,   V 2 9 1 ,   P 1 0 7 7 ;   N a m b i   G o p a l   S ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 1 2 3 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 1 3 4 1 3 ;   N a r e n d r a n   S ,   2 0 0 5 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 1 ,   P 2 3 7 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 0 5 . 1 1 . 2 3 7 ;   N a r e n d r a n   S ,   2 0 0 5 ,   J   I N D I A N   M E D   A S S O C ,   V 1 0 3 ,   P 1 6 ;   N a r e n d r a n   S h a m a n t h a k a m a n i ,   2 0 0 5 ,   J   I n d i a n   M e d   A s s o c ,   V 1 0 3 ,   P 1 2 ;   N a v e e n   G H ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 4 0 0 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 1 3 ;   N a v e e n   K V ,   1 9 9 7 ,   P S Y C H O L   R E P ,   V 8 1 ,   P 5 5 5 ;   N e m a t i   A z a d e h ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 5 5 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 0 5 9 4 7 ;   N e w t o n   K M ,   2 0 1 4 ,   M E N O P A U S E ,   V 2 1 ,   P 3 3 9 ,   D O I   1 0 . 1 0 9 7 / G M E . 0 b 0 1 3 e 3 1 8 2 9 e 4 b a a ;   N H S ,   2 0 1 3 ,   Y O U R   H L T H   Y O U R   C H O I C ;   N i d h i   R ,   2 0 1 2 ,   A P P L   R E S   Q U A L   L I F E ,   V 8 ,   P 3 7 3 ;   N i d h i   R ,   2 0 1 3 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 9 ,   P 1 5 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 8 6 8 ;   N i d h i   R a m ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 1 1 2 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 8 2 2 3 ;   N i d h i   R ,   2 0 1 2 ,   I N T   J   G Y N E C O L   O B S T E T ,   V 1 1 8 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . i j g o . 2 0 1 2 . 0 1 . 0 2 7 ;   N o g g l e   J J ,   2 0 1 2 ,   J   D E V   B E H A V   P E D I A T R ,   V 3 3 ,   P 1 9 3 ,   D O I   1 0 . 1 0 9 7 / D B P . 0 b 0 1 3 e 3 1 8 2 4 a f d c 4 ;   N O R T O N   G R ,   1 9 8 3 ,   J   B E H A V   T H E R   E X P   P S Y ,   V 1 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 5 - 7 9 1 6 ( 8 3 ) 9 0 0 5 0 - 2 ;   O h j a   K ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 2 5 ;   O k e n   B S ,   2 0 0 6 ,   J   R E H A B I L   R E S   D E V ,   V 4 3 ,   P 8 3 ,   D O I   1 0 . 1 6 8 2 / J R R D . 2 0 0 4 . 1 1 . 0 1 4 8 ;   O k e n   B S ,   2 0 0 6 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 2 ,   P 4 0 ;   O k e n   B S ,   2 0 0 4 ,   N E U R O L O G Y ,   V 6 2 ,   P 2 0 5 8 ;   O r n i s h   D ,   2 0 1 3 ,   L A N C E T   O N C O L ,   V 1 4 ,   P 1 1 1 2 ,   D O I   1 0 . 1 0 1 6 / S 1 4 7 0 - 2 0 4 5 ( 1 3 ) 7 0 3 6 6 - 8 ;   O s w a l   P ,   2 0 1 1 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 7 ,   P 2 5 3 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 0 0 1 ;   P a i k k a t t   B a b u ,   2 0 1 2 ,   I n d   P s y c h i a t r y   J ,   V 2 1 ,   P 1 0 9 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 2 - 6 7 4 8 . 1 1 9 5 9 8 ;   P a l   A ,   2 0 1 3 ,   E   M E D I T E R R   H E A L T H   J ,   V 1 9 ,   P 4 5 2 ;   P a l   A ,   2 0 1 1 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 9 ,   P 1 2 2 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 1 1 . 0 5 . 0 0 1 ;   P a l   G K ,   2 0 0 4 ,   I N D I A N   J   M E D   R E S ,   V 1 2 0 ,   P 1 1 5 ;   P a n j w a n i   U ,   1 9 9 6 ,   I N D I A N   J   M E D   R E S ,   V 1 0 3 ,   P 1 6 5 ;   P a n j w a n i   U ,   2 0 0 0 ,   A P P L   P S Y C H O P H Y S   B I O F ,   V 2 5 ,   P 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 9 5 2 3 9 0 4 7 8 6 ;   P a n j w a n i   U s h a ,   1 9 9 5 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 3 9 ,   P 1 1 1 ;   P a r k   J ,   2 0 1 2 ,   J   G E R O N T O L   N U R S ,   V 3 8 ,   P 1 2 ,   D O I   1 0 . 3 9 2 8 / 0 0 9 8 9 1 3 4 - 2 0 1 2 0 4 1 0 - 0 1 ;   P a r k   J ,   2 0 1 1 ,   H O L I S T   N U R S   P R A C T ,   V 2 5 ,   P 3 1 6 ,   D O I   1 0 . 1 0 9 7 / H N P . 0 b 0 1 3 e 3 1 8 2 3 2 c 5 f 9 ;   P A T E L   C ,   1 9 7 5 ,   J   P S Y C H O S O M   R E S ,   V 1 9 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 3 9 9 9 ( 7 5 ) 9 0 0 1 4 - 8 ;   P A T E L   C ,   1 9 7 5 ,   L A N C E T ,   V 2 ,   P 9 3 ;   P h o o s u w a n   M a n o p ,   2 0 0 9 ,   J   M e d   A s s o c   T h a i ,   V 9 2   S u p p l 5 ,   p S 1 0 2 ;   P l a t a n i a - S o l a z z o   A ,   1 9 9 2 ,   A c t a   P a e d o p s y c h i a t r ,   V 5 5 ,   P 1 1 5 ;   P o k l a d n i k o v a   J ,   2 0 1 3 ,   J   A S T H M A ,   V 5 0 ,   P 3 1 8 ,   D O I   1 0 . 3 1 0 9 / 0 2 7 7 0 9 0 3 . 2 0 1 2 . 7 5 9 5 8 7 ;   P o m y k a l a   K e l s e y   L ,   2 0 1 2 ,   A g i n g   h e a l t h ,   V 8 ,   P 5 0 9 ;   P o s a d z k i   P ,   2 0 1 4 ,   C O M P L E M E N T   T H E R   M E D ,   V 2 2 ,   P 5 1 1 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 1 4 . 0 3 . 0 0 9 ;   P r e m   V ,   2 0 1 3 ,   C L I N   R E H A B I L ,   V 2 7 ,   P 1 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 2 6 9 2 1 5 5 1 2 4 5 0 5 2 1 ;   J o h n s o n   P r e m k u m a r   C ,   2 0 0 7 ,   J   E X E R C I S E   S C I   P H Y S I ,   V 3 ,   P 1 6 8 ;   P r u t h i   S a n d h y a ,   2 0 1 2 ,   G l o b   A d v   H e a l t h   M e d ,   V 1 ,   P 3 0 ,   D O I   1 0 . 7 4 5 3 / g a h m j . 2 0 1 2 . 1 . 5 . 0 1 0 ;   P u l l e n   P R ,   2 0 0 8 ,   J   C A R D   F A I L ,   V 1 4 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . c a r d f a i l . 2 0 0 7 . 1 2 . 0 0 7 ;   P u l l e n   P R ,   2 0 1 0 ,   M E D   S C I   S P O R T   E X E R ,   V 4 2 ,   P 6 5 1 ,   D O I   1 0 . 1 2 4 9 / M S S . 0 b 0 1 3 e 3 1 8 1 b f 2 4 c 4 ;   R a g h a v e n d r a   B R ,   2 0 0 8 ,   M E D   S C I   M O N I T O R ,   V 1 4 ,   p L E 3 ;   R a g h a v e n d r a   R M ,   2 0 0 7 ,   E U R   J   C A N C E R   C A R E ,   V 1 6 ,   P 4 6 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 3 5 4 . 2 0 0 6 . 0 0 7 3 9 . x ;   R a g h u r a j   P ,   2 0 0 8 ,   A P P L   P S Y C H O P H Y S   B I O F ,   V 3 3 ,   P 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 4 8 4 - 0 0 8 - 9 0 5 5 - 0 ;   R a g h u r a j   P . ,   1 9 9 7 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 1 ,   P 4 0 9 ;   R a h n a m a   N ,   2 0 1 1 ,   J   I S F A H A N   M E D   S C H ,   V 2 9 ,   P 1 ;   R a k h s h a e e   Z ,   2 0 1 1 ,   J   P E D I A T R   A D O L   G Y N E C ,   V 2 4 ,   P 1 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j p a g . 2 0 1 1 . 0 1 . 0 5 9 ;   R a k h s h a n i   A ,   2 0 1 2 ,   P R E V   M E D ,   V 5 5 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / j . y p m e d . 2 0 1 2 . 0 7 . 0 2 0 ;   R a k h s h a n i   A ,   2 0 1 0 ,   Q U A L   L I F E   R E S ,   V 1 9 ,   P 1 4 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 3 6 - 0 1 0 - 9 7 0 9 - 2 ;   R a n i   K h u s h b u ,   2 0 1 1 ,   I n d   P s y c h i a t r y   J ,   V 2 0 ,   P 9 7 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 2 - 6 7 4 8 . 1 0 2 4 8 9 ;   R a n i   K h u s h b u ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 5 2 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 1 7 1 5 ;   R a n i   K h u s h b u ,   2 0 1 1 ,   I n t   J   Y o g a ,   V 4 ,   P 2 0 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 7 8 1 7 6 ;   R a n i   M ,   2 0 1 3 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 9 ,   P 9 2 5 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 6 7 6 ;   [ A n o n y m o u s ] ,   2 0 1 3 ,   L I F E   S C I   J ;   R a o   M R ,   2 0 0 9 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 7 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 8 . 0 5 . 0 0 5 ;   R a o   R a g h a v e n d r a   M ,   2 0 0 8 ,   I n t   J   Y o g a ,   V 1 ,   P 1 1 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 3 6 7 8 9 ;   R a o   R a g h a v e n d r a   M ,   2 0 0 8 ,   I n t   J   Y o g a ,   V 1 ,   P 3 3 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 3 6 7 9 5 ;   R A W A L   S B ,   1 9 9 4 ,   I N T   J   B I O M E T E O R O L ,   V 3 8 ,   P 4 4 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 2 4 1 8 0 4 ;   R a y   U .   S . ,   2 0 0 1 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 4 5 ,   P 3 7 ;   R a y   U S ,   2 0 0 1 ,   I N D I A N   J   M E D   R E S ,   V 1 1 4 ,   P 2 1 5 ;   R A Y   U S ,   1 9 8 6 ,   I N D I A N   J   M E D   R E S ,   V 8 3 ,   P 3 4 3 ;   R e e d   S D ,   2 0 1 4 ,   A M   J   O B S T E T   G Y N E C O L ,   V 2 1 0 ,   P 2 4 4 ;   R o h i n i   V ,   2 0 0 0 ,   N I M H A N S   J ,   V 1 8 ,   P 5 3 ;   S a b i n a   A B ,   2 0 0 5 ,   A N N   A L L E R G   A S T H M A   I M ,   V 9 4 ,   P 5 4 3 ;   S a k u m a   Y ,   2 0 1 2 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 8 ,   P 7 6 9 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 0 8 0 ;   S a n j a y   U S ,   2 0 1 2 ,   S E N S E ,   V 2 ,   P 7 9 ;   S a n t a e l l a   D F ,   2 0 1 1 ,   B M J   O P E N ,   V 1 ,   D O I   1 0 . 1 1 3 6 / b m j o p e n - 2 0 1 1 - 0 0 0 0 8 5 ;   S a p e r   R B ,   2 0 1 3 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 3 / 6 5 8 0 3 0 ;   S a p e r   R B ,   2 0 0 9 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 5 ,   P 1 8 ;   S a p t h a r i s h i   L g ,   2 0 0 9 ,   I n d i a n   J   C o m m u n i t y   M e d ,   V 3 4 ,   P 3 2 9 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 0 - 0 2 1 8 . 5 8 3 9 3 ;   S a r e e n   S ,   2 0 0 7 ,   W O R L D   J   G A S T R O E N T E R O ,   V 1 3 ,   P 3 9 1 ;   S a t h y a p r a b h a   T N ,   2 0 0 8 ,   E P I L E P S Y   B E H A V ,   V 1 2 ,   P 2 4 5 ,   D O I   1 0 . 1 0 1 6 / j . y e b e h . 2 0 0 7 . 0 9 . 0 0 6 ;   S a t y a p r i y a   M ,   2 0 1 3 ,   C O M P L E M E N T   T H E R   C L I N ,   V 1 9 ,   P 2 3 0 ,   D O I   1 0 . 1 0 1 6 / j . c t c p . 2 0 1 3 . 0 6 . 0 0 3 ;   S a t y a p r i y a   M ,   2 0 0 9 ,   I N T   J   G Y N E C O L   O B S T E T ,   V 1 0 4 ,   P 2 1 8 ,   D O I   1 0 . 1 0 1 6 / j . i j g o . 2 0 0 8 . 1 1 . 0 1 3 ;   S a x e n a   T a r u n ,   2 0 0 9 ,   I n t   J   Y o g a ,   V 2 ,   P 2 2 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 5 3 8 3 8 ;   S c h e l l   F   J ,   1 9 9 4 ,   I n t   J   P s y c h o s o m ,   V 4 1 ,   P 4 6 ;   S c h m i d   A A ,   2 0 1 2 ,   S T R O K E ,   V 4 3 ,   P 2 4 0 2 ,   D O I   1 0 . 1 1 6 1 / S T R O K E A H A . 1 1 2 . 6 5 8 2 1 1 ;   S c h u l z   L H ,   2 0 1 1 ,   J   Y O G A   P H Y S   T H E R ,   V 1 ,   p e 1 0 3 ;   S e n d e r s   A ,   2 0 1 2 ,   A U T O I M M U N E   D I S ,   V 2 0 1 2 ,   D O I   [ 1 0 . 1 1 5 5 / 2 0 1 2 / 5 6 7 3 2 4 ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 5 6 7 2 3 4 ,   1 0 . 1 1 5 5 / 2 0 1 2 / 5 6 7 2 3 4 ] ;   S e n d h i l k u m a r   R ,   2 0 1 3 ,   D I S A B I L   R E H A B I L ,   V 3 5 ,   P 5 7 ,   D O I   1 0 . 3 1 0 9 / 0 9 6 3 8 2 8 8 . 2 0 1 2 . 6 8 7 0 3 1 ;   S e o   D Y ,   2 0 1 2 ,   K O R E A N   J   P H Y S I O L   P H A ,   V 1 6 ,   P 1 7 5 ,   D O I   1 0 . 4 1 9 6 / k j p p . 2 0 1 2 . 1 6 . 3 . 1 7 5 ;   S h a f f e r   H   J ,   1 9 9 7 ,   A l t e r n   T h e r   H e a l t h   M e d ,   V 3 ,   P 5 7 ;   S h a h a b   L ,   2 0 1 3 ,   P S Y C H O P H A R M A C O L O G Y ,   V 2 2 5 ,   P 8 7 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 1 3 - 0 1 2 - 2 8 7 6 - 9 ;   S h a h i d i   M ,   2 0 1 1 ,   I N T   J   G E R I A T R   P S Y C H ,   V 2 6 ,   P 3 2 2 ,   D O I   1 0 . 1 0 0 2 / g p s . 2 5 4 5 ;   S h a n k a r a p i l l a i   R a j e s h ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 4 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 1 7 1 4 ;   S h a n n a h o f f - K h a l s a   D   S ,   1 9 9 9 ,   C N S   S p e c t r ,   V 4 ,   P 3 4 ;   S h a n t a k u m a r i   N i s h a ,   2 0 1 3 ,   I n d i a n   H e a r t   J ,   V 6 5 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / j . i h j . 2 0 1 3 . 0 2 . 0 1 0 ;   S h a r m a   B h a w a n a ,   2 0 1 3 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 7 ,   P 3 8 4 ;   S h a r m a   V   K ,   2 0 0 6 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 0 ,   P 3 7 5 ;   S h a r m a   V   K ,   2 0 0 5 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 4 9 ,   P 4 6 2 ;   S h a r m a   V i v e k   K u m a r ,   2 0 1 4 ,   J   C l i n   D i a g n   R e s ,   V 8 ,   P 1 0 ,   D O I   1 0 . 7 8 6 0 / J C D R / 2 0 1 4 / 7 2 5 6 . 3 6 6 8 ;   S h a r m a   V i v e k   K u m a r ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 1 0 4 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 1 3 4 0 0 ;   S h a r m a   V K ,   2 0 0 8 ,   B I O M E D I C I N E ,   V 2 8 ,   P 1 3 9 ;   S h a r m a   V K ,   2 0 0 7 ,   B I O M E D I C I N E ,   V 2 7 ,   P 9 5 ;   S h e l o v   D V ,   2 0 0 9 ,   B E H A V   C O G N   P S Y C H O T H ,   V 3 7 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 7 / S 1 3 5 2 4 6 5 8 0 9 9 9 0 3 6 1 ;   S h e r m a n   K J ,   2 0 1 3 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 3 / 1 3 0 8 1 8 ;   S h e r m a n   K J ,   2 0 1 2 ,   E V I D - B A S E D   C O M P L   A L T ,   D O I   1 0 . 1 1 5 5 / 2 0 1 2 / 1 4 3 2 7 1 ;   S h e r m a n   K J ,   2 0 1 1 ,   A R C H   I N T E R N   M E D ,   V 1 7 1 ,   P 2 0 1 9 ,   D O I   1 0 . 1 0 0 1 / a r c h i n t e r n m e d . 2 0 1 1 . 5 2 4 ;   S h e r m a n   K J ,   2 0 0 5 ,   A N N   I N T E R N   M E D ,   V 1 4 3 ,   P 8 4 9 ;   S i e d e n t o p f   F ,   2 0 1 3 ,   G E B U R T S H   F R A U E N H E I L K ,   V 7 3 ,   P 3 1 1 ,   D O I   1 0 . 1 0 5 5 / s - 0 0 3 2 - 1 3 2 8 4 3 8 ;   S i n g h   S ,   2 0 0 1 ,   I n d i a n   J   C l i n   B i o c h e m ,   V 1 6 ,   P 2 1 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 8 6 4 8 6 6 ;   S i n g h   S a v i t a ,   2 0 0 8 ,   I n d i a n   J   C l i n   B i o c h e m ,   V 2 3 ,   P 3 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 2 2 9 1 - 0 0 8 - 0 0 8 0 - 9 ;   S i n g h   S a v i t a ,   2 0 1 2 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 6 ,   P 6 3 ;   S I N G H   V ,   1 9 9 0 ,   L A N C E T ,   V 3 3 5 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 0 ) 9 1 2 5 4 - 8 ;   S i n g h   V i j a y   K u m a r ,   2 0 1 1 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 5 ,   P 3 2 9 ;   S i v a r a m a n   A ,   2 0 1 0 ,   H E A R T   S U R G   F O R U M ,   V 1 3 ,   p S 8 3 ;   S k o r o - K o n d z a   L ,   2 0 0 9 ,   B M C   H E A L T H   S E R V   R E S ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 6 3 - 9 - 3 3 ;   S m i t h   C ,   2 0 0 7 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 5 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 6 . 0 5 . 0 0 1 ;   S m i t h   J A ,   2 0 1 1 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 7 ,   P 2 2 ;   S o b a n a   R ,   2 0 1 3 ,   J   C l i n   D i a g n   R e s ,   V 7 ,   P 5 5 ,   D O I   1 0 . 7 8 6 0 / J C D R / 2 0 1 2 / 5 0 5 6 . 2 6 6 9 ;   S o d h i   C a n d y ,   2 0 0 9 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 3 ,   P 1 6 9 ;   S o n i   R i t u ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 1 2 3 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 8 2 3 0 ;   S t a c h e n f e l d   N S ,   1 9 9 8 ,   M E D   S C I   S P O R T   E X E R ,   V 3 0 ,   P 9 2 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 5 7 6 8 - 1 9 9 8 0 1 0 0 0 - 0 0 0 1 3 ;   S t e i n   K i m   M ,   2 0 1 4 ,   J   Y o g a   P h y s   T h e r ,   V 4 ,   P 1 5 1 ;   S t o l l e r   C C ,   2 0 1 2 ,   A M   J   O C C U P   T H E R ,   V 6 6 ,   P 5 9 ,   D O I   1 0 . 5 0 1 4 / a j o t . 2 0 1 2 . 0 0 1 2 3 0 ;   S t r e e t e r   C C ,   2 0 1 0 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 6 ,   P 1 1 4 5 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 0 0 7 ;   S t r i j k   J E ,   2 0 1 3 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 9 ,   P 6 6 ,   D O I   1 0 . 5 2 7 1 / s j w e h . 3 3 1 1 ;   S t r i j k   J E ,   2 0 1 2 ,   J   E P I D E M I O L   C O M M U N   H ,   V 6 6 ,   P 1 0 7 1 ,   D O I   1 0 . 1 1 3 6 / j e c h - 2 0 1 1 - 2 0 0 6 2 6 ;   S u b r a m a n i a n   H e m a ,   2 0 1 1 ,   I n d i a n   J   C o m m u n i t y   M e d ,   V 3 6 ,   P 1 9 1 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 0 - 0 2 1 8 . 8 6 5 1 9 ;   S u b r a m a n i a n   S w a p n a ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 2 1 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 1 7 0 2 ;   S u n   Y C ,   2 0 1 0 ,   M I D W I F E R Y ,   V 2 6 ,   p E 3 1 ,   D O I   1 0 . 1 0 1 6 / j . m i d w . 2 0 0 9 . 0 1 . 0 0 5 ;   S U N D A R   S ,   1 9 8 4 ,   A C T A   C A R D I O L ,   V 3 9 ,   P 2 0 3 ;   T A N D O N   M K ,   1 9 7 8 ,   T H O R A X ,   V 3 3 ,   P 5 1 4 ,   D O I   1 0 . 1 1 3 6 / t h x . 3 3 . 4 . 5 1 4 ;   T a n e j a   I ,   2 0 0 4 ,   A P P L   P S Y C H O P H Y S   B I O F ,   V 2 9 ,   P 1 9 ,   D O I   1 0 . 1 0 2 3 / B : A P B I . 0 0 0 0 0 1 7 8 6 1 . 6 0 4 3 9 . 9 5 ;   T e k u r   P ,   2 0 1 2 ,   C O M P L E M E N T   T H E R   M E D ,   V 2 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 1 1 . 1 2 . 0 0 9 ;   T e k u r   P ,   2 0 0 8 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 4 ,   P 6 3 7 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 0 7 . 0 8 1 5 ;   T e k u r   P a d m i n i ,   2 0 1 0 ,   I n t   J   Y o g a ,   V 3 ,   P 1 0 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 6 6 7 7 3 ;   T e l l e s   S ,   1 9 9 7 ,   P E R C E P T   M O T O R   S K I L L ,   V 8 4 ,   P 2 5 1 ;   T e l l e s   S ,   1 9 9 6 ,   J   A l t e r n   C o m p l e m e n t   M e d ,   V 2 ,   P 4 7 9 ,   D O I   1 0 . 1 0 8 9 / a c m . 1 9 9 6 . 2 . 4 7 9 ;   T e l l e s   S ,   1 9 9 8 ,   I N T   J   R E H A B I L I T A T I O N ,   V 4 ,   P 1 1 7 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 9 1 2 6 2 6 2 3 8 ;   T e l l e s   S ,   2 0 0 7 ,   J   M O D   O P T I C ,   V 5 4 ,   P 1 3 7 9 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 0 0 3 4 0 6 0 0 8 5 5 5 9 3 ;   T e l l e s   S ,   2 0 0 7 ,   P E R C E P T   M O T O R   S K I L L ,   V 1 0 4 ,   P 1 2 8 9 ,   D O I   1 0 . 2 4 6 6 / P M S . 1 0 4 . 4 . 1 2 8 9 - 1 2 9 6 ;   T e l l e s   S ,   2 0 0 6 ,   M E D   S C I   M O N I T O R ,   V 1 2 ,   p L E 2 1 ;   T e l l e s   S ,   2 0 1 3 ,   C H I L D   A D O L   P S Y C H   M E N ,   V 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 5 3 - 2 0 0 0 - 7 - 3 7 ;   T e l l e s   S ,   2 0 1 3 ,   M E D   S C I   M O N I T O R ,   V 1 9 ,   P 6 1 ;   T e l l e s   S ,   2 0 1 3 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 9 ,   P 3 5 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 1 . 0 2 8 2 ;   T e l l e s   S h i r l e y ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 1 0 2 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 8 2 2 0 ;   T e l l e s   S ,   2 0 1 2 ,   P S Y C H O L   R E P ,   V 1 1 0 ,   P 9 6 3 ,   D O I   1 0 . 2 4 6 6 / 1 3 . 0 2 . 1 6 . 2 0 . P R 0 . 1 1 0 . 3 . 9 6 3 - 9 7 6 ;   T e l l e s   S h i r l e y ,   2 0 1 2 ,   I n t   J   Y o g a ,   V 5 ,   P 3 7 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 9 1 7 1 0 ;   T e l l e s   S ,   2 0 1 1 ,   P E R C E P T   M O T O R   S K I L L ,   V 1 1 2 ,   P 9 8 1 ,   D O I   1 0 . 2 4 6 6 / 0 2 . 2 0 . 2 2 . P M S . 1 1 2 . 3 . 9 8 1 - 9 9 0 ;   T e l l e s   S ,   2 0 1 0 ,   B M C   P S Y C H I A T R Y ,   V 1 0 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 4 X - 1 0 - 1 8 ;   T e l l e s   S ,   2 0 0 9 ,   P E R C E P T   M O T O R   S K I L L ,   V 1 0 9 ,   P 9 2 4 ,   D O I   1 0 . 2 4 6 6 / P M S . 1 0 9 . 3 . 9 2 4 - 9 3 0 ;   T e l l e s   S ,   2 0 0 9 ,   W O R K ,   V 3 3 ,   P 2 9 7 ,   D O I   1 0 . 3 2 3 3 / W O R - 2 0 0 9 - 0 8 7 7 ;   T e l l e s   S h i r l e y ,   2 0 0 6 ,   H e a d   F a c e   M e d ,   V 2 ,   P 4 6 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 6 - 1 6 0 X - 2 - 4 6 ;   T e l l e s   S h i r l e y ,   1 9 9 4 ,   I n d i a n   J o u r n a l   o f   P h y s i o l o g y   a n d   P h a r m a c o l o g y ,   V 3 8 ,   P 1 3 3 ;   T h a r i o n   E l i z a b e t h ,   2 0 1 2 ,   I n d i a n   J   P h y s i o l   P h a r m a c o l ,   V 5 6 ,   P 8 0 ;   T i e d e m a n n   A ,   2 0 1 3 ,   J   G E R O N T O L   A - B I O L ,   V 6 8 ,   P 1 0 6 8 ,   D O I   1 0 . 1 0 9 3 / g e r o n a / g l t 0 8 7 ;   C a r e i   T i f f a n y   R ,   2 0 0 8 ,   D I S S   A B S T R   I N T ,   V 6 8 ,   P 5 5 6 0 ;   T i l b r o o k   H E ,   2 0 1 1 ,   A N N   I N T E R N   M E D ,   V 1 5 5 ,   P 5 6 9 ,   D O I   1 0 . 7 3 2 6 / 0 0 0 3 - 4 8 1 9 - 1 5 5 - 9 - 2 0 1 1 1 1 0 1 0 - 0 0 0 0 3 ;   T o i s e   S C F ,   2 0 1 4 ,   P A C E ,   V 3 7 ,   P 4 8 ,   D O I   1 0 . 1 1 1 1 / p a c e . 1 2 2 5 2 ;   T r a c y   B L ,   2 0 1 3 ,   J   S T R E N G T H   C O N D   R E S ,   V 2 7 ,   P 8 2 2 ,   D O I   1 0 . 1 5 1 9 / J S C . 0 b 0 1 3 e 3 1 8 2 5 c 3 4 0 f ;   T r a k r o o   M a d a n m o h a n ,   2 0 1 3 ,   I n t   J   Y o g a ,   V 6 ,   P 9 6 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 1 1 3 3 9 8 ;   T u r a n k a r   A V ,   2 0 1 3 ,   I N D I A N   J   M E D   R E S ,   V 1 3 7 ,   P 9 1 6 ;   U e b e l a c k e r   L A ,   2 0 1 0 ,   J   P S Y C H I A T R   P R A C T ,   V 1 6 ,   P 2 2 ,   D O I   1 0 . 1 0 9 7 / 0 1 . p r a . 0 0 0 0 3 6 7 7 7 5 . 8 8 3 8 8 . 9 6 ;   U m a d e v i   P ,   2 0 1 3 ,   I N D I A N   J   P S Y C H I A T ,   V 5 5 ,   p S 3 8 5 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 1 6 3 0 4 ;   U t h i r a p a t h y   A ,   2 0 0 7 ,   J   E X E R C I S E   S C I   P H Y S I ,   V 3 ,   P 1 5 3 ;   V a d i r a j a   H   S ,   2 0 0 9 ,   I n t e g r   C a n c e r   T h e r ,   V 8 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 1 5 3 4 7 3 5 4 0 9 3 3 1 4 5 6 ;   V a d i r a j a   H S ,   2 0 0 9 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 7 ,   P 2 7 4 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 9 . 0 6 . 0 0 4 ;   V a d i r a j a   H S ,   2 0 1 0 ,   F O C U S   A L T E R N   C O M P L E M ,   V 1 5 ,   P 1 4 9 ;   V a d i r a j a   H S ,   2 0 0 9 ,   I N T   J   Y O G A ,   V 2 ,   P 7 3 ;   V a i s h a l i   K ,   2 0 1 2 ,   P H Y S   O C C U P A T   T H E R   G E ,   V 3 0 ,   P 2 2 ;   V a l e n t i n e   E R ,   2 0 0 6 ,   M E D   P R O B L   P E R F O R M   A R ,   V 2 1 ,   P 1 2 6 ;   V a n   P u y m b r o e c k   M ,   2 0 0 7 ,   E V I D - B A S E D   C O M P L   A L T ,   V 4 ,   P 5 1 9 ,   D O I   1 0 . 1 0 9 3 / e c a m / n e m 0 7 5 ;   V a n c a m p f o r t   D ,   2 0 1 1 ,   D I S A B I L   R E H A B I L ,   V 3 3 ,   P 6 8 4 ,   D O I   1 0 . 3 1 0 9 / 0 9 6 3 8 2 8 8 . 2 0 1 0 . 5 0 9 4 5 8 ;   V a n d a n a   B ,   2 0 1 1 ,   I N T   J   Y O G A ,   V 2 0 1 1 ,   P 2 ;   V A N M O N T F R A N S   G A ,   1 9 9 0 ,   B R I T   M E D   J ,   V 3 0 0 ,   P 1 3 6 8 ;   V a r a m b a l l y   S h i v a r a m a ,   2 0 1 3 ,   A s i a n   J   P s y c h i a t r ,   V 6 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / j . a j p . 2 0 1 2 . 0 9 . 0 1 7 ;   V a r a m b a l l y   S h i v a r a m a ,   2 0 1 2 ,   I n d i a n   J   P s y c h i a t r y ,   V 5 4 ,   P 2 2 7 ,   D O I   1 0 . 4 1 0 3 / 0 0 1 9 - 5 5 4 5 . 1 0 2 4 1 4 ;   V E A L E   D ,   1 9 9 2 ,   J   R O Y   S O C   M E D ,   V 8 5 ,   P 5 4 1 ;   V e d a m u r t h a c h a r   A ,   2 0 0 6 ,   J   A F F E C T   D I S O R D E R S ,   V 9 4 ,   P 2 4 9 ,   D O I   1 0 . 1 0 1 6 / j . j a d . 2 0 0 6 . 0 4 . 0 2 5 ;   V e d a n t h a n   P K ,   1 9 9 8 ,   A L L E R G Y   A S T H M A   P R O C ,   V 1 9 ,   P 3 ,   D O I   1 0 . 2 5 0 0 / 1 0 8 8 5 4 1 9 8 7 7 8 5 5 7 9 7 1 ;   V e l i k o n j a   O ,   2 0 1 0 ,   C L I N   N E U R O L   N E U R O S U R ,   V 1 1 2 ,   P 5 9 7 ,   D O I   1 0 . 1 0 1 6 / j . c l i n e u r o . 2 0 1 0 . 0 3 . 0 0 6 ;   V e m p a t i   R a m a p r a b h u ,   2 0 0 9 ,   B M C   P u l m   M e d ,   V 9 ,   P 3 7 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 6 6 - 9 - 3 7 ;   V i s c e g l i a   E ,   2 0 1 1 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 7 ,   P 6 0 1 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 1 0 . 0 0 7 5 ;   V i s w e s w a r a i a h   N K ,   2 0 0 4 ,   R E S P I R O L O G Y ,   V 9 ,   P 9 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 0 - 1 8 4 3 . 2 0 0 3 . 0 0 5 2 8 . x ;   V o g l e r   J ,   2 0 1 1 ,   I N T   J   Y O G A   T H E R A P ,   V 2 1 ,   P 6 1 ;   W e s t   J ,   2 0 0 4 ,   A N N   B E H A V   M E D ,   V 2 8 ,   P 1 1 4 ,   D O I   1 0 . 1 2 0 7 / s 1 5 3 2 4 7 9 6 a b m 2 8 0 2 _ 6 ;   W h i t e   L S ,   2 0 1 2 ,   J   P E D I A T R   H E A L T H   C A R ,   V 2 6 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / j . p e d h c . 2 0 1 1 . 0 1 . 0 0 2 ;   W i l l i a m s   K A ,   2 0 0 5 ,   P A I N ,   V 1 1 5 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . p a i n . 2 0 0 5 . 0 2 . 0 1 6 ;   W i l l i a m s   K ,   2 0 0 9 ,   S P I N E ,   V 3 4 ,   P 2 0 6 6 ,   D O I   1 0 . 1 0 9 7 / B R S . 0 b 0 1 3 e 3 1 8 1 b 3 1 5 c c ;   W o l e v e r   R Q ,   2 0 1 2 ,   J   O C C U P   H E A L T H   P S Y C H ,   V 1 7 ,   P 2 4 6 ,   D O I   1 0 . 1 0 3 7 / a 0 0 2 7 2 7 8 ;   W o l f f   M ,   2 0 1 3 ,   B M C   C A R D I O V A S C   D I S O R ,   V 1 3 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 6 1 - 1 3 - 1 1 1 ;   W o l f g a n g   W J ,   2 0 1 0 ,   E U R   J   C A R D I O V   P R E V   R ,   V 1 7 ,   p S 5 8 ;   W o o l e r y   A ,   2 0 0 4 ,   A L T E R N   T H E R   H E A L T H   M ,   V 1 0 ,   P 6 0 ;   X i e   J ,   2 0 0 6 ,   J   N U R S I N G   C H I N A ,   V 1 3 ,   P 9 ;   Y a n g   K . ,   2 0 1 1 ,   E V I D - B A S E D   C O M P L   A L T ,   V 2 0 1 1 ;   Y o g e n d r a   J ,   2 0 0 4 ,   J   A s s o c   P h y s i c i a n s   I n d i a ,   V 5 2 ,   P 2 8 3 ;   Y o g i t h a   B ,   2 0 1 2 ,   J   Y O G A   P H Y S   T H E R ,   V 2 ,   P 1 0 8 ;   Y o g i t h a   B a l i ,   2 0 1 0 ,   I n t   J   Y o g a ,   V 3 ,   P 1 8 ,   D O I   1 0 . 4 1 0 3 / 0 9 7 3 - 6 1 3 1 . 6 6 7 7 4 ;   Y U I L L E   J C ,   1 9 8 0 ,   J   A P P L   P S Y C H O L ,   V 6 5 ,   P 3 3 3 ;   Y u r t k u r a n   M ,   2 0 0 7 ,   C O M P L E M E N T   T H E R   M E D ,   V 1 5 ,   P 1 6 4 ,   D O I   1 0 . 1 0 1 6 / j . c t i m . 2 0 0 6 . 0 6 . 0 0 8 ;   Z h u a n g   S M ,   2 0 1 3 ,   N U R S   R E S ,   V 6 2 ,   P 2 6 0 ,   D O I   1 0 . 1 0 9 7 / N N R . 0 b 0 1 3 e 3 1 8 2 9 2 3 7 9 b 	 5 2 1 	 1 9 	 1 9 	 1 2 	 7 8 	 B I O M E D   C E N T R A L   L T D 	 L O N D O N 	 2 3 6   G R A Y S   I N N   R D ,   F L O O R   6 ,   L O N D O N   W C 1 X   8 H L ,   E N G L A N D 	 1 4 7 2 - 6 8 8 2 	 	 	 B M C   C O M P L E M   A L T E R N   M 	 B M C   C o m p l e m e n t .   A l t e r n .   M e d . 	 S E P   2 	 2 0 1 4 	 1 4 	 	 	 	 	 	 	 	 3 2 8 	 1 0 . 1 1 8 6 / 1 4 7 2 - 6 8 8 2 - 1 4 - 3 2 8 	 	 2 0 	 I n t e g r a t i v e   &   C o m p l e m e n t a r y   M e d i c i n e 	 I n t e g r a t i v e   &   C o m p l e m e n t a r y   M e d i c i n e 	 A O 8 K B 	 W O S : 0 0 0 3 4 1 6 0 2 2 0 0 0 0 1 	 2 5 1 8 3 4 1 9 	 
 
 J 	 P a g n i ,   M ;   K h a n ,   N R ;   C o h e n ,   H L ;   C h o u d h r i ,   A F 	 	 	 	 P a g n i ,   M a t t h e w ;   K h a n ,   N i c k a l u s   R . ;   C o h e n ,   H a r r i s   L . ;   C h o u d h r i ,   A s i m   F . 	 	 	 H i g h l y   C i t e d   W o r k s   i n   R a d i o l o g y :   T h e   T o p   1 0 0   C i t e d   A r t i c l e s   i n   R a d i o l o g i c   J o u r n a l s 	 A C A D E M I C   R A D I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   c i t a t i o n ;   c i t a t i o n   a n a l y s i s ;   i m p a c t   f a c t o r ;   r a d i o l o g y ;   s c i e n t o m e t r i c s ;   S c o p u s ;   W e b   o f   S c i e n c e 	 C I T A T I O N - C L A S S I C S ;   S U R G E R Y   J O U R N A L S ;   O P H T H A L M O L O G Y   J O U R N A L S ;   P E D I A T R I C   N E U R O S U R G E R Y ;   O R T H O P E D I C - S U R G E R Y ;   G O O G L E   S C H O L A R ;   A R T I C L E S ;   A J R ;   P U B L I C A T I O N S ;   U R O L O G Y 	 R a t i o n a l e   a n d   O b j e c t i v e s :   T h e   n u m b e r   o f   c i t a t i o n s   a   p u b l i c a t i o n   r e c e i v e s   c a n   b e   u s e d   t o   s h o w   i t s   i m p a c t   o n   a   f i e l d   o f   s t u d y .   I t   m a y   i n d i c a t e   t h e - e d u c a t i o n a l   i n t e r e s t   i n   a   g i v e n   p o p u l a t i o n   o r   u n d e r l i n e   a   p e r c e i v e d   o r   r e a l   e d u c a t i o n a l - g a p .   T h i s   a r t i c l e   i d e n t i f i e s   a n d   c h a r a c t e r i z e s   t h e   1 0 0   t o p   c i t e d   p u b l i c a t i o n s   i n   r a d i o l o g i c   j o u r n a l s   a s   o f   M a y   2 0 1 3 .   M a t e r i a l s - a n d   M e t h o d s :   A l l   c l i n i c a l   r a d i o l o g i c   j o u r n a l s   l i s t e d   b y   T h o m s o n   R e u t e r s   J o u r n a l   C i t a t i o n   R e p o r t s   i n   2 0 1 1   w e r e   i d e n t i f i e d .   A   t o t a l   o f   4 6   j o u r n a l s   w e r e   i d e n t i f i e d ,   a n d   a l l   a r t i c l e s   p u b l i s h e d   w i t h i n   t h e s e   j o u r n a l s   w e r e   a n a l y z e d   f o r   c i t a t i o n   c o u n t s .   T h e   t o p   1 0 0   h i g h l y   c i t e d   a r t i c l e s   w e r e   r e c o r d e d .   R e s u l t s :   T h e   m o s t   f r e q u e n t l y   c i t e d   r a d i o l o g i c   a r t i c l e s   a p p e a r e d   i n   9   o f   t h e   4 6   j o u r n a l s .   T h e s e   i n c l u d e d   5 9   a r t i c l e s   i n   R a d i o l o g y ,   1 7   i n   J o u r n a l   o f   N u c l e a r   M e d i c i n e ,   9   i n   t h e   A m e r i c a n   J o u r n a l   o f   R o e n t g e n o l o g y ,   5   i n   t h e   B r i t i s h   J o u r n a l   o f   R a d i o l o g y ,   4   i n   I n v e s t i g a t i v e   R a d i o l o g y ,   2   i n   A m e r i c a n   J o u r n a l   o f   N e u r o r a d i o l o g y ,   2   i n   E u r o p e a n   R a d i o l o g y ,   2   i n   R a d i o l o g i c   C l i n i c s   o f   N o r t h   A m e r i c a ,   1   i n   t h e   S e m i n a r s   i n   N u c l e a r   M e d i c i n e ,   a n d   1   i n   P e d i a t r i c   R a d i o l o g y .   T h e   c i t a t i o n   v a l u e s   r a n g e d   f r o m   4 2 2   t o   7 5 0 6   w i t h   a   m e a n   o f   7 5 1 .   P u b l i c a t i o n   d a t e s   r a n g e d   f r o m   1 9 6 7   t o   2 0 0 6   w i t h   t h e   5 - y e a r   p e r i o d   b e t w e e n   1 9 8 6   a n d   1 9 9 0   a c c o u n t i n g   f o r   t h e :   l a r g e s t   p e r c e n t a g e   o f   a r t i c l e s .   T h e   m o s t   f r e q u e n t l y   s t u d i e d   r a d i o l o g i c   m o d a l i t y   w a s   m a g n e t i c   r e s o n a n c e   i m a g i n g   ( M R I ;   2 8   a r t i c l e s ) ,   f o l l o w e d   b y   v a s c u l a r / i n t e r v e n t i o n a l   ( 1 9   a r t i c l e s )   a n d   n u c l e a r   m e d i c i n e   ( 1 3   a r t i c l e s ) .   T h e   c e n t r a l   n e r v o u s   s y s t e m - w a s   t h e   m o s t   f r e q u e n t l y   s t u d i e d   o r g a n   s y s t e m   ( 2 2   a r t i c l e s ) ,   f o l l o w e d   b y   M i x e d   o r g a n   s y s t e m s   ( 1 4   a r t i c l e s )   a n d   l i v e r   ( 1 2   a r t i c l e s ) .   C o n c l u s i o n s :   t h e   t o p   C i t e d   a r t i c l e s   i n   r a d i o l o g i c   j o u r n a l s   s p a n   a   w i d e   r a n g e   o f   i m a g i n g   m o d a l i t i e s ,   s u b s p e c i a l t i e s ,   a n d   o r g a n   s y s t e m s .   T o p i c s   t h a t   o c c u r r e d   f r e q u e n t l y   i n   t h e   t o p   1 0 0   c i t e d   a r t i c l e s   i n c l u d e d   c o n t r a s t   a n d   r a d i o p h a r m a c e u t i c a l   c h a r a c t e r i z a t i o n ,   M R I   o f   m o t i o n ,   p e r c u t a n e o u s   r a d i o f r e q u e n c y   a b l a t i o n   i n   t h e   l i v e r   a n d   p e r c u t a n e o u s   v e r t e b r o p l a s t y .   W e   p r e s e n t   a   m e t h o d o l o g y   t h a t   u s e s   c i t a t i o n   a n a l y s i s   t o   i d e n t i f y   a n d   c h a r a c t e r i z e   t h e s e   a r t i c l e s .   I t s   u s e   m a y   a i d   r a d i o l o g i s t s ,   a c a d e m i c   o r g a n i z a t i o n ,   a n d   e d i t o r i a l   s t a f f   i n   d e t e r m i n i n g   a r e a s - o f   i m a g i n g   i n t e r e s t   o r   p e r c e i v e d   e d u c a t i o n a l   g a p .   I t   a l s o   h i g h l i g h t s   t h e   i m p o r t a n c e   o f   i n c l u d i n g   c l a s s i c   a r t i c l e s   i n   c u r r e n t   i m a g i n g   e d u c a t i o n . 	 [ P a g n i ,   M a t t h e w ;   K h a n ,   N i c k a l u s   R . ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   C o l l   M e d ,   M e m p h i s ,   T N   3 8 1 6 3   U S A ;   [ K h a n ,   N i c k a l u s   R . ;   C h o u d h r i ,   A s i m   F . ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   D e p t   N e u r o s u r g ,   M e m p h i s ,   T N   3 8 1 6 3   U S A ;   [ C o h e n ,   H a r r i s   L . ;   C h o u d h r i ,   A s i m   F . ]   U n i v   T e n n e s s e e ,   H l t h   S c i   C t r ,   L e   B o n h e u r   C h i l d r e n s   H o s p ,   D e p t   R a d i o l ,   M e m p h i s ,   T N   3 8 1 0 3   U S A ;   [ C o h e n ,   H a r r i s   L . ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   D e p t   P e d i a t ,   M e m p h i s ,   T N   3 8 1 6 3   U S A ;   [ C o h e n ,   H a r r i s   L . ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   D e p t   O b s t e t ,   M e m p h i s ,   T N   3 8 1 6 3   U S A ;   [ C h o u d h r i ,   A s i m   F . ]   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   D e p t   O p h t h a l m o l ,   M e m p h i s ,   T N   3 8 1 6 3   U S A 	 C h o u d h r i ,   A F   ( r e p r i n t   a u t h o r ) ,   U n i v   T e n n e s s e e ,   C t r   H l t h   S c i ,   D e p t   N e u r o s u r g ,   M e m p h i s ,   T N   3 8 1 6 3   U S A . 	 a c h o u d h r i @ u t h s c . e d u 	 	 C h o u d h r i ,   A s i m / 0 0 0 0 - 0 0 0 2 - 3 1 5 4 - 6 3 1 9 	 	 	 B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B a l d w i n   K D ,   2 0 1 2 ,   J   P E D I A T R   O R T H O P   B ,   V 2 1 ,   P 4 6 3 ,   D O I   1 0 . 1 0 9 7 / B P B . 0 b 0 1 3 e 3 2 8 3 5 4 b 0 c f ;   B u i - M a n s f i e l d   L T ,   2 0 0 6 ,   A M   J   R O E N T G E N O L ,   V 1 8 6 ,   P 3 ,   D O I   1 0 . 2 2 1 4 / A J R . 0 5 . 1 1 8 6 ;   B u i - M a n s f i e l d   L T ,   2 0 0 5 ,   A M   J   R O E N T G E N O L ,   V 1 8 5 ,   P 5 9 7 ;   F A Z E K A S   F ,   1 9 8 7 ,   A M   J   R O E N T G E N O L ,   V 1 4 9 ,   P 3 5 1 ;   F e n t o n   J E ,   2 0 0 2 ,   J   L A R Y N G O L   O T O L ,   V 1 1 6 ,   P 4 9 4 ;   F l o h r   T G ,   2 0 0 6 ,   E U R   R A D I O L ,   V 1 6 ,   P 2 5 6 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 3 0 - 0 0 5 - 2 9 1 9 - 2 ;   G e h a n n o   J F ,   2 0 0 7 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 3 ,   P 2 4 5 ;   H e l d w e i n   F L ,   2 0 1 0 ,   U R O L O G Y ,   V 7 5 ,   P 1 2 6 1 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 9 . 0 9 . 0 4 3 ;   J U D K I N S   M P ,   1 9 6 7 ,   R A D I O L O G Y ,   V 8 9 ,   P 8 1 5 ;   K h a n   N R ,   2 0 1 3 ,   C H I L D   N E R V   S Y S T ,   V 2 9 ,   P 2 2 1 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 8 1 - 0 1 3 - 2 2 9 3 - 3 ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e f a i v r e   K A ,   2 0 1 1 ,   C L I N   O R T H O P   R E L A T   R ,   V 4 6 9 ,   P 1 4 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 9 9 9 - 0 1 0 - 1 6 0 4 - 1 ;   L i m   K J ,   2 0 1 2 ,   R A D I O L O G Y ,   V 2 6 4 ,   P 7 9 6 ,   D O I   1 0 . 1 1 4 8 / r a d i o l . 1 2 1 1 1 9 7 6 ;   L o o n e n   M P J ,   2 0 0 8 ,   P L A S T   R E C O N S T R   S U R G ,   V 1 2 1 ,   p 3 2 0 E ,   D O I   1 0 . 1 0 9 7 / P R S . 0 b 0 1 3 e 3 1 8 1 6 b 1 3 a 9 ;   M O D I C   M T ,   1 9 8 8 ,   R A D I O L O G Y ,   V 1 6 6 ,   P 1 9 3 ;   N a m d a r i   S ,   2 0 1 2 ,   J   S H O U L D E R   E L B   S U R G ,   V 2 1 ,   P 1 7 9 6 ,   D O I   1 0 . 1 0 1 6 / j . j s e . 2 0 1 1 . 1 1 . 0 4 0 ;   N a s o n   G J ,   2 0 1 3 ,   C U A J - C A N   U R O L   A S S O C ,   V 7 ,   p E 1 6 ,   D O I   1 0 . 5 4 8 9 / c u a j . 1 2 2 2 3 ;   N o r u z i   A ,   2 0 0 5 ,   L I B R I ,   V 5 5 ,   P 1 7 0 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 5 . 1 7 0 ;   O h b a   N ,   2 0 0 7 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 2 5 ,   P 9 5 2 ,   D O I   1 0 . 1 0 0 1 / a r c h o p h t . 1 2 5 . 7 . 9 5 2 ;   O h b a   N ,   2 0 1 0 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 2 8 ,   P 1 6 1 0 ,   D O I   1 0 . 1 0 0 1 / a r c h o p h t h a l m o l . 2 0 1 0 . 3 0 8 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 2 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 5 9 9 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 2 ,   P 2 3 3 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 1 2 . J N S 0 9 1 6 0 0 ;   R o s e n b e r g   A L ,   2 0 1 0 ,   J   C R I T   C A R E ,   V 2 5 ,   P 1 5 7 ,   D O I   1 0 . 1 0 1 6 / j . j c r c . 2 0 0 8 . 1 2 . 0 1 0 ;   S h i n   D A ,   2 0 0 9 ,   N E U R O S U R G   F O C U S ,   V 2 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 9 . 9 . F O C U S 0 9 1 9 4 ;   T h o m a s   K ,   2 0 0 3 ,   E U R   U R O L ,   V 4 3 ,   P 5 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 2 - 2 8 3 8 ( 0 3 ) 0 0 1 4 3 - X ;   T r i p a t h i   R S ,   2 0 1 1 ,   B M C   A N E S T H E S I O L ,   V 1 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 5 3 - 1 1 - 2 4 ;   W i l c o x   M A ,   2 0 1 3 ,   C H I L D   N E R V   S Y S T ,   V 2 9 ,   P 2 2 0 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 8 1 - 0 1 3 - 2 2 2 8 - z ;   Y o o n   D Y ,   2 0 1 3 ,   A M   J   R O E N T G E N O L ,   V 2 0 1 ,   P 4 7 1 ,   D O I   1 0 . 2 2 1 4 / A J R . 1 2 . 1 0 4 8 9 ;   Z h a n g   W J ,   2 0 1 3 ,   A N N   P L A S   S U R G ,   V 7 1 ,   P 1 0 3 ,   D O I   1 0 . 1 0 9 7 / S A P . 0 b 0 1 3 e 3 1 8 2 4 1 8 9 b a ;   [ A n o n y m o u s ] ,   J   C I T A T I O N   R E P O R T S 	 3 1 	 1 9 	 1 9 	 1 	 3 5 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 1 0 7 6 - 6 3 3 2 	 1 8 7 8 - 4 0 4 6 	 	 A C A D   R A D I O L 	 A c a d .   R a d i o l . 	 A U G 	 2 0 1 4 	 2 1 	 8 	 	 	 	 	 1 0 5 6 	 1 0 6 6 	 	 1 0 . 1 0 1 6 / j . a c r a . 2 0 1 4 . 0 3 . 0 1 1 	 	 1 1 	 R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 A M 1 J Y 	 W O S : 0 0 0 3 3 9 6 0 3 4 0 0 0 1 5 	 2 4 8 3 3 5 6 9 	 
 
 J 	 R u s k ,   R D ;   W a t e r s ,   L E 	 	 	 	 R u s k ,   R e u b e n   D . ;   W a t e r s ,   L e a   E . 	 	 	 T r a c i n g   t h e   s i z e ,   r e a c h ,   i m p a c t ,   a n d   b r e a d t h   o f   p o s i t i v e   p s y c h o l o g y 	 J O U R N A L   O F   P O S I T I V E   P S Y C H O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 p o s i t i v e   p s y c h o l o g y ;   i m p a c t ;   g r o w t h ;   b i b l i o g r a p h i c   c o u p l i n g ;   c o - w o r d ;   s e m a n t i c   a n a l y s i s ;   s c i e n t o m e t r i c s ;   b i b l i o m e t r i c s ;   m a p   o f   s c i e n c e 	 C O - W O R D   A N A L Y S I S ;   S I M I L A R I T Y   M E A S U R E S ;   E V O L U T I O N ;   S C I E N C E ;   L I B R A R Y ;   F O C U S 	 T h i s   s t u d y   q u a n t i t a t i v e l y   a s s e s s e d   t h e   s i z e ,   d i s c i p l i n a r y   r e a c h ,   i m p a c t ,   a n d   t o p i c   b r e a d t h   o f   p o s i t i v e   p s y c h o l o g y   ( P P ) ,   i n   o r d e r   t o   p r o v i d e   a   c o m p r e h e n s i v e   e v a l u a t i o n   o f   t h e   g r o w t h   a n d   s i g n i f i c a n c e   o f   t h e   f i e l d .   O v e r   1 . 7 m i l l i o n   d o c u m e n t s   i n   7 0 0   P s y c I N F O ( ( R ) )   j o u r n a l s   c o v e r i n g   t h e   f i e l d s   o f   p s y c h o l o g y ,   p s y c h i a t r y ,   n e u r o s c i e n c e ,   m a n a g e m e n t ,   b u s i n e s s ,   p u b l i c   h e a l t h ,   a n d   s p o r t   s c i e n c e   w e r e   a n a l y z e d   u s i n g   s e m a n t i c   a n d   b i b l i o g r a p h i c   m e t h o d s .   R e s u l t s   i n d i c a t e   t h a t   P P   c o v e r s   m a n y   d i f f e r e n t   r e s e a r c h   t o p i c s   f r o m   a   d i v e r s e   r a n g e   o f   d i s c i p l i n e s ,   a n d   t h a t   P P   l i t e r a t u r e   h a s   b e e n   g r o w i n g   r a p i d l y   i n   s i g n i f i c a n c e .   O v e r   1 8 , 0 0 0   d o c u m e n t s   w e r e   i d e n t i f i e d   a s   b e l o n g i n g   t o   P P ,   w i t h   2 3 0 0   p u b l i s h e d   i n   2 0 1 1 .   T h e s e   d o c u m e n t s   r e p r e s e n t   o v e r   4 %   o f   P s y c I N F O ( ( R ) )   d o c u m e n t s   w i t h i n   t h e   d a t a - s e t   p u b l i s h e d   t h a t   y e a r ,   a n d   m a k e   P P   c l o s e   t o   t h e   m e d i a n   s i z e   o f   a l l   d i s c i p l i n e s   l i s t e d   i n   t h e   T h o m s o n   R e u t e r s   J o u r n a l   C i t a t i o n   R e p o r t s ( ( R ) ) ,   S o c i a l   S c i e n c e s   E d i t i o n .   T h e   a g g r e g a t e   i m p a c t   f a c t o r   f o r   P P   i n   2 0 1 1   w a s   2 . 6 4 . 	 [ R u s k ,   R e u b e n   D . ;   W a t e r s ,   L e a   E . ]   U n i v   M e l b o u r n e ,   M e l b o u r n e   G r a d   S c h   E d u c ,   M e l b o u r n e ,   V i c   3 0 1 0 ,   A u s t r a l i a 	 R u s k ,   R D   ( r e p r i n t   a u t h o r ) ,   U n i v   M e l b o u r n e ,   M e l b o u r n e   G r a d   S c h   E d u c ,   M e l b o u r n e ,   V i c   3 0 1 0 ,   A u s t r a l i a . 	 r r u s k @ s t u d e n t . u n i m e l b . e d u . a u 	 W a t e r s ,   L e a / N - 8 3 3 3 - 2 0 1 3 	 	 	 	 A l t h o u s e   B M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 3 6 ;   R o n d a - P u p o   G A ,   2 0 1 2 ,   S T R A T E G I C   M A N A G E   J ,   V 3 3 ,   P 1 6 2 ,   D O I   1 0 . 1 0 0 2 / s m j . 9 4 8 ;   B a s t i a n   M . ,   2 0 0 9 ,   P   3   I N T   A A A I   C   W E B L ;   B l o n d e l   V D ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 8 / 1 0 / P 1 0 0 0 8 ;   B o r r e g o   J . ,   2 0 0 9 ,   A N N U A R Y   C L I N   H L T H   P S ,   V 5 ,   P 4 7 ;   C h a n g   Y W ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 4 9 ;   C h e n   D Z ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 4 0 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 2 . 0 0 5 ;   D i e n e r   E . ,   2 0 0 9 ,   O X F O R D   H D B   P O S I T I V E ,   P 7 ;   D o n a l d s o n   S I ,   2 0 1 0 ,   J   P O S I T   P S Y C H O L ,   V 5 ,   P 1 7 7 ,   D O I   1 0 . 1 0 8 0 / 1 7 4 3 9 7 6 1 0 0 3 7 9 0 9 3 0 ;   D u c k w o r t h   A L ,   2 0 0 5 ,   A N N U   R E V   C L I N   P S Y C H O ,   V 1 ,   P 6 2 9 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . c l i n p s y . 1 . 1 0 2 8 0 3 . 1 4 4 1 5 4 ;   F r e d r i c k s o n   B L ,   2 0 0 1 ,   A M   P S Y C H O L ,   V 5 6 ,   P 2 1 8 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 5 6 . 3 . 2 1 8 ;   F r o h   J J ,   2 0 1 1 ,   P S Y C H O L   S C H O O L S ,   V 4 8 ,   P 1 1 0 ,   D O I   1 0 . 1 0 0 2 / p i t s . 2 0 5 3 0 ;   G a b l e   S L ,   2 0 0 5 ,   R E V   G E N   P S Y C H O L ,   V 9 ,   P 1 0 3 ,   D O I   1 0 . 1 0 3 7 / 1 0 8 9 - 2 6 8 0 . 9 . 2 . 1 0 3 ;   G r a u w i n   S ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 9 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 8 2 - y ;   H a r t   K E ,   2 0 1 1 ,   C A N   P S Y C H O L ,   V 5 2 ,   P 8 2 ,   D O I   1 0 . 1 0 3 7 / a 0 0 2 3 1 1 8 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   W o o d   A .   M . ,   2 0 0 6 ,   J   P O S I T   P S Y C H O L ,   V 1 ,   P 3 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 7 4 3 9 7 6 0 5 0 0 3 7 2 7 9 6 ;   L o p e z   S J ,   2 0 0 6 ,   C O U N S   P S Y C H O L ,   V 3 4 ,   P 2 0 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 1 0 0 0 0 0 5 2 8 3 3 9 3 ;   L o p e z   S .   J . ,   2 0 0 9 ,   O X F O R D   H D B   P O S I T I V E ,   P 3 ;   M a d d u x   J . ,   2 0 0 9 ,   O X F O R D   H D B   P O S I T I V   P ,   P 6 1 ;   M i l o j e v i c   S ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 2 ;   N e f f   M W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 6 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 9 9 - 3 ;   P e t e r s o n   C ,   2 0 0 3 ,   P S Y C H O L   I N Q ,   V 1 4 ,   P 1 4 3 ;   P o r t e r   A L ,   2 0 0 9 ,   J   N A N O P A R T   R E S ,   V 1 1 ,   P 1 0 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 6 0 7 - 0 ;   R i c h   G J ,   2 0 1 1 ,   J   P O S I T   P S Y C H O L ,   V 6 ,   P 4 9 2 ,   D O I   1 0 . 1 0 8 0 / 1 7 4 3 9 7 6 0 . 2 0 1 1 . 6 3 4 8 2 4 ;   R I P   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 5 8 2 7 ;   R o o n e y   D ,   2 0 1 1 ,   M A N A G E   C O M M U N   Q ,   V 2 5 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 3 3 1 8 9 1 1 4 0 5 6 2 3 ;   S c h i e b e l   E ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 1 ,   P 5 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 2 6 - 8 ;   S c h m i d t   C K ,   2 0 1 1 ,   J   H E A L T H   P S Y C H O L ,   V 1 6 ,   P 6 0 7 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 9 1 0 5 3 1 0 3 8 4 2 9 6 ;   S c h u i   G . ,   2 0 1 0 ,   0 0 0 2 8 0 0 8 8 5 0 0 1 0 1   W O S ,   P a t e n t   N o .   0 0 0 2 8 0 0 8 8   5 0 0 1 0 1 ;   S c h u i   G ,   2 0 1 0 ,   A P P L   P S Y C H O L - H L T H   W E ,   V 2 ,   P 5 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 5 8 - 0 8 5 4 . 2 0 0 9 . 0 1 0 2 2 . x ;   S e l i g m a n   M E P ,   2 0 0 5 ,   A M   P S Y C H O L ,   V 6 0 ,   P 4 1 0 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 6 0 . 5 . 4 1 0 ;   S e l i g m a n   M E P ,   2 0 0 0 ,   A M   P S Y C H O L ,   V 5 5 ,   P 5 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 5 6 . 1 . 8 9 ;   S e l i g m a n   M E P ,   2 0 1 1 ,   F L O U R I S H   V I S I O N A R Y   N ;   S t e r n i t z k e   C ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 6 1 - z ;   v a n   E c k   N J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 6 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 7 2 ;   v a n   E c k   N J ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 4 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 2 1 ;   v a n   E c k   N J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 6 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 7 5 ;   W H I T T A K E R   J ,   1 9 8 9 ,   S O C   S T U D   S C I ,   V 1 9 ,   P 4 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 9 0 1 9 0 0 3 0 0 4 ;   Y a n   E J ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 6 8 0 ;   Y e n   J . ,   2 0 1 0 ,   J   T H E O R E T I C A L   P H I L O S ,   V 3 0 ,   P 6 7 ,   D O I   D O I   1 0 . 1 0 3 7 / A 0 0 1 9 1 0 3 	 4 1 	 1 9 	 2 0 	 1 	 4 6 	 R O U T L E D G E   J O U R N A L S ,   T A Y L O R   &   F R A N C I S   L T D 	 A B I N G D O N 	 4   P A R K   S Q U A R E ,   M I L T O N   P A R K ,   A B I N G D O N   O X 1 4   4 R N ,   O X F O R D S H I R E ,   E N G L A N D 	 1 7 4 3 - 9 7 6 0 	 	 	 J   P O S I T   P S Y C H O L 	 J .   P o s i t .   P s y c h o l . 	 M A Y   1 	 2 0 1 3 	 8 	 3 	 	 	 	 	 2 0 7 	 2 2 1 	 	 1 0 . 1 0 8 0 / 1 7 4 3 9 7 6 0 . 2 0 1 3 . 7 7 7 7 6 6 	 	 1 5 	 P s y c h o l o g y ,   M u l t i d i s c i p l i n a r y 	 P s y c h o l o g y 	 1 3 5 M A 	 W O S : 0 0 0 3 1 8 2 9 1 0 0 0 0 0 3 	 	 
 
 J 	 P e n d l e b u r y ,   D A ;   A d a m s ,   J 	 	 	 	 P e n d l e b u r y ,   D a v i d   A . ;   A d a m s ,   J o n a t h a n 	 	 	 C o m m e n t s   o n   a   c r i t i q u e   o f   t h e   T h o m s o n   R e u t e r s   j o u r n a l   i m p a c t   f a c t o r 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 ' J o u r n a l   i m p a c t   f a c t o r ;   I m p a c t   f a c t o r ;   J o u r n a l   c i t a t i o n   r e p o r t s ;   C i t a t i o n   a n a l y s i s ;   S c i e n t i f i c   j o u r n a l s ;   C i t a t i o n   i n d i c a t o r s ;   B i b l i o m e t r i c s ;   I n f l u e n c e   m e a s u r e s ;   C r i t i c i s m ;   R e s e a r c h   e v a l u a t i o n 	 C I T A T I O N ;   S C I E N C E ;   I N D I C A T O R S ;   U K 	 W e   d i s c u s s   r e s e a r c h   e v a l u a t i o n ,   t h e   n a t u r e   o f   i m p a c t ,   a n d   t h e   u s e   o f   t h e   T h o m s o n   R e u t e r s   j o u r n a l   i m p a c t   f a c t o r   a n d   o t h e r   i n d i c a t o r s   i n   s c i e n t o m e t r i c s   i n   t h e   l i g h t   o f   r e c e n t   c o m m e n t a r y . 	 [ A d a m s ,   J o n a t h a n ]   T h o m s o n   R e u t e r s ,   L e e d s   L S 2   9 D F ,   W   Y o r k s h i r e ,   E n g l a n d ;   [ P e n d l e b u r y ,   D a v i d   A . ]   T h o m s o n   R e u t e r s ,   P h i l a d e l p h i a ,   P A   1 9 1 3 0   U S A 	 A d a m s ,   J   ( r e p r i n t   a u t h o r ) ,   T h o m s o n   R e u t e r s ,   1 0 3   C l a r e n d o n   R d ,   L e e d s   L S 2   9 D F ,   W   Y o r k s h i r e ,   E n g l a n d . 	 j o n a t h a n . a d a m s @ t h o m s o n r e u t e r s . c o m 	 A d a m s ,   J o n a t h a n / A - 5 2 2 4 - 2 0 0 9 	 A d a m s ,   J o n a t h a n / 0 0 0 0 - 0 0 0 2 - 0 3 2 5 - 4 4 3 1 	 	 	 A B R C ,   1 9 8 7 ,   S T R A T   S C I   B A S ;   A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A d a m s   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 5 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 2 8 - 9 ;   A d a m s   J ,   2 0 0 2 ,   S C I E N C E ,   V 2 9 6 ,   P 8 0 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 9 6 . 5 5 6 9 . 8 0 5 ;   A D A M S   J ,   1 9 8 9 ,   H Y D R O B I O L O G I A ,   V 1 8 3 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 1 8 7 2 0 ;   A d a m s   J o n a t h a n ,   2 0 0 7 ,   D E A R I N G   R E P O R T   1 0   Y E ,   P 8 1 ;   A d a m s   J . ,   2 0 0 7 ,   U S E   B I B L I O M E T R I C S   M E ;   A d a m s   J . ,   2 0 0 6 ,   E V A L U A T I N G   S O C I A L   S C ;   A d a m s   J . ,   2 0 1 0 ,   F U T U R E   U K   U   R E S   B A S E ,   P 6 3 ;   A d a m s   J ,   2 0 0 8 ,   S T R A T E G I C   R E V   P E R F O R ,   P 1 1 2 ;   A d a m s   J ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 6 - x ;   A d a m s   J ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 3 - 3 ;   B e n s m a n   S J ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 6 0 1 - 9 ;   B r a u n   T ,   2 0 0 7 ,   I M P A C T   F A C T O R   S C I   S C ;   B u c h a n a n   R A ,   2 0 0 6 ,   C O L L   R E S   L I B R ,   V 6 7 ,   P 2 9 2 ;   E u r o p e a n   C o m m i s s i o n ,   2 0 1 2 ,   E V   B A S   R E S   I N N ;   G A R F I E L D   E ,   1 9 7 6 ,   N A T U R E ,   V 2 6 4 ,   P 6 0 9 ,   D O I   1 0 . 1 0 3 8 / 2 6 4 6 0 9 a 0 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G o o d h a r t   C h a r l e s   A . E . ,   1 9 7 5 ,   P A P E R S   M O N E T A R Y   E C ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H M   G o v e r n m e n t ,   1 9 9 3 ,   C M 2 2 5 0 ;   H u b b a r d   S C ,   2 0 1 1 ,   L E A R N   P U B L ,   V 2 4 ,   P 1 3 3 ,   D O I   1 0 . 1 0 8 7 / 2 0 1 1 0 2 0 8 ;   L e y d e s d o r f f   L ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 3 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 6 0 - 6 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 9 ;   M a r x   W ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 7 9 ;   C a m p a n a r i o   J M ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 3 4 - 1 ;   C a m p a n a r i o   J M ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 3 3 - 2 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   M o e d   M .   F . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ,   p [ 9 5 ,   1 7 4 ] ;   P e n d l e b u r y   D .   A ,   2 0 0 8 ,   T H O M S O N   S C I   C O R R E C T S ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   R o s s n e r   M ,   2 0 0 7 ,   J   C E L L   B I O L ,   V 1 7 9 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 8 3 / j c b . 2 0 0 7 1 1 1 4 0 ;   R o u s s e a u   R ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 4 9 - 1 ;   T e s t a   J . ,   2 0 1 1 ,   G L O B A L I Z A T I O N   W E B   S C ;   T e s t a   J . ,   2 0 0 8 ,   T H O M S O N   R E U T E R S   J   S E ;   R e u t e r s   T h o m s o n ,   2 0 1 2 ,   J   C I T   R E P ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   V a n c l a y   J K ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 6 1 - 0 	 4 2 	 1 9 	 1 9 	 3 	 4 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A U G 	 2 0 1 2 	 9 2 	 2 	 	 	 S I 	 	 3 9 5 	 4 0 1 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 8 9 - 6 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 7 5 Y F 	 W O S : 0 0 0 3 0 6 5 4 7 0 0 0 0 1 7 	 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 T h e   d i s p e r s i o n   o f   r e s e a r c h   p e r f o r m a n c e   w i t h i n   a n d   b e t w e e n   u n i v e r s i t i e s   a s   a   p o t e n t i a l   i n d i c a t o r   o f   t h e   c o m p e t i t i v e   i n t e n s i t y   i n   h i g h e r   e d u c a t i o n   s y s t e m s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   V a r i a b i l i t y   o f   p e r f o r m a n c e ;   C o n c e n t r a t i o n   o f   p e r f o r m a n c e ;   U n i v e r s i t y ;   B i b l i o m e t r i c s ;   I t a l y 	 S C I E N C E ;   N A T I O N S 	 H i g h e r   e d u c a t i o n   s y s t e m s   i n   c o m p e t i t i v e   e n v i r o n m e n t s   g e n e r a l l y   p r e s e n t   t o p   u n i v e r s i t i e s ,   t h a t   a r e   a b l e   t o   a t t r a c t   t o p   s c i e n t i s t s ,   t o p   s t u d e n t s   a n d   p u b l i c   a n d   p r i v a t e   f i n a n c i n g ,   w i t h   n o t a b l e   s o c i o - e c o n o m i c   b e n e f i t s   i n   t h e i r   r e g i o n .   T h e   s a m e   d o e s   n o t   h o l d   t r u e   f o r   n o n c o m p e t i t i v e   s y s t e m s .   I n   t h i s   s t u d y   w e   w i l l   m e a s u r e   t h e   d i s p e r s i o n   o f   r e s e a r c h   p e r f o r m a n c e   w i t h i n   a n d   b e t w e e n   u n i v e r s i t i e s   i n   t h e   I t a l i a n   u n i v e r s i t y   s y s t e m ,   t y p i c a l l y   n o n - c o m p e t i t i v e .   W e   w i l l   a l s o   i n v e s t i g a t e   t h e   l e v e l   o f   c o r r e l a t i o n   t h a t   o c c u r s   b e t w e e n   p e r f o r m a n c e   i n   r e s e a r c h   a n d   i t s   d i s p e r s i o n   i n   u n i v e r s i t i e s .   T h e   f i n d i n g s   m a y   r e p r e s e n t   a   f i r s t   b e n c h m a r k   f o r   s i m i l a r   s t u d i e s   i n   o t h e r   n a t i o n s .   F u r t h e r m o r e ,   t h e y   l e a d   t o   p o l i c y   i n d i c a t i o n s ,   q u e s t i o n i n g   t h e   e f f e c t i v e n e s s   o f   s e l e c t i v e   f u n d i n g   o f   u n i v e r s i t i e s   b a s e d   o n   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s .   T h e   f i e l d   o f   o b s e r v a t i o n   i s   c o m p o s e d   o f   a l l   I t a l i a n   u n i v e r s i t i e s   a c t i v e   i n   t h e   h a r d   s c i e n c e s .   R e s e a r c h   p e r f o r m a n c e   w i l l   b e   e v a l u a t e d   u s i n g   a   b i b l i o m e t r i c   a p p r o a c h ,   t h r o u g h   p u b l i c a t i o n s   i n d e x e d   i n   t h e   W e b   o f   S c i e n c e   b e t w e e n   2 0 0 4   a n d   2 0 0 8 .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   C N R ,   I A S I ,   I n s t   S y s t   A n a l   &   C o m p   S c i ,   I - 0 0 1 8 5   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G . ,   2 0 0 7 ,   R I V   P O L I T I C A   E C ,   V 3 - 4 ,   P 4 5 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A L L I S O N   P D ,   1 9 7 4 ,   A M   S O C I O L   R E V ,   V 3 9 ,   P 5 9 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 4 2 4 ;   A u r a n e n   O ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 8 2 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 3 . 0 0 3 ;   C o r o n a d o   D ,   2 0 0 5 ,   A N N   R E G I O N A L   S C I ,   V 3 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 6 8 - 0 0 4 - 0 2 2 5 - 6 ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 5 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 4 8 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   D A N I E L   H D ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 6 9 8 ;   D e l t a s   G ,   2 0 0 3 ,   R E V   E C O N   S T A T ,   V 8 5 ,   P 2 2 6 ,   D O I   1 0 . 1 1 6 2 / r e s t . 2 0 0 3 . 8 5 . 1 . 2 2 6 ;   D o s i   G ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 4 5 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 1 2 ;   F r i t s c h   M . ,   2 0 0 6 ,   1 5   F R E I B ,   P 1 5 ;   G e u n a   A ,   2 0 0 3 ,   M I N E R V A ,   V 4 1 ,   P 2 7 7 ,   D O I   1 0 . 1 0 2 3 / B : M I N E . 0 0 0 0 0 0 5 1 5 5 . 7 0 8 7 0 . b d ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   G o n c a l v e s   R R ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 5 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 7 7 - 9 ;   J A F F E   A B ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 9 5 7 ;   K a l a i t z i d a k i s   P ,   2 0 0 3 ,   J   E U R   E C O N   A S S O C ,   V 1 ,   P 1 3 4 6 ,   D O I   1 0 . 1 1 6 2 / 1 5 4 2 4 7 6 0 3 3 2 2 7 5 2 5 6 6 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   L a n g   W . ,   2 0 0 5 ,   R E G   S T U D   A S S   I N T   C   R ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M a c r i   J ,   2 0 0 6 ,   J   E C O N   S U R V ,   V 2 0 ,   P 1 1 1 ,   D O I   1 0 . 1 1 1 1 / j . 0 9 5 0 - 0 8 0 4 . 2 0 0 6 . 0 0 2 7 7 . x ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   M I U R ,   2 0 1 0 ,   D E C   R A P P   S T A T   S I S T   U ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   P E R O T T I   R o b e r t o ,   2 0 0 8 ,   U   T R U C C A T A ;   P e s a r i n   F . ,   2 0 0 1 ,   M U L T I V A R I A T E   P E R M U T A ;   P r e s s m a n   L . ,   1 9 9 5 ,   J   A S S   U   T E C H N O L O G Y   M ,   P 4 9 ;   P R I C E   D J D ,   1 9 7 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 7 4 ;   R O S E N B E R G   N ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 3 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 4 2 - 6 ;   Z a g a r i a   C . ,   2 0 0 7 ,   P R O C E S S O   U   C R O N A C H E 	 3 2 	 1 9 	 1 9 	 2 	 3 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 A P R 	 2 0 1 2 	 6 	 2 	 	 	 	 	 1 5 5 	 1 6 8 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 7 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 0 6 R F 	 W O S : 0 0 0 3 0 1 3 6 4 1 0 0 0 0 1 	 	 
 
 J 	 H u n g ,   J L ;   Z h a n g ,   K 	 	 	 	 H u n g ,   J u i - L o n g ;   Z h a n g ,   K e 	 	 	 E x a m i n i n g   m o b i l e   l e a r n i n g   t r e n d s   2 0 0 3 - 2 0 0 8 :   a   c a t e g o r i c a l   m e t a - t r e n d   a n a l y s i s   u s i n g   t e x t   m i n i n g   t e c h n i q u e s 	 J O U R N A L   O F   C O M P U T I N G   I N   H I G H E R   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 M o b i l e   l e a r n i n g ;   M - l e a r n i n g ;   T e x t   m i n i n g ;   B i b l i o m e t r i c s ;   M o b i l e   l e a r n i n g   t r e n d s 	 B I B L I O M E T R I C S ;   E D U C A T I O N ;   I N S T R U C T I O N 	 T h i s   s t u d y   i n v e s t i g a t e d   t h e   l o n g i t u d i n a l   t r e n d s   o f   a c a d e m i c   a r t i c l e s   i n   M o b i l e   L e a r n i n g   ( M L )   u s i n g   t e x t   m i n i n g   t e c h n i q u e s .   O n e   h u n d r e d   a n d   n i n e t e e n   ( 1 1 9 )   r e f e r e e d   j o u r n a l   a r t i c l e s   a n d   p r o c e e d i n g s   p a p e r s   f r o m   t h e   S C I / S S C I   d a t a b a s e   w e r e   r e t r i e v e d   a n d   a n a l y z e d .   T h e   t a x o n o m i e s   o f   M L   p u b l i c a t i o n s   w e r e   g r o u p e d   i n t o   t w e l v e   c l u s t e r s   ( t o p i c s )   a n d   f o u r   d o m a i n s ,   b a s e d   o n   a b s t r a c t   a n a l y s i s   u s i n g   t e x t   m i n i n g .   R e s u l t s   i n c l u d e   b a s i c   b i b l i o m e t r i c   s t a t i s t i c s ,   t r e n d s   i n   f r e q u e n c y   o f   e a c h   t o p i c   o v e r   t i m e ,   p r e d o m i n a n c e   i n   e a c h   t o p i c   b y   c o u n t r y ,   a n d   p r e f e r e n c e s   f o r   e a c h   t o p i c   b y   j o u r n a l .   K e y   f i n d i n g s   i n c l u d e   t h e   f o l l o w i n g :   ( a )   M L   a r t i c l e s   i n c r e a s e d   f r o m   8   i n   2 0 0 3   t o   3 6   i n   2 0 0 8 ;   ( b )   t h e   m o s t   p o p u l a r   d o m a i n   i n   c u r r e n t   M L   i s   E f f e c t i v e n e s s ,   E v a l u a t i o n ,   a n d   P e r s o n a l i z e d   S y s t e m s ;   ( c )   T a i w a n   i s   m o s t   p r o l i f i c   i n   f i v e   o f   t h e   t w e l v e   M L   c l u s t e r s ;   ( d )   M L   r e s e a r c h   i s   a t   t h e   E a r l y   A d o p t e r s   s t a g e ;   a n d   ( e )   s t u d i e s   i n   s t r a t e g i e s   a n d   f r a m e w o r k   w i l l   l i k e l y   p r o d u c e   a   b i g g e r   s h a r e   o f   p u b l i c a t i o n   i n   t h e   f i e l d   o f   M L . 	 [ H u n g ,   J u i - L o n g ]   B o i s e   S t a t e   U n i v ,   D e p t   E d u c   T e c h n o l ,   B o i s e ,   I D   8 3 7 2 5   U S A ;   [ Z h a n g ,   K e ]   W a y n e   S t a t e   U n i v ,   I n s t r u c t   T e c h n o l   P r o g r a m ,   D e t r o i t ,   M I   4 8 2 0 2   U S A 	 H u n g ,   J L   ( r e p r i n t   a u t h o r ) ,   B o i s e   S t a t e   U n i v ,   D e p t   E d u c   T e c h n o l ,   1 9 1 0   U n i v   D r ,   B o i s e ,   I D   8 3 7 2 5   U S A . 	 a n d y h u n g @ b o i s e s t a t e . e d u ;   k e . z h a n g @ w a y n e . e d u 	 	 Z h a n g ,   K e / 0 0 0 0 - 0 0 0 2 - 4 6 9 0 - 7 5 8 6 	 	 	 A t t e w e l l   J ,   2 0 0 4 ,   L E A R N I N G   M O B I L E   D E V I ;   A t t e w e l l   J . ,   2 0 0 5 ,   M O B I L E   T E C H N O L O G I E S ;   B e r n a r d   R M ,   2 0 0 4 ,   R E V   E D U C   R E S ,   V 7 4 ,   P 3 7 9 ,   D O I   1 0 . 3 1 0 2 / 0 0 3 4 6 5 4 3 0 7 4 0 0 3 3 7 9 ;   C L A R K   R E ,   1 9 9 4 ,   E T R & D - E D U C   T E C H   R E S ,   V 4 2 ,   P 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 9 9 0 8 8 ;   E v a n s   C ,   2 0 0 8 ,   C O M P U T   E D U C ,   V 5 0 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / j . c o m p e d u . 2 0 0 7 . 0 9 . 0 1 6 ;   E x e c u t i v e   Y u a n   o f   t h e   R e p u b l i c   o f   C h i n a ,   2 0 0 5 ,   N A T   S C I   T E C H N   P R O G R ;   F a y y a d   U .   M . ,   1 9 9 6 ,   A D V   K N O W L E D G E   D I S C O V ;   F e l d m a n   R . ,   1 9 9 5 ,   P   1   I N T   C   K N O W L   D I S C ,   P 1 1 2 ;   G a l l   M .   D . ,   1 9 9 6 ,   E D   R E S   I N T R O ;   G e d d e s   S . ,   2 0 0 4 ,   K N O W L E D G E   T R E E   E   J ;   G w e t   K . ,   2 0 1 0 ,   H D B   I N T E R R A T E R   R E L I A ;   H u n g   J .   L . ,   2 0 1 0 ,   B R I T   J   E D   T E C H N O L O G Y ;   J a i n   A n i l   K . ,   1 9 8 8 ,   A L G O R I T H M S   C L U S T E R I N ;   J o h n s o n   S .   D . ,   2 0 0 0 ,   J o u r n a l   o f   I n t e r a c t i v e   L e a r n i n g   R e s e a r c h ,   V 1 1 ,   P 2 9 ;   K e s h a v a l   G . ,   2 0 0 8 ,   I N F O R M   S T U D I E S ,   V 1 4 ,   P 2 2 3 ;   K i m   P ,   2 0 0 8 ,   I N T   J   E D U C   D E V ,   V 2 8 ,   P 4 3 5 ,   D O I   1 0 . 1 0 1 6 / j . i j e d u d e v . 2 0 0 7 . 1 1 . 0 0 2 ;   K U L I K   C L C ,   1 9 9 1 ,   C O M P U T   H U M   B E H A V ,   V 7 ,   P 7 5 ,   D O I   1 0 . 1 0 1 6 / 0 7 4 7 - 5 6 3 2 ( 9 1 ) 9 0 0 3 0 - 5 ;   L e h n e r   F . ,   2 0 0 2 ,   I E E E   I N T   W O R K S H   W I R ;   L o c k w o o d   F ,   2 0 0 7 ,   O P E N   F L E X   L E A R N   S E R ,   p X V I ;   M i h a l c a   L . ,   2 0 0 7 ,   C O G N I T I O N   B R A I N   B E H A ,   V 1 1 ,   P 1 1 5 ;   M o g i l   S .   J . ,   2 0 0 9 ,   P A I N ,   V 1 4 2 ,   P 4 8 ;   M o t l i k   S . ,   2 0 0 8 ,   I N T   R E V   R E S   O P E N   D I S ,   V 9 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   O K U B O   Y ,   1 9 9 7 ,   S T I   W O R K I N G   P A P E R S ,   V 1 9 9 7 / 1 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   P o l s s o n   K . ,   2 0 0 9 ,   C H R O N O L O G Y   H A N D H E L D ;   R o g e r s   E . ,   2 0 0 3 ,   D I F F U S I O N   I N N O V A T I O N ;   S h a r m a   S .   K . ,   2 0 0 4 ,   E L E C T   J   E   L E A R N I N G ,   V 2 ,   P 2 0 3 ;   T h e l w a l l   M ,   2 0 0 8 ,   J   I N F   S C I ,   V 3 4 ,   P 6 0 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 7 0 8 7 2 3 8 ;   W i n n   W .   D . ,   2 0 0 2 ,   E D U C   P S Y C H O L   R E V ,   V 1 ,   P 3 3 1 ;   Z h a n g   K . ,   2 0 0 8 ,   J   C O M P U T I N G   H I G H E R   E ,   V 2 0 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 2 5 2 8 - 0 0 8 - 9 0 0 9 - 9 ;   H u n g   J .   L . ,   2 0 0 6 ,   I N T   J   I N F O R M   C O M M U N I ,   V 2 ,   P 3 7 ,   D O I   1 0 . 4 0 1 8 / j i c t e . 2 0 0 6 0 1 0 1 0 4 ;   Z h a n g   K . ,   2 0 0 9 ,   I N T   J   E   L E A R N I N G ,   V 8 ,   P 4 9 	 3 3 	 1 9 	 1 9 	 2 	 3 8 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 1 0 4 2 - 1 7 2 6 	 	 	 J   C O M P U T   H I G H   E D U C 	 J .   C o m p u t .   H i g h .   E d u c . 	 A P R 	 2 0 1 2 	 2 4 	 1 	 	 	 	 	 1 	 1 7 	 	 1 0 . 1 0 0 7 / s 1 2 5 2 8 - 0 1 1 - 9 0 4 4 - 9 	 	 1 7 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 0 2 2 W J 	 W O S : 0 0 0 3 0 9 9 9 4 6 0 0 0 0 1 	 	 
 
 J 	 T e i x e i r a ,   A A C 	 	 	 	 T e i x e i r a ,   A u r o r a   A .   C . 	 	 	 M a p p i n g   t h e   ( i n ) v i s i b l e   c o l l e g e ( s )   i n   t h e   f i e l d   o f   e n t r e p r e n e u r s h i p 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   E n t r e p r e n e u r s h i p ;   I n v i s i b l e   c o l l e g e 	 I N V I S I B L E   C O L L E G E ;   C O C I T A T I O N   A N A L Y S I S ;   S O C I A L - S C I E N C E ;   C I T A T I O N ;   F U T U R E ;   C O M M U N I C A T I O N ;   S C H O L A R S H I P ;   N E T W O R K ;   N A N O T E C H N O L O G Y ;   B I B L I O M E T R I C S 	 D e s p i t e   t h e   v i t a l i t y   a n d   d y n a m i s m   t h a t   t h e   f i e l d   o f   e n t r e p r e n e u r s h i p   h a s   e x p e r i e n c e d   i n   t h e   l a s t   d e c a d e ,   t h e   i s s u e   o f   w h e t h e r   i t   c o m p r i s e s   a n   e f f e c t i v e   n e t w o r k   o f   ( i n ) f o r m a l   c o m m u n i c a t i o n   l i n k a g e s   a m o n g   t h e   m o s t   i n f l u e n t i a l   s c h o l a r s   w i t h i n   t h e   a r e a   h a s   y e t   t o   b e   e x a m i n e d   i n   d e p t h .   T h i s   s t u d y   f o l l o w s   a   f o r m a l   s e l e c t i o n   p r o c e d u r e   t o   d e l i m i t   t h e   ' r e l a t i o n a l   e n v i r o n m e n t '   o f   t h e   f i e l d   o f   e n t r e p r e n e u r s h i p   a n d   t o   a n a l y z e   t h e   e x i s t e n c e   a n d   c h a r a c t e r i z a t i o n   o f   ( i n ) v i s i b l e   c o l l e g e ( s )   b a s e d   o n   a   t h e o r e t i c a l l y   w e l l - g r o u n d e d   f r a m e w o r k ,   t h u s   o f f e r i n g   a   c o m p r e h e n s i v e   a n d   u p - t o - d a t e   e m p i r i c a l   a n a l y s i s   o f   e n t r e p r e n e u r s h i p   r e s e a r c h .   B a s e d   o n   m o r e   t h a n   a   1 , 0 0 0   p a p e r s   p u b l i s h e d   b e t w e e n   2 0 0 5   a n d   2 0 1 0   i n   s e v e n   c o r e   e n t r e p r e n e u r s h i p   j o u r n a l s   a n d   t h e   c o r r e s p o n d i n g   ( 8 5 , 0 0 0 )   c i t a t i o n s ,   w e   f o u n d   t h a t   e n t r e p r e n e u r s h i p   i s   a n   ( i n c r e a s i n g l y )   a u t o n o m o u s ,   l e g i t i m a t e   a n d   c o h e s i v e   ( i n ) v i s i b l e   c o l l e g e ,   f i n e   t u n e d   t h r o u g h   t h e   i n c r e a s i n g   v i s i b i l i t y   o f   c e r t a i n   s u b j e c t   s p e c i a l t i e s   ( e . g . ,   f a m i l y   b u s i n e s s ,   i n n o v a t i o n ,   t e c h n o l o g y   a n d   p o l i c y ) .   M o r e o v e r ,   t h e   r a t h e r   d e n s e   f o r m a l   l i n k s   t h a t   c h a r a c t e r i z e   t h e   e n t r e p r e n e u r s h i p   ( i n ) v i s i b l e   c o l l e g e   a r e   a c c o m p a n i e d   b y   a   r e a s o n a b l y   s o l i d   n e t w o r k   o f   i n f o r m a l   r e l a t i o n s   m a i n t a i n e d   a n d   s u s t a i n e d   b y   t h e   m o b i l i t y   o f   ' s t a r s '   a n d   h i g h l y   i n f l u e n t i a l   s c h o l a r s .   T h e   l i m i t e d   i n t e r n a t i o n a l i z a t i o n   o f   t h e   e n t r e p r e n e u r s h i p   c o m m u n i t y ,   r e f l e c t e d   i n   t h e   a l m o s t   t o t a l   a b s e n c e   o f   n o n - E n g l i s h - s p e a k i n g   a u t h o r s / s t u d i e s / o u t l e t s ,   s t a n d s   a s   a   m a j o r   q u e s t   f o r   t h e   f i e l d . 	 [ T e i x e i r a ,   A u r o r a   A .   C . ]   U n i v   P o r t o ,   F a c   E c o n ,   C E F   U P ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l ;   [ T e i x e i r a ,   A u r o r a   A .   C . ]   U n i v   P o r t o ,   I N E S C   P o r t o ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l ;   [ T e i x e i r a ,   A u r o r a   A .   C . ]   U n i v   P o r t o ,   O B E G E F ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l 	 T e i x e i r a ,   A A C   ( r e p r i n t   a u t h o r ) ,   U n i v   P o r t o ,   F a c   E c o n ,   C E F   U P ,   R u a   D r   R o b e r t o   F r i a s ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l . 	 a t e i x e i r a @ f e p . u p . p t 	 T e i x e i r a ,   A u r o r a / B - 5 8 5 9 - 2 0 0 9 	 T e i x e i r a ,   A u r o r a / 0 0 0 0 - 0 0 0 2 - 3 1 9 1 - 5 2 1 7 	 	 	 A l b a r r a n   P ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 4 8 ;   A L V A R E Z   S A ,   2 0 1 0 ,   I N T   H D B   S E R I E S   E N T   1 ,   V 5 ,   P 2 3 ;   B A U M O L   W J ,   1 9 6 8 ,   A M   E C O N   R E V ,   V 5 8 ,   P 6 4 ;   B O R G M A N   C L ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 3 9 7 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - M ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B O R O K H O V I C H   K A ,   1 9 9 4 ,   F I N A N C I A L   P R A C T I C E   E ,   V 4 ,   P 1 1 0 ;   B r a u n e r h j e l m   P ,   2 0 0 9 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 3 ,   P 8 0 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 9 . 0 0 3 2 7 . x ;   C a m p b e l l   K ,   2 0 1 1 ,   E N T R E P   R E G I O N   D E V ,   V 2 3 ,   P 3 7 ,   D O I   1 0 . 1 0 8 0 / 0 8 9 8 5 6 2 6 . 2 0 1 1 . 5 4 0 4 0 7 ;   C a s i l l a s   J ,   2 0 0 7 ,   F A M   B U S   R E V ,   V 2 0 ,   P 1 4 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 2 0 0 7 . 0 0 0 9 2 . x ;   C l e m e n t s   K W ,   2 0 0 3 ,   E C O N   R E C ,   V 7 9 ,   P 2 2 9 ,   D O I   1 0 . 1 1 1 1 / 1 4 7 5 - 4 9 3 2 . t 0 1 - 1 - 0 0 1 0 0 ;   C O O P E R   A ,   2 0 0 3 ,   H D B   E N T R E P R E N E U R S H I P ,   V 1 ;   C o r n e l i u s   B ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 5 . x ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   L o w   M . ,   2 0 0 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 5 ,   P 5 ;   D a v i d s s o n   P . ,   2 0 0 8 ,   E N T R E P R E N E U R S H I P   R E S ;   D O R E I A N   P ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 8 ;   E t e m a d   H ,   2 0 0 3 ,   S M A L L   B U S   E C O N ,   V 2 0 ,   P 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 2 4 0 3 0 3 3 3 2 ;   F r e y   B S ,   2 0 0 6 ,   E C O N O M I S T - N E T H E R L A N D ,   V 1 5 4 ,   P 2 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 4 5 - 0 0 6 - 9 0 0 5 - 2 ;   F r i e d   V H ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 2 ) 0 0 1 1 7 - 9 ;   G a m b o a   E C ,   2 0 0 8 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 2 ,   P 5 5 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 8 . 0 0 2 4 0 . x ;   G a r t n e r   W B ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 3 . x ;   G a r t n e r   W . ,   2 0 0 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 5 ,   P 2 7 ;   G r e g o i r e   D A ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 4 . x ;   H a g s t r o m   W .   O . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ;   H e n r e k s o n   M ,   2 0 0 9 ,   S M A L L   B U S   E C O N ,   V 3 2 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 8 7 - 0 0 8 - 9 1 4 1 - y ;   H o a n g   H ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 1 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 2 ) 0 0 0 8 1 - 2 ;   K A T Z   J ,   2 0 0 6 ,   E N T R E P R E N E U R S H I P   J   R ;   K a t z   J . ,   2 0 0 3 ,   C O R E   P U B L I C A T I O N S   E N ;   L e y d e s d o r f f   L ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 1 5 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 6 7 8 . 3 1 0 9 7 . e 0 ;   L e y d e s d o r f f   L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 3 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 9 2 1 0 6 0 5 9 ;   L e y d e s d o r f f   L . ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 6 ,   P 1 3 3 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 8 9 - 3 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 6 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 8 - 0 ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   L o c k e   J . ,   2 0 0 1 ,   I N T   J   A C C O U N T I N G ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 0 - 7 0 6 3 ( 0 1 ) 0 0 0 9 5 - 4 ;   L O W   M B ,   1 9 8 8 ,   J   M A N A G E ,   V 1 4 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 8 8 0 1 4 0 0 2 0 2 ;   M e y e r   G D ,   2 0 1 1 ,   J   S M A L L   B U S   M A N A G E ,   V 4 9 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 2 7 X . 2 0 1 0 . 0 0 3 1 1 . x ;   P R I C E   D J D ,   1 9 7 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 7 4 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a t n a t u n g a   J ,   1 9 9 7 ,   J   B U S   V E N T U R I N G ,   V 1 2 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 9 6 ) 0 0 0 6 2 - 6 ;   R a v a l l i o n   M ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 7 5 - 0 ;   R e a d e r   D ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 4 1 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 7 . x ;   R I G N E Y   D ,   1 9 8 0 ,   S O C   S C I   Q U A R T ,   V 6 1 ,   P 1 1 4 ;   R o e s s l   D . ,   1 9 9 0 ,   E N T R E P   T H E O R Y   P R A C T ,   V 1 0 ,   P 5 4 ;   S a r a s v a t h y   S D ,   2 0 1 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 5 ,   P 1 1 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 1 0 . 0 0 4 2 5 . x ;   S c h i l d t   H A ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 6 . x ;   S h a n e   S ,   2 0 0 0 ,   A C A D   M A N A G E   R E V ,   V 2 5 ,   P 2 1 7 ,   D O I   1 0 . 5 4 6 5 / a m r . 2 0 0 0 . 2 7 9 1 6 1 1 ;   S i l v a   E s t e r   G ,   2 0 0 8 ,   S t r u c t u r a l   C h a n g e   a n d   E c o n o m i c   D y n a m i c s ,   V 1 9 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . s t r u e c o . 2 0 0 8 . 0 2 . 0 0 1 ;   S t e y a e r t   C ,   2 0 1 1 ,   E N T R E P   R E G I O N   D E V ,   V 2 3 ,   P 1 ,   D O I   1 0 . 1 0 8 0 / 0 8 9 8 5 6 2 6 . 2 0 1 1 . 5 4 0 3 9 9 ;   T a y l o r   R .   S . ,   1 9 8 6 ,   V A L U E   A D D E D   P R O C E S S E ;   T u i r e   P . ,   2 0 0 1 ,   H I G H   E D U C ,   V 4 2 ,   P 4 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 2 4 2 0 0 9 7 5 8 ;   v a n   d e n   B e s s e l a a r   P ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 4 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 6 ) 4 7 : 6 < 4 1 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Y ;   V e n k a t a r a m a n ,   1 9 9 7 ,   A D V   E N T R E P R E N E U R S H I P ,   V 3 ,   P 1 1 9 ;   V i e i r a   P C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 6 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 2 - 7 ;   W a l l a c e   D P ,   2 0 0 7 ,   K N O W L E D G E   M A N A G E M E N T ;   W a l l e r   J e f f r e y   H . ,   2 0 0 6 ,   C O L L E C T I O N   M A N A G E M E N ,   V 3 0 ,   P 4 5 ,   D O I   [ 1 0 . 1 3 0 0 / J 1 0 5 v 3 0 n 0 2 _ 0 4 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 V 3 0 N 0 2 _ 0 4 ] ;   W A T K I N S   D ,   2 0 0 4 ,   I D E N T I F Y I N G   C U R R E N T ;   W e r n e r   S ,   2 0 0 2 ,   J   I N T   B U S   S T U D ,   V 3 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 1 0 3 3 ;   W i k l u n d   J ,   2 0 1 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 5 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 1 0 . 0 0 4 2 0 . x ;   Z a h r a   S A ,   2 0 0 7 ,   J   B U S   V E N T U R I N G ,   V 2 2 ,   P 4 4 3 ,   D O I   1 0 . 1 0 1 6 / j . j b u s v e n t . 2 0 0 6 . 0 4 . 0 0 7 ;   Z I T T   M ,   2 0 0 6 ,   P   I N T   W O R K S H   W E B   I N F ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 6 ;   Z u c c a l a   A ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 3 6 - 2 	 6 4 	 1 9 	 2 0 	 5 	 6 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 O C T 	 2 0 1 1 	 8 9 	 1 	 	 	 	 	 1 	 3 6 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 4 5 - 3 	 	 3 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 1 9 P N 	 W O S : 0 0 0 2 9 4 8 3 9 2 0 0 0 0 1 	 	 
 
 J 	 L o p e z - I l l e s c a s ,   C ;   d e   M o y a - A n e g o n ,   F ;   M o e d ,   H F 	 	 	 	 L o p e z - I l l e s c a s ,   C a r m e n ;   d e   M o y a - A n e g o n ,   F e l i x ;   M o e d ,   H e n k   F . 	 	 	 A   r a n k i n g   o f   u n i v e r s i t i e s   s h o u l d   a c c o u n t   f o r   d i f f e r e n c e s   i n   t h e i r   d i s c i p l i n a r y   s p e c i a l i z a t i o n 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 U n i v e r s i t y   r a n k i n g s ;   D i s c i p l i n a r y   s p e c i a l i z a t i o n ;   A c a d e m i c   s y s t e m s ;   S p a n i s h   a c a d e m i c   s y s t e m ;   I n s t i t u t i o n a l   r e s e a r c h   p e r f o r m a n c e ;   B i b l i o m e t r i c s 	 	 A   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   5 0   m o s t   f r e q u e n t l y   p u b l i s h i n g   S p a n i s h   u n i v e r s i t i e s   s h o w s   l a r g e   d i f f e r e n c e s   i n   t h e   p u b l i c a t i o n   a c t i v i t y   a n d   c i t a t i o n   i m p a c t   a m o n g   r e s e a r c h   d i s c i p l i n e s   w i t h i n   a n   i n s t i t u t i o n .   G i n i   I n d e x   i s   a   u s e f u l   m e a s u r e   o f   a n   i n s t i t u t i o n ' s   d i s c i p l i n a r y   s p e c i a l i z a t i o n   a n d   c a n   r o u g h l y   c a t e g o r i z e   u n i v e r s i t i e s   i n   t e r m s   o f   g e n e r a l   v e r s u s   s p e c i a l i z e d .   A   s t u d y   o f   t h e   S p a n i s h   a c a d e m i c   s y s t e m   r e v e a l s   t h a t   a s s e s s m e n t   o f   a   u n i v e r s i t y ' s   r e s e a r c h   p e r f o r m a n c e   m u s t   t a k e   i n t o   a c c o u n t   t h e   d i s c i p l i n a r y   b r e a d t h   o f   i t s   p u b l i c a t i o n   a c t i v i t y   a n d   c i t a t i o n   i m p a c t .   I t   p r o p o s e s   t h e   u s e   o f   g r a p h s   s h o w i n g   n o t   o n l y   a   u n i v e r s i t y ' s   a r t i c l e   p r o d u c t i o n   a n d   c i t a t i o n   i m p a c t ,   b u t   a l s o   i t s   d i s c i p l i n a r y   s p e c i a l i z a t i o n .   S u c h   g r a p h s   c o n s t i t u t e   b o t h   a   w a r n i n g   a n d   a   r e m e d y   a g a i n s t   o n e - d i m e n s i o n a l   a p p r o a c h e s   t o   t h e   a s s e s s m e n t   o f   i n s t i t u t i o n a l   r e s e a r c h   p e r f o r m a n c e . 	 [ L o p e z - I l l e s c a s ,   C a r m e n ;   d e   M o y a - A n e g o n ,   F e l i x ]   S p a n i s h   N a t l   R e s   C o u n c i l ,   C C H S ,   C S I C ,   S C I m a g o   U n i t , I P P ,   M a d r i d ,   S p a i n ;   [ M o e d ,   H e n k   F . ]   E l s e v i e r ,   N L - 1 0 4 3   N X   A m s t e r d a m ,   N e t h e r l a n d s 	 L o p e z - I l l e s c a s ,   C   ( r e p r i n t   a u t h o r ) ,   S p a n i s h   N a t l   R e s   C o u n c i l ,   C C H S ,   C S I C ,   S C I m a g o   U n i t , I P P ,   M a d r i d ,   S p a i n . 	 c a r m e n . l i l l e s c a s @ c c h s . c s i c . e s ;   f e l i x . m o y a @ s c i m a g o . e s ;   h . m o e d @ e l s e v i e r . c o m 	 M o y a   A n e g o n ,   F e l i x / C - 4 0 0 4 - 2 0 0 9 	 M o y a   A n e g o n ,   F e l i x / 0 0 0 0 - 0 0 0 2 - 0 2 5 5 - 8 6 2 8 	 	 	 A g u i l l o   I . F . ,   2 0 0 8 ,   H I G H E R   E D   E U R O P E ,   V 3 3 ,   P 2 3 4 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 1 1 9 2 - 0 1 0 - 0 1 9 0 - Z ;   * A U B R ,   2 0 0 9 ,   E X P   G R O U P   A S S   U   B A S ;   B U R R E L L   Q L ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 6 8 ;   C a l e r o - M e d i n a   C ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 7 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 0 7 ;   C E P E S ,   2 0 0 6 ,   B E R L   P R I N C   R A N K   H I G H ;   * C L   C S I C ,   2 0 0 9 ,   R A N K   W E B   W O R L D   U ;   * C W T S ,   2 0 0 9 ,   L E I D   W O R L D   R A N K ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M ;   H a l f f m a n   W ,   2 0 1 0 ,   M I N E R V A ,   V 4 8 ,   P 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 2 4 - 0 1 0 - 9 1 4 1 - 3 ;   H E E A C T ,   2 0 0 9 ,   P E R F   R A N K   S C I   P A P   W O ;   * I R E G ,   2 0 0 9 ,   I N T   O B S   A C   R A N K   E X C ;   L i u   N . C . ,   2 0 0 8 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ;   L i u   N C ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 1 1 6 ;   M o e d   H .   F . ,   1 9 9 9 ,   R E S   E V A L U A T ,   V 8 ,   P 6 0 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 9 9 7 8 1 7 7 7 7 1 1 ;   P e r s s o n   O ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 4 9 1 ;   R o u s s e a u   R ,   1 9 9 2 ,   T H E S I S   U   A N T W E R P   A N T ;   S a l m i   J ,   2 0 0 9 ,   D I R   D E V ,   P 1 ,   D O I   1 0 . 1 5 9 6 / 9 7 8 - 0 - 8 2 1 3 - 7 8 6 5 - 6 ;   S C I m a g o ,   2 0 1 0 ,   S I R   2 0 0 9   W O R L D   R E P ;   S c o p u s ,   2 0 1 0 ,   W H A T   D O E S   I T   C O V ;   S J T U ,   2 0 0 7 ,   A C   R A N K   W O R L D   U ;   * T I M   Q S ,   2 0 0 9 ,   Q S   W O R L D   U   R A N K ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 	 2 2 	 1 9 	 1 9 	 2 	 2 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A U G 	 2 0 1 1 	 8 8 	 2 	 	 	 	 	 5 6 3 	 5 7 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 9 8 - 6 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 5 E O 	 W O S : 0 0 0 2 9 2 2 1 0 4 0 0 0 1 5 	 	 
 
 J 	 H o d g e ,   D R ;   L a c a s s e ,   J R 	 	 	 	 H o d g e ,   D a v i d   R . ;   L a c a s s e ,   J e f f r e y   R . 	 	 	 E v a l u a t i n g   J o u r n a l   Q u a l i t y :   I s   t h e   H - I n d e x   a   B e t t e r   M e a s u r e   T h a n   I m p a c t   F a c t o r s ? 	 R E S E A R C H   O N   S O C I A L   W O R K   P R A C T I C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 h - i n d e x ;   i m p a c t   f a c t o r s ;   j o u r n a l   q u a l i t y ;   b i b l i o m e t r i c s 	 S O C I A L - W O R K   J O U R N A L S ;   F A C U L T Y   P U B L I C A T I O N   P R O J E C T ;   G O O G L E - S C H O L A R ;   B I B L I O M E T R I C   D A T A ;   C I T A T I O N ;   S C I E N C E ;   W E B ;   S C O P U S ;   P R O D U C T I V I T Y ;   P E R C E P T I O N S 	 O b j e c t i v e s :   T h i s   s t u d y   e v a l u a t e s   t h e   u t i l i t y   o f   a   n e w   m e a s u r e - t h e   h - i n d e x - t h a t   m a y   p r o v i d e   a   m o r e   v a l i d   a p p r o a c h   t o   e v a l u a t i n g   j o u r n a l   q u a l i t y   i n   t h e   s o c i a l   w o r k   p r o f e s s i o n .   M e t h o d :   H - i n d e x   v a l u e s   a r e   c o m p a r e d   w i t h   T h o m s o n   I S I   5 - y e a r   i m p a c t   f a c t o r s   a n d   e x p e r t   o p i n i o n .   R e s u l t s :   A s   h y p o t h e s i z e d ,   t h e   h - i n d e x   c o r r e l a t e s   h i g h l y   w i t h   I S I   5 - y e a r   i m p a c t   f a c t o r s ;   b u t   e x h i b i t s   c l o s e r   a g r e e m e n t   w i t h   e x p e r t   o p i n i o n ,   p a r t i c u l a r l y   w i t h   h i g h   f a m i l i a r i t y   d i s c i p l i n a r y   j o u r n a l s .   C o n c l u s i o n s :   T h i s   e v i d e n c e   o f   c o n v e r g e n t   a n d   d i s c r i m i n a t o r y   v a l i d i t y   s u g g e s t s   t h a t   t h e   h - i n d e x   m a y   h a v e   s o m e   u t i l i t y   i n   a s s e s s i n g   s o c i a l   w o r k   j o u r n a l s .   N o t a b l e   a d v a n t a g e s   o f   t h e   h - i n d e x   i n c l u d e   i t s   c o m p a t i b i l i t y   w i t h   t h e   p r o f e s s i o n ' s   a p p l i e d   r e s e a r c h   c u l t u r e   a n d   i t s   a b i l i t y   t o   b e   u s e d   w i t h   e s s e n t i a l l y   a l l   j o u r n a l s   i n   w h i c h   s o c i a l   w o r k e r s   p u b l i s h . 	 [ H o d g e ,   D a v i d   R . ]   A r i z o n a   S t a t e   U n i v ,   C o P P ,   P h o e n i x ,   A Z   8 5 0 0 4   U S A 	 H o d g e ,   D R   ( r e p r i n t   a u t h o r ) ,   A r i z o n a   S t a t e   U n i v ,   C o P P ,   M a i l   C o d e   3 9 2 0 , 4 1 1   N   C e n t   A v e , S u i t e   8 0 0 ,   P h o e n i x ,   A Z   8 5 0 0 4   U S A . 	 d a v i d h o d g e @ a s u . e d u 	 	 	 	 	 A l t h o u s e   B M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 3 6 ;   A s h k a n a s y   N M ,   2 0 0 7 ,   J   O R G A N   B E H A V ,   V 2 8 ,   P 6 4 3 ,   D O I   1 0 . 1 0 0 2 / j o b . 4 7 6 ;   B a b b i e   E . ,   2 0 0 7 ,   P R A C T I C E   S O C I A L   R E S ;   B a d o r   P ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 5 8 - 2 ;   B a k k a l b a s i   N . ,   2 0 0 6 ,   B I O M E D I C A L   D I G I T A L   L ,   V 3 ;   B a n e y x   A ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 4 3 - 0 ;   B a r e n d s e   W . ,   2 0 0 7 ,   B I O M E D I C A L   D I G I T A L   L ,   V 4 ,   P 1 ;   B a r k e r   K L ,   2 0 0 5 ,   J   S O C   S E R V   R E S ,   V 3 2 ,   P 1 7 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 3 2 n 0 1 _ 0 2 ;   B e r g s t r o m   C .   T . ,   2 0 0 7 ,   C   R L   N E W S ,   V 6 8 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B r u m b a c k   R A ,   2 0 0 9 ,   J   C H I L D   N E U R O L ,   V 2 4 ,   P 2 6 0 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 3 0 7 3 8 0 8 3 3 1 3 6 6 ;   C a m e r o n   B D ,   2 0 0 5 ,   P O R T A L - L I B R   A C A D ,   V 5 ,   P 1 0 5 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 5 . 0 0 0 3 ;   C l a r k e   R . ,   2 0 0 8 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 2 ,   P 1 ;   C N A A N   R A ,   1 9 9 4 ,   J   S O C   W O R K   E D U C ,   V 3 0 ,   P 1 8 5 ;   C o h e n   J . ,   1 9 8 8 ,   S T A T   P O W E R   A N A L   B E H A ,   V x x i ;   E p s t e i n   W M ,   2 0 0 4 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 4 ,   P 4 5 0 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 4 2 6 5 8 3 8 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F a v a l o r o   E J ,   2 0 0 9 ,   C L I N   C H E M   L A B   M E D ,   V 4 7 ,   P 1 3 1 9 ,   D O I   1 0 . 1 5 1 5 / C C L M . 2 0 0 9 . 3 2 8 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 1 - 2 ;   F u r r   A .   L . ,   1 9 9 5 ,   J   S O C I A L   W O R K   E D ,   V 3 1 ,   P 3 8 ;   G r e e n   R G ,   2 0 0 2 ,   J   S O C   W O R K   E D U C ,   V 3 8 ,   P 1 3 5 ;   G r e e n   R G ,   2 0 0 7 ,   J   S O C   W O R K   E D U C ,   V 4 3 ,   P 2 8 1 ;   G r e e n   R G ,   2 0 0 8 ,   J   S O C   W O R K   E D U C ,   V 4 4 ,   P 1 1 7 ;   H a   T C ,   2 0 0 6 ,   A N N   A C A D   M E D   S I N G A P ,   V 3 5 ,   P 9 1 1 ;   v a n   d e r   W a l   R . ,   2 0 0 8 ,   2 0 0 8   A C   M A N   A N N   M   A N ;   H a r z i n g   A W ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 5 3 ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o l d e n   G . ,   2 0 0 5 ,   B I B L I O M E T R I C S   S O C I A L ;   H o l d e n   G ,   2 0 0 8 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 8 ,   P 4 8 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 7 3 0 8 9 8 6 ;   H o l d e n   G ,   2 0 0 6 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 6 ,   P 6 1 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 6 2 9 2 5 7 0 ;   J o u r n a l   C i t a t i o n   R e p o r t s ,   2 0 0 8 ,   I N F   N E W   U S   I N D ;   J a c o b s   J A ,   2 0 0 9 ,   G E N D E R   S O C ,   V 2 3 ,   P 8 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 3 2 0 9 3 5 1 0 2 9 ;   J e n s o n   J M ,   2 0 0 5 ,   S O C   W O R K   R E S ,   V 2 9 ,   P 6 7 ;   K e l o h a r j u   M ,   2 0 0 8 ,   E U R   F I N A N C   M A N A G ,   V 1 4 ,   P 5 6 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 6 X . 2 0 0 8 . 0 0 4 5 1 . x ;   K l i n e   P . ,   2 0 0 0 ,   H D B   P S Y C H O L   T E S T ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   L i g o n   J ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 2 3 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 8 ;   L i g o n   J ,   2 0 0 1 ,   J   S O C   S E R V   R E S ,   V 2 8 ,   P 6 9 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 2 8 n 0 2 _ 0 4 ;   M a r t i n e z - B r a w l e y   E E ,   2 0 0 7 ,   F A M   S O C ,   V 8 8 ,   P 5 3 4 ,   D O I   1 0 . 1 6 0 6 / 1 0 4 4 - 3 8 9 4 . 3 6 7 5 ;   M c G a r t y   C ,   2 0 0 0 ,   C U R R E N T   R E S   S O C I A L   P ,   V 5 ,   P 1 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M i k k i   S ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 8 - 6 ;   M i n g e r s   J ,   2 0 0 9 ,   J   O P E R   R E S   S O C ,   V 6 0 ,   P 1 1 4 3 ,   D O I   1 0 . 1 0 5 7 / j o r s . 2 0 0 8 . 9 4 ;   M o u s s a   S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 0 . 0 0 1 ;   O l d e n   J D ,   2 0 0 7 ,   E C O S C I E N C E ,   V 1 4 ,   P 3 7 0 ,   D O I   1 0 . 2 9 8 0 / 1 1 9 5 - 6 8 6 0 ( 2 0 0 7 ) 1 4 [ 3 7 0 : H D E J S R ] 2 . 0 . C O ; 2 ;   P L o S   M e d i c i n e   E d i t o r s ,   2 0 0 6 ,   P L O S   M E D ,   V 3 ,   p e 2 9 1 ;   R a d i c c h i   P . ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ;   S a a d   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 2 - 9 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e i p e l   M M O ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 7 9 ;   S e l l e r s   S L ,   2 0 0 6 ,   J   S O C   W O R K   E D U C ,   V 4 2 ,   P 1 3 9 ;   S e l l e r s   S L ,   2 0 0 4 ,   J   S O C   W O R K   E D U C ,   V 4 0 ,   P 1 4 3 ;   S m i t h   A G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 9 - 8 ;   S p i v e y   C A ,   2 0 0 4 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 4 ,   P 2 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 3 2 6 2 1 3 1 ;   S S W R   P r e s i d e n t i a l   T a s k   F o r c e   o n   P u b l i c a t i o n s ,   2 0 0 8 ,   J   P U B L   P R A C T   S O C   W O R ;   T h y e r   B .   A . ,   2 0 0 5 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 5 ,   P 3 1 0 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 5 2 7 6 3 8 1 ;   V a n c l a y   J K ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 2 ;   W a l t e r s   W H ,   2 0 0 9 ,   P O R T A L - L I B R   A C A D ,   V 9 ,   P 5 ;   W e i n b a c h   R .   W . ,   1 9 9 7 ,   S T A T   S O C I A L   W O R K E R S ;   W h i t e h o u s e   G H ,   2 0 0 2 ,   E U R   R A D I O L ,   V 1 2 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 3 0 - 0 0 1 - 1 2 1 2 - 2 	 6 5 	 1 9 	 1 9 	 3 	 3 1 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0   U S A 	 1 0 4 9 - 7 3 1 5 	 	 	 R E S   S O C I A L   W O R K   P R A C 	 R e s .   S o c .   W o r k .   P r a c t . 	 M A R 	 2 0 1 1 	 2 1 	 2 	 	 	 	 	 2 2 2 	 2 3 0 	 	 1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 1 0 3 6 9 1 4 1 	 	 9 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 7 1 8 N S 	 W O S : 0 0 0 2 8 7 1 3 1 0 0 0 0 0 7 	 	 
 
 J 	 B o u y s s o u ,   D ;   M a r c h a n t ,   T 	 	 	 	 B o u y s s o u ,   D e n i s ;   M a r c h a n t ,   T h i e r r y 	 	 	 B i b l i o m e t r i c   r a n k i n g s   o f   j o u r n a l s   b a s e d   o n   I m p a c t   F a c t o r s :   A n   a x i o m a t i c   a p p r o a c h 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   J o u r n a l   r a n k i n g s ;   I m p a c t   F a c t o r ;   E x p e c t e d   u t i l i t y ;   D e c i s i o n   t h e o r y 	 G - I N D E X ;   C I T A T I O N   A N A L Y S I S ;   S T A N D S   T O D A Y ;   S C I E N C E ;   C O N S E Q U E N C E S ;   H I S T O R Y ;   U T I L I T Y ;   R I S K ;   T O O L 	 T h i s   p a p e r   p r o p o s e s   a n   a x i o m a t i c   a n a l y s i s   o f   I m p a c t   F a c t o r s   w h e n   u s e d   a s   t o o l s   f o r   r a n k i n g   j o u r n a l s .   T h i s   a n a l y s i s   d r a w s   o n   t h e   s i m i l a r i t i e s   b e t w e e n   t h e   p r o b l e m   o f   c o m p a r i n g   d i s t r i b u t i o n   o f   c i t a t i o n s   a m o n g   p a p e r s   a n d   t h a t   o f   c o m p a r i n g   p r o b a b i l i t y   d i s t r i b u t i o n s   o n   c o n s e q u e n c e s   a s   c o m m o n l y   d o n e   i n   d e c i s i o n   t h e o r y .   O u r   a n a l y s i s   s i n g l e s   o u t   a   n u m b e r   o f   c h a r a c t e r i s t i c   p r o p e r t i e s   o f   t h e   r a n k i n g   b a s e d   o n   I m p a c t   F a c t o r s .   W e   a l s o   s u g g e s t   a l t e r n a t i v e   w a y s   o f   u s i n g   d i s t r i b u t i o n s   o f   c i t a t i o n s   t o   r a n k   o r d e r   j o u r n a l s .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ B o u y s s o u ,   D e n i s ]   C N R S   L A M S A D E ,   F R E 3 2 3 4 ,   F - 7 5 7 7 5   P a r i s   1 6 ,   F r a n c e ;   [ B o u y s s o u ,   D e n i s ]   U n i v   P a r i s   0 9 ,   F - 7 5 7 7 5   P a r i s   1 6 ,   F r a n c e ;   [ M a r c h a n t ,   T h i e r r y ]   U n i v   G h e n t ,   B - 9 0 0 0   G h e n t ,   B e l g i u m 	 B o u y s s o u ,   D   ( r e p r i n t   a u t h o r ) ,   C N R S   L A M S A D E ,   F R E 3 2 3 4 ,   F - 7 5 7 7 5   P a r i s   1 6 ,   F r a n c e . 	 b o u y s s o u @ l a m s a d e . d a u p h i n e . f r ;   t h i e r r y . m a r c h a n t @ U G e n t . b e 	 M a r c h a n t ,   t h i e r r y / F - 2 6 9 9 - 2 0 1 1 	 	 	 	 A d l e r   R ,   2 0 0 9 ,   S T A T   S C I ,   V 2 4 ,   P 1 ,   D O I   1 0 . 1 2 1 4 / 0 9 - S T S 2 8 5 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 3 6 - x ;   A R R O W   K J ,   1 9 7 1 ,   A S P E C T S   T H E O R Y   R I S K ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B a r - I l a n   J ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 1 . 0 0 6 ;   B o u y s s o u   D ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 6 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 3 ;   C a m p a n a r i o   J M ,   1 9 9 8 ,   S C I   C O M M U N ,   V 1 9 ,   P 2 7 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 9 8 0 1 9 0 0 4 0 0 2 ;   C a m p a n a r i o   J M ,   1 9 9 8 ,   S C I   C O M M U N ,   V 1 9 ,   P 1 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 5 5 4 7 0 9 8 0 1 9 0 0 3 0 0 2 ;   C A R A Y O L   N ,   2 0 0 9 ,   C A H I E R   G R E T H A   2 0 0 9   0 ;   E g g h e   L ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   S E R ,   P 1 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F I S H B U R N   P C ,   1 9 9 1 ,   J   R I S K   U N C E R T A I N T Y ,   V 4 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 5 6 1 2 1 ;   F i s h b u r n   P . C . ,   1 9 7 0 ,   U T I L I T Y   T H E O R Y   D E C I S ;   F i s h b u r n   P .   C . ,   1 9 7 8 ,   S T O C H A S T I C   D O M I N A N C E ,   P 3 7 ;   F i s h b u r n   P .   C . ,   1 9 8 8 ,   N O N L I N E A R   P R E F E R E N C E ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 2 . 0 0 2 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G i l b o a   I . ,   2 0 0 9 ,   E C O N O M E T R I C   S O C   M O N O ,   V 4 5 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K r a n t z   D . ,   1 9 7 1 ,   F D N   M E A S U R E M E N T ,   V 1 ;   L a r i v i e r e   V ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 4 2 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 3 2 ;   L E V Y   H ,   1 9 9 2 ,   M A N A G E   S C I ,   V 3 8 ,   P 5 5 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 8 . 4 . 5 5 5 ;   L e v y   H . ,   1 9 9 8 ,   S T O C H A S T I C   D O M I N A N C E ;   M a r c h a n t   T . ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 2 7 ;   M a r c h a n t   T ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 1 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 5 9 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M o n a s t e r s k y   R i c h a r d ,   2 0 0 5 ,   C H R O N   H I G H E R   E D U C ,   V 5 8 ,   p A 1 2 ;   P a l a c i o s - H u e r t a   I ,   2 0 0 4 ,   E C O N O M E T R I C A ,   V 7 2 ,   P 9 6 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 2 6 2 . 2 0 0 4 . 0 0 5 1 9 . x ;   P R A T T   J W ,   1 9 6 4 ,   E C O N O M E T R I C A ,   V 3 2 ,   P 1 2 2 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 3 7 3 8 ;   Q u e s a d a   A ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 1 . 0 0 2 ;   R O T H S C H I L D   M ,   1 9 7 0 ,   J   E C O N   T H E O R Y ,   V 2 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 0 5 3 1 ( 7 0 ) 9 0 0 3 8 - 4 ;   R o u s s e a u   R . ,   2 0 0 8 ,   I S S I   N E W S L E T T E R ,   V 4 ,   P 4 9 ;   R o u s s e a u   R ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 3 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 1 ;   S c h m i d t   U . ,   2 0 0 4 ,   H D B   U T I L I T Y   T H E O R Y ,   P 7 5 7 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S H E P H E R D S O N   J C ,   1 9 8 0 ,   J   M A T H   E C O N ,   V 7 ,   P 9 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 6 8 ( 8 0 ) 9 0 0 2 3 - 3 ;   S u g d e n   R .   F . ,   2 0 0 4 ,   H D B   U T I L I T Y   T H E O R Y ,   V I I ,   P 6 8 5 ;   T h o m s o n   R e u t e r s ,   2 0 0 9 ,   W E B   S C I ;   * T H O M S   R E U T ,   2 0 0 9 ,   J   C I T   R E P   2 0 0 8 ;   v a n   L e e u w e n   T N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 7 - z ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 0 1 8 2 0 3 9 3 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 1 ;   V i e i r a   E S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 6 . 0 0 2 ;   W a k k e r   P . ,   2 0 1 0 ,   P R O S P E C T   T H E O R Y ;   W A L T M A N   L ,   2 0 1 0 ,   A R X I V 1 0 0 3 2 1 6 7 V 1   L E I D ;   W A L T M A N   L ,   2 0 1 0 ,   A R X I V 1 0 0 4 1 6 3 2 V 1   L E I D ;   W a l t m a n   L . ,   2 0 0 9 ,   I S S I   N E W S L E T T E R ,   V 5 ,   P 4 6 ;   W A L T M A N   L ,   2 0 0 9 ,   1 2   I N T   C   S C I   I N F   R I O ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 2 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 2 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 9 . 0 0 1 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   M A T H   S O C   S C I ,   V 5 6 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t h s o c s c i . 2 0 0 8 . 0 3 . 0 0 1 ;   Z i t t   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 9 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 4 	 5 9 	 1 9 	 2 0 	 1 	 2 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 1 	 5 	 1 	 	 	 	 	 7 5 	 8 6 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 9 . 0 0 1 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 9 8 W S 	 W O S : 0 0 0 2 8 5 6 2 6 0 0 0 0 0 7 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   D i   C o s t a ,   F 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a 	 	 	 C i t a t i o n s   v e r s u s   j o u r n a l   i m p a c t   f a c t o r   a s   p r o x y   o f   q u a l i t y :   c o u l d   t h e   l a t t e r   e v e r   b e   p r e f e r a b l e ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   a s s e s s m e n t ;   B i b l i o m e t r i c s ;   C i t a t i o n s ;   I m p a c t   f a c t o r ;   U n i v e r s i t y 	 R E S E A R C H   P R O D U C T I V I T Y 	 I n   r e c e n t   y e a r s   b i b l i o m e t r i c i a n s   h a v e   p a i d   i n c r e a s i n g   a t t e n t i o n   t o   r e s e a r c h   e v a l u a t i o n   m e t h o d o l o g i c a l   p r o b l e m s ,   a m o n g   t h e s e   b e i n g   t h e   c h o i c e   o f   t h e   m o s t   a p p r o p r i a t e   i n d i c a t o r s   f o r   e v a l u a t i n g   q u a l i t y   o f   s c i e n t i f i c   p u b l i c a t i o n s ,   a n d   t h u s   f o r   e v a l u a t i n g   t h e   w o r k   o f   s i n g l e   s c i e n t i s t s ,   r e s e a r c h   g r o u p s   a n d   e n t i r e   o r g a n i z a t i o n s .   M u c h   l i t e r a t u r e   h a s   b e e n   d e v o t e d   t o   a n a l y z i n g   t h e   r o b u s t n e s s   o f   v a r i o u s   i n d i c a t o r s ,   a n d   m a n y   w o r k s   w a r n   a g a i n s t   t h e   r i s k s   o f   u s i n g   e a s i l y   a v a i l a b l e   a n d   r e l a t i v e l y   s i m p l e   p r o x i e s ,   s u c h   a s   j o u r n a l   i m p a c t   f a c t o r .   T h e   p r e s e n t   w o r k   c o n t i n u e s   t h i s   l i n e   o f   r e s e a r c h ,   e x a m i n i n g   w h e t h e r   i t   i s   v a l i d   t h a t   t h e   u s e   o f   t h e   i m p a c t   f a c t o r   s h o u l d   a l w a y s   b e   a v o i d e d   i n   f a v o u r   o f   c i t a t i o n s ,   o r   w h e t h e r   t h e   u s e   o f   i m p a c t   f a c t o r   c o u l d   b e   a c c e p t a b l e ,   e v e n   p r e f e r a b l e ,   i n   c e r t a i n   c i r c u m s t a n c e s .   T h e   e v a l u a t i o n   w a s   c o n d u c t e d   b y   o b s e r v i n g   a l l   s c i e n t i f i c   p u b l i c a t i o n s   i n   t h e   h a r d   s c i e n c e s   b y   I t a l i a n   u n i v e r s i t i e s ,   f o r   t h e   p e r i o d   2 0 0 4 - 2 0 0 7 .   P e r f o r m a n c e   s e n s i t i v i t y   a n a l y s e s   w e r e   c o n d u c t e d   w i t h   c h a n g i n g   i n d i c a t o r s   o f   q u a l i t y   a n d   y e a r s   o f   o b s e r v a t i o n . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i ,   I - 0 0 1 8 5   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t ;   d a n g e l o @ d i s p . u n i r o m a 2 . i t ;   d i c o s t a @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A b r a m o   G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 2 - 2 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A k s n e s   D W ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 8 9 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 2 . 0 0 1 ;   B o r d o n s   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 0 4 0 7 8 7 6 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 ;   W e i n g a r t   P . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I 	 1 1 	 1 9 	 1 9 	 1 	 2 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 2 0 1 0 	 8 4 	 3 	 	 	 	 	 8 2 1 	 8 3 3 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 0 0 - 1 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 3 0 L K 	 W O S : 0 0 0 2 8 0 2 7 4 4 0 0 0 1 9 	 	 
 
 J 	 M i r o ,   O ;   M a r t i n - S a n c h e z ,   F J ;   B u r i l l o - P u t z e ,   G ;   J u l i a n - J i m e n e z ,   A ;   T o m a s ,   S ;   P a c h e c o ,   A ;   S a n c h e z ,   M 	 	 	 	 M i r o ,   O s c a r ;   J a v i e r   M a r t i n - S a n c h e z ,   F r a n c i s c o ;   B u r i l l o - P u t z e ,   G u i l l e r m o ;   J u l i a n - J i m e n e z ,   A g u s t i n ;   T o m a s ,   S a n t i a g o ;   P a c h e c o ,   A n d r e s ;   S a n c h e z ,   M i q u e l 	 	 	 B i b l i o m e t r i c   a n d   p u b l i c a t i o n   q u a l i t y   m a r k e r s   o f   E m e r g e n c i a s   f r o m   2 0 0 5   t o   2 0 0 9   a n d   c o m p a r i s o n   w i t h   e m e r g e n c y   m e d i c i n e   j o u r n a l s   i n c l u d e d   i n   J o u r n a l   C i t a t i o n   R e p o r t s 	 E M E R G E N C I A S 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 Q u a l i t y   i n d i c a t o r s ;   B i b l i o m e t r i c s ;   S c i e n t i f i c   j o u r n a l s ;   R e s e a r c h ;   E m e r g e n c y   h e a l t h   s e r v i c e s 	 I M P A C T 	 O b j e c t i v e s :   T o   c a l c u l a t e   5 - y e a r   ( 2 0 0 5 - 2 0 0 9 )   q u a l i t y   a n d   b i b l i o m e t r i c   i n d i c a t o r s   f o r   E m e r g e n c i a s   a n d   c o m p a r e   t h e m   t o   t h o s e   o f   o t h e r   j o u r n a l s   s p e c i a l i z e d   i n   e m e r g e n c y   m e d i c i n e .   M e t h o d s :   M a n u a l   r e v i e w   o f   a r t i c l e s   p u b l i s h e d   i n   E m e r g e n c i a s   a n d   c o n s u l t a t i o n   o f   t h e   W e b   o f   S c i e n c e   ( W o S )   d a t a b a s e   t o   r e c o r d   t h e   f o l l o w i n g   i n f o r m a t i o n   f o r   o t h e r   j o u r n a l s   f o r   e a c h   y e a r   o f   t h e   s t u d y   p e r i o d ,   n u m b e r   a n d   t y p e   o f   a r t i c l e s   p u b l i s h e d ;   n u m b e r ,   n a t i o n a l i t y ,   p r o f e s s i o n a l   a f f i l i a t i o n ,   a n d   a c a d e m i c   d e g r e e s   o f   a u t h o r s ;   n u m b e r   a n d   t y p e   o f   c i t e s ;   a n d   c i t e s   i n   b o t h   W o S - i n d e x e d   j o u r n a l s   a n d   i n   E m e r g e n c i a s   ( s e l f - c i t a t i o n ) .   T h e   s e l f - c i t a t i o n   r a t e s ,   i m m e d i a c y   i n d i c e s ,   a n d   i m p a c t   f a c t o r s   w e r e   c a l c u l a t e d   f o r   E m e r g e n c i a s   a n d   c o m p a r e d   w i t h   t h o s e   o f   t h e   1 3   e m e r g e n c y   m e d i c i n e   j o u r n a l s   l i s t e d   i n   J o u r n a l   C i t a t i o n   R e p o r t s   ( J C R ) .   R e s u l t s :   T h e   n u m b e r   o f   m a n u s c r i p t s   r e c e i v e d   b y   E m e r g e n c i a s   i n c r e a s e d   s i g n i f i c a n t l y   b y   1 5 7 % ,   g o i n g   f r o m   1 0 2   i n   2 0 0 5   t o   2 6 2   i n   2 0 0 9 .   T h e   t o t a l   n u m b e r   o f   a r t i c l e s   p u b l i s h e d   i n c r e a s e d   f r o m   8 7   t o   1 2 8   ( 4 7 % ) ,   w h i l e   t h e   n u m b e r   o f   o r i g i n a l   r e s e a r c h   a r t i c l e s   g r e w   f r o m   2 6   t o   4 3   ( 6 5 % ) .   T h e   p e r c e n t a g e   o f   a r t i c l e s   b y   n o n - S p a n i s h   a u t h o r s   a l s o   r o s e ,   f r o m   2 . 3 %   t o   1 0 . 2 % ,   a n   i n c r e a s e   o f   3 3 5 % .   T h e   n u m b e r   o f   c i t e s   r o s e   f r o m   1 2   t o   1 1 7   ( 8 7 5 %   i n c r e a s e ) .   T h e   a c c e p t a n c e   r a t e   d e c r e a s e d   s i g n i f i c a n t l y   b y   4 0 % ,   g o i n g   f r o m   8 1 %   t o   4 9 % .   R e v i e w e r   r e s p o n s e   t i m e   w a s   a l s o   c u t ,   b y   5 3 % ,   g o i n g   f r o m   5 5   t o   2 6   d a y s .   E d i t o r i a l   d e c i s i o n   t i m e   d e c r e a s e d   f r o m   1 4 2   t o   6 2   d a y s   ( r e d u c t i o n   o f   5 6 % ) .   T h e   s e l f - c i t a t i o n   r a t e   d e c r e a s e d   s i g n i f i c a n t l y ,   d e s c e n d i n g   t o   4 3 %   i n   2 0 0 9 ,   w h i l e   t h e   i m m e d i a c y   i n d e x   i n c r e a s e d   t o   0 . 1 6   i n   2 0 0 6   ( 0 . 6 8 9 ,   c o u n t i n g   s e l f - c i t a t i o n ) .   T h e   i m p a c t   f a c t o r   e x c l u d i n g   s e l f - c i t a t i o n   w a s   0 . 8 1 6   i n   2 0 0 9   ( 1 . 4 3 7 ,   c o u n t i n g   s e l f - c i t a t i o n ) .   M o s t   o f   t h e s e   i n d i c a t o r s   a r e   w i t h i n   t h e   r a n g e   o f   t h e   1 3   c o m p a r a b l e   j o u r n a l s   l i s t e d   i n   t h e   J C R   i n   2 0 0 8 .   C o n c l u s i o n :   E m e r g e n c i a s   h a s   u n d e r g o n e   h i g h l y   f a v o r a b l e   c h a n g e s   o v e r   t h e   p a s t   5   y e a r s ,   i m p r o v i n g   m a n y   o f   t h e   m a i n   q u a l i t y   a n d   b i b l i o m e t r i c   i n d i c a t o r s .   A t   t h e   e n d   o f   t h e   s t u d y   p e r i o d   t h e   s t a t i s t i c s   f o r   E m e r g e n c i a s   w e r e   w i t h i n   t h e   r a n g e   c a l c u l a t e d   f o r   e m e r g e n c y   m e d i c i n e   j o u r n a l s   i n   t h e   J C R .   [ E m e r g e n c i a s   2 0 1 0 ; 2 2 . 1 6 5 - 1 7 4 ] 	 	 M i r o ,   O   ( r e p r i n t   a u t h o r ) ,   H o s p   C l i n   B a r c e l o n a ,   V i l l a r r o e l   1 7 0 ,   B a r c e l o n a   0 8 0 3 6 ,   S p a i n . 	 	 B u r i l l o - P u t z e ,   G u i l l e r m o / L - 2 3 7 3 - 2 0 1 5 	 B u r i l l o - P u t z e ,   G u i l l e r m o / 0 0 0 0 - 0 0 0 1 - 5 6 7 9 - 7 8 4 6 	 	 	 A l f o n s o   F ,   2 0 0 5 ,   R E V   E S P   C A R D I O L ,   V 5 8 ,   P 1 2 3 9 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 9 9 2 1 ;   A l f o n s o   F ,   2 0 0 9 ,   R E V   E S P   C A R D I O L ,   V 6 2 ,   P 1 4 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 0 - 8 9 3 2 ( 0 9 ) 7 3 1 3 8 - 0 ;   * B I B L   W I K ,   2 0 0 9 ,   D I S P ;   B o s c h   X ,   2 0 0 1 ,   R E V   E S P   C A R D I O L ,   V 5 4 ,   P 1 4 6 3 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 5 1 5 ;   d e   G r a n d a   O r i v e   J   I ,   2 0 0 3 ,   A r c h   B r o n c o n e u m o l ,   V 3 9 ,   P 4 0 9 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 5 0 6 3 1 ;   F a l a g a s   M E ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 2 4 - 5 ;   P u i g   J G ,   2 0 1 0 ,   R E V   C L I N   E S P ,   V 2 1 0 ,   P 3 3 ,   D O I   1 0 . 1 0 1 6 / j . r c e . 2 0 0 9 . 1 1 . 0 0 1 ;   * I S I   W E B   K N O W L ,   2 0 0 9 ,   D I S P ;   M c V e i g h   M E ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 1 0 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 1 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 1 8 7 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 1 3 6 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 1 1 3 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 1 ;   M i r o   O ,   2 0 0 8 ,   E M E R G E N C I A S ,   V 2 0 ,   P 3 0 8 ;   M i r o   O ,   2 0 0 9 ,   E M E R G E N C I A S ,   V 2 1 ,   P 1 ;   M i r o   O ,   2 0 0 8 ,   E M E R G E N C I A S ,   V 2 0 ,   P 1 4 9 ;   M i r o   O ,   2 0 0 8 ,   E M E R G E N C I A S ,   V 2 0 ,   P 1 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 7 ,   D O I   D O I   1 0 . 1 1 3 6 / B M J . 3 1 4 . 7 0 7 9 . 4 9 7 	 2 0 	 1 9 	 2 0 	 2 	 6 	 S A N I D A D   E D I C I O N E S 	 M A D R I D 	 C A P I T A L   H A Y A ,   6 0 ,   M A D R I D ,   2 8 0 2 0 ,   S P A I N 	 1 1 3 7 - 6 8 2 1 	 	 	 E M E R G E N C I A S 	 E m e r g e n c i a s 	 J U N 	 2 0 1 0 	 2 2 	 3 	 	 	 	 	 1 6 5 	 1 7 4 	 	 	 	 1 0 	 E m e r g e n c y   M e d i c i n e 	 E m e r g e n c y   M e d i c i n e 	 6 6 8 P R 	 W O S : 0 0 0 2 8 3 2 8 2 5 0 0 0 0 3 	 	 
 
 J 	 G l a n z e l ,   W 	 	 	 	 G l a n z e l ,   W o l f g a n g 	 	 	 T h e   m u l t i - d i m e n s i o n a l i t y   o f   j o u r n a l   i m p a c t 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 G E N E R A L I Z E D   W A R I N G   D I S T R I B U T I O N ;   S C I E N T I F I C   L I T E R A T U R E ;   S K E W   D I S T R I B U T I O N S ;   S T O C H A S T I C - M O D E L ;   C I T A T I O N   I M P A C T ;   U N C I T E D N E S S ;   I N D E X 	 I n   r e c e n t   s t u d i e s   t h e   i s s u e   o f   t h e   r e l a t e d n e s s   b e t w e e n   j o u r n a l   i m p a c t   f a c t o r s   a n d   o t h e r   m e a s u r e s   o f   j o u r n a l   i m p a c t   h a v e   b e e n   r a i s e d   a n d   d i s c u s s e d   f r o m   b o t h   m e r e l y   e m p i r i c a l   a n d   t h e o r e t i c a l   p e r s p e c t i v e s .   M o d e l s   o f   t h e   u n d e r l y i n g   c i t a t i o n   p r o c e s s e s   s u g g e s t   d i s t r i b u t i o n s   w i t h   t w o   o r   m o r e   f r e e   p a r a m e t e r s .   P r o c e e d i n g   f r o m   t h e   r e l a t i o n   b e t w e e n   t h e   j o u r n a l s '   m e a n   c i t a t i o n   r a t e   a n d   u n c i t e d n e s s   a n d   t h e   a s s u m p t i o n   o f   a n   u n d e r l y i n g   G e n e r a l i s e d   W a r i n g   D i s t r i b u t i o n   ( G W D )   m o d e l ,   i t   i s   f o u n d   t h a t   t h e   j o u r n a l   i m p a c t   f a c t o r   a l o n e   d o e s   n o t   s u f f i c i e n t l y   d e s c r i b e   a   j o u r n a l ' s   c i t a t i o n   i m p a c t ,   w h i l e   a   t w o - p a r a m e t e r   s o l u t i o n   a p p r o p r i a t e l y   r e f l e c t s   i t s   m a i n   c h a r a c t e r i s t i c s .   F o r   t h e   a n a l y s i s   o f   h i g h l y   c i t e d   p u b l i c a t i o n s   a n   a d d i t i o n a l   m o d e l   d e r i v e d   f r o m   t h e   s a m e   G W D   i s   s u g g e s t e d .   T h i s   a p p r o a c h   r e s u l t s   i n   r o b u s t ,   c o m p r e h e n s i b l e   a n d   i n t e r p r e t a b l e   s o l u t i o n s   t h a t   c a n   r e a d i l y   b e   a p p l i e d   i n   e v a l u a t i v e   b i b l i o m e t r i c s . 	 [ G l a n z e l ,   W o l f g a n g ]   K a t h o l i e k e   U n i v   L e u v e n ,   S t e u n p u n t   O & O   I n d i c a t o r e n ,   D e p t   M S I ,   L o u v a i n ,   B e l g i u m ;   [ G l a n z e l ,   W o l f g a n g ]   H u n g a r i a n   A c a d   S c i ,   I n s t   R e s   P o l i c y   S t u d i e s ,   B u d a p e s t ,   H u n g a r y 	 G l a n z e l ,   W   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   S t e u n p u n t   O & O   I n d i c a t o r e n ,   D e p t   M S I ,   L o u v a i n ,   B e l g i u m . 	 w o l f g a n g . g l a n z e l @ e c o n . k u l e u v e n . a c . b e 	 G l a n z e l ,   W o l f g a n g / A - 6 2 8 0 - 2 0 0 8 	 G l a n z e l ,   W o l f g a n g / 0 0 0 0 - 0 0 0 1 - 7 5 2 9 - 5 1 9 8 	 	 	 A b r a m o w i t z   M . ,   1 9 6 4 ,   H D B   M A T H   F U N C T I O N S ;   A L L I S O N   P D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 2 0 3 ;   B u r r e l l   Q L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 2 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 0 - y ;   E g g h e   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 0 2 - x ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G L A N Z E L   W ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 7 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 7 8 8 0 4 0 8 7 ;   G L A N Z E L   W ,   1 9 8 7 ,   P R O B A B   T H E O R Y   R E L ,   V 7 4 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 5 6 9 9 9 6 ;   G L A N Z E L   W ,   1 9 8 4 ,   Z   W A H R S C H E I N L I C H K E I T ,   V 6 6 ,   P 1 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 5 3 1 5 2 7 ;   G L A N Z E L   W ,   1 9 9 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 1 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) E 0 0 1 2 - Q ;   G L A N Z E L   W ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 1 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 2 0 8 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 1 2 ;   G l a n z e l   W . ,   1 9 9 0 ,   S T A T I S T I C S ,   V 2 1 ,   P 6 1 3 ,   D O I   1 0 . 1 0 8 0 / 0 2 3 3 1 8 8 9 0 0 8 8 0 2 2 7 3 ;   G l a n z e l   W . ,   1 9 8 8 ,   I N F O R M E T R I C S ,   V 8 7 / 8 8 ,   P 7 5 ;   G L A N Z E L   W ,   1 9 9 4 ,   P   C O M P S T A T   9 4   V I E N N ,   P 1 9 9 ;   G l a n z e l   W ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 1 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 8 9 - 0 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I R W I N   J O ,   1 9 7 5 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 8 ,   P 2 0 4 ,   D O I   1 0 . 2 3 0 7 / 2 9 8 4 6 4 8 ;   I R W I N   J O ,   1 9 7 5 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 8 ,   P 3 7 4 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 4 5 8 2 ;   I R W I N   J O ,   1 9 7 5 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 8 ,   P 1 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 5 2 4 7 ;   J o h n s o n   N L ,   1 9 7 7 ,   U R N   M O D E L S   T H E I R   A P P ;   J o h n s o n   N .   L . ,   1 9 6 9 ,   D I S T R I B U T I O N S   S T A T   D ;   M i t r i n o v i c   D . S ,   1 9 7 0 ,   A N A L   I N E Q U A L I T I E S ;   M o e d   H F ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 3 ;   S C H U B E R T   A ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 7 1 7 8 ;   S C H U B E R T   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 5 9 ;   S c h u b e r t   A ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 2 ;   S I C H E L   H S ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 8 - H ;   T E L C S   A ,   1 9 8 5 ,   M A T H   S O C   S C I ,   V 1 0 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 5 - 4 8 9 6 ( 8 5 ) 9 0 0 3 3 - 2 ;   T O D O R O V   R ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 1 0 6 ;   v a n   L e e u w e n   T N ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 7 - z ;   X E K A L A K I   E ,   1 9 8 3 ,   B I O M E T R I C S ,   V 3 9 ,   P 8 8 7 ,   D O I   1 0 . 2 3 0 7 / 2 5 3 1 3 2 4 	 3 4 	 1 9 	 1 9 	 3 	 1 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 0 9 	 7 8 	 2 	 	 	 	 	 3 5 5 	 3 7 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 6 6 - 9 	 	 2 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 9 7 U D 	 W O S : 0 0 0 2 6 2 6 8 6 7 0 0 0 1 1 	 	 
 
 J 	 H a e f f n e r - C a v a i l l o n ,   N ;   G r a i l l o t - G a k ,   C 	 	 	 	 H a e f f n e r - C a v a i l l o n ,   N i c o l e ;   G r a i l l o t - G a k ,   C l a u d e 	 	 	 T h e   u s e   o f   b i b l i o m e t r i c   i n d i c a t o r s   t o   h e l p   p e e r - r e v i e w   a s s e s s m e n t 	 A R C H I V U M   I M M U N O L O G I A E   E T   T H E R A P I A E   E X P E R I M E N T A L I S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 p e e r   r e v i e w ;   i m p a c t   f a c t o r ;   b i b l i o m e t r i c   i n d i c a t o r s 	 I M P A C T   F A C T O R ;   R E S E A R C H   P E R F O R M A N C E ;   P O L I C Y 	 I n s e r m   i s   t h e   o n l y   F r e n c h   p u b l i c   r e s e a r c h   i n s t i t u t i o n   e n t i r e l y   d e d i c a t e d   t o   h u m a n   h e a l t h .   I n s e r m   s u p p o r t s   r e s e a r c h   a c r o s s   t h e   b i o m e d i c a l   s p e c t r u m   i n   a l l   m a j o r   d i s e a s e   a r e a s ,   f r o m   f u n d a m e n t a l   l a b - b a s e d   s c i e n c e   t o   c l i n i c a l   t r i a l s .   T o   t r a n s l a t e   i t s   s c i e n t i s t s '   f i n d i n g s   i n t o   t a n g i b l e   h e a l t h   b e n e f i t s ,   I n s e r m   h a s   i t s   o w n   a f f i l i a t e d   c o m p a n y ,   I n s e r m   T r a n s f e r t ,   w h i c h   w o r k s   w i t h   i n d u s t r y .   S i n c e   2 0 0 1 ,   I n s e r m   h a s   b e e n   s e t t i n g   u p   o n - l i n e   f i l e   m a n a g e m e n t   s o f t w a r e   f o r   t h e   e v a l u a t i o n   o f   r e s e a r c h e r s   a n d   l a b o r a t o r i e s ,   c a l l e d   E V A   ( w w w . e v a . i n s e r m . f r ) .   E V A   i n c l u d e s   a l l   g r a n t   a p p l i c a t i o n s ,   a s s e s s m e n t   r e p o r t s ,   e v a l u a t i o n   g r a d i n g   e v a l u a t i o n   f o r m s   a n d   i n c l u d e s   a u t o m a t e d   b i b l i o m e t r i c   i n d i c a t o r   s o f t w a r e   t h a t   e n a b l e s   c a l c u l a t i n g ,   f o r   e x a m p l e ,   t h e   n u m b e r   o f   p u b l i c a t i o n s ,   j o u r n a l   i m p a c t   f a c t o r s ,   n u m b e r   o f   c i t a t i o n s ,   c i t a t i o n   i n d e x ,   a n d   n u m b e r   o f   t h e   T o p   1 %   p u b l i c a t i o n s   f o r   e a c h   r e s e a r c h e r   o f   t h e   t e a m s .   T h e   i n d i c a t o r s   t a k e   i n t o   a c c o u n t   r e s e a r c h   f i e l d s ,   t h e   y e a r   o f   p u b l i c a t i o n s ,   a n d   t h e   a u t h o r ' s   p o s i t i o n   a m o n g   t h e   p a r t i c i p a n t s .   B i b l i o m e t r i c s   i s   n o w   c o n s i d e r e d   a   t o o l   f o r   s c i e n c e   p o l i c y   p r o v i d i n g   i n d i c a t o r s   t o   m e a s u r e   p r o d u c t i v i t y   a n d   s c i e n t i f i c   q u a l i t y ,   t h e r e b y   s u p p l y i n g   a   b a s i s   f o r   e v a l u a t i n g   a n d   o r i e n t i n g   R & D .   I t   i s   a l s o   a   p o t e n t i a l   t o o l   f o r   e v a l u a t i o n .   I t   i s   n e u t r a l ,   a l l o w s   c o m p a r a t i v e   ( n a t i o n a l   a n d   i n t e r n a t i o n a l )   a s s e s s m e n t ,   a n d   m a y   s e l e c t   p a p e r s   i n   t h e   f o r e f r o n t   i n   a l l   f i e l d s .   F o r   e a c h   t e a m ,   b i b l i o m e t r i c   i n d i c a t o r s   a r e   c a l c u l a t e d   f o r   a l l   r e s e a r c h e r s   w i t h   p e r m a n e n t   o r   l o n g - t e r m   p o s i t i o n s   ( 3 - 5   y e a r s ) .   T h e   u s e   o f   b i b l i o m e t r i c   i n d i c a t o r s   r e q u i r e s   g r e a t   v i g i l a n c e ,   b u t   a c c o r d i n g   t o   o u r   e x p e r i e n c e   t h e y   e n r i c h   t h e   c o m m i t t e e ' s   d e b a t e s   w i t h o u t   a n y   d o u b t .   W e   p r e s e n t   a n   a n a l y s i s   o f   t h e   d a t a   o f   6 0 0   r e s e a r c h   t e a m s   e v a l u a t e d   i n   2 0 0 7 - 2 0 0 8 . 	 [ H a e f f n e r - C a v a i l l o n ,   N i c o l e ]   I N S E R M ,   D e p t   E v a l u a t   S c i ,   B i b l i o m e t r   U n i t ,   S c i   E v a l u a t   D e p t   I n s e r m s   H e a d   O f f ,   F - 7 5 6 5 4   P a r i s   1 3 ,   F r a n c e 	 H a e f f n e r - C a v a i l l o n ,   N   ( r e p r i n t   a u t h o r ) ,   I N S E R M ,   D e p t   E v a l u a t   S c i ,   B i b l i o m e t r   U n i t ,   S c i   E v a l u a t   D e p t   I n s e r m s   H e a d   O f f ,   1 0 1   R u e   T o l b i a c ,   F - 7 5 6 5 4   P a r i s   1 3 ,   F r a n c e . 	 n i c o l e . h a e f f n e r @ t o l b i a c . i n s e r m . f r 	 H a e f f n e r - C a v a i l l o n ,   N i c o l e / A - 1 9 2 1 - 2 0 1 3 	 H a e f f n e r - C a v a i l l o n ,   N i c o l e / 0 0 0 0 - 0 0 0 2 - 1 7 0 3 - 8 5 6 1 	 	 	 A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   C h e r u b i n i   P ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 2 2 . 5 8 9 9 . 1 9 1 b ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   J a n s e n   D ,   2 0 0 7 ,   K O L N E R   Z   S O Z I O L   S O Z ,   V 5 9 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 5 7 7 - 0 0 7 - 0 0 0 6 - 1 ;   J u n q u e r a   B ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 4 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 9 - 9 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   N e d e r h o f   A J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 9 - 0 ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S i m o n s   K ,   2 0 0 8 ,   S C I E N C E ,   V 3 2 2 ,   P 1 6 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 6 5 3 1 6 	 1 1 	 1 9 	 2 1 	 3 	 3 3 	 B I R K H A U S E R   V E R L A G   A G 	 B A S E L 	 V I A D U K S T R A S S E   4 0 - 4 4 ,   P O   B O X   1 3 3 ,   C H - 4 0 1 0   B A S E L ,   S W I T Z E R L A N D 	 0 0 0 4 - 0 6 9 X 	 	 	 A R C H   I M M U N O L   T H E R   E X 	 A r c h .   I m m u n o l .   T h e r .   E x p . 	 F E B 	 2 0 0 9 	 5 7 	 1 	 	 	 	 	 3 3 	 3 8 	 	 1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 4 - 2 	 	 6 	 I m m u n o l o g y 	 I m m u n o l o g y 	 4 0 9 N I 	 W O S : 0 0 0 2 6 3 5 1 2 0 0 0 0 0 4 	 1 9 2 1 9 5 3 0 	 
 
 J 	 P i l k i n g t o n ,   A ;   L e e ,   L L ;   C h a n ,   C K ;   R a m a k r i s h n a ,   S 	 	 	 	 P i l k i n g t o n ,   A l a n ;   L e e ,   L i n d a   L . ;   C h a n ,   C a s e y   K . ;   R a m a k r i s h n a ,   S e e r a r n 	 	 	 D e f i n i n g   k e y   i n v e n t o r s :   A   c o m p a r i s o n   o f   f u e l   c e l l   a n d   n a n o t e c h n o l o g y   i n d u s t r i e s 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 N a n o t e c h n o l o g y ;   F u e l   c e l l ;   P a t e n t   a n a l y s i s ;   K e y   i n v e n t o r ;   B i b l i o m e t r i c s 	 P A T E N T   S T A T I S T I C S ;   E M E R G I N G   T E C H N O L O G I E S ;   I N N O V A T I V E   A C T I V I T I E S ;   S C I E N C E ;   I N D I C A T O R S ;   H Y D R O G E N ;   A D O P T I O N ;   P O L I C Y ;   E N T R Y ;   F I R M S 	 T h i s   p a p e r   d e f i n e s   t h e   n o t i o n   o f   k e y   i n v e n t o r s   -   t h o s e   w h o s e   p a t e n t i n g   i s   s i m u l t a n e o u s l y   h i g h l y   p r o d u c t i v e   a n d   a l s o   w i d e l y   c i t e d .   B y   i m p l i c a t i o n .   k e y   i n v e n t o r s   s h o u l d   b e   t h e   l e a d e r s   i n   a n y   d e v e l o p i n g   n e w   f i e l d   a n d   w e   i n v e s t i g a t e   t h e   v a l i d i t y   o f   t h e   n o t i o n   t h r o u g h   a n   e x p l o r a t i o n   o f   t w o   e m e r g i n g   t e c h n o l o g i c a l   f i e l d s :   f u e l   c e l l   a n d   n a n o t e c h n o l o g y .   T h e   n a t u r e   o f   t h e   t w o   g r o u p s   i s   c o m p a r e d   t o   d i s c u s s   t h e   d i f f e r e n c e s   b e t w e e n   t h e   t e c h n o l o g i c a l   g r o u p s .   ( C )   2 0 0 8   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ P i l k i n g t o n ,   A l a n ]   U n i v   L o n d o n ,   S c h   M a n a g e m e n t ,   E g h a m   T W 2 0   0 E X ,   S u r r e y ,   E n g l a n d ;   [ L e e ,   L i n d a   L . ;   C h a n ,   C a s e y   K . ;   R a m a k r i s h n a ,   S e e r a r n ]   N a t l   U n i v   S i n g a p o r e ,   N a n o s c i   &   N a n o t e c h n o l   I n i t i a t ,   S i n g a p o r e   1 1 7 5 4 8 ,   S i n g a p o r e 	 P i l k i n g t o n ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   L o n d o n ,   S c h   M a n a g e m e n t ,   E g h a m   H i l l ,   E g h a m   T W 2 0   0 E X ,   S u r r e y ,   E n g l a n d . 	 a . p i l k i n g t o n @ r h u l . a c . u k 	 P i l k i n g t o n ,   A l a n / B - 6 3 4 3 - 2 0 0 9 	 P i l k i n g t o n ,   A l a n / 0 0 0 0 - 0 0 0 2 - 3 8 8 0 - 1 7 5 7 	 	 	 A L B E R T   M B ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 5 5 - U ;   B A S B E R G   B L ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 7 - 8 ;   B a w a   R . ,   2 0 0 4 ,   N A N O T E C H N O L O G Y   L A W   B ,   V 1 ,   P 3 1 ;   B e n g i s u   M ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 9 . 0 0 1 ;   B O W E R   J L ,   1 9 9 5 ,   H A R V A R D   B U S   R E V ,   V 7 3 ,   P 4 3 ;   B r a u n   T ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 7 ;   B R O C K H O F F   K K ,   1 9 9 2 ,   T E C H N O V A T I O N ,   V 1 2 ,   P 4 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 6 - 4 9 7 2 ( 9 2 ) 9 0 0 3 1 - C ;   C U L N A N   M J ,   1 9 8 6 ,   M A N   S C I ,   V 3 2 ,   P 1 5 5 ;   D A R B Y   M R ,   2 0 0 3 ,   W 9 8 2 5   N B E R ;   E r n s t   H . ,   1 9 9 9 ,   P I C M E T   ' 9 9 :   P o r t l a n d   I n t e r n a t i o n a l   C o n f e r e n c e   o n   M a n a g e m e n t   o f   E n g i n e e r i n g   a n d   T e c h n o l o g y .   T e c h n o l o g y   a n d   I n n o v a t i o n   M a n a g e m e n t   ( I E E E   C a t .   N o .   9 9 C H 3 6 3 1 0 ) ,   D O I   1 0 . 1 1 0 9 / P I C M E T . 1 9 9 9 . 7 8 7 8 3 6 ;   F r e y   H C ,   2 0 0 7 ,   T R A N S P O R T   R E S   D - T R   E ,   V 1 2 ,   P 2 8 1 ,   D O I   1 0 . 1 0 1 6 / j . t r d . 2 0 0 7 . 0 3 . 0 0 3 ;   G R I L I C H E S   Z ,   1 9 9 8 ,   R D   P R O D U C T I V I T Y   E C O N ;   G r u p p   H ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 3 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 1 2 5 - 5 ;   H E N D E R S O N   R M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 4 9 ;   H e n d r y   C ,   2 0 0 7 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 7 0 1 4 0 3 2 9 2 ;   H u a n g   Z ,   2 0 0 4 ,   J   N A N O P A R T   R E S ,   V 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 4 - 4 1 1 7 - 6 ;   H u l l m a n n   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 0 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 7 . 4 5 4 6 7 . a 7 ;   J o h n s t o n   B ,   2 0 0 5 ,   T E C H N O V A T I O N ,   V 2 5 ,   P 5 6 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 3 . 1 1 . 0 0 5 ;   K a r g e r   C R ,   2 0 0 8 ,   E N E R G   P O L I C Y ,   V 3 6 ,   P 7 9 8 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 7 . 1 0 . 0 2 4 ;   K o p p i k a r   V ,   2 0 0 4 ,   N A N O T E C H N O L O G Y   L A W   B ,   V 1 ,   P 2 4 ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 7 3 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 4 . 0 0 4 ;   L e m l e y   M A ,   2 0 0 5 ,   S T A N F O R D   L A W   R E V ,   V 5 8 ,   P 6 0 1 ;   M a l e r b a   F ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 6 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 0 5 - 0 ;   M e y e r   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 5 5 ;   N a m e r o f f   T J ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 9 5 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 3 . 0 0 1 ;   N a r i n   F . ,   1 9 8 8 ,   H D B   Q U A N T I T A T I V E   S T U ,   P 4 6 5 ;   N O R D A N   M ,   2 0 0 4 ,   N A N O T E C H   R E P O R T   2 0 0 4 ;   N O R D A N   M ,   2 0 0 5 ,   R A N K I N G   N A T I O N S   N A N O ;   * N U S ,   N A T   U   S I N G   P A T   D A T ;   N y g a a r d   S ,   2 0 0 8 ,   B U S   E T H I C S ,   V 1 7 ,   P 2 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 8 6 0 8 . 2 0 0 8 . 0 0 5 1 7 . x ;   P A V I T T   K ,   1 9 8 2 ,   R E S   P O L I C Y ,   V 1 1 ,   P 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 2 ) 9 0 0 0 5 - 1 ;   P A V I T T   K ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 4 2 ;   P I L K I N G T O N   A ,   2 0 0 2 ,   I E E E   E N G   M A N   C   C A M B R ;   P I L K I N G T O N   A ,   2 0 0 1 ,   P O R T L   I N T   C   M A N   E N G ;   P I L K I N G T O N   A ,   2 0 0 4 ,   S T R A T   M A N   S O C   2 4   I N T ;   P i l k i n g t o n   A . ,   2 0 0 4 ,   S C I   P U B L   P O L I C Y ,   V 3 1 ,   P 1 4 ;   P I L K I N G T O N   A ,   2 0 0 1 ,   A L L   S T E E R I N G   S A M E   D I ;   P I L K I N G T O N   A ,   2 0 0 0 ,   I N T   J   I N N O V A T I O N   M A N ,   V 4 ,   P 3 3 ;   R o m i g   A D ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 6 3 4 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 4 . 0 0 3 ;   R o m m   J ,   2 0 0 6 ,   E N E R G   P O L I C Y ,   V 3 4 ,   P 2 6 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e n p o l . 2 0 0 5 . 0 6 . 0 2 5 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S h a p i r a   P ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 6 . 0 5 . 0 1 7 ;   S H A R P L I N   A D ,   1 9 8 5 ,   H U M   R E L A T ,   V 3 8 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 8 7 2 6 7 8 5 0 3 8 0 0 2 0 4 ;   S O E T E   L G ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 7 1 7 6 ;   S u l l i v a n   P . ,   1 9 9 8 ,   P R O F I T I N G   I N T E L L E C T U ;   T e i c h e r t   T . ,   1 9 9 9 ,   P I C M E T   ' 9 9 :   P o r t l a n d   I n t e r n a t i o n a l   C o n f e r e n c e   o n   M a n a g e m e n t   o f   E n g i n e e r i n g   a n d   T e c h n o l o g y .   T e c h n o l o g y   a n d   I n n o v a t i o n   M a n a g e m e n t   ( I E E E   C a t .   N o .   9 9 C H 3 6 3 1 0 ) ,   D O I   1 0 . 1 1 0 9 / P I C M E T . 1 9 9 9 . 7 8 7 7 9 1 ;   T U L L I S   T K ,   2 0 0 4 ,   U C L A   J   L A W   T E C H N O L O G ,   V 1 2 ;   v a n   M e r k e r k   R O ,   2 0 0 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 2 ,   P 1 0 9 4 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 4 . 1 0 . 0 0 3 ;   W a t a n a b e   C ,   2 0 0 1 ,   T E C H N O V A T I O N ,   V 2 1 ,   P 7 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 1 ) 0 0 0 2 5 - 6 	 4 9 	 1 9 	 2 1 	 1 	 1 7 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J A N 	 2 0 0 9 	 7 6 	 1 	 	 	 S I 	 	 1 1 8 	 1 2 7 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 3 . 0 1 5 	 	 1 0 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 4 0 2 O D 	 W O S : 0 0 0 2 6 3 0 2 2 1 0 0 0 1 0 	 	 
 
 J 	 H o l d e n ,   G ;   B a r k e r ,   K ;   C o v e r t - V a i l ,   L ;   R o s e n b e r g ,   G ;   C o h e n ,   S A 	 	 	 	 H o l d e n ,   G a r y ;   B a r k e r ,   K a t h l e e n ;   C o v e r t - V a i l ,   L u c i n d a ;   R o s e n b e r g ,   G a r y ;   C o h e n ,   S t e p h a n i e   A . 	 	 	 D o e s   S o c i a l   W o r k   A b s t r a c t s   w o r k ? 	 R E S E A R C H   O N   S O C I A L   W O R K   P R A C T I C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c ;   d a t a b a s e ;   e m p i r i c a l l y   b a s e d   p r a c t i c e ;   e v i d e n c e - b a s e d   p r a c t i c e ;   l i t e r a t u r e   r e v i e w ;   m e t a - a n a l y s i s ;   s y s t e m a t i c   r e v i e w 	 J O U R N A L   I M P A C T   F A C T O R ;   S Y S T E M A T I C   R E V I E W S ;   B I B L I O M E T R I C S ;   P U B L I C A T I O N ;   C A R E 	 O b j e c t i v e :   T h e   c u r r e n t   s t u d y   s e e k s   t o   p r o v i d e   e s t i m a t e s   o f   t h e   a d e q u a c y   o f   j o u r n a l   c o v e r a g e   i n   t h e   S o c i a l   W o r k   A b s t r a c t s   ( S W A )   d a t a b a s e .   M e t h o d :   A   t o t a l   o f   2 3   j o u r n a l s   l i s t e d   i n   t h e   J o u r n a l   C i t a t i o n   R e p o r t s   s o c i a l   w o r k   c a t e g o r y   d u r i n g   t h e   1 9 9 7   t o   2 0 0 5   p e r i o d   w e r e   s e l e c t e d   f o r   s t u d y .   I s s u e - l e v e l   c o v e r a g e   e s t i m a t e s   w e r e   o b t a i n e d   f o r   S W A   a n d   P s y c I N F O ,   t h e   c o m p a r i s o n   d a t a b a s e .   R e s u l t s :   B o t h   d a t a b a s e s   p r o v i d e d   l e s s   t h a n   o p t i m a l   c o v e r a g e   o f   s o c i a l   w o r k   j o u r n a l s ,   a n d   S W A   p e r f o r m e d   s i g n i f i c a n t l y   w o r s e   t h a n   d i d   P s y c I N F O .   B o t h   d a t a b a s e s   p r o v i d e d   b e t t e r   c o v e r a g e   o f   N a t i o n a l   A s s o c i a t i o n   o f   S o c i a l   W o r k e r s   ( N A S W )   P r e s s   j o u r n a l s   t h a n   n o n - N A S W   P r e s s   j o u r n a l s .   C o n c l u s i o n :   T h e   r e s u l t s   p r o v i d e   e v i d e n c e   o f   s u b s t a n t i a l   d e f i c i t s   i n   S W A   t h a t   m e r i t   s e r i o u s   c o n c e r n . 	 [ H o l d e n ,   G a r y ]   N Y U ,   S c h   S o c i a l   W o r k ,   D S W ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A ;   [ B a r k e r ,   K a t h l e e n ]   C U N Y   M e d g a r   E v e r s   C o l l ,   N e w   Y o r k ,   N Y   U S A ;   [ R o s e n b e r g ,   G a r y ]   M t   S i n a i   S c h   M e d ,   N e w   Y o r k ,   N Y   U S A ;   [ C o h e n ,   S t e p h a n i e   A . ]   M t   S i n a i   M e d   C t r ,   N e w   Y o r k ,   N Y   U S A 	 H o l d e n ,   G   ( r e p r i n t   a u t h o r ) ,   N Y U ,   S c h   S o c i a l   W o r k ,   D S W ,   R o o m   4 0 9 , 1   W a s h i n g t o n   S q   N ,   N e w   Y o r k ,   N Y   1 0 0 0 3   U S A . 	 g a r y . h o l d e n @ n y u . e d u 	 H o l d e n ,   G a r y / A - 2 2 9 0 - 2 0 0 8 ;   	 H o l d e n ,   G a r y / 0 0 0 0 - 0 0 0 2 - 7 2 2 7 - 3 6 5 2 	 	 	 A l l e n   M P ,   2 0 0 6 ,   J   M E D   L I B R   A S S O C ,   V 9 4 ,   P 2 0 6 ;   * A M   P S Y C H   A S S ,   2 0 0 6 ,   P S Y C I N F O   D A T   I N F ;   A r n o l d   S .   J . ,   2 0 0 6 ,   J o u r n a l   o f   E l e c t r o n i c   R e s o u r c e s   i n   M e d i c a l   L i b r a r i e s ,   V 3 ,   D O I   1 0 . 1 3 0 0 / J 3 8 3 v 0 3 n 0 3 _ 0 4 ;   B e e b e   L . ,   1 9 8 9 ,   U S E R S   G U I D E   S O C I A L   W ;   B e n j a m i n   L T ,   2 0 0 6 ,   A M   P S Y C H O L ,   V 6 1 ,   P 9 4 1 ,   D O I   1 0 . 1 0 3 7 / 0 0 0 3 - 0 6 6 X . 6 1 . 9 . 9 4 1 ;   S i d f o r d   A . ,   2 0 0 6 ,   P O S T G R A D U A T E   S O C I A L ,   P 7 ;   C H E R R Y   A . L . ,   2 0 0 0 ,   R E S   P R I M E R   H E L P I N G   P ;   C o h e n   J ,   2 0 0 6 ,   L E A   C O M M U N   S E R ,   P 3 ;   C o o p e r   H . M . ,   1 9 9 8 ,   S Y N T H E S I Z I N G   R E S   G U I ;   C o r e n   E . ,   2 0 0 6 ,   C O N D U C T   S Y S T E M A T I C   R ;   C o u n s e l l   C ,   1 9 9 7 ,   A N N   I N T E R N   M E D ,   V 1 2 7 ,   P 3 8 0 ;   * C S W E   S O C   W O R K   L I B ,   2 0 0 0 ,   C S W E   L I B   G R O U P   B U S   M ;   D a h w a n   S .   M . ,   2 0 0 4 ,   C U R R E N T   S C I ,   V 8 6 ,   P 1 1 9 4 ;   D u d l e y   J . ,   2 0 0 5 ,   R E S   M E T H O D S   S O C I A L   W ;   D W O R A K P E C K   S ,   1 9 8 9 ,   U S E R S   G U I D E   S O C I A L   W ;   F a v a   G A ,   2 0 0 0 ,   P S Y C H O T H E R   P S Y C H O S O M ,   V 6 9 ,   P 2 8 5 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 1 2 4 0 9 ;   F R I E D M A N   B D ,   2 0 0 6 ,   R E S   T O O L K I T ;   G a l v a n   J .   L . ,   2 0 0 6 ,   W R I T I N G   L I T   R E V ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G i b b s   L .   E . ,   2 0 0 3 ,   E V I D E N C E   B A S E D   P R A C T ;   G I F F O R D   G ,   2 0 0 4 ,   S I M M O N S   C O L L   L I B   C O L ,   P 6 ;   G r a h a m   J R ,   2 0 0 0 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 0 ,   P 6 2 2 ;   G r a y s o n   L . ,   2 0 0 3 ,   1 9   E S R C   U K   C T R   E V   B A ;   G r e e n   R ,   2 0 0 2 ,   J   S O C   W O R K   E D U C ,   V 3 8 ,   P 4 9 2 ;   G u m z   E J ,   2 0 0 4 ,   I N T   J   O F F E N D E R   T H E R ,   V 4 8 ,   P 4 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 6 2 4 X 0 3 2 6 2 5 1 6 ;   H a y   P .   J . ,   1 9 9 6 ,   H L T H   L I B   R E V ,   V 1 3 ,   P 9 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 5 3 2 . 1 9 9 6 . 1 3 2 0 0 9 1 . x ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 2 9 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 9 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 1 ;   H o l d e n   G ,   2 0 0 6 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 6 ,   P 6 1 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 6 2 9 2 5 7 0 ;   J a c o b y   B E ,   2 0 0 2 ,   J   M E D   L I B R   A S S O C ,   V 9 0 ,   P 3 9 3 ;   J A S C O   P ,   1 9 9 4 ,   D A T A B A S E   M A G A Z I N E ,   V 1 7 ,   P 4 0 ;   J A S C O   P ,   1 9 9 8 ,   L I B   I N F O R M   S C I   R E S ,   V 2 0 ,   P 1 3 3 ;   J A S C O   P ,   2 0 0 1 ,   C O N T E N T   E V A L U A T I O N   T ;   J e n s o n   J M ,   2 0 0 5 ,   S O C   W O R K   R E S ,   V 2 9 ,   P 6 7 ;   K e m p   B E ,   1 9 9 7 ,   S O C   W O R K   R E S ,   V 2 1 ,   P 1 1 1 ;   K I R K   S A ,   1 9 9 4 ,   S O C   W O R K   R E S ,   V 1 8 ,   P 3 ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   L e i g h n i n g e r   R .   D . ,   2 0 0 6 ,   J   S O C I O L O G Y   S O C I A L   W ,   V 3 3 ,   P 9 ;   M a t t h e w s   E   J ,   1 9 9 9 ,   H e a l t h   L i b r   R e v ,   V 1 6 ,   P 1 1 2 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 5 3 2 . 1 9 9 9 . 0 0 2 1 9 . x ;   M c M a n u s   R J ,   1 9 9 8 ,   B R I T   M E D   J ,   V 3 1 7 ,   P 1 5 6 2 ;   M E N D E L S O H N   H N ,   1 9 8 6 ,   D A T A B A S E ,   V 9 ,   P 2 2 ;   M E N D E L S O H N   H N ,   1 9 8 4 ,   D A T A B A S E ,   V 7 ,   P 3 6 ;   M i d g l e y   J ,   2 0 0 6 ,   J   S O C I O L O G Y   S O C I A L   W ,   V 3 3 ,   P 1 1 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   * N A T   A S S   S O C   W O R K ,   2 0 0 7 ,   P R E S   C O N T R   N E W   D I R   P ;   O V I D ,   2 0 0 6 ,   S O C I A L   W O R K   A B S T R   P L ;   P R A V I K O F F   D S ,   2 0 0 4 ,   C I N A H L   N E W S ,   V 2 3 ,   P 6 ;   R i z z o   V M ,   2 0 0 6 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 6 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 5 2 7 6 0 8 0 ;   R o s e n b e r g   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 3 5 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 2 ;   R o y s e   D . ,   2 0 0 4 ,   R E S   M E T H O D S   S O C I A L   W ;   S c h i l l i n g   R ,   2 0 0 5 ,   S O C   W O R K   R E S ,   V 2 9 ,   P 1 1 9 ;   S E G L E N   P O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - Y ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S h e k   D T L ,   2 0 0 6 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 6 ,   P 3 8 2 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 6 2 8 6 2 3 1 ;   S H E K   D T L ,   2 0 0 6 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 7 ,   P 3 8 0 ;   S i e g e l   S . ,   1 9 8 8 ,   N O N P A R A M E T R I C   S T A T   B ;   S T O E S Z   D ,   2 0 0 2 ,   J   S O C I O L O G Y   S O C I A L   W ,   V 2 9 ,   P 1 9 ;   S T O V E R   M ,   1 9 9 3 ,   B E S T   F A M I L Y   S T U D I E S ,   P 4 8 ;   T a b a c h n i c k   B .   G . ,   2 0 0 1 ,   C O M P U T E R   A S S I S T E D   R E ;   T a y l o r   B J ,   2 0 0 3 ,   B R I T   J   S O C   W O R K ,   V 3 3 ,   P 4 2 3 ,   D O I   1 0 . 1 0 9 3 / b j s w / 3 3 . 4 . 4 2 3 ;   T a y l o r   B .   J . ,   2 0 0 6 ,   E V A L U A T I O N   A G E I N F O   D ;   T a y l o r   B ,   2 0 0 7 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 7 ,   P 6 9 7 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 7 3 0 4 4 0 2 ;   * T H O M S   S C I ,   2 0 0 7 ,   J   C I T   R E P ;   * T H O M S   S C I ,   2 0 0 6 ,   H E L P   I N D   I M P   F A C T   S O ;   * T H O M S   S C I ,   2 0 0 4 ,   T H O M S   S C I   J   S E L   P R O C ;   T O M A I U O L O   N G ,   1 9 9 3 ,   S O C I A L   W O R K   A B S T R   P L ,   P 7 9 ;   * U L R   O N L ,   2 0 0 7 ,   U L R   P E R   D I R 	 6 8 	 1 9 	 1 9 	 0 	 2 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0   U S A 	 1 0 4 9 - 7 3 1 5 	 1 5 5 2 - 7 5 8 1 	 	 R E S   S O C I A L   W O R K   P R A C 	 R e s .   S o c .   W o r k .   P r a c t . 	 S E P 	 2 0 0 8 	 1 8 	 5 	 	 	 	 	 4 8 7 	 4 9 9 	 	 1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 7 3 0 8 9 8 6 	 	 1 3 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 3 3 7 D M 	 W O S : 0 0 0 2 5 8 4 1 5 7 0 0 0 1 3 	 	 
 
 J 	 K o s t o f f ,   R N ;   B a r t h ,   R B ;   L a u ,   C G Y 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   B a r t h ,   R y a n   B . ;   L a u ,   C l i f f o r d   G .   Y . 	 	 	 Q u a l i t y   v s .   q u a n t i t y   o f   p u b l i c a t i o n s   i n   n a n o t e c h n o l o g y   f i e l d   f r o m   t h e   P e o p l e ' s   R e p u b l i c   o f   C h i n a 	 C H I N E S E   S C I E N C E   B U L L E T I N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n a n o t e c h n o l o g y ;   n a n o s c i e n c e ;   b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   s c i e n t o m e t r i c s ;   p u b l i c a t i o n s ;   P e o p l e ' s   R e p u b l i c   o f   C h i n a 	 I N F R A S T R U C T U R E ;   N A N O S C I E N C E ;   S C I E N C E 	 T h i s   s t u d y   e v a l u a t e s   t r e n d s   i n   q u a l i t y   o f   n a n o t e c h n o l o g y   a n d   n a n o s c i e n c e   p a p e r s   p r o d u c e d   b y   a u t h o r s   f r o m   t h e   P e o p l e ' s   R e p u b l i c   o f   C h i n a   ( P R C ) .   T h e   m e t r i c   u s e d   t o   g a u g e   q u a l i t y   i s   r a t i o   o f   h i g h l y   c i t e d   n a n o t e c h n o l o g y   p a p e r s   t o   t o t a l   n a n o t e c h n o l o g y   p a p e r s   p r o d u c e d   i n   s e q u e n t i a l   t i m e   f r a m e s .   T h e   U S A   i s   b o t h   t h e   m o s t   p r o l i f i c   n a n o t e c h n o l o g y   p u b l i s h i n g   c o u n t r y   a n d   m o s t   r e p r e s e n t e d   c o u n t r y   o n   h i g h l y   c i t e d   n a n o t e c h n o l o g y   p a p e r s   ( b o t h   i n   a b s o l u t e   n u m b e r s   o f   h i g h l y   c i t e d   p a p e r s   a n d   h i g h l y   c i t e d   p a p e r s   r e l a t i v e   t o   t o t a l   p u b l i c a t i o n s )   o v e r   t h e   1 9 9 8 - 2 0 0 3   t i m e   f r a m e ,   b a s e d   o n   t h e   S C I / S S C I   d a t a b a s e s .   S o m e   o f   t h e   s m a l l e r   h i - t e c h   c o u n t r i e s   h a v e   r e l a t i v e l y   h i g h   r a t i o s   ( s i m i l a r   t o   2 )   o f   h i g h l y   c i t e d   p a p e r s   t o   t o t a l   p u b l i c a t i o n s   ( e . g .   D e n m a r k ,   N e t h e r l a n d s ,   S w i t z e r l a n d ) .   C o u n t r i e s   t h a t   h a v e   e x h i b i t e d   r a p i d   g r o w t h   i n   S C I / S S C I   n a n o t e c h n o l o g y   p a p e r   p r o d u c t i o n   i n   r e c e n t   y e a r s   ( e . g .   P R C ,   S o u t h   K o r e a )   h a d   r a t i o s   a n   o r d e r   o f   m a g n i t u d e   l e s s   t h a n   t h a t   o f   t h e   U S A   f o r   1 9 9 8 ,   b u t   b y   2 0 0 3   h a d   i n c r e a s e d   t o   a b o u t   2 0 %   t h a t   o f   t h e   U S A   ( s i m i l a r   t o   2 . 5 ) .   P R C   a n d   S o u t h   K o r e a   h a v e   c l i m b e d   i n   t h e   p u b l i c a t i o n s   r a n k i n g s   f r o m   6 t h   a n d   9 t h   i n   1 9 9 8 ,   r e s p e c t i v e l y ,   t o   2 n d   a n d   6 t h   i n   2 0 0 5 ,   r e s p e c t i v e l y .   P R C ' s   r a t i o   m o n o t o n i c a l l y   i n c r e a s e d   f r o m   0 . 1 6   t o   0 . 4 5   o v e r   t h e   1 9 9 8 - 2 0 0 3   p e r i o d ,   a n d   S o u t h   K o r e a ' s   r a t i o   i n c r e a s e d   f r o m   0 . 1 1   t o   a b o u t   0 . 6   o v e r   t h a t   s a m e   p e r i o d ,   i n d i c a t i n g   t h e i r   p a p e r s   a r e   g e t t i n g   m o r e   a n d   m o r e   c i t a t i o n s   p r o p o r t i o n a t e l y .   T h u s ,   u n d e r   r a p i d   g r o w t h   c o n d i t i o n s ,   P R C   a n d   S o u t h   K o r e a   h a v e   b e e n   a b l e   t o   i n c r e a s e   t h e i r   s h a r e   o f   p a r t i c i p a t i o n   i n   h i g h l y   c i t e d   p a p e r s .   A s   o f   2 0 0 3 ,   P R C   a n d   S o u t h   K o r e a   h a v e   r a t i o s   c o m p a r a b l e   t o   n a t i o n s   l i k e   J a p a n ,   F r a n c e ,   I t a l y ,   a n d   A u s t r a l i a   b u t   n o t   y e t   a p p r o a c h i n g   t h o s e   o f   t h e   h i g h l y   c i t e d   c o u n t r i e s .   N o n e   o f   t h e   t o p   t e n   p u b l i c a t i o n s   p r o d u c i n g   i n s t i t u t i o n s   a r e   f r o m   t h e   U S A ,   w h i l e   a l l   o f   t h e   t o p   t e n   h i g h l y   c i t e d   p u b l i c a t i o n s   p r o d u c e r s   a r e   f r o m   t h e   U S A .   O v e r   t h e   1 9 9 8 - 2 0 0 3   t i m e   p e r i o d ,   t h e   t o p   s i x   t o t a l   p u b l i c a t i o n s   p r o d u c i n g   i n s t i t u t i o n s   ( g l o b a l l y )   r e m a i n e d   t h e   s a m e ,   w i t h   C h i n e s e   A c a d e m y   o f   S c i e n c e s   ( w h i c h   c o n s i s t s   o f   m a n y   r e s e a r c h   i n s t i t u t e s )   w r e s t i n g   t h e   l e a d   f r o m   R u s s i a n   A c a d e m y   o f   S c i e n c e s   i n   1 9 9 9 ,   a n d   t h e r e a f t e r   i n c r e a s i n g   t h e   g a p .   O v e r   t h i s   s a m e   t i m e   p e r i o d ,   t h e   U S A   i n s t i t u t i o n s   c o n s t i t u t e d   a b o u t   9 0 %   o f   t h e   t o p   t e n   m o s t   c i t e d   p a p e r s   l i s t .   F o r   C h i n e s e   i n s t i t u t i o n s   s p e c i f i c a l l y   i n   t h e   p e r i o d   1 9 9 8 - 2 0 0 3 ,   t h e   n a n o t e c h n o l o g y   p u b l i c a t i o n   l e a d i n g   C h i n e s e   A c a d e m y   o f   S c i e n c e s   h a s   m a i n t a i n e d   a n   a v e r a g e   o f   a b o u t   3 0 %   o f   n a n o t e c h n o l o g y   p u b l i c a t i o n s   o v e r   t h a t   t i m e   f r a m e .   T h e   s e c o n d   t i e r   ( i n   t e r m s   o f   q u a n t i t y )   f o r   t h e   l a s t   f e w   y e a r s   h a s   c o n s i s t e d   o f   T s i n g h u a   U n i v e r s i t y ,   N a n j i n g   U n i v e r s i t y ,   U n i v e r s i t y   o f   S c i e n c e   a n d   T e c h n o l o g y   o f   C h i n a ,   P e k i n g   U n i v e r s i t y ,   J i l i n   U n i v e r s i t y ,   Z h e j i a n g   U n i v e r s i t y ,   S h a n d o n g   U n i v e r s i t y ,   a n d   F u d a n   U n i v e r s i t y .   H o n g   K o n g   i n s t i t u t i o n s   h a v e ,   o n   a v e r a g e ,   b e e n   s t r o n g   i n   r a t i o ,   e s p e c i a l l y   C i t y   U n i v e r s i t y   H o n g   K o n g ,   a n d   H o n g   K o n g   U n i v e r s i t y   o f   S c i e n c e   a n d   T e c h n o l o g y ,   i n d i c a t i n g   s i g n i f i c a n t   c i t a t i o n s . 	 [ K o s t o f f ,   R o n a l d   N . ]   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   [ B a r t h ,   R y a n   B . ]   D D L   O M N I   E n g n   L L C ,   M c l e a n ,   V A   U S A ;   [ L a u ,   C l i f f o r d   G .   Y . ]   I n s t   D e f   A n a l y s e s ,   A l e x a n d r i a ,   V A   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n n n a v y . m i l 	 	 	 	 	 B a i   C L ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 9 ,   P 6 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 1 5 1 7 2 ;   B a s s e c o u l a r d   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 8 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 1 5 - 1 ;   G u a n   J C ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 8 8 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 2 . 0 0 4 ;   H u l l m a n n   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 5 0 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 7 7 . 4 5 4 6 7 . a 7 ;   K o s t o f f   R . N . ,   2 0 0 7 ,   A D A 4 6 1 9 3 0   D T I C ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 5 3 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 8 ;   K o s t o f f   R N ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 3 - 5 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   M e y e r   M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 5 5 ;   M e y e r   M . ,   2 0 0 1 ,   M A P P I N G   E X C E L L E N C E   N ;   N O Y O N S   E ,   M A P P I N G   E X C E L L E N C E   T ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 	 1 2 	 1 9 	 1 9 	 1 	 2 8 	 S C I E N C E   P R E S S 	 B E I J I N G 	 1 6   D O N G H U A N G C H E N G G E N   N O R T H   S T ,   B E I J I N G   1 0 0 7 1 7 ,   P E O P L E S   R   C H I N A 	 1 0 0 1 - 6 5 3 8 	 	 	 C H I N E S E   S C I   B U L L 	 C h i n .   S c i .   B u l l . 	 A P R 	 2 0 0 8 	 5 3 	 8 	 	 	 	 	 1 2 7 2 	 1 2 8 0 	 	 1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 8 - 0 1 8 3 - y 	 	 9 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 2 8 8 P U 	 W O S : 0 0 0 2 5 4 9 9 9 1 0 0 0 2 2 	 	 
 
 J 	 W h i t e ,   H D 	 	 	 	 W h i t e ,   H o w a r d   D . 	 	 	 C o m b i n i n g   b i b l i o m e t r i c s ,   i n f o r m a t i o n   r e t r i e v a l ,   a n d   r e l e v a n c e   t h e o r y ,   P a r t   2 :   S o m e   i m p l i c a t i o n s   f o r   i n f o r m a t i o n   s c i e n c e 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 I N D I V I D U A L - D I F F E R E N C E S ;   S C I E N T I F I C   D I S C O V E R Y ;   D O M A I N - A N A L Y S I S ;   U S E R S ;   W E B ;   C R I T E R I A ;   S Y S T E M S ;   S E E K I N G ;   P H I L O S O P H Y ;   L I B R A R I E S 	 W h e n   b i b l i o m e t r i c   d a t a   a r e   c o n v e r t e d   t o   t e r m   f r e q u e n c y   ( t f )   a n d   i n v e r s e   d o c u m e n t   f r e q u e n c y   ( i d f )   v a l u e s ,   p l o t t e d   a s   p e n n a n t   d i a g r a m s ,   a n d   i n t e r p r e t e d   a c c o r d i n g   t o   S p e r b e r   a n d   W i l s o n ' s   r e l e v a n c e   t h e o r y   ( R T ) ,   t h e   r e s u l t s   e v o k e   m a j o r   v a r i a b l e s   o f   i n f o r m a t i o n   s c i e n c e   ( I S ) .   T h e s e   i n c l u d e   t o p i c a l i t y ,   i n   t h e   s e n s e   o f   i n t e r c o h e s i o n   a n d   i n t e r c o h e r e n c e   a m o n g   t e x t s ;   c o g n i t i v e   e f f e c t s   o f   t e x t s   i n   r e s p o n s e   t o   p e o p l e ' s   q u e s t i o n s ;   p e o p l e ' s   l e v e l s   o f   e x p e r t i s e   a s   a   p r e c o n d i t i o n   f o r   c o g n i t i v e   e f f e c t s ;   p r o c e s s i n g   e f f o r t   a s   t e x t u a l   o r   o t h e r   m e s s a g e s   a r e   r e c e i v e d ;   s p e c i f i c i t y   o f   t e r m s   a s   i t   a f f e c t s   p r o c e s s i n g   e f f o r t ;   r e l e v a n c e ,   d e f i n e d   i n   R T   a s   t h e   e f f e c t s / e f f o r t   r a t i o ;   a n d   a u t h o r i t y   o f   t e x t s   a n d   t h e i r   a u t h o r s .   W h i l e   s u c h   c o n c e r n s   f i g u r e   a u t o m a t i c a l l y   i n   d i a l o g u e s   b e t w e e n   p e o p l e ,   t h e y   b e c o m e   p r o b l e m a t i c   w h e n   p e o p l e   c r e a t e   o r   u s e   o r   j u d g e   l i t e r a t u r e - b a s e d   i n f o r m a t i o n   s y s t e m s .   T h e   d i f f i c u l t y   o f   a c h i e v i n g   w o r t h w h i l e   c o g n i t i v e   e f f e c t s   a n d   a c c e p t a b l e   p r o c e s s i n g   e f f o r t   i n   h u m a n - s y s t e m   d i a l o g u e s   e x p l a i n s   w h y   r e l e v a n c e   i s   t h e   c e n t r a l   c o n c e r n   o f   I S .   M o r e o v e r ,   s i n c e   r e l e v a n t   c o m m u n i c a t i o n   w i t h   b o t h   s y s t e m s   a n d   u n f a m i l i a r   p e o p l e   i s   u n c e r t a i n ,   s p e a k e r s   t e n d   t o   s e e k   c o g n i t i v e   e f f e c t s   t h a t   c o s t   t h e m   t h e   l e a s t   e f f o r t .   Y e t   h e a r e r s   n e e d   g r e a t e r   e f f o r t ,   o f t e n   g r e a t e r   s p e c i f i c i t y ,   f r o m   s p e a k e r s   i f   t h e i r   r e s p o n s e s   a r e   t o   b e   h i g h l y   r e l e v a n t   i n   t h e i r   t u r n .   T h i s   t h e m e   o f   m i s m a t c h   m a n i f e s t s   i t s e l f   i n   v a g u e   r e f e r e n c e   q u e s t i o n s ,   u n d e r d e v e l o p e d   o n l i n e   s e a r c h e s ,   u n c r e a t i v e   j u d g i n g   i n   r e t r i e v a l   e v a l u a t i o n   t r i a l s ,   a n d   p e r f u n c t o r y   i n d e x i n g .   A n o t h e r   e f f e c t   o f   l e a s t   e f f o r t   i s   a   b i a s   t o w a r d   t o p i c a l   r e l e v a n c e   o v e r   o t h e r   k i n d s .   R T   c a n   e x p l a i n   t h e s e   o u t c o m e s   a s   w e l l   a s   m o r e   a d a p t i v e   o n e s .   P e n n a n t   d i a g r a m s ,   a p p l i e d   h e r e   t o   a   l i t e r a t u r e   s e a r c h   a n d   a   B r a d f o r d - s t y l e   j o u r n a l   a n a l y s i s ,   c a n   m o d e l   t h e m .   G i v e n   R T   a n d   t h e   r i g h t   c o n t e x t ,   b i b l i o m e t r i c s   m a y   p r e d i c t   p s y c h o m e t r i c s . 	 D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 W h i t e ,   H D   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 w h i t e h d @ d r e x e l . e d u 	 	 	 	 	 B A R R Y   C L ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 4 ) 4 5 : 3 < 1 4 9 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - J ;   B a r r y   C L ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 2 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 7 8 - 2 ;   B a t e m a n   J ,   1 9 9 8 ,   P   A S I S   A N N U   M E E T ,   V 3 5 ,   P 2 3 ;   B A T E S   M J ,   1 9 9 3 ,   L I B R   Q U A R T ,   V 6 3 ,   P 1 ;   B a t e s   M J ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 1 8 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 1 1 0 ) 4 9 : 1 3 < 1 1 8 5 : : A I D - A S I 6 > 3 . 3 . C O ; 2 - M ;   F i d e l   R . ,   2 0 0 2 ,   E M E R G I N G   F R A M E W O R K S ,   P 1 3 7 ;   B a t e s o n   G . ,   1 9 7 2 ,   S T E P S   E C O L O G Y   M I N D ;   B e l k i n   N .   J . ,   2 0 0 5 ,   T H E O R I E S   I N F O R M   B E H A ,   P 4 4 ;   B l a i r   D C ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 2 ;   B L A I R   D C ,   1 9 9 2 ,   C O M P U T   J ,   V 3 5 ,   P 2 0 0 ,   D O I   1 0 . 1 0 9 3 / c o m j n l / 3 5 . 3 . 2 0 0 ;   B l a i r   D a v i d   C . ,   1 9 9 0 ,   L A N G U A G E   R E P R E S E N T A T ;   B l a k e m o r e   D . ,   1 9 9 2 ,   U N D E R S T A N D I N G   U T T E R A ;   B O R G M A N   C L ,   1 9 8 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 5 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 9 ) 9 0 0 4 2 - 3 ;   B O R K O   H ,   1 9 6 8 ,   A M   D O C ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 9 0 1 0 3 ;   B o r l u n d   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 8 6 ;   B o r l u n d   P i a ,   2 0 0 3 ,   I N F O R M   R E S ,   V 8 ;   B o u l d i n g   K e n n e t h   E . ,   1 9 5 6 ,   I M A G E   K N O W L E D G E   L I F E ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R O O K E S   B C ,   1 9 8 0 ,   C A N   J   I N F O R M   S C I ,   V 5 ,   P 1 9 9 ;   B R O O K E S   B C ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 2 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 4 0 4 ;   B R O O K S   B C ,   1 9 7 5 ,   5 3 0   F I D   V I N I T I ,   P 1 1 5 ;   B U C K L A N D   M K ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 5 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 3 ;   C h e n   Z . ,   2 0 0 5 ,   P   3 8   H A W   I N T   C   S Y S T ;   C o r n w e l l   P . ,   2 0 0 2 ,   P O R T R A I T   K I L L E R   J A C K ;   C O S I J N   E ,   2 0 0 0 ,   I N F O R M   P R O C E S S I N G   M A ,   V 3 1 ,   P 1 9 1 ;   C U A D R A   C A ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 2 9 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 3 6 ;   D r a b e n s t o t t   K M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 8 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 8 1 ;   D R A B E N S T O T T   K M ,   1 9 9 1 ,   9   R A S D ,   P 5 9 ;   D r a b e n s t o t t   K .   M . ,   1 9 9 4 ,   U S I N G   S U B J E C T   H E A D I N ;   E I C H M A N   T L ,   1 9 7 8 ,   R Q ,   V 1 7 ,   P 2 1 2 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F A L L O W S   J ,   2 0 0 5 ,   N Y   T I M E S                 0 6 1 2 ,   p B U 3 ;   F i e d l e r   L e s l i e ,   1 9 6 6 ,   L O V E   D E A T H   A M   N O V E L ;   F r a n z e n   J o n a t h a n ,   1 9 9 2 ,   S T R O N G   M O T I O N ;   F R O E H L I C H   T J ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 2 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 4 ) 4 5 : 3 < 1 2 4 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 8 ;   F u r n e r   J ,   2 0 0 4 ,   L I B R   T R E N D S ,   V 5 2 ,   P 4 2 7 ;   G o a t l e y   A n d r e w ,   1 9 9 7 ,   L A N G U A G E   M E T A P H O R S ;   G R E E N   R ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 6 4 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 1 0 ) 4 6 : 9 < 6 4 6 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 1 ;   G r i c e   H .   P . ,   1 9 7 5 ,   S Y N T A X   S E M A N T I C S ,   P 4 1 ,   D O I   D O I   1 0 . 1 0 1 7 / S 0 0 2 2 2 2 6 7 0 0 0 0 5 2 9 6 ;   H A R D Y   A P ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 1 4 - 0 ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   H a r t e r   S P ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 3 7 ;   H a y k i n   D .   J . ,   1 9 5 1 ,   S U B J E C T   H E A D I N G S   P R A ;   H i r s h   S .   G . ,   2 0 0 4 ,   Y O U T H   I N F O R M   S E E K I N G ,   P 2 4 1 ;   H J O R L A N D   B ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 0 0 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - Y ;   H O L S C H E R   C ,   2 0 0 0 ,   P   9   I N T   W W W   C ;   H o r n   L a w r e n c e ,   1 9 8 4 ,   M E A N I N G   F O R M   U S E   C O N ,   P 1 1 ;   I n g w e r s e n   P . ,   1 9 9 2 ,   I N F O R M   R E T R I E V A L   I N T ;   J A N E S   J W ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 6 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 4 ) 4 5 : 3 < 1 6 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 4 ;   J a n s e n   B J ,   2 0 0 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 6 ,   P 2 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 9 ) 0 0 0 5 6 - 4 ;   J a n s e n   B J ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 2 3 5 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 6 0 7 > 3 . 0 . C O ; 2 - F ;   J a n s e n   B .   J . ,   2 0 0 0 ,   I N F O R M   R E S ,   V 6 ;   J O N E S   K S ,   1 9 8 1 ,   I N F O R M A T I O N   R E T R I E V A ,   P 2 5 6 ;   J o n e s   K .   S . ,   1 9 9 7 ,   R E A D I N G S   I N F O R M   R E T R ,   P 3 0 5 ;   J o n s   K .   S . ,   1 9 9 1 ,   J o u r n a l   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e ,   V 4 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 9 ) 4 2 : 8 < 5 5 8 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   K L I N K E N B O R G   V ,   2 0 0 3 ,   N Y   T I M E S                 1 1 1 2 ,   p A 2 0 ;   K o e s t l e r   A . ,   1 9 6 4 ,   A C T   C R E A T I O N   S T U D Y   C ;   L a n c a s t e r   F .   W . ,   1 9 6 8 ,   I N F O R M   R E T R I E V A L   S Y S ;   L E V I N E   M M ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 2 0 7 ;   M A C L E O D   D ,   2 0 0 6 ,   G U A R D I A N   U N L I M I   0 3 2 6 ;   M a n n   T . ,   1 9 9 3 ,   L I B   R E S   M O D E L S   G U I D E ;   M A R O N   M E ,   1 9 8 2 ,   P   5   A N N   A C M   C   R E S   D E ,   P 9 8 ;   M A Y   K O ,   1 9 6 8 ,   I S I S ,   V 6 9 ,   P 3 6 3 ;   M C C A I N   K W ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 1 1 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 3 ) 4 0 : 2 < 1 1 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - T ;   M c E w a n   I a n ,   1 9 9 8 ,   A M S T E R D A M ;   M i z z a r o   S ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 1 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 9 ) 4 8 : 9 < 8 1 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - U ;   M O N T G O M E R Y   C ,   1 9 6 2 ,   A M   D O C ,   V 1 3 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 3 0 4 0 1 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   P A I S L E Y   W J ,   1 9 6 8 ,   W E   M A Y   T H I N K   I N F O R M ;   P a l m e r   C L ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 1 3 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 1 3 9 : : A I D - A S I 1 8 > 3 . 0 . C O ; 2 - V ;   P A O   M L ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 2 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 2 6 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 6 ;   P o w e r s   R i c h a r d ,   1 9 9 1 ,   G O L D   B U G   V A R I A T I O N S ;   P R A T T   A D ,   1 9 8 2 ,   I N F O R M   I M A G E ;   R a m o s   F Y ,   1 9 9 8 ,   J   P R A G M A T I C S ,   V 3 0 ,   P 3 0 5 ;   R E I T Z   J M ,   2 0 0 4 ,   I N F O R M   S C I   D I C T   L I B ;   R u t h v e n   I ,   2 0 0 3 ,   K N O W L   E N G   R E V ,   V 1 8 ,   P 9 5 ,   D O I   1 0 . 1 0 1 7 / S 0 2 6 9 8 8 8 9 0 3 0 0 0 6 3 8 ;   S a l t o n   G . ,   1 9 7 5 ,   D Y N A M I C   I N F O R M   L I B   P ;   S A R A C E V I C   T ,   1 9 9 1 ,   P   A S I S   A N N U   M E E T ,   V 2 8 ,   P 8 2 ;   S A R A C E V I C   T ,   1 9 7 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 6 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 6 0 6 0 4 ;   S a r a c e v i c   T . ,   1 9 9 6 ,   I N F O R M   S C I   I N T E G R A T I ,   P 2 0 1 ;   S C H A M B E R   L ,   1 9 9 4 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 9 ,   P 3 ;   S C H A M B E R   L ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 7 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 0 5 0 - C ;   S C H A N K   R ,   1 9 9 7 ,   H A L S   L E G A C Y ,   P 1 7 1 ;   S m i t h   A . ,   2 0 0 2 ,   C O R R E L A T I O N   R A E   R A T I ;   S p e r b e r   D ,   1 9 9 6 ,   B E H A V   B R A I N   S C I ,   V 1 9 ,   P 5 3 0 ;   S p e r b e r   D . ,   1 9 9 5 ,   R E L E V A N C E   C O M M U N I C A T ;   S p e r b e r   D . ,   1 9 8 6 ,   R E L E V A N C E   C O M M U N I C A T ;   S p i n k   A ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 2 2 6 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 9 1 > 3 . 0 . C O ; 2 - R ;   S W A N S O N   D R ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 1 2 8 ;   S w a n s o n   D R ,   1 9 9 9 ,   L I B R   T R E N D S ,   V 4 8 ,   P 4 8 ;   S W A N S O N   D R ,   1 9 8 6 ,   L I B R   Q U A R T ,   V 5 6 ,   P 3 8 9 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   T a g u e - S u t c l i f f e   J . ,   1 9 9 5 ,   M E A S U R I N G   I N F O R M   I N F ;   T A Y L O R   R S ,   1 9 6 8 ,   C O L L   R E S   L I B R ,   V 2 9 ,   P 1 7 8 ;   W a r n e r   J . ,   2 0 0 3 ,   B u l l e t i n   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e ,   V 3 0 ,   D O I   1 0 . 1 0 0 2 / b u l t . 3 0 2 ;   W h i t e   H D ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 3 . 9 1 4 0 1 . 9 b ;   W H I T E   H D ,   1 9 8 1 ,   O N L I N E   R E V ,   V 5 ,   P 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 4 0 5 0 ;   W H I T E   H D ,   1 9 9 2 ,   I N F O R M A T I O N   S P E C I A L I ,   P 2 4 9 ;   W h i t e   H .   D . ,   2 0 0 5 ,   P   1 0   I N T   C   I N T   S O C   S ,   V 2 ,   P 4 4 2 ;   W H I T E   H D ,   1 9 9 0 ,   P   1 1   N A T   O N L   M ,   P 4 5 3 ;   W H I T E   H D ,   2 0 0 2 ,   C H I   2 0 0 2   D I S C   A R C H   W ;   W h i t e   H D ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 5 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 4 3 ;   W i l s o n   D . ,   2 0 0 2 ,   U C L   W O R K I N G   P A P E R S   L ,   V 1 4 ,   P 2 4 9 ;   W I L S O N   P ,   1 9 8 6 ,   R Q ,   V 2 5 ,   P 4 6 8 ;   W I L S O N   P ,   1 9 7 3 ,   I N F O R M   S T O R A G E   R E T ,   V 9 ,   P 4 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 7 3 ) 9 0 0 9 6 - X ;   W I L S O N   P ,   1 9 7 8 ,   D R E X E L   L I B R   Q U A R T ,   V 1 4 ,   P 1 0 ;   W i l s o n   P a t r i c k ,   1 9 6 8 ,   2   K I N D S   P O W E R   E S S A Y ;   W O L F R A M   D ,   2 0 0 3 ,   A P P L   I N F O R M E T R I C S   I N ;   Y a n g   K D ,   2 0 0 5 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 9 ,   P 3 3 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 9 0 1 0 9 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 1 1 0 	 1 9 	 1 9 	 1 	 2 8 	 J O H N   W I L E Y   &   S O N S   I N C 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N ,   N J   0 7 0 3 0   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 F E B   1 5 	 2 0 0 7 	 5 8 	 4 	 	 	 	 	 5 8 3 	 6 0 5 	 	 1 0 . 1 0 0 2 / a s i . 2 0 5 4 2 	 	 2 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 6 6 L F 	 W O S : 0 0 0 2 4 6 3 7 9 6 0 0 0 1 1 	 	 
 
 J 	 O r t e g a ,   J L ;   A g u i l l o ,   I ;   P r i e t o ,   J A 	 	 	 	 O r t e g a ,   J o s e   L u i s ;   A g u i l l o ,   I s i d r o ;   P r i e t o ,   J o s e   A n t o n i o 	 	 	 L o n g i t u d i n a l   s t u d y   o f   c o n t e n t   a n d   e l e m e n t s   i n   t h e   s c i e n t i f i c   w e b   e n v i r o n m e n t 	 J O U R N A L   O F   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 w e b o m e t r i c s ;   w e b   p e r s i s t e n c e ;   w e b   g r o w t h ;   w e b   d e c a y ;   l i n k r o t ;   b i b l i o m e t r i c s 	 P A G E 	 T h i s   w o r k   i s   a   l o n g i t u d i n a l   s t u d y   o f   t h e   e v o l u t i o n   a n d   t h e   s t a t e   o f   7 3 8   w e b   s i t e s   a t   t w o   d i f f e r e n t   p o i n t s   i n   t i m e   ( 1 9 9 7   a n d   2 0 0 4 ) .   I t   t r i e s   t o   e s t a b l i s h   t h e   r a t e   o f   g r o w t h   a n d   d e c a y   o f   t h e   w e b   a n d   a l l   t h e   w e b   e l e m e n t s .   T o   t h i s   e n d ,   t h e   s t r u c t u r e   a n d   t h e   c o n t e n t s   o f   t h e s e   w e b   s i t e s   a r e   e x t r a c t e d   t h r o u g h   a   c r a w l e r   a n d   c o m p a r e d   a t   t h e   t w o   d i f f e r e n t   m o m e n t s   i n   t i m e .   T h e   m a i n   r e s u l t s   c o n f i r m   a   g r o w t h   o f   w e b   c o n t e n t   a n d   e l e m e n t s   i n   t h e   w e b ,   a l t h o u g h   t h e r e   i s   a l s o   a   h i g h   d e g r e e   o f   w e b   c o n t e n t   d e c a y .   T h e   r e s u l t s   s u g g e s t   t h a t   i n   t h e   s e v e n - y e a r   p e r i o d   c o v e r e d   b y   t h i s   s t u d y   t h e   w e b   i s   c h a r a c t e r i z e d   b y   b o t h   s t r o n g   d y n a m i s m   a n d   i n s t a b i l i t y . 	 C S I C ,   I n t e r n e t   L a b ,   C t r   I n f o r m a c   &   D o c u m e n t a c   C i e n t i f ,   M a d r i d   2 8 0 0 2 ,   S p a i n 	 P r i e t o ,   J A   ( r e p r i n t   a u t h o r ) ,   C S I C ,   I n t e r n e t   L a b ,   C t r   I n f o r m a c   &   D o c u m e n t a c   C i e n t i f ,   J o a q u i n   C o a s t a , 2 2 ,   M a d r i d   2 8 0 0 2 ,   S p a i n . 	 j o r t e g a @ c i n d o c . c s i c . e s 	 A g u i l l o ,   I s i d r o / A - 7 2 8 0 - 2 0 0 8 ;   	 A g u i l l o ,   I s i d r o / 0 0 0 0 - 0 0 0 1 - 8 9 2 7 - 4 8 7 3 ;   O r t e g a ,   J o s e   L u i s / 0 0 0 0 - 0 0 0 1 - 9 8 5 7 - 1 5 1 1 	 	 	 A R R O Y O   N ,   2 0 0 3 ,   D E S C R I P T I O N   W E B   D A T A ;   B a r - I l a n   J ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 9 8 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 4 9 ;   C h o   J ,   2 0 0 0 ,   P   2 6   I N T   C   V E R   L A R G ,   P 2 0 0 ;   F E T T E R L Y   D ,   2 0 0 3 ,   S O F T W A R E   P R A C T I C E   E X ,   V 1 ,   P 1 ;   H a r t e r   S .   P . ,   1 9 9 6 ,   I N F O R M   R E S ,   V 2 ,   P 2 ;   H A U S H E R R   T ,   1 9 9 7 ,   X E N U S   L I N K   S L E U T H   V E ;   K o e h l e r   W ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 6 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 2 < 1 6 2 : : A I D - A S I 7 > 3 . 3 . C O ; 2 - 2 ;   K o e h l e r   W ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 1 6 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 1 8 ;   K o e h l e r   W .   C . ,   2 0 0 4 ,   I N F O R M   R E S ,   V 9 ;   L a w r e n c e   S ,   2 0 0 3 ,   I E E E   C O M P U T ,   V 3 4 ,   P 2 6 ;   N e l s o n   M .   L . ,   2 0 0 2 ,   D   L I B   M A G A Z I N E ,   V 8 ;   * N E T C   C O M ,   1 9 9 7 ,   N E T C   W E B M   L I B H ;   O ' N e i l l   E .   T . ,   2 0 0 3 ,   D   L I B   M A G A Z I N E ,   V 9 ;   O R T E G A   J L ,   2 0 0 5 ,   9   J   E S P A N O L A S   D O C U M E ;   P e n n o c k   D M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 5 2 0 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 2 0 8 5 6 9 9 ;   R E D W O O D   C A ,   2 0 0 4 ,   I N T E R N E T   S Y S T E M S   C O N ;   W O U T E R   P ,   2 0 0 4 ,   1   M O N D A Y ,   V 9 	 1 7 	 1 9 	 2 0 	 0 	 3 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 0 1 6 5 - 5 5 1 5 	 	 	 J   I N F   S C I 	 J .   I n f .   S c i . 	 	 2 0 0 6 	 3 2 	 4 	 	 	 	 	 3 4 4 	 3 5 1 	 	 1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 5 7 8 5 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 9 5 A J 	 W O S : 0 0 0 2 4 1 2 8 0 3 0 0 0 0 6 	 	 
 
 J 	 H i c k s ,   D ;   T o m i z a w a ,   H ;   S a i t o h ,   Y ;   K o b a y a s h i ,   S 	 	 	 	 H i c k s ,   D ;   T o m i z a w a ,   H ;   S a i t o h ,   Y ;   K o b a y a s h i ,   S 	 	 	 B i b l i o m e t r i c   t e c h n i q u e s   i n   t h e   e v a l u a t i o n   o f   f e d e r a l l y   f u n d e d   r e s e a r c h   i n   t h e   U n i t e d   S t a t e s 	 R E S E A R C H   E V A L U A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 P R O G R A M S 	 R e s e a r c h   e v a l u a t i o n   i n   t h e   U S A   h i s t o r i c a l l y   t e n d e d   t o   r e l y   m o r e   h e a v i l y   o n   p e e r   r e v i e w   t h a n   o n   b i b l i o m e t r i c   m e t h o d ,   b u t   i n t e r e s t   i n   q u a n t i t a t i v e   m e t h o d s   i n c l u d i n g   b i b l i o m e t r i c s   a p p e a r s   t o   b e   g r o w i n g .   I n   t h i s   p a p e r ,   w e   d i s c u s s   t h e   u s e   o f   b i b l i o m e t r i c   t e c h n i q u e s   o f   r e s e a r c h   e v a l u a t i o n   b y   t h e   U S   f e d e r a l   g o v e r n m e n t   o v e r   t h e   p a s t   d e c a d e .   W i t h i n   t h e   p a s t   d e c a d e ,   c o m m e n t a t o r s   h a v e   p o i n t e d   t o   s o m e t h i n g   o f   a   r e b i r t h   o f   i n t e r e s t   i n   e v a l u a t i o n   a l o n g   w i t h   p r e s s u r e   o n   a g e n c i e s   t o   d e v e l o p   q u a n t i t a t i v e   i n d i c a t o r s .   E v a l u a t i o n   o f   e c o n o m i c   a n d   s o c i e t a l   o u t c o m e s   o f   r e s e a r c h   h a s   b e c o m e   a   p r i o r i t y .   B i b l i o m e t r i c   m e t h o d   c o n t i n u e s   t o   e v o l v e   i n   r e s p o n s e   t o   t h e s e   n e e d s   a n d   t h e r e f o r e   o f t e n   f i n d s   a p p l i c a t i o n   i n   e v a l u a t i o n s   o f   f e d e r a l   a g e n c y   r e s e a r c h . 	 G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   H l t h ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   C H I   R e s   I n c ,   H a d d o n   H t s ,   N J   0 8 0 3 5   U S A ;   M E X T ,   N I S T E P ,   T o k y o ,   J a p a n 	 H i c k s ,   D   ( r e p r i n t   a u t h o r ) ,   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   H l t h ,   A t l a n t a ,   G A   3 0 3 3 2   U S A . 	 d i a n a . h i c k s @ p u b p o l i c y . g a t e c h . e d u 	 S A I T O H ,   Y o s h i k o / M - 8 9 0 9 - 2 0 1 4 	 	 	 	 * A D V   B O A R D   R E S   C O U ,   1 9 9 6 ,   E V   N A T   P E R F   B A S   R E S ;   A L B E R T   M ,   1 9 9 6 ,   C H I 9 6 2 1   N I S T ;   A V E R C H   H ,   1 9 9 3 ,   E V A L U A T I N G   R   D   I M P A C ,   P 2 7 9 ;   B o y a c k   K W ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 3 0 ;   * C O S E P U P ,   2 0 0 0 ,   E X P   I N T   B E N C H M   U S   R E ;   C O Z Z E N S   S ,   1 9 9 4 ,   D R U 8 7 5 2 C T I   R A N D C T I ;   * D E P   D E F ,   1 9 6 9 ,   A D 4 9 5 9 0 5 ;   G e o r g h i o u   L ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 6 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 9 4 - 3 ;   H I C K S   D ,   2 0 0 0 ,   C H I 9 9 1 2   C H I   R E S   I N C ;   H i c k s   D ,   2 0 0 2 ,   Q U A N T I T A T I V E   M E T H O D S ;   * I I T R I ,   1 9 6 8 ,   T E C H N   R E T R   C R I T   E V   S ;   K O S T O F F   R N ,   2 0 0 0 ,   F E D   D A T   M I N   S   E X P   W A ;   K O S T O F F   R N ,   1 9 9 7 ,   A D A 2 9 6 0 2 1   D T I C   O F F   N ;   L O G S D O N   J M ,   1 9 8 8 ,   E V A L   P R O G R A M   P L A N N ,   V 1 1 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 9 - 7 1 8 9 ( 8 8 ) 9 0 0 2 8 - 6 ;   M e l k e r s   J ,   1 9 9 7 ,   E V A L   P R O G R A M   P L A N N ,   V 2 0 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 7 1 8 9 ( 9 6 ) 0 0 0 3 7 - 7 ;   N A R I N   F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 6 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 5 ;   * O F F   T E C H N   A S S ,   1 9 8 6 ,   O T A T M S E T 3 6 ;   * O F F   T E C H N   A S S ,   1 9 9 1 ,   O T A S E T 4 9 0 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   R o e s s n e r   D . ,   1 9 9 8 ,   R O L E   N S F S   S U P P O R T   E N ;   R o e s s n e r   D a v i d ,   1 9 9 7 ,   R O L E   N S F S   S U P P O R T   E N ;   S H E R W I N   C W ,   1 9 6 7 ,   S C I E N C E ,   V 1 5 6 ,   P 1 5 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 6 . 3 7 8 2 . 1 5 7 1 ;   S T O K E S   D ,   1 9 9 7 ,   P A S T E U R S   Q U A D R A N T   B S ;   T H O M A S   P ,   1 9 9 9 ,   C H I 9 8 1 4   C H I   R E S   I N C 	 2 4 	 1 9 	 2 0 	 1 	 1 2 	 B E E C H   T R E E   P U B L I S H I N G 	 G U I L D F O R D 	 1 0   W A T F O R D   C L O S E , ,   G U I L D F O R D   G U 1   2 E P ,   S U R R E Y ,   E N G L A N D 	 0 9 5 8 - 2 0 2 9 	 	 	 R E S   E V A L U A T 	 R e s .   E v a l u a t . 	 A U G 	 2 0 0 4 	 1 3 	 2 	 	 	 	 	 7 8 	 8 6 	 	 	 	 9 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 6 4 P A 	 W O S : 0 0 0 2 2 4 6 4 4 2 0 0 0 0 1 	 	 
 
 J 	 Z u l u e t a ,   M A ;   B o r d o n s ,   M 	 	 	 	 Z u l u e t a ,   M A ;   B o r d o n s ,   M 	 	 	 S p a n i s h   s c i e n t i f i c   p r o d u c t i o n   i n   c a r d i o v a s c u l a r   r e s e a r c h   t h r o u g h   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( 1 9 9 0 - 1 9 9 6 ) 	 R E V I S T A   E S P A N O L A   D E   C A R D I O L O G I A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 c a r d i o v a s c u l a r   s y s t e m ;   b i b l i o m e t r i c s 	 B I O M E D I C I N E ;   I M P A C T 	 I n t r o d u c t i o n   a n d   o b j e c t i v e s .   A   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   S p a n i s h   s c i e n t i f i c   p r o d u c t i o n   i n   t h e   C a r d i o v a s c u l a r   r e s e a r c h   a r e a   c o n s t i t u t e s   a   u s e f u l   a p p r o a c h   t o   t h e   s t u d y   o f   t h e   s c i e n t i f i c   a c t i v i t y   c o n d u c t e d   i n   t h e   f i e l d .   T h e   m o s t   r e l e v a n t   a s p e c t s   o f   t h e   r e s e a r c h   a n d   t h e i r   e v o l u t i o n   o v e r   t i m e   a r e   a n a l y s e d .   M a t e r i a l   a n d   m e t h o d s .   P u b l i c a t i o n s   c o v e r e d   b y   t h e   S c i e n c e   C i t a t i o n   I n d e x   d a t a b a s e   u n d e r   t h e   h e a d i n g   " c a r d i o v a s c u l a r   s y s t e m "   d u r i n g   t h e   y e a r s   1 9 9 0 - 1 9 9 6   a n d   s i g n e d   b y   a t   l e a s t   o n e   S p a n i s h   a d d r e s s   w e r e   s t u d i e d .   T h e   d i s t r i b u t i o n   o f   t h e   s c i e n t i f i c   p r o d u c t i o n   b y   g e o g r a p h i c   a r e a s   a n d   i n s t i t u t i o n a l   s e c t o r s   w a s   a n a l y s e d   a n d   t h e   m o s t   p r o d u c t i v e   c e n t e r s   w e r e   i d e n t i f i e d .   R e s u l t s .   D u r i n g   t h e s e   y e a r s ,   t h e   s c i e n t i f i c   p r o d u c t i o n   i n   C a r d i o v a s c u l a r   r e s e a r c h   s h o w e d   a   g r o w i n g   r a t e   o f   8 3 % ,   s l i g h t l y   l o w e r   t h a n   t h a t   o f   B i o m e d i c i n e   i n   S p a i n .   A   t o t a l   o f   1 , 4 3 4   d o c u m e n t s   w e r e   a n a l y s e d   ( 3 %   o f   t h e   b i o m e d i c a l   p r o d u c t i o n ) ,   w i t h   2 4 %   o f   m e e t i n g - a b s t r a c t s .   A l t h o u g h   t h e   p r o d u c t i o n   w a s   c o n c e n t r a t e d   i n   M a d r i d   ( 3 3 % )   a n d   C a t a l u n a   ( 3 0 % ) ,   C a n t a b r i a   a n d   N a v a r r a   e m e r g e d   w h e n   t h e   v a l u e s   w e r e   n o r m a l i s e d   a c c o r d i n g   t o   e i t h e r   R & D   e x p e n d i t u r e s   o r   p o p u l a t i o n   d a t a .   T h e   m o s t   p r o d u c t i v e   i n s t i t u t i o n a l   s e c t o r s   w e r e   H o s p i t a l s   ( 8 6 % )   a n d   U n i v e r s i t i e s   ( 2 2 % ) .   T h e   m o s t   p r o d u c t i v e   c e n t r e s   w e r e   i d e n t i f i e d ,   a s   w e l l   a s   t h e i r   g r o w t h   r a t e ,   t h e i r   a c t i v i t y   i n d e x   a n d   t h e   a v e r a g e   i m p a c t   f a c t o r   o f   t h e   j o u r n a l s   u s e d .   M o r e   t h a n   5 0 %   o f   t h e   d o c u m e n t s   w e r e   p e r f o r m e d   i n   c o l l a b o r a t i o n   a m o n g   d i f f e r e n t   c e n t r e s .   I n t e r n a t i o n a l   c o l l a b o r a t i o n   s h o w e d   a n   u p w a r d   t r e n d   ( f r o m   1 6 %   t o   2 1 % ) .   C o n c l u s i o n s .   S p a n i s h   C a r d i o v a s c u l a r   r e s e a r c h   s h o w e d   a n   i n c r e a s i n g   i n t e r n a t i o n a l   v i s i b i l i t y   o v e r   t h e   s t u d i e d   p e r i o d ,   a s   s h o w n   b y   t h e   g r o w i n g   n u m b e r   o f   p u b l i c a t i o n s   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x   d a t a b a s e ,   t h e   u p - r i s i n g   t r e n d   t o w a r d s   h i g h - i m p a c t - f a c t o r   j o u r n a l s ,   a n d   t h e   e v e r - g r o w i n g   c o l l a b o r a t i o n   o f   S p a n i s h   a u t h o r s   w i t h   f o r e i g n   p a r t n e r s . 	 U n i v   A l c a l a   d e   H e n a r e s ,   F a c   D o c u m e n t a c ,   M a d r i d   2 8 8 0 1 ,   S p a i n ;   C t r   I n f o r m a c   &   D o c u m e n t a c   C i e n t ,   M a d r i d ,   S p a i n 	 Z u l u e t a ,   M A   ( r e p r i n t   a u t h o r ) ,   U n i v   A l c a l a   d e   H e n a r e s ,   F a c   D o c u m e n t a c ,   S a n   C i r i l o   S - N ,   M a d r i d   2 8 8 0 1 ,   S p a i n . 	 	 	 	 	 	 A N D E R S O N   J ,   1 9 9 4 ,   2   P R I S M   U N   P O L   R E S   S ;   B O R D O N S   M ,   1 9 9 3 ,   R E S   E V A L ,   V 3 ,   P 1 1 9 ;   B R A U N   T ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 9 9 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 4 8 1 ;   C A M I   J ,   1 9 9 3 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 1 ,   P 7 2 1 ;   F e r n a n d e z   M .   T . ,   1 9 9 3 ,   R E S   E V A L U A T ,   V 3 / 1 ,   P 5 5 ;   G o m e z   I ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 4 9 7 ;   G o m e z - C a r i d a d   I . ,   1 9 9 6 ,   P O L I T I C A   C I E N T I F I C A ,   V 4 6 ,   P 2 1 ;   M e n d e z   A . ,   1 9 9 5 ,   P   5   B I E N N   C   I N T   S O C ,   P 1 8 7 ;   * I   N A C   E S T ,   1 9 9 6 ,   E S T   A C T   I N V   C I E N T   D E ;   * I   S C I   I N F ,   1 9 9 5 ,   J   C I T A T I O N   R E P O R T S ;   M A L T R A S   B ,   1 9 9 2 ,   I N F O R M   E P O C ;   M a r r u g a t   d e   l a   I g l e s i a   J ,   1 9 9 7 ,   R e v   E s p   C a r d i o l ,   V 5 0 ,   P 1 ;   M O E D   H F ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 6 1 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - G ;   N A R I N   F ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 9 7 3 ;   N O M A   E ,   1 9 8 6 ,   S U B J E C T   C L A S S I F I C A T O ;   R I C O Y   J R ,   1 9 9 6 ,   F O N D O   I N V E S T I G A C I O N 	 1 7 	 1 9 	 1 9 	 3 	 1 0 	 E D I C I O N E S   D O Y M A   S / A 	 B A R C E L O N A 	 T R A V   D E   G R A C I A   1 7 - 2 1 ,   0 8 0 2 1   B A R C E L O N A ,   S P A I N 	 0 3 0 0 - 8 9 3 2 	 	 	 R E V   E S P   C A R D I O L 	 R e v .   E s p .   C a r d i o l . 	 O C T 	 1 9 9 9 	 5 2 	 1 0 	 	 	 	 	 7 5 1 	 7 6 4 	 	 	 	 1 4 	 C a r d i a c   &   C a r d i o v a s c u l a r   S y s t e m s 	 C a r d i o v a s c u l a r   S y s t e m   &   C a r d i o l o g y 	 2 4 7 F D 	 W O S : 0 0 0 0 8 3 2 0 9 7 0 0 0 0 1 	 1 0 5 6 3 1 4 9 	 
 
 J 	 T a k a h a s h i ,   K ;   H o s h u y a m a ,   T ;   I k e g a m i ,   K ;   I t o h ,   T ;   H i g a s h i ,   T ;   O k u b o ,   T 	 	 	 	 T a k a h a s h i ,   K ;   H o s h u y a m a ,   T ;   I k e g a m i ,   K ;   I t o h ,   T ;   H i g a s h i ,   T ;   O k u b o ,   T 	 	 	 A   b i b l i o m e t r i c   s t u d y   o f   t h e   t r e n d   i n   a r t i c l e s   r e l a t e d   t o   e p i d e m i o l o g y   p u b l i s h e d   i n   o c c u p a t i o n a l   h e a l t h   j o u r n a l s 	 O C C U P A T I O N A L   A N D   E N V I R O N M E N T A L   M E D I C I N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e p i d e m i o l o g y ;   b i b l i o m e t r i c s ;   o c c u p a t i o n a l   h e a l t h ;   M E D L I N E 	 C L I N I C A L   R E S E A R C H ;   C L A S S I F I C A T I O N ;   M E D L I N E 	 O b j e c t i v e s - T o   s t u d y   t h e   r o l e   a s s u m e d   b y   e p i d e m i o l o g y   i n   o c c u p a t i o n a l   h e a l t h   l i t e r a t u r e   a n d   c h a r a c t e r i s e   i t s   c h a n g e   o v e r   t h e   y e a r s .   M e t h o d s - A   b i b l i o m e t r i c   s t u d y   w a s   c o n d u c t e d   w i t h   a   M E D L I N E   s e a r c h   t o   e v a l u a t e   9 0 2 4   a r t i c l e s   p u b l i s h e d   i n   e i g h t   r e p r e s e n t a t i v e   o c c u p a t i o n a l   h e a l t h   j o u r n a l s   f o r   t h e   p e r i o d   1 9 8 0 - 9 3 .   A r t i c l e s   r e l a t e d   t o   e p i d e m i o l o g y   w e r e   f o u n d   b y   d e s c r i p t o r s   i n d e x e d   i n   t h e   a r t i c l e s   a n d   t h e i r   n u m b e r s   a n d   p r o p o r t i o n s   a m o n g   a l l   p u b l i s h e d   a r t i c l e s   w a s   t a b u l a t e d   f o r   t h e   s t u d y   p e r i o d .   R e s u l t s - T h e   p r o p o r t i o n   o f   s o u r c e   i t e m s   i n d e x e d   b y   e p i d e m i o l o g y   a s   a   d e s c r i p t o r   i n c r e a s e d   o v e r   t h r e e f o l d   f r o m   7 . 9 %   ( 4 2 / 5 3 4 )   i n   1 9 8 0   t o   o v e r   2 5 %   a f t e r   1 9 9 0 .   E p i d e m i o l o g y   w a s   i n d e x e d   m o s t   f r e q u e n t l y   a s   a   s u b h e a d i n g   a s s o c i a t e d   w i t h   o t h e r   d e s c r i p t o r s - f o r   e x a m p l e ,   o c c u p a t i o n a l   d i s e a s e s - e p i d e m i o l o g y .   C o h o r t   s t u d i e s   h a d   t h e   l a r g e s t   i n c r e a s e   i n   t h e   d e s c r i p t o r s   t h a t   i n d i c a t e d   e p i d e m i o l o g i c a l   t y p e   o f   s t u d i e s   d u r i n g   t h e   p e r i o d   s t u d i e d .   C o n c l u s i o n - E p i d e m i o l o g y   i s   a s s u m i n g   i n c r e a s i n g   i m p o r t a n c e   i n   o c c u p a t i o n a l   h e a l t h   l i t e r a t u r e .   T h i s   w a s   s h o w n   q u a n t i t a t i v e l y   a n d   q u a l i t a t i v e l y   b y   t h e   u s e   o f   d e s c r i p t o r s   i n   t h e   M E D L I N E   d a t a b a s e . 	 	 T a k a h a s h i ,   K   ( r e p r i n t   a u t h o r ) ,   U N I V   O C C U P A T   &   E N V I R O N M   H L T H , D E P T   E N V I R O N M   E P I D E M I O L , I N S T   I N D   E C O L   S C I , K I T A K Y U S H U , F U K U O K A   8 0 7 , J A P A N . 	 	 	 	 	 	 A B R A M S O N   J H ,   1 9 8 9 ,   J   C L I N   E P I D E M I O L ,   V 4 2 ,   P 8 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 8 9 5 - 4 3 5 6 ( 8 9 ) 9 0 0 9 1 - 7 ;   B R O W N   G W ,   1 9 8 6 ,   A M   J   D I S   C H I L D ,   V 1 4 0 ,   P 6 4 1 ;   F L E T C H E R   R H ,   1 9 7 9 ,   N E W   E N G L   J   M E D ,   V 3 0 1 ,   P 1 8 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 7 9 0 7 2 6 3 0 1 0 4 0 3 ;   F U N K   M E ,   1 9 8 3 ,   B   M E D   L I B R   A S S O C ,   V 7 1 ,   P 1 7 6 ;   H A Y D E N   G F ,   1 9 8 2 ,   J   P E D I A T R - U S ,   V 1 0 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 2 - 3 4 7 6 ( 8 2 ) 8 0 1 7 0 - 4 ;   H E R N B E R G   S ,   1 9 8 8 ,   O C C U P A T I O N A L   M E D   P R I ,   P 1 1 0 9 ;   * K N I G H T   R I D D   C O ,   1 9 9 3 ,   D I A L   I N F   S E R V ;   M C C U N N E Y   R J ,   1 9 9 2 ,   J   O C C U P   E N V I R O N   M E D ,   V 3 4 ,   P 2 7 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 3 7 6 4 - 1 9 9 2 0 3 0 0 0 - 0 0 0 1 2 ;   * N I H   N A T   L I B   M E D ,   1 9 9 4 ,   M E D   S U B J   H E A D   A N N   A L ;   * N I H   N A T   L I B   M E D ,   1 9 9 4 ,   M E D   S U B J   H E A D   T R E E   S ;   R E I C H   J ,   1 9 8 7 ,   A R C H   G E N   P S Y C H I A T ,   V 4 4 ,   P 3 1 1 ;   R O S E N F E L D   R M ,   1 9 9 1 ,   A R C H   O T O L A R Y N G O L ,   V 1 1 7 ,   P 1 6 4 ;   W A K E F O R D   R ,   1 9 9 3 ,   B R I T   M E D   J ,   V 3 0 6 ,   P 1 4 1 5 ;   Y A M A Z A K I   S ,   1 9 9 4 ,   N A T U R E ,   V 3 7 2 ,   P 1 2 5 ,   D O I   1 0 . 1 0 3 8 / 3 7 2 1 2 5 a 0 ;   1 9 8 8 ,   L A N C E T ,   V 8 6 1 2 ,   P 6 6 3 	 1 5 	 1 9 	 1 9 	 0 	 4 	 B R I T I S H   M E D   J O U R N A L   P U B L   G R O U P 	 L O N D O N 	 B R I T I S H   M E D   A S S O C   H O U S E ,   T A V I S T O C K   S Q U A R E ,   L O N D O N ,   E N G L A N D   W C 1 H   9 J R 	 1 3 5 1 - 0 7 1 1 	 	 	 O C C U P   E N V I R O N   M E D 	 O c c u p .   E n v i r o n .   M e d . 	 J U L 	 1 9 9 6 	 5 3 	 7 	 	 	 	 	 4 3 3 	 4 3 8 	 	 	 	 6 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 U W 1 2 1 	 W O S : A 1 9 9 6 U W 1 2 1 0 0 0 0 1 	 8 7 0 4 8 6 5 	 
 
 J 	 G l e i c h ,   D F 	 	 	 	 G l e i c h ,   D a v i d   F . 	 	 	 P a g e R a n k   B e y o n d   t h e   W e b 	 S I A M   R E V I E W 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 P a g e R a n k ;   M a r k o v   c h a i n 	 P R O T E I N - I N T E R A C T I O N   N E T W O R K S ;   S O C I A L   N E T W O R K S ;   M A T R I X   F U N C T I O N S ;   G O O G L E   P A G E R A N K ;   S E A R C H   E N G I N E ;   R A N K I N G ;   G R A P H ;   C E N T R A L I T Y ;   E N V I R O N M E N T ;   S I M I L A R I T Y 	 G o o g l e ' s   P a g e R a n k   m e t h o d   w a s   d e v e l o p e d   t o   e v a l u a t e   t h e   i m p o r t a n c e   o f   w e b - p a g e s   v i a   t h e i r   l i n k   s t r u c t u r e .   T h e   m a t h e m a t i c s   o f   P a g e R a n k ,   h o w e v e r ,   a r e   e n t i r e l y   g e n e r a l   a n d   a p p l y   t o   a n y   g r a p h   o r   n e t w o r k   i n   a n y   d o m a i n .   T h u s ,   P a g e R a n k   i s   n o w   r e g u l a r l y   u s e d   i n   b i b l i o m e t r i c s ,   s o c i a l   a n d   i n f o r m a t i o n   n e t w o r k   a n a l y s i s ,   a n d   f o r   l i n k   p r e d i c t i o n   a n d   r e c o m m e n d a t i o n .   I t ' s   e v e n   u s e d   f o r   s y s t e m s   a n a l y s i s   o f   r o a d   n e t w o r k s ,   a s   w e l l   a s   b i o l o g y ,   c h e m i s t r y ,   n e u r o s c i e n c e ,   a n d   p h y s i c s .   W e ' l l   s e e   t h e   m a t h e m a t i c s   a n d   i d e a s   t h a t   u n i t e   t h e s e   d i v e r s e   a p p l i c a t i o n s . 	 P u r d u e   U n i v ,   D e p t   C o m p   S c i ,   W   L a f a y e t t e ,   I N   4 7 9 0 7   U S A 	 G l e i c h ,   D F   ( r e p r i n t   a u t h o r ) ,   P u r d u e   U n i v ,   D e p t   C o m p   S c i ,   W   L a f a y e t t e ,   I N   4 7 9 0 7   U S A . 	 d g l e i c h @ p u r d u e . e d u 	 	 	 N S F   C A R E E R   [ C C F - 1 1 4 9 7 5 6 ] 	 T h i s   w o r k   w a s   s u p p o r t e d   i n   p a r t   b y   N S F   C A R E E R   a w a r d   C C F - 1 1 4 9 7 5 6 . 	 A B R A H A O ,   2 0 1 2 ,   P   1 8   A C M   S I G K D D   I N T ,   P 6 2 4 ;   A L D O U S ,   2 0 0 2 ,   R E V E R S I B L E   M A R K O V   C H ;   P A S C U A L   M . ,   2 0 0 9 ,   P L O S   C O M P U T   B I O L ,   V 5 ;   M O R L E Y   T .   D . ,   1 9 8 5 ,   L I N E A R   M U L T I L I N E A R   A ,   V 1 8 ,   P 1 4 1 ;   A R A S U ,   2 0 0 2 ,   P   1 1   I N T   C   W O R L D   W I D ;   A v r a c h e n k o v   K ,   2 0 1 0 ,   L E C T   N O T E S   C O M P U T   S C ,   V 6 5 1 6 ,   P 9 8 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 6 4 2 - 1 8 0 0 9 - 5 _ 1 0 ;   A V R A C H E N K O V ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 8 6 3 ,   P 1 6 ;   B a c k s t r o m   L . ,   2 0 1 1 ,   P   4   A C M   I N T   C   W E B   S E ,   P 6 3 5 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 9 3 5 8 2 6 . 1 9 3 5 9 1 4 ;   B A E Z A - Y A T E S   R . ,   2 0 0 6 ,   P   2 9   A N N   I N T   A C M   S I G ,   P 3 0 8 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 8 1 7 0 . 1 1 4 8 2 2 5 ;   B a h m a n i   B a h m a n ,   2 0 1 0 ,   V L D B ,   V 4 ,   P 1 7 3 ,   D O I   D O I   1 0 . 1 4 7 7 8 / 1 9 2 9 8 6 1 . 1 9 2 9 8 6 4 ;   B a l m i n   A . ,   2 0 0 4 ,   P   3 0   I N T   C   V E R   L A R G ,   P 5 6 4 ;   B a r - Y o s s e f   Z . ,   2 0 0 8 ,   P   1 7   A C M   C   I N F   K N O W L ,   P 2 7 9 ,   D O I   1 0 . 1 1 4 5 / 1 4 5 8 0 8 2 . 1 4 5 8 1 2 2 ;   B a s s e t t   D S ,   2 0 0 6 ,   N E U R O S C I E N T I S T ,   V 1 2 ,   P 5 1 2 ,   D O I   1 0 . 1 1 7 7 / 1 0 7 3 8 5 8 4 0 6 2 9 3 1 8 2 ;   B A Y A T I   M . ,   2 0 1 3 ,   A C M   T   K N O W L   D I S C O V   D ,   V 7 ,   P 3 ;   B e c c h e t t i   L ,   2 0 0 8 ,   A C M   T   W E B ,   V 2 ,   D O I   1 0 . 1 1 4 5 / 1 3 2 6 5 6 1 . 1 3 2 6 5 6 3 ;   B e n z i   M ,   2 0 1 3 ,   L I N E A R   A L G E B R A   A P P L ,   V 4 3 8 ,   P 2 4 4 7 ,   D O I   1 0 . 1 0 1 6 / j . l a a . 2 0 1 2 . 1 0 . 0 2 2 ;   B e r k h i n   P ,   2 0 0 5 ,   I N T E R N E T   M A T H ,   V 2 ,   P 7 3 ,   D O I   1 0 . 1 0 8 0 / 1 5 4 2 7 9 5 1 . 2 0 0 5 . 1 0 1 2 9 0 9 8 ;   B e r m a n   A . ,   1 9 9 4 ,   C L A S S I C S   A P P L   M A T H ,   V 9 ;   B i a n c h i n i   M . ,   2 0 0 5 ,   A C M   T r a n s a c t i o n s   o n   I n t e r n e t   T e c h n o l o g y ,   V 5 ,   P 9 2 ,   D O I   1 0 . 1 1 4 5 / 1 0 5 2 9 3 4 . 1 0 5 2 9 3 8 ;   B i n i   D A ,   2 0 1 0 ,   J   C O M P U T   A P P L   M A T H ,   V 2 3 4 ,   P 3 1 0 4 ,   D O I   1 0 . 1 0 1 6 / j . c a m . 2 0 1 0 . 0 2 . 0 0 3 ;   B l e i   D M ,   2 0 0 3 ,   J   M A C H   L E A R N   R E S ,   V 3 ,   P 9 9 3 ,   D O I   1 0 . 1 1 6 2 / j m l r . 2 0 0 3 . 3 . 4 - 5 . 9 9 3 ;   B l o n d e l   V D ,   2 0 0 4 ,   S I A M   R E V ,   V 4 6 ,   P 6 4 7 ,   D O I   1 0 . 1 1 3 7 / S 0 0 3 6 1 4 4 5 0 2 4 1 5 9 6 0 ;   B O L D I   P . ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   P 1 0 7 ;   B o l d i   P . ,   2 0 0 5 ,   P   1 4   I N T   C   W O R L D   W I D ,   P 5 5 7 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 0 6 0 7 4 5 . 1 0 6 0 8 2 7 ] ;   B o l d i   P . ,   2 0 0 8 ,   P   1 7   A C M   C   I N F   K N O W L ,   P 6 0 9 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 4 5 8 0 8 2 . 1 4 5 8 1 6 3 ;   B o l d i   P . ,   2 0 0 5 ,   1 4   I N T   C   W O R L D   W I D   W ,   P 8 9 8 ;   B o l d i   P . ,   2 0 0 9 ,   P   1 8   A C M   C   I N F   K N O W L ,   P 7 7 7 ,   D O I   1 0 . 1 1 4 5 / 1 6 4 5 9 5 3 . 1 6 4 6 0 5 2 ;   B o l d i   P ,   2 0 1 1 ,   C O M M U N   A C M ,   V 5 4 ,   P 1 2 9 ,   D O I   1 0 . 1 1 4 5 / 1 9 5 3 1 2 2 . 1 9 5 3 1 5 4 ;   B o l d i   P ,   2 0 0 9 ,   A C M   T   I N F O R M   S Y S T ,   V 2 7 ,   D O I   1 0 . 1 1 4 5 / 1 6 2 9 0 9 6 . 1 6 2 9 0 9 7 ;   B o l l e n   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 6 - z ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   C a l l a g h a n   T ,   2 0 0 7 ,   A M   M A T H   M O N ,   V 1 1 4 ,   P 7 6 1 ;   C h e n   P ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 6 . 0 0 1 ;   C H E P I L I A N S K I I   A . ,   2 0 1 0 ,   C S S E 1 0 0 3 5 4 5 5   A R X I V ;   A N D E R S E N ,   2 0 0 6 ,   P   4 7   A N N   I E E E   S   F D N ,   P 4 7 5 ;   C h u n g   F ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 7 3 5 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 8 8 3 8 1 0 4 ;   C h u n g   F ,   2 0 0 5 ,   A N N   C O M B ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 2 6 - 0 0 5 - 0 2 3 7 - z ;   C h u n g   F ,   2 0 1 1 ,   L E C T   N O T E S   C O M P U T   S C ,   V 6 7 3 2 ,   P 1 0 3 ;   C h u n g   F .   R .   K . ,   1 9 9 2 ,   S P E C T R A L   G R A P H   T H E O R ;   C o l l e y   W . ,   2 0 0 2 ,   C O L L E Y S   B I A S   F R E E   C O ;   C o n s t a n t i n e   P .   G . ,   2 0 1 0 ,   I N T   M A T H ,   V 6 ,   P 1 8 9 ;   C r o f t s   J J ,   2 0 1 1 ,   I N T E R N E T   M A T H ,   V 7 ,   P 2 3 3 ;   C U T T S   M . ,   2 0 0 9 ,   P A G E R A N K   S C U L P T I N G   M ;   C U T T S   M . ,   2 0 0 6 ,   M   C U T T S   G A D G E T S   G O O G ;   H U   Y . ,   2 0 1 1 ,   A C M   T   M A T H   S O F T W A R E ,   V 3 8 ,   P 1 ;   D E L   C O R S O   G .   M . ,   2 0 0 5 ,   I N T E R N E T   M A T H ,   V 2 ,   P 2 5 1 ,   D O I   1 0 . 1 0 8 0 / 1 5 4 2 7 9 5 1 . 2 0 0 5 . 1 0 1 2 9 1 0 8 ;   D h i l l o n   I n d e r j i t   S . ,   2 0 0 1 ,   P   7   A C M   S I G K D D   I N T   C ,   P 2 6 9 ,   D O I   D O I   1 0 . 1 1 4 5 / 5 0 2 5 1 2 . 5 0 2 5 5 0 ;   D U   Y . ,   2 0 0 8 ,   P E R T U R B A T I O N R A N K   N O N ;   E i r o n   N . ,   2 0 0 4 ,   P   1 3   I N T   C   W O R L D   W I D ,   P 3 0 9 ,   D O I   D O I   1 0 . 1 1 4 5 / 9 8 8 6 7 2 . 9 8 8 7 1 4 ;   E O M   Y . - H . ,   2 0 1 4 ,   C S S I 1 4 0 5 7 1 8 3   A R X I V ;   E s t r a d a   E ,   2 0 0 0 ,   C H E M   P H Y S   L E T T ,   V 3 1 9 ,   P 7 1 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 9 - 2 6 1 4 ( 0 0 ) 0 0 1 5 8 - 5 ;   E s t r a d a   E ,   2 0 1 0 ,   S I A M   R E V ,   V 5 2 ,   P 6 9 6 ,   D O I   1 0 . 1 1 3 7 / 0 9 0 7 6 1 0 7 0 ;   E s t r a d a   E ,   2 0 0 8 ,   P H Y S   R E V   E ,   V 7 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 7 8 . 0 2 6 1 0 2 ;   F a r a h a t   A ,   2 0 0 6 ,   S I A M   J   S C I   C O M P U T ,   V 2 7 ,   P 1 1 8 1 ,   D O I   1 0 . 1 1 3 7 / S 1 0 6 4 8 2 7 5 0 2 4 1 2 8 7 5 ;   F i a l a   D ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 0 8 - 4 ;   F I E D L E R   M ,   1 9 7 3 ,   C Z E C H   M A T H   J ,   V 2 3 ,   P 2 9 8 ;   F o g a r a s   D ,   2 0 0 3 ,   L E C T   N O T E S   C O M P U T   S C ,   V 2 8 7 7 ,   P 6 5 ;   F r a h m   K M ,   2 0 1 2 ,   J   P H Y S   A - M A T H   T H E O R ,   V 4 5 ,   D O I   1 0 . 1 0 8 8 / 1 7 5 1 - 8 1 1 3 / 4 5 / 4 0 / 4 0 5 1 0 1 ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   F r e s c h i   V . ,   2 0 0 7 ,   B I O I N F   B I O E N G   2 0 0 7   B ,   P 4 2 ;   F r i e d k i n   N E ,   1 9 9 9 ,   A D V   G R O U P ,   V 1 6 ,   P 1 ;   F R I E D K I N   N E ,   1 9 9 0 ,   J   M A T H   S O C I O L ,   V 1 5 ,   P 1 9 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G L E I C H   D .   F . ,   2 0 1 4 ,   P   3 1   I N T   C   M A C H   L E A R ,   P 1 0 1 8 ;   G l e i c h   D F ,   2 0 1 0 ,   S I A M   J   S C I   C O M P U T ,   V 3 2 ,   P 3 4 9 ,   D O I   1 0 . 1 1 3 7 / 0 8 0 7 2 7 3 9 7 ;   R O S S I   R .   A . ,   2 0 1 4 ,   I N T E R N E T   M A T H ,   V 1 0 ,   P 1 8 8 ;   G l e i c h   D . F . ,   2 0 0 4 ,   Y R L 2 0 0 4 0 3 8 ;   G L E I C H   D .   F . ,   2 0 1 0 ,   P   1 9   I N T   C   W O R L D   W I D ,   P 3 8 1 ,   D O I   1 0 . 1 1 4 5 / 1 7 7 2 6 9 0 . 1 7 7 2 7 3 0 ;   G L E I C H   D .   F . ,   2 0 1 4 ,   C S N A 1 4 0 9 1 4 6 5   A R X I V ;   G L E I C H   D .   F . ,   2 0 0 7 ,   D A G S T U H L   S E M I N A R   P ;   P O L I T O   M . ,   2 0 0 7 ,   I N T E R N E T   M A T H ,   V 3 ,   P 2 5 7 ;   G o l u b   G H ,   2 0 0 6 ,   B I T ,   V 4 6 ,   P 7 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 4 3 - 0 0 6 - 0 0 9 1 - y ;   C o r i   M . ,   2 0 0 7 ,   P   2 0   I N T   J O I N T   C   A R T ,   P 2 7 6 6 ;   G O V A N   A .   Y . ,   2 0 0 8 ,   P   S A S   G L O B   F O R   2 0 0 8 ;   G r i n d r o d   P ,   2 0 1 4 ,   P   R O Y   S O C   A - M A T H   P H Y ,   V 4 7 0 ,   D O I   1 0 . 1 0 9 8 / r s p a . 2 0 1 3 . 0 8 3 5 ;   G y o n g y i   Z . ,   2 0 0 4 ,   P   1 3   I N T   C   V E R   L A R G ,   V 3 0 ,   P 5 7 6 ;   H a l u   A ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 7 8 2 9 3 ;   H a v e l i w a l a   T .   H . ,   2 0 0 2 ,   P   1 1   I N T   C   W O R L D   W I D ,   P 5 1 7 ,   D O I   D O I   1 0 . 1 1 4 5 / 5 1 1 4 4 6 . 5 1 1 5 1 3 ;   H i g h a m   D J ,   2 0 0 5 ,   A P P L   M A T H   L E T T ,   V 1 8 ,   P 1 3 5 9 ,   D O I   1 0 . 1 0 1 6 / j . a m l . 2 0 0 5 . 0 2 . 0 2 0 ;   S E R R A - C A P I Z Z A N O   S . ,   2 0 0 7 ,   I N T E R N E T   M A T H ,   V 3 ,   P 3 8 5 ;   H o t h o   A ,   2 0 0 6 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 0 1 1 ,   P 4 1 1 ;   H u b e r m a n   B A ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 9 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 0 . 5 3 6 0 . 9 5 ;   J a i n   A . ,   2 0 1 0 ,   P   2 3   I N T   C   C O M P   L I N G ,   P 5 0 1 ;   J A V A   A . ,   2 0 0 6 ,   T R C S 0 6 0 3   U M B C ;   J A V A   A . ,   2 0 0 7 ,   T W I T T E R   S O C I A L   N E T W O ;   J e h   G . ,   2 0 0 2 ,   P   8   A C M   S I G K D D   I N T   C ,   P 5 3 8 ,   D O I   D O I   1 0 . 1 1 4 5 / 7 7 5 0 4 7 . 7 7 5 1 2 6 ;   J E Z E K   K . ,   2 0 0 8 ,   P   1 2   I N T   C   E L   P U B L   T ,   P 3 5 1 ;   J i a n g   B . ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   V 2 0 0 8 ,   P 7 0 0 8 ,   D O I   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 8 / 0 7 / P 0 7 0 0 8 ;   J i a n g   B B ,   2 0 0 9 ,   L E C T   N O T E S   O P E R   R E S ,   V 1 1 ,   P 3 1 9 ;   J i a n g   B ,   2 0 0 9 ,   I N T   J   G E O G R   I N F   S C I ,   V 2 3 ,   P 8 2 3 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 5 8 8 1 0 8 0 2 0 2 2 8 2 2 ;   J i n g   Y ,   2 0 0 8 ,   I E E E   T   P A T T E R N   A N A L ,   V 3 0 ,   P 1 8 7 7 ,   D O I   1 0 . 1 1 0 9 / T P A M I . 2 0 0 8 . 1 2 1 ;   J O C K E R S   M . ,   2 0 1 2 ,   D I G   H U M   C   2 0 1 2 ,   P 2 4 2 ;   K a m v a r   S ,   2 0 1 0 ,   N U M E R I C A L   A L G O R I T H M S   F O R   P E R S O N A L I Z E D   S E A R C H   I N   S E L F - O R G A N I Z I N G   I N F O R M A T I O N   N E T W O R K S ,   P 1 ;   K A M V A R   S . ,   2 0 0 3 ,   2 0 0 3 1 7   S T A N F   I N F O L A B ;   K a m v a r   S . ,   2 0 0 3 ,   P   1 2   I N T   W O R L D   W I D   W ,   P 2 6 1 ;   K A T Z   L ,   1 9 5 3 ,   P S Y C H O M E T R I K A ,   V 1 8 ,   P 3 9 ;   K E E N E R   J P ,   1 9 9 3 ,   S I A M   R E V ,   V 3 5 ,   P 8 0 ,   D O I   1 0 . 1 1 3 7 / 1 0 3 5 0 0 4 ;   K e m p e   D ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 5 8 0 ,   P 1 1 2 7 ;   K e m p e   D . ,   2 0 0 3 ,   P   9   A C M   S I G K D D   I N T   C ,   P 1 3 7 ,   D O I   D O I   1 0 . 1 1 4 5 / 9 5 6 7 5 0 . 9 5 6 7 6 9 ;   K e p n e r   J ,   2 0 1 1 ,   S O F T W   E N V I R O N   T O O L S ,   V 2 2 ,   P 1 ,   D O I   1 0 . 1 1 3 7 / 1 . 9 7 8 0 8 9 8 7 1 9 9 1 8 ;   K i m   M . ,   2 0 1 3 ,   P   A C M   S I G M E T R I C S   I N T ,   P 9 3 ;   K l e i n b e r g   J M ,   1 9 9 9 ,   J   A C M ,   V 4 6 ,   P 6 0 4 ,   D O I   1 0 . 1 1 4 5 / 3 2 4 1 3 3 . 3 2 4 1 4 0 ;   P R O C O P I O   M .   J . ,   2 0 0 9 ,   S A N D 2 0 0 9 6 6 7 0   S A N D   N A ;   K O L L I A S   G . ,   2 0 1 3 ,   I E E E   T   K N O W L   D A T A   E N ,   V 2 6 ,   P 2 3 2 3 ;   K o l l i a s   G ,   2 0 1 2 ,   I E E E   T   K N O W L   D A T A   E N ,   V 2 4 ,   P 2 2 3 2 ,   D O I   1 0 . 1 1 0 9 / T K D E . 2 0 1 1 . 1 7 4 ;   K o n d o r   R . ,   2 0 0 2 ,   P   1 9   I N T   C   M A C H   L E A R ,   V 2 ,   P 3 1 5 ;   K O N T O P O U L O U   E . - M . ,   2 0 1 2 ,   P   2 3   A C M   C   H Y P   S O C   M ,   P 1 3 3 ;   K o s c h u t z k i   D ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 4 1 8 ,   P 1 6 ;   K u n e g i s   J . ,   2 0 0 9 ,   P   2 6   A N N   I N T   C   M A C H ,   P 5 6 1 ;   K w a k   H . ,   2 0 1 0 ,   P   1 9   I N T   C   W O R L D   W I D ,   V 1 1 2 ,   P 5 9 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 7 7 2 6 9 0 . 1 7 7 2 7 5 1 ;   L a n g v i l l e   A . ,   2 0 0 6 ,   G O O G L E S   P A G E R A N K   S C I ;   L a n g v i l l e   A .   N . ,   2 0 1 2 ,   W H O S   1   S C I   R A T I N G   R A ;   L a n g v i l l e   A . ,   2 0 0 4 ,   I N T E R N E T   M A T H ,   V 1 ,   P 3 3 5 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 5 4 2 7 9 5 1 . 2 0 0 4 . 1 0 1 2 9 0 9 1 ;   L e e   C P ,   2 0 0 7 ,   I N T E R N E T   M A T H ,   V 4 ,   P 2 9 9 ,   D O I   1 0 . 1 0 8 0 / 1 5 4 2 7 9 5 1 . 2 0 0 7 . 1 0 1 2 9 1 5 1 ;   L E V Y   S . ,   2 0 1 0 ,   W I R E D   M A G A Z I N E ,   P 1 7 ;   L i b e n - N o w e l l   D ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 0 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 9 1 ;   L i u   X M ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 2 ;   L i u   Y . ,   2 0 0 8 ,   P   3 1   A N N   I N T   A C M   S I G ,   P 4 5 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 9 0 3 3 4 . 1 3 9 0 4 1 ;   L u   L Y ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 2 1 2 0 2 ;   M a   N ,   2 0 0 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 4 ,   P 8 0 0 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 7 . 0 6 . 0 0 6 ;   M a h o n e y   M W ,   2 0 1 2 ,   J   M A C H   L E A R N   R E S ,   V 1 3 ,   P 2 3 3 9 ;   M e n g   X . ,   2 0 0 9 ,   C O M P U T I N G   B O O K R A N K   V ;   M e y e r   C . D . ,   2 0 0 0 ,   M A T R I X   A N A L   A P P L   L I N ;   M I L L E R   J .   C . ,   2 0 0 1 ,   P   2 4   A N N   I N T   A C M   S I G ,   P 4 4 4 ,   D O I   1 0 . 1 1 4 5 / 3 8 3 9 5 2 . 3 8 4 0 8 6 ;   M o o n e y   B L ,   2 0 1 2 ,   J   C O M P U T   C H E M ,   V 3 3 ,   P 8 5 3 ,   D O I   1 0 . 1 0 0 2 / j c c . 2 2 9 1 7 ;   M o r r i s o n   J L ,   2 0 0 5 ,   B M C   B I O I N F O R M A T I C S ,   V 6 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 1 0 5 - 6 - 2 3 3 ;   N a j o r k   M .   A . ,   2 0 0 7 ,   P   3 0   A N N   I N T   A C M   S I G ,   P 4 7 1 ,   D O I   1 0 . 1 1 4 5 / 1 2 7 7 7 4 1 . 1 2 7 7 8 2 3 ;   N i e   Z . ,   2 0 0 5 ,   P   1 4   I N T   C   W O R L D   W I D ,   P 5 6 7 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 0 7 4 5 . 1 0 6 0 8 2 8 ;   O R E C C H I A   L . ,   2 0 1 1 ,   P   2 8   I N T   C   M A C H   L E A R ,   P 1 2 1 ;   O S I P E N K O   G . ,   2 0 0 7 ,   D Y N A M I C A L   S Y S T E M S   G R ;   P a g e   L . ,   1 9 9 9 ,   1 9 9 9 6 6   S T A N F   U ;   P a n   J - Y ,   2 0 0 4 ,   P   1 0   A C M   S I G K D D   I N T ,   P 6 5 3 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 0 1 4 0 5 2 . 1 0 1 4 1 3 5 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   P O T H E N   A ,   1 9 9 0 ,   S I A M   J   M A T R I X   A N A L   A ,   V 1 1 ,   P 4 3 0 ,   D O I   1 0 . 1 1 3 7 / 0 6 1 1 0 3 0 ;   P R E T T O   L . ,   2 0 0 2 ,   P   9   I N T   S   S T R I N G   P R O ,   P 1 3 1 ;   R a d i c c h i   F ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 7 2 4 9 ;   S A B I D U S S I   G ,   1 9 6 6 ,   P S Y C H O M E T R I K A ,   V 3 1 ,   P 5 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 8 9 5 2 7 ;   S c h a e f f e r   S E ,   2 0 0 7 ,   C O M P U T E R   S C I   R E V ,   V 1 ,   P 2 7 ,   D O I   D O I   1 0 . 1 0 1 6 / J . C 0 S R E V . 2 0 0 7 . 0 5 . 0 0 1 ;   S c h l o t e   A ,   2 0 1 2 ,   I N T   J   C O N T R O L ,   V 8 5 ,   P 8 8 0 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 1 7 9 . 2 0 1 2 . 6 6 8 7 1 6 ;   S e r r a - C a p i z z a n o   S ,   2 0 0 5 ,   S I A M   J   M A T R I X   A N A L   A ,   V 2 7 ,   P 3 0 5 ,   D O I   1 0 . 1 1 3 7 / S 0 8 9 5 4 7 9 8 0 4 4 4 1 4 0 7 ;   S h e p e l y a n s k y   D L ,   2 0 1 0 ,   P H Y S   R E V   E ,   V 8 1 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 1 . 0 3 6 2 1 3 ;   S i n g h   R ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 4 5 3 ,   P 1 6 ;   S O B E K   M . ,   2 0 0 3 ,   P R 0   G O O G L E S   P A G E R A N K ;   S o n g   Y . ,   2 0 1 2 ,   P   5   A C M   I N T   C   W E B   S E ,   P 3 5 3 ,   D O I   D O I   1 0 . 1 1 4 5 / 2 1 2 4 2 9 5 . 2 1 2 4 3 3 9 ;   S p e z z a n o   F ,   2 0 1 4 ,   C O M M U N   A C M ,   V 5 7 ,   P 6 0 ,   D O I   1 0 . 1 1 4 5 / 2 6 3 2 6 6 1 . 2 6 3 2 6 6 4 ;   S p o r n s   O . ,   2 0 1 1 ,   N E T W O R K S   B R A I N ;   S p o r n s   O l a f ,   2 0 0 2 ,   C o m p l e x i t y ,   V 8 ,   P 5 6 ,   D O I   1 0 . 1 0 0 2 / c p l x . 1 0 0 4 7 ;   S t e w a r t   W . J . ,   1 9 9 4 ,   I N T R O   N U M E R I C A L   S O L U ;   S y l v e s t e r   J .   J . ,   1 8 7 8 ,   N A T U R E ,   V 1 7 ,   P 2 8 4 ,   D O I   1 0 . 1 0 3 8 / 0 1 7 2 8 4 a 0 ;   T o m l i n   J . ,   2 0 0 3 ,   P   1 2   I N T   W O R L D   W I D   W ,   P 3 5 0 ;   T o n g   H H ,   2 0 0 6 ,   I E E E   D A T A   M I N I N G ,   P 6 1 3 ;   V I G N A   S . ,   2 0 0 5 ,   S P E C I A L   I N T E R E S T   T R A ,   P 9 7 6 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 2 7 4 5 . 1 0 6 2 8 2 6 ;   V I G N A   S . ,   2 0 0 9 ,   C S I R 0 9 1 2 0 2 3 8   A R X I V ;   V o e v o d s k i   K ,   2 0 0 9 ,   B M C   S Y S T   B I O L ,   V 3 ,   D O I   1 0 . 1 1 8 6 / 1 7 5 2 - 0 5 0 9 - 3 - 1 1 2 ;   W a l k e r   D y l a n ,   2 0 0 7 ,   J   S T A T   M E C H - T H E O R Y   E ,   V 2 0 0 7 ;   W a n g   W .   Y . ,   2 0 1 3 ,   P   2 2   A C M   I N T   C   I N F   K ,   P 2 1 2 9 ;   W e n g   J . ,   2 0 1 0 ,   P   3   A C M   I N T   C   W E B   S E ,   P 2 6 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 7 1 8 4 8 7 . 1 7 1 8 5 2 0 ;   W e s t   J D ,   2 0 1 0 ,   C O L L   R E S   L I B R ,   V 7 1 ,   P 2 3 6 ;   W i l l s   R S ,   2 0 0 8 ,   S I A M   J   M A T R I X   A N A L   A ,   V 3 0 ,   P 1 6 7 7 ,   D O I   1 0 . 1 1 3 7 / 0 7 0 6 9 8 1 2 9 ;   W i n t e r   C ,   2 0 1 2 ,   P L O S   C O M P U T   B I O L ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p c b i . 1 0 0 2 5 1 1 ;   W I S S N E R - G R O S S   A .   D . ,   2 0 0 6 ,   I C A L T   0 6 ,   P 8 2 5 ;   X i n g   W e n p u ,   2 0 0 4 ,   I N T   J   E N G   I N N O V A T I V E ,   V 1 ,   P 3 0 5 ;   Y a n g   H . ,   2 0 0 7 ,   P   3 0   A N N   I N T   A C M   S I G ,   P 4 3 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 2 7 7 7 4 1 . 1 2 7 7 8 1 5 ;   Z h i r o v   A O ,   2 0 1 0 ,   E U R   P H Y S   J   B ,   V 7 7 ,   P 5 2 3 ,   D O I   1 0 . 1 1 4 0 / e p j b / e 2 0 1 0 - 1 0 5 0 0 - 7 ;   Z h o u   D . ,   2 0 0 5 ,   P   2 2   I N T   C   M A C H   L E A R ,   P 1 0 3 6 ,   D O I   1 0 . 1 1 4 5 / 1 1 0 2 3 5 1 . 1 1 0 2 4 8 2 ;   Z h o u   D . ,   2 0 0 3 ,   A D V   N E U R A L   I N F O R M   P R ,   V 1 6 ,   P 1 6 9 ;   Z u o   X N ,   2 0 1 2 ,   C E R E B   C O R T E X ,   V 2 2 ,   P 1 8 6 2 ,   D O I   1 0 . 1 0 9 3 / c e r c o r / b h r 2 6 9 	 1 6 8 	 1 8 	 1 8 	 7 	 1 8 	 S I A M   P U B L I C A T I O N S 	 P H I L A D E L P H I A 	 3 6 0 0   U N I V   C I T Y   S C I E N C E   C E N T E R ,   P H I L A D E L P H I A ,   P A   1 9 1 0 4 - 2 6 8 8   U S A 	 0 0 3 6 - 1 4 4 5 	 1 0 9 5 - 7 2 0 0 	 	 S I A M   R E V 	 S I A M   R e v . 	 	 2 0 1 5 	 5 7 	 3 	 	 	 	 	 3 2 1 	 3 6 3 	 	 1 0 . 1 1 3 7 / 1 4 0 9 7 6 6 4 9 	 	 4 3 	 M a t h e m a t i c s ,   A p p l i e d 	 M a t h e m a t i c s 	 C Q 1 J O 	 W O S : 0 0 0 3 6 0 3 5 3 8 0 0 0 0 2 	 	 
 
 J 	 Y u ,   C ;   D a v i s ,   C ;   D i j k e m a ,   G P J 	 	 	 	 Y u ,   C h a n g ;   D a v i s ,   C h r i s ;   D i j k e m a ,   G e r a r d   P .   J . 	 	 	 U n d e r s t a n d i n g   t h e   E v o l u t i o n   o f   I n d u s t r i a l   S y m b i o s i s   R e s e a r c h   A   B i b l i o m e t r i c   a n d   N e t w o r k   A n a l y s i s   ( 1 9 9 7 - 2 0 1 2 ) 	 J O U R N A L   O F   I N D U S T R I A L   E C O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 i n d u s t r i a l   e c o l o g y ;   e c o - i n d u s t r i a l   p a r k   ( E I P ) ;   b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   n e t w o r k   a n a l y s i s ;   i n d u s t r i a l   s y m b i o s i s   ( I S ) 	 C I R C U L A R   E C O N O M Y ;   P A R K ;   C H A L L E N G E S ;   E C O L O G Y ;   S Y S T E M S ;   C H I N A 	 T h i s   s t u d y   a n a l y z e s   t h e   e v o l u t i o n   o f   t h e   r e s e a r c h   f i e l d   o f   i n d u s t r i a l   s y m b i o s i s   ( I S ) .   W e   e l u c i d a t e   i t s   e m b e d d i n g   i n   i n d u s t r i a l   e c o l o g y   ( I E ) ,   t r a c e   t h e   d e v e l o p m e n t   o f   r e s e a r c h   t h e m e s ,   a n d   r e v e a l   t h e   e v o l u t i o n   o f   t h e   r e s e a r c h   n e t w o r k   t h r o u g h   a n a l y s i s   o f   t h e   c o r e   l i t e r a t u r e   a n d   j o u r n a l s   t h a t   a p p e a r e d   f r o m   1 9 9 7   t o   2 0 1 2   b y   c i t a t i o n   a n a l y s i s ,   c o c i t a t i o n   a n a l y s i s ,   a n d   n e t w o r k   a n a l y s i s .   I n   t h e   f i r s t   p e r i o d   ( 1 9 9 7 - 2 0 0 5 ) ,   I S   r e s e a r c h   h e l d   a   m i n o r i t y   s h a r e   i n   t h e   I E   l i t e r a t u r e .   T h e   r e s e a r c h   r e v o l v e d   a r o u n d   t h e   c o n c e p t   o f   I S ,   t h e   a s s e s s m e n t   o f   e c o - i n d u s t r i a l   p a r k   p r o j e c t s ,   a n d   t h e   e s t a b l i s h m e n t   o f   w a s t e   t r e a t m e n t   a n d   r e c y c l i n g   n e t w o r k s .   I n   t h e   s e c o n d   p e r i o d   ( 2 0 0 6 - 2 0 1 2 ) ,   d i v e r s e   r e s e a r c h   a p p r o a c h e s   a n d   t h e o r i e s   e n r i c h e d   t h e   f i e l d ,   w h i c h   h a s   l e d   t o   a   m a t u r a t i o n   i n   t h e o r y   b u i l d i n g .   O u r   f i n d i n g s   c l e a r l y   i l l u s t r a t e   t h a t   I S   e v o l v e d   f r o m   p r a c t i c e - o r i e n t e d   r e s e a r c h   t o w a r d   c o h e r e n t   t h e o r y   b u i l d i n g   t h r o u g h   a   s y s t e m a t i c   u n d e r p i n n i n g   a n d   l i n k i n g   o f   d i v e r s e   t o p i c s .   A s   s c i e n t i f i c   a t t e n t i o n   s h i f t e d   f r o m   e x p l o r i n g   a   p h e n o m e n o n   t o   e l u c i d a t i n g   u n d e r l y i n g   m e c h a n i s m s ,   I S   k n o w l e d g e   f o u n d   w o r l d w i d e   p r a c t i c a l   i m p l e m e n t a t i o n .   T h e   c o a u t h o r s h i p   n e t w o r k   s h o w s   t h a t   t h e   a c a d e m i c   c o m m u n i t i e s   o f   I S   a r e   d i s t r i b u t e d   w o r l d w i d e   a n d   t h a t   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i s   w i d e s p r e a d .   T h r o u g h   b i b l i o m e t r i c   a n d   n e t w o r k   a n a l y s i s   o f   I S ,   w e   h a v e   c r e a t e d   a   s y s t e m i c ,   q u a n t i t a t i v e   i m a g e   o f   t h e   e v o l u t i o n   o f   t h e   I S   r e s e a r c h   f i e l d   a n d   c o m m u n i t y ,   w h i c h   g i v e s   I S   r e s e a r c h e r s   a n   u n d e r p i n n e d   o v e r v i e w   o f   t h e   I S   r e s e a r c h   a n d   m a y   h e l p   t h e m   t o   i d e n t i f y   n e w   d i r e c t i o n s   a n d   s y n e r g y   i n   w o r l d w i d e   r e s e a r c h . 	 [ Y u ,   C h a n g ;   D a v i s ,   C h r i s ;   D i j k e m a ,   G e r a r d   P .   J . ]   D e l f t   U n i v   T e c h n o l ,   F a c   T e c h n o l   P o l i c y   &   M a n a g e m e n t ,   D e l f t ,   N e t h e r l a n d s 	 Y u ,   C   ( r e p r i n t   a u t h o r ) ,   J a f f a l a a n   5 ,   N L - 2 6 2 8   B X   D e l f t ,   N e t h e r l a n d s . 	 C . Y u @ t u d e l f t . n l 	 	 	 N e x t   G e n e r a t i o n   I n f r a s t r u c t u r e s   F o u n d a t i o n 	 T h e   a u t h o r s   a r e   i n d e b t e d   t o   t h e   e d i t o r   a n d   t h e   t w o   a n o n y m o u s   r e v i e w e r s .   T h i s   w o r k   w a s   s u p p o r t e d   b y   t h e   N e x t   G e n e r a t i o n   I n f r a s t r u c t u r e s   F o u n d a t i o n   ( w w w . n e x t g e n e r a t i o n i n f r a s t r u c t u r e s . e u / ) . 	 A l l e n b y   B . R . ,   1 9 9 4 ,   E N V   Q U A L I T Y   M A N A G E M E ,   V 3 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 2 / t q e m . 3 3 1 0 0 3 0 3 1 0 ;   A s h t o n   W ,   2 0 0 8 ,   J   I N D   E C O L ,   V 1 2 ,   P 3 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 0 - 9 2 9 0 . 2 0 0 8 . 0 0 0 0 2 . x ;   A v i s o   K B ,   2 0 1 0 ,   P R O C E S S   S A F   E N V I R O N ,   V 8 8 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / j . p s e p . 2 0 0 9 . 1 1 . 0 0 3 ;   B a a s   L W ,   2 0 0 4 ,   J   C L E A N   P R O D ,   V 1 2 ,   P 1 0 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 4 . 0 2 . 0 0 5 ;   B a s t i a n   M ,   2 0 0 9 ,   3   I N T   A A A I   C   W E B L   S O ;   C h a i   K H ,   2 0 1 2 ,   D E S I G N   S T U D ,   V 3 3 ,   P 2 4 ,   D O I   1 0 . 1 0 1 6 / j . d e s t u d . 2 0 1 1 . 0 6 . 0 0 4 ;   C h e n   X D ,   2 0 1 2 ,   J   I N D   E C O L ,   V 1 6 ,   P 1 2 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 0 - 9 2 9 0 . 2 0 1 1 . 0 0 4 2 2 . x ;   C h e r t o w   M ,   2 0 1 2 ,   J   I N D   E C O L ,   V 1 6 ,   P 1 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 0 - 9 2 9 0 . 2 0 1 1 . 0 0 4 5 0 . x ;   C h e r t o w   M R ,   2 0 0 7 ,   J   I N D   E C O L ,   V 1 1 ,   P 1 1 ,   D O I   1 0 . 1 1 6 2 / j i e c . 2 0 0 7 . 1 1 1 0 ;   C h e r t o w   M R ,   2 0 0 0 ,   A N N U   R E V   E N E R G   E N V ,   V 2 5 ,   P 3 1 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . e n e r g y . 2 5 . 1 . 3 1 3 ;   C h e w   I M L ,   2 0 0 9 ,   J   C L E A N   P R O D ,   V 1 7 ,   P 1 6 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 9 . 0 8 . 0 0 5 ;   C o s t a   I ,   2 0 1 0 ,   J   C L E A N   P R O D ,   V 1 8 ,   P 9 8 4 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 0 . 0 3 . 0 0 7 ;   C o t e   R . ,   1 9 9 5 ,   J   C L E A N   P R O D ,   V 3 ,   P 4 1 ,   D O I   1 0 . 1 0 1 6 / 0 9 5 9 - 6 5 2 6 ( 9 5 ) 0 0 0 4 1 - C ;   C o t e   R .   P . ,   1 9 9 8 ,   J   C L E A N   P R O D ,   V 6 ,   P 1 8 1 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 6 5 2 6 ( 9 8 ) 0 0 0 2 9 - 8 ;   D e s r o c h e r s   P ,   2 0 0 2 ,   E N T R E P   R E G I O N   D E V ,   V 1 4 ,   P 4 9 ,   D O I   1 0 . 1 0 8 0 / 0 8 9 8 5 6 2 0 1 1 0 0 9 6 6 2 7 ;   E h r e n f e l d   J .   R . ,   1 9 9 7 ,   J   I N D   E C O L ,   V 1 ,   P 6 7 ,   D O I   D O I   1 0 . 1 1 6 2 / J I E C . 1 9 9 7 . 1 . 1 . 6 7 ;   E n g b e r g   H ,   1 9 9 2 ,   I N D   S Y M B I O S I S   D E N M A R ;   E r k m a n   S ,   1 9 9 7 ,   J   C L E A N   P R O D ,   V 5 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 6 5 2 6 ( 9 7 ) 0 0 0 0 3 - 6 ;   F R O S C H   R A ,   1 9 8 9 ,   S C I   A M ,   V 2 6 1 ,   P 1 4 4 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G e n g   Y ,   2 0 0 9 ,   J   C L E A N   P R O D ,   V 1 7 ,   P 1 2 8 9 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 9 . 0 3 . 0 0 9 ;   G e n g   Y ,   2 0 0 8 ,   I N T   J   S U S T   D E V   W O R L D ,   V 1 5 ,   P 5 4 3 ,   D O I   1 0 . 3 8 4 3 / S u s D e v . 1 5 . 6 : 6 ;   G e n g   Y ,   2 0 0 9 ,   W A S T E   M A N A G E ,   V 2 9 ,   P 9 9 6 ,   D O I   1 0 . 1 0 1 6 / j . w a s m a n . 2 0 0 8 . 0 6 . 0 3 6 ;   G i b b s   D ,   2 0 0 7 ,   J   C L E A N   P R O D ,   V 1 5 ,   P 1 6 8 3 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 7 . 0 2 . 0 0 3 ;   G r a e d e l   T E ,   1 9 9 5 ,   I N D   E C O L O G Y ;   H a l v e y   M .   J . ,   2 0 0 7 ,   P   1 6   I N T   C   W O R L D   W I D ;   H A R R I S O N   B ,   1 9 9 2 ,   R E G   S T U D ,   V 2 6 ,   P 4 6 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 9 2 1 2 3 3 1 3 4 7 1 2 1 ;   H e e r e s   R R ,   2 0 0 4 ,   J   C L E A N   P R O D ,   V 1 2 ,   P 9 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 4 . 0 2 . 0 1 4 ;   J a c o b s e n   N B ,   2 0 0 6 ,   J   I N D   E C O L ,   V 1 0 ,   P 2 3 9 ,   D O I   1 0 . 1 1 6 2 / 1 0 8 8 1 9 8 0 6 7 7 5 5 4 5 4 1 1 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K O L L E R   T ,   1 9 1 8 ,   U T I L I Z A T I O N   W A S T E   P R ;   K o r h o n e n   J . ,   2 0 0 4 ,   B U S I N E S S   S T R A T E G Y   E N ,   V 1 3 ,   P 2 8 9 ,   D O I   1 0 . 1 0 0 2 / b s e . 4 1 5 ;   C h u r c h   R ,   2 0 0 5 ,   J   C L E A N   P R O D ,   V 6 9 ,   P 4 1 2 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 6 5 2 6 ( 0 0 ) 0 0 0 5 8 - 5 ;   L i a n g   S ,   2 0 1 1 ,   J   I N D   E C O L ,   V 1 5 ,   P 5 9 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 0 - 9 2 9 0 . 2 0 1 1 . 0 0 3 4 6 . x ;   L i f s e t   R e i d ,   1 9 9 7 ,   J   I N D   E C O L ,   V 1 ,   P 1 ;   L i u   X M ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 2 ;   L o m b a r d i   D R ,   2 0 1 2 ,   J   I N D   E C O L ,   V 1 6 ,   P 2 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 0 - 9 2 9 0 . 2 0 1 1 . 0 0 4 4 4 . x ;   L o m b a r d i   D R ,   2 0 1 2 ,   J   I N D   E C O L ,   V 1 6 ,   P 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 0 - 9 2 9 0 . 2 0 1 2 . 0 0 4 5 5 . x ;   L o w e   E . ,   1 9 9 6 ,   F I E L D B O O K   D E V   E C O I N D ;   L o w e   E .   A . ,   1 9 9 7 ,   J   C L E A N   P R O D ,   V 5 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 6 5 2 6 ( 9 7 ) 0 0 0 1 7 - 6 ;   M a t t i l a   T J ,   2 0 1 0 ,   E N V I R O N   S C I   T E C H N O L ,   V 4 4 ,   P 4 3 0 9 ,   D O I   1 0 . 1 0 2 1 / e s 9 0 2 6 7 3 m ;   M i r a t a   M ,   2 0 0 4 ,   J   C L E A N   P R O D ,   V 1 2 ,   P 9 6 7 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 4 . 0 0 2 . 0 3 1 ;   O h n i s h i   S ,   2 0 1 2 ,   J   C L E A N   P R O D ,   V 3 3 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 1 2 . 0 3 . 0 2 7 ;   P a q u i n   R ,   2 0 0 9 ,   S O C I A L   E M B E D D E D N E S S   O F   I N D U S T R I A L   E C O L O G Y ,   P 1 0 3 ;   P a r k   H S ,   2 0 0 7 ,   J   I N D   E C O L ,   V 1 1 ,   P 1 1 ,   D O I   1 0 . 1 1 6 2 / j i e c . 2 0 0 7 . 1 3 4 6 ;   P e r s s o n   O ,   2 0 0 9 ,   C E L E B R A T I N G   S C H O L A R L ;   P i l k i n g t o n   A ,   2 0 0 9 ,   J   O P E R   M A N A G ,   V 2 7 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 8 . 0 8 . 0 0 1 ;   P o r t e r   M E ,   1 9 9 8 ,   C L U S T E R S   N E W   E C   C O M P ;   S h i   H ,   2 0 1 0 ,   J   C L E A N   P R O D ,   V 1 8 ,   P 1 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 9 . 1 0 . 0 0 2 ;   S i m m o n d s   P L ,   1 8 6 2 ,   W A S T E   P R O D U C T S   U N D E V ;   S m a l l   H . ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 5 ;   v a n   B e e r s   D ,   2 0 0 7 ,   J   I N D   E C O L ,   V 1 1 ,   P 5 5 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W h i t e   H .   D . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ;   Y u a n   Z W ,   2 0 0 6 ,   J   I N D   E C O L ,   V 1 0 ,   P 4 ,   D O I   1 0 . 1 1 6 2 / 1 0 8 8 1 9 8 0 6 7 7 5 5 4 5 3 2 1 ;   B o o n s   F ,   2 0 0 9 ,   S O C I A L   E M B E D D E D N E S S   O F   I N D U S T R I A L   E C O L O G Y ,   P 1 	 5 6 	 1 8 	 2 1 	 9 	 7 8 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 1 0 8 8 - 1 9 8 0 	 1 5 3 0 - 9 2 9 0 	 	 J   I N D   E C O L 	 J .   I n d .   E c o l . 	 A P R 	 2 0 1 4 	 1 8 	 2 	 	 	 	 	 2 8 0 	 2 9 3 	 	 1 0 . 1 1 1 1 / j i e c . 1 2 0 7 3 	 	 1 4 	 G R E E N   &   S U S T A I N A B L E   S C I E N C E   &   T E C H N O L O G Y ;   E n g i n e e r i n g ,   E n v i r o n m e n t a l ;   E n v i r o n m e n t a l   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   E n g i n e e r i n g ;   E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y 	 A F 1 W N 	 W O S : 0 0 0 3 3 4 5 0 4 7 0 0 0 1 3 	 	 
 
 J 	 B a r t o l ,   T ;   B u d i m i r ,   G ;   D e k l e v a - S m r e k a r ,   D ;   P u s n i k ,   M ;   J u z n i c ,   P 	 	 	 	 B a r t o l ,   T o m a z ;   B u d i m i r ,   G o r d a n a ;   D e k l e v a - S m r e k a r ,   D o r i s ;   P u s n i k ,   M i r o ;   J u z n i c ,   P r i m o z 	 	 	 A s s e s s m e n t   o f   r e s e a r c h   f i e l d s   i n   S c o p u s   a n d   W e b   o f   S c i e n c e   i n   t h e   v i e w   o f   n a t i o n a l   r e s e a r c h   e v a l u a t i o n   i n   S l o v e n i a 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   R e s e a r c h   p e r f o r m a n c e ;   R e s e a r c h   e v a l u a t i o n ;   R e s e a r c h   f i e l d s ;   R e s e a r c h   i n f o r m a t i o n   s y s t e m s ;   S l o v e n i a 	 C I T A T I O N   D A T A B A S E S ;   G O O G L E - S C H O L A R ;   I M P A C T ;   J O U R N A L S ;   P R O D U C T I V I T Y ;   C O U N T R I E S ;   R A N K I N G 	 W e b   o f   S c i e n c e   ( w o s )   a n d   s c o p u s   h a v e   o f t e n   b e e n   c o m p a r e d   w i t h   r e g a r d   t o   u s e r   i n t e r f a c e ,   c o u n t r i e s ,   i n s t i t u t i o n s ,   a u t h o r   s e t s ,   e t c . ,   b u t   r a r e l y   e m p l o y i n g   a   m o r e   s y s t e m a t i c   a s s e s s m e n t   o f   m a j o r   r e s e a r c h   f i e l d s   a n d   n a t i o n a l   p r o d u c t i o n .   T h e   a i m   o f   t h i s   s t u d y   w a s   t o   a p p r a i s e   t h e   d i f f e r e n c e s   a m o n g   m a j o r   r e s e a r c h   f i e l d s   i n   s c o p u s   a n d   w o s   b a s e d   o n   a   s t a n d a r d i z e d   c l a s s i f i c a t i o n   o f   f i e l d s   a n d   a s s e s s e d   f o r   t h e   c a s e   o f   a n   e n t i r e   c o u n t r y   ( S l o v e n i a ) .   W e   a n a l y z e d   a l l   d o c u m e n t s   a n d   c i t a t i o n s   r e c e i v e d   b y   a u t h o r s   w h o   w e r e   a c t i v e l y   e n g a g e d   i n   r e s e a r c h   i n   S l o v e n i a   b e t w e e n   1 9 9 6   a n d   2 0 1 1   ( 5 0 , 0 0 0   u n i q u e   d o c u m e n t s   b y   1 0 , 0 0 0   r e s e a r c h e r s ) .   D o c u m e n t s   w e r e   t r a c k e d   a n d   l i n k e d   t o   s c o p u s   a n d   w o s   u s i n g   c o m p l e x   a l g o r i t h m s   i n   t h e   S l o v e n i a n   c o b i s s   b i b l i o g r a p h i c   s y s t e m   a n d   s i c r i s   r e s e a r c h   s y s t e m   w h e r e   t h e   s u b j e c t   a r e a s   o r   r e s e a r c h   f i e l d s   o f   a l l   d o c u m e n t s   a r e   h a r m o n i z e d   b y   t h e   F r a s c a t i / o e c d   c l a s s i f i c a t i o n ,   t h u s   o f f s e t t i n g   s o m e   m a j o r   d i f f e r e n c e s   b e t w e e n   w o s   a n d   s c o p u s   i n   d a t a b a s e - s p e c i f i c   s u b j e c t   s c h e m e s   a s   w e l l   a s   l i m i t a t i o n s   o f   d e r i v i n g   d a t a   d i r e c t l y   f r o m   d a t a b a s e s .   s c o p u s   l e a d s   o v e r   w o s   i n   i n d e x e d   d o c u m e n t s   a s   w e l l   a s   c i t a t i o n s   i n   a l l   r e s e a r c h   f i e l d s .   T h i s   i s   e s p e c i a l l y   e v i d e n t   i n   s o c i a l   s c i e n c e s ,   h u m a n i t i e s ,   a n d   e n g i n e e r i n g   &   t e c h n o l o g y .   T h e   l e a s t   c i t a t i o n s   p e r   d o c u m e n t   w e r e   r e c e i v e d   i n   h u m a n i t i e s   a n d   m o s t   c i t a t i o n s   i n   m e d i c a l   a n d   n a t u r a l   s c i e n c e s ,   w h i c h   e x h i b i t   s i m i l a r   c o u n t s .   E n g i n e e r i n g   &   t e c h n o l o g y   r e v e a l s   o n l y   h a l f   t h e   c i t a t i o n s   p e r   d o c u m e n t   c o m p a r e d   t o   t h e   p r e v i o u s   t w o   f i e l d s .   A g r i c u l t u r e   i s   f o u n d   i n   t h e   m i d d l e .   T h e   e s t a b l i s h e d   d i f f e r e n c e s   b e t w e e n   d a t a b a s e s   a n d   r e s e a r c h   f i e l d s   p r o v i d e   t h e   S l o v e n i a n   r e s e a r c h   f u n d i n g   a g e n c y   w i t h   a d d i t i o n a l   c r i t e r i a   f o r   a   m o r e   b a l a n c e d   e v a l u a t i o n   o f   r e s e a r c h . 	 [ B a r t o l ,   T o m a z ]   U n i v   L j u b l j a n a ,   B i o t e c h   F a c ,   D e p t   A g r o n ,   L j u b l j a n a ,   S l o v e n i a ;   [ B u d i m i r ,   G o r d a n a ]   I n s t   I n f o r m a t   S c i ,   M a r i b o r ,   S l o v e n i a ;   [ D e k l e v a - S m r e k a r ,   D o r i s ;   P u s n i k ,   M i r o ]   U n i v   L j u b l j a n a ,   C e n t   T e c h n o l   L i b ,   L j u b l j a n a ,   S l o v e n i a ;   [ J u z n i c ,   P r i m o z ]   U n i v   L j u b l j a n a ,   F a c   A r t s ,   D e p t   L i b   &   I n f o r m a t   S c i   &   B o o k   S t u d i e s ,   L j u b l j a n a ,   S l o v e n i a 	 B a r t o l ,   T   ( r e p r i n t   a u t h o r ) ,   U n i v   L j u b l j a n a ,   B i o t e c h   F a c ,   D e p t   A g r o n ,   L j u b l j a n a ,   S l o v e n i a . 	 t o m a z . b a r t o l @ b f . u n i - l j . s i 	 B a r t o l ,   T o m a z / D - 9 5 4 6 - 2 0 1 1 	 B a r t o l ,   T o m a z / 0 0 0 0 - 0 0 0 1 - 7 3 2 0 - 2 3 1 4 	 	 	 A b r i z a h   A ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 7 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 1 3 - 7 ;   A k s n e s   D W ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 8 . 0 0 2 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ;   B a r - I l a n   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 8 . 0 0 1 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B a r t o l   T ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 1 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 6 6 - 3 ;   B e n o i t   K ,   2 0 0 9 ,   E C O N   S O C   R E V ,   V 4 0 ,   P 2 6 9 ;   B e r g m a n   E M L ,   2 0 1 2 ,   J   A C A D   L I B R ,   V 3 8 ,   P 3 7 0 ,   D O I   1 0 . 1 0 1 6 / j . a c a l i b . 2 0 1 2 . 0 8 . 0 0 2 ;   B o r n m a n n   L ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 5 6 7 6 8 ;   C h i r i c i   G ,   2 0 1 2 ,   I F O R E S T ,   V 5 ,   P 1 0 1 ,   D O I   1 0 . 3 8 3 2 / i f o r 0 6 1 3 - 0 0 5 ;   C u r k   L . ,   2 0 0 6 ,   O R G   Z N A N J A ,   V 1 1 ,   P 2 3 0 ,   D O I   1 0 . 3 3 5 9 / o z 0 6 0 4 2 3 0 ;   D e m s a r   F ,   2 0 1 4 ,   J   L I B R   I N F   S C I ,   V 4 6 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 1 3 5 0 3 0 0 2 ;   G l a n z e l   W ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 6 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 9 8 - z ;   H a d d o w   G ,   2 0 0 9 ,   A U S T   A C A D   R E S   L I B R ,   V 4 0 ,   P 8 8 ;   H a r z i n g   A W ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 3 8 - 1 ;   J a c s o   P ,   2 0 0 9 ,   O N L I N E   I N F O R M   R E V ,   V 3 3 ,   P 3 7 6 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 9 1 0 9 5 1 2 7 6 ;   K r o n e g g e r   L ,   2 0 1 1 ,   Q U A L   Q U A N T ,   V 4 5 ,   P 9 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 3 5 - 0 1 1 - 9 4 8 4 - 3 ;   L e y d e s d o r f f   L ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 3 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 5 0 ;   L o p e z - I l l e s c a s   C ,   2 0 0 9 ,   J   I N F   S C I ,   V 3 5 ,   P 2 4 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 8 0 9 8 6 0 3 ;   M e h o   L I ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 4 9 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 6 5 ;   P e c l i n   S ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 3 ,   P 9 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 6 8 - 8 ;   P e r c   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 7 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 4 . 0 0 3 ;   P u m a i n   D . ,   2 0 1 0 ,   C Y B E R G E O   E U R O P E A N   J ,   D O I   [ 1 0 . 4 0 0 0 / c y b e r g e o . 2 2 8 6 2 ,   D O I   1 0 . 4 0 0 0 / C Y B E R G E 0 . 2 2 8 6 2 ] ;   T i j s s e n   R J W ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 8 4 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 6 6 ;   T o r r e s - S a l i n a s   D ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 7 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 1 3 - 9 ;   V i e i r a   E S ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 5 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 2 1 7 8 - 0 ;   W e n d t   K . ,   2 0 1 2 ,   P   1 7   I N T   C   S C I   T E C H N ,   V 2 ,   P 8 2 6 ;   Z i b a r e v a   I .   V . ,   2 0 1 1 ,   S c i e n t i f i c   a n d   T e c h n i c a l   I n f o r m a t i o n   P r o c e s s i n g ,   V 3 8 ,   P 2 1 2 ,   D O I   1 0 . 3 1 0 3 / S 0 1 4 7 6 8 8 2 1 1 0 3 0 1 7 8 	 2 8 	 1 8 	 1 8 	 8 	 7 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 4 	 9 8 	 2 	 	 	 	 	 1 4 9 1 	 1 5 0 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 1 4 8 - 8 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 0 2 R M 	 W O S : 0 0 0 3 3 0 6 2 2 6 0 0 0 4 4 	 	 
 
 J 	 S v i d e r ,   P F ;   H u s a i n ,   Q ;   F o l b e ,   A J ;   C o u l d w e l l ,   W T ;   L i u ,   J K ;   E l o y ,   J A 	 	 	 	 S v i d e r ,   P e t e r   F . ;   H u s a i n ,   Q a s i m ;   F o l b e ,   A d a m   J . ;   C o u l d w e l l ,   W i l l i a m   T . ;   L i u ,   J a m e s   K . ;   E l o y ,   J e a n   A n d e r s o n 	 	 	 A s s e s s i n g   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   f u n d i n g   a n d   s c h o l a r l y   i m p a c t   i n   n e u r o l o g i c a l   s u r g e r y 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a c a d e m i c   p r o m o t i o n ;   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   f u n d i n g ;   h   i n d e x ;   s c h o l a r l y   i m p a c t ;   r e s e a r c h   p r o d u c t i v i t y 	 C A R E E R - D E V E L O P M E N T   R E S O U R C E ;   H - I N D E X ;   R E S E A R C H   P R O D U C T I V I T Y ;   A C A D E M I C   O T O L A R Y N G O L O G Y ;   B I B L I O M E T R I C   A N A L Y S I S ;   G E N D E R   D I S P A R I T I E S ;   R E S E A R C H   O U T P U T ;   A N E S T H E S I O L O G I S T S ;   P R O M O T I O N ;   N E U R O S U R G E R Y 	 O b j e c t .   R e s e a r c h   p r o d u c t i v i t y   i s   i n c r e a s i n g l y   i m p o r t a n t   i n   a c a d e m i c   n e u r o l o g i c a l   s u r g e r y   a n d   c a n   b e   m e a s u r e d   t h r o u g h   a   v a r i e t y   o f   m e t h o d s ,   s u c h   a s   p u b l i c a t i o n s ,   o b j e c t i v e   b i b l i o m e t r i c s ,   a n d   s e c u r i n g   e x t e r n a l   g r a n t   s u p p o r t .   T h e   a u t h o r s '   o b j e c t i v e s   w e r e   t o   d e t e r m i n e   w h e t h e r   t h e r e   i s   a n   a s s o c i a t i o n   b e t w e e n   s c h o l a r l y   i m p a c t ,   a s   m e a s u r e d   b y   t h e   h   i n d e x ,   a n d   s u c c e s s f u l   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N T H )   g r a n t   f u n d i n g   a w a r d e d   t o   f a c u l t y   i n   n e u r o l o g i c a l   s u r g e r y   d e p a r t m e n t s .   M e t h o d s .   P r i m a r y   i n v e s t i g a t o r s   r e c e i v i n g   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N I H )   a w a r d s   f r o m   F i s c a l   Y e a r s   2 0 1 1   2 0 1 3   w e r e   o r g a n i z e d   b y   a c a d e m i c   r a n k ,   t e r m i n a l   d e g r e e ,   a n d   t h e i r   h   i n d e x ,   a s   c a l c u l a t e d   f r o m   t h e   S c o p u s   d a t a b a s e .   T h e s e   d a t a   w e r e   a l s o   o b t a i n e d   f o r   n o n f u n d e d   f a c u l t y   f r o m   1 5   r a n d o m l y   s e l e c t e d   d e p a r t m e n t s   f o r   c o m p a r i s o n ,   a n d   t h e   a v e r a g e   h   i n d e x   f o r   e a c h   g r o u p   w a s   c a l c u l a t e d .   R e s u l t s .   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   f u n d e d   f a c u l t y   h a d   h i g h e r   a v e r a g e   h   i n d i c e s   t h a n   t h e i r   n o n f u n d e d   c o l l e a g u e s   ( 2 3 . 6   v s   1 0 . 8 ,   p   <   0 . 0 0 0 1 ) ,   a   f i n d i n g   t h a t   p e r s i s t e d   u p o n   c o n t r o l l i n g   f o r   a c a d e m i c   r a n k .   T h e   m e a n   h   i n d e x   i n c r e a s e d   w i t h   s u c c e s s i v e   a c a d e m i c   r a n k   i n   b o t h   c o h o r t s ;   g r e a t e r   f u n d i n g   t o t a l s   w e r e   s e e n   w i t h   s u c c e s s i v e   a c a d e m i c   p o s i t i o n   ( K r u s k a l - W a l l i s ,   p   <   0 . 0 5 ) .   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   f u n d e d   M D s   h a d   h i g h e r   h   i n d i c e s   t h a n   t h e i r   P h D   c o l l e a g u e s   ( p   =   0 . 0 4 ) ,   a l t h o u g h   f u n d i n g   l e v e l s   d i d   n o t   d i f f e r   s i g n i f i c a n t l y .   T h e r e   w a s   a   t r e n d   o f   i n c r e a s i n g   h   i n d e x   w i t h   h i g h e r   N T H - f u n d i n g   r a n g e s   ( p   <   0 . 0 5 ) .   C o n c l u s i o n s .   T h e   a u t h o r s '   f i n d i n g s   d e m o n s t r a t e   a   s t r o n g   r e l a t i o n s h i p   b e t w e e n   s c h o l a r l y   i m p a c t   a n d   s e c u r i n g   N I H   f u n d i n g   a m o n g   f a c u l t y   i n   a c a d e m i c   n e u r o s u r g i c a l   d e p a r t m e n t s .   F a c u l t y   r e c e i v i n g   a   g r e a t e r   a m o u n t   o f   f u n d i n g   t e n d e d   t o   h a v e   a   h i g h e r   h   i n d e x .   M e a n   s c h o l a r l y   i m p a c t ,   a s   m e a s u r e d   b y   t h e   h   i n d e x ,   i n c r e a s e d   w i t h   s u c c e s s i v e   a c a d e m i c   r a n k   a m o n g   b o t h   N T H - f u n d e d   a n d   n o n f u n d e d   f a c u l t y ,   s u g g e s t i n g   t h a t   t h i s   b i b l i o m e t r i c   m a y   h a v e   u t i l i t y   a s   a n   a d j u n c t   i n   t h e   a c a d e m i c   a p p o i n t m e n t   a n d   p r o m o t i o n   p r o c e s s   i n   a c a d e m i c   n e u r o l o g i c a l   s u r g e r y . 	 [ S v i d e r ,   P e t e r   F . ;   H u s a i n ,   Q a s i m ;   L i u ,   J a m e s   K . ;   E l o y ,   J e a n   A n d e r s o n ]   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   D e p t   N e u r o l   S u r g ,   N e w a r k ,   N J   0 7 1 0 3   U S A ;   [ S v i d e r ,   P e t e r   F . ;   L i u ,   J a m e s   K . ;   E l o y ,   J e a n   A n d e r s o n ]   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   D e p t   O t o l a r y n g o l   H e a d   &   N e c k   S u r g ,   N e w a r k ,   N J   0 7 1 0 3   U S A ;   [ L i u ,   J a m e s   K . ;   E l o y ,   J e a n   A n d e r s o n ]   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   C t r   S k u l l   B a s e   &   P i t u i t a r y   S u r g ,   N e w a r k ,   N J   0 7 1 0 3   U S A ;   [ S v i d e r ,   P e t e r   F . ;   F o l b e ,   A d a m   J . ]   W a y n e   S t a t e   U n i v ,   S c h   M e d ,   D e p t   O t o l a r y n g o l   H e a d   &   N e c k   S u r g ,   D e t r o i t ,   M I   U S A ;   [ C o u l d w e l l ,   W i l l i a m   T . ]   U n i v   U t a h ,   D e p t   N e u r o s u r g ,   S a l t   L a k e   C i t y ,   U T   U S A 	 L i u ,   J K   ( r e p r i n t   a u t h o r ) ,   R u t g e r s   N e w   J e r s e y   M e d   S c h ,   D e p t   N e u r o l   S u r g ,   9 0   B e r g e n   S t , S t e   8 1 0 0 ,   N e w a r k ,   N J   0 7 1 0 3   U S A . 	 j a m e s . l i u . m d @ r u t g e r s . e d u 	 	 	 	 	 A d d o n a   T ,   2 0 0 9 ,   P L A S T   R E C O N S T R   S U R G ,   V 1 2 3 ,   P 7 5 0 ,   D O I   1 0 . 1 0 9 7 / P R S . 0 b 0 1 3 e 3 1 8 1 9 7 e d 2 0 ;   B a l d w i n   C ,   2 0 1 1 ,   T E A C H   L E A R N   M E D ,   V 2 3 ,   P 2 8 5 ,   D O I   1 0 . 1 0 8 0 / 1 0 4 0 1 3 3 4 . 2 0 1 1 . 5 8 6 9 3 6 ;   B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B l i g h   J ,   2 0 0 9 ,   A C A D   M E D ,   V 8 4 ,   P 1 1 6 1 ,   D O I   1 0 . 1 0 9 7 / A C M . 0 b 0 1 3 e 3 1 8 1 a c e 6 3 3 ;   B u r n e t t   M G ,   2 0 0 4 ,   J   N E U R O S U R G ,   V 1 0 0 ,   P 7 3 ,   D O I   1 0 . 3 1 7 1 / j n s . 2 0 0 4 . 1 0 0 . 1 . 0 0 7 3 ;   C a s t i l l o   M ,   2 0 1 0 ,   A M   J   N E U R O R A D I O L ,   V 3 1 ,   P 7 8 3 ,   D O I   1 0 . 3 1 7 4 / a j n r . A 1 8 8 8 ;   C o l a c o   M ,   2 0 1 3 ,   J   U R O L O G Y ,   V 1 9 0 ,   P 9 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j u r o . 2 0 1 3 . 0 2 . 3 1 8 6 ;   D i x o n   A K ,   2 0 0 9 ,   S I N G A P   M E D   J ,   V 5 0 ,   P 8 4 7 ;   E l o y   J A ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 8 6 5 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 4 0 3 9 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 9 ,   P 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 3 4 8 6 0 8 3 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 8 ,   P 7 6 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 3 4 8 1 9 4 3 ;   E l o y   J A ,   2 0 1 3 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 4 8 ,   P 2 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 4 5 9 9 8 1 2 4 6 6 0 5 5 ;   E l o y   J A ,   2 0 1 2 ,   L A R Y N G O S C O P E ,   V 1 2 2 ,   P 2 6 9 0 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 7 4 9 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   G a s t e r   N ,   2 0 1 2 ,   B I O E S S A Y S ,   V 3 4 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / b i e s . 2 0 1 2 0 0 0 3 6 ;   H a u p t m a n   J S ,   2 0 1 1 ,   J   N E U R O S U R G ,   V 1 1 5 ,   P 1 2 6 2 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 1 . 8 . J N S 1 1 8 5 7 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J e a n g   K T ,   2 0 0 8 ,   R E T R O V I R O L O G Y ,   V 5 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 4 6 9 0 - 5 - 1 0 6 ;   K o t c h e n   T A ,   2 0 0 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 1 ,   P 8 3 6 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 1 . 7 . 8 3 6 ;   L A N G F I T T   T W ,   1 9 8 2 ,   J   N E U R O S U R G ,   V 5 7 ,   P 7 3 3 ,   D O I   1 0 . 3 1 7 1 / j n s . 1 9 8 2 . 5 7 . 6 . 0 7 3 3 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   [ A n o n y m o u s ] ,   P E E R   R E V   P R O C ;   P a g e l   P S ,   2 0 1 1 ,   A C T A   A N A E S T H   S C A N D ,   V 5 5 ,   P 1 0 8 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 9 - 6 5 7 6 . 2 0 1 1 . 0 2 5 0 8 . x ;   P a g e l   P S ,   2 0 1 1 ,   A N A E S T H E S I A ,   V 6 6 ,   P 8 7 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 1 1 . 0 6 8 6 0 . x ;   P a g e l   P S ,   2 0 1 1 ,   B R I T   J   A N A E S T H ,   V 1 0 7 ,   P 3 5 7 ,   D O I   1 0 . 1 0 9 3 / b j a / a e r 1 9 1 ;   P a g e l   P S ,   2 0 1 1 ,   J   C A R D I O T H O R   V A S C   A N ,   V 2 5 ,   P 7 6 1 ,   D O I   1 0 . 1 0 5 3 / j . j v c a . 2 0 1 1 . 0 3 . 0 0 3 ;   P a s h k o v a   A A ,   2 0 1 3 ,   A C T A   A N A E S T H   S C A N D ,   V 5 7 ,   P 1 0 5 8 ,   D O I   1 0 . 1 1 1 1 / a a s . 1 2 1 4 1 ;   P a t r o   B K ,   2 0 1 1 ,   J   P O S T G R A D   M E D ,   V 5 7 ,   P 2 6 4 ,   D O I   1 0 . 4 1 0 3 / 0 0 2 2 - 3 8 5 9 . 8 5 2 3 3 ;   P o y n a r d   T ,   2 0 1 1 ,   C L I N   R E S   H E P A T O L   G A S ,   V 3 5 ,   P 3 7 5 ,   D O I   1 0 . 1 0 1 6 / j . c l i n r e . 2 0 1 1 . 0 2 . 0 1 4 ;   Q u i g l e y   M R ,   2 0 1 2 ,   J   C A N C E R   E D U C ,   V 2 7 ,   P 4 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 3 1 8 7 - 0 1 2 - 0 3 6 3 - y ;   R a d   A E ,   2 0 1 0 ,   A C A D   R A D I O L ,   V 1 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 0 . 0 3 . 0 1 1 ;   R e z e k   I ,   2 0 1 1 ,   A C A D   R A D I O L ,   V 1 8 ,   P 1 3 3 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 1 . 0 6 . 0 1 7 ;   S a n f e y   H ,   2 0 1 2 ,   A M   J   S U R G ,   V 2 0 4 ,   P 1 2 6 ,   D O I   1 0 . 1 0 1 6 / j . a m j s u r g . 2 0 1 2 . 0 4 . 0 0 1 ;   S a n f e y   H ,   2 0 1 0 ,   A M   J   S U R G ,   V 2 0 0 ,   P 5 5 4 ,   D O I   1 0 . 1 0 1 6 / j . a m j s u r g . 2 0 1 0 . 0 7 . 0 0 1 ;   S h a r m a   B ,   2 0 1 3 ,   S U R G E R Y ,   V 1 5 3 ,   P 4 9 3 ,   D O I   1 0 . 1 0 1 6 / j . s u r g . 2 0 1 2 . 0 9 . 0 0 6 ;   S v i d e r   P F ,   2 0 1 3 ,   A M   J   R H I N O L   A L L E R G Y ,   V 2 7 ,   p E 1 3 1 ,   D O I   1 0 . 2 5 0 0 / a j r a . 2 0 1 3 . 2 7 . 3 9 4 7 ;   S v i d e r   P F ,   2 0 1 3 ,   A M   J   O T O L A R Y N G ,   V 3 4 ,   P 4 6 4 ,   D O I   1 0 . 1 0 1 6 / j . a m j o t o . 2 0 1 3 . 0 4 . 0 0 3 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 8 8 4 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 9 5 1 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 1 8 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 6 5 9 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 5 6 9 ;   T u r a g a   K K ,   2 0 1 2 ,   J   S U R G   E D U C ,   V 6 9 ,   P 4 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j s u r g . 2 0 1 2 . 0 2 . 0 0 4 ;   Z e r h o u n i   E A ,   R E V   P E E R   R E V   N I H   N E E 	 4 2 	 1 8 	 1 8 	 0 	 1 0 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 1 9 3 3 - 0 6 9 3 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 J A N 	 2 0 1 4 	 1 2 0 	 1 	 	 	 	 	 1 9 1 	 1 9 6 	 	 1 0 . 3 1 7 1 / 2 0 1 3 . 8 . J N S 1 3 9 3 8 	 	 6 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 2 8 1 G L 	 W O S : 0 0 0 3 2 9 0 8 7 9 0 0 0 2 9 	 2 4 2 1 5 1 6 3 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 I n d i v i d u a l   r e s e a r c h   p e r f o r m a n c e :   A   p r o p o s a l   f o r   c o m p a r i n g   a p p l e s   t o   o r a n g e s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   B i b l i o m e t r i c s ;   C i t a t i o n s ;   P r o d u c t i v i t y ;   S t a n d a r d i z a t i o n 	 C I T A T I O N   C H A R A C T E R I S T I C S ;   S C I E N C E   S Y S T E M ;   S C A L I N G   R U L E S ;   F I E L D ;   I M P A C T 	 T h e   e v a l u a t i o n   o f   p e r f o r m a n c e   a t   t h e   i n d i v i d u a l   l e v e l   i s   o f   f u n d a m e n t a l   i m p o r t a n c e   i n   i n f o r m i n g   m a n a g e m e n t   d e c i s i o n s .   T h e   l i t e r a t u r e   p r o v i d e s   v a r i o u s   i n d i c a t o r s   a n d   t y p e s   o f   m e a s u r e s ,   h o w e v e r   a   p r o b l e m   t h a t   i s   s t i l l   u n r e s o l v e d   a n d   l i t t l e   a d d r e s s e d   i s   h o w   t o   c o m p a r e   t h e   p e r f o r m a n c e   o f   r e s e a r c h e r s   w o r k i n g   i n   d i f f e r e n t   f i e l d s   ( a p p l e s   t o   o r a n g e s ) .   I n   t h i s   w o r k   w e   p r o p o s e   a   s o l u t i o n ,   t e s t i n g   v a r i o u s   s c a l i n g   f a c t o r s   f o r   t h e   d i s t r i b u t i o n s   o f   r e s e a r c h   p r o d u c t i v i t y   i n   1 7 4   s c i e n t i f i c   f i e l d s .   T h e   a n a l y s i s   i s   b a s e d   o n   t h e   o b s e r v a t i o n   o f   s c i e n t i f i c   p r o d u c t i o n   b y   a l l   I t a l i a n   u n i v e r s i t y   r e s e a r c h e r s   a c t i v e   i n   t h e   h a r d   s c i e n c e s   o v e r   t h e   p e r i o d   2 0 0 4 - 2 0 0 8 ,   a s   i n d e x e d   b y   t h e   W e b   o f   S c i e n c e .   T h e   m o s t   e f f e c t i v e   s c a l i n g   f a c t o r   i s   t h e   a v e r a g e   o f   t h e   p r o d u c t i v i t y   d i s t r i b u t i o n   o f   r e s e a r c h e r s   w i t h   p r o d u c t i v i t y   a b o v e   z e r o .   ( c )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ]   U n i v   R o m a   T o r   V e r g a t a ,   N a t l   R e s   C o u n c i l   I t a l y   I A S I   C N R ,   R o m e ,   I t a l y ;   [ C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   t i n d a r o . c i c e r o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 3 ,   P 7 6 2 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 4 7 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 3 . 0 0 5 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   C o s t a s   R ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 7 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 1 7 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   R a d i c c h i   F ,   2 0 1 1 ,   P H Y S   R E V   E ,   V 8 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 3 . 0 4 6 1 1 6 ;   S a n d s t r o m   E . ,   2 0 0 9 ,   1 2   I N T   C   S C I   I N F   J U L ;   S p r e n t   P . ,   2 0 0 1 ,   A P P L   N O N P A R A M E T R I C   S ;   T h o m p s o n   B . ,   1 9 9 3 ,   A N N   M   M I D S   E D   R E S   A S ;   v a n   R a a n   A F J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 5 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y 	 1 3 	 1 8 	 1 8 	 2 	 2 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 	 2 0 1 3 	 7 	 2 	 	 	 	 	 5 2 8 	 5 3 9 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 1 . 0 1 3 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 3 6 P Y 	 W O S : 0 0 0 3 1 8 3 7 7 1 0 0 0 2 9 	 	 
 
 J 	 V o g e l ,   R 	 	 	 	 V o g e l ,   R i c k 	 	 	 T h e   V i s i b l e   C o l l e g e s   o f   M a n a g e m e n t   a n d   O r g a n i z a t i o n   S t u d i e s :   A   B i b l i o m e t r i c   A n a l y s i s   o f   A c a d e m i c   J o u r n a l s 	 O R G A N I Z A T I O N   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c o - c i t a t i o n   a n a l y s i s ;   f r a g m e n t e d   a d h o c r a c y ;   i n v i s i b l e   c o l l e g e s ;   j o u r n a l s ;   o r g a n i z a t i o n   s t u d i e s ;   s c i e n t i f i c   c o m m u n i t i e s ;   t w o - m o d e   n e t w o r k s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   I N V I S I B L E - C O L L E G E S ;   D Y N A M I C   C A P A B I L I T I E S ;   S T R A T E G I C   M A N A G E M E N T ;   S O C I A L - S T R U C T U R E ;   S C I E N C E ;   S C I E N T I S T S ;   K N O W L E D G E ;   F I R M ;   D I V E R S I F I C A T I O N 	 I n f o r m a l   g r o u p s   p l a y   a   p i v o t a l   r o l e   i n   t h e   s o c i o - c o g n i t i v e   s t r u c t u r i n g   a n d   d e v e l o p m e n t   o f   a l l   s c i e n t i f i c   f i e l d s .   W h i l e   m o s t   s o c i a l   s t u d i e s   o n   s u c h   g r o u p s   p r e s e n t   a   s t a t i c   v i e w ,   t a k i n g   a   s n a p s h o t   o f   t h e m   a t   a   c e r t a i n   m o m e n t   i n   t i m e ,   t h i s   s t u d y   s h e d s   a   d y n a m i c   p e r s p e c t i v e   o n   i n v i s i b l e   c o l l e g e s   a n d   e x a m i n e s   e m p i r i c a l l y   h o w   t h e y   e v o l v e   i n   t h e   c o u r s e   o f   t i m e .   D r a w i n g   o n   t h e   n e o - K u h n i a n   s o c i o l o g y   o f   s c i e n c e ,   i t   d e f i n e s   i n v i s i b l e   c o l l e g e s   a s   c o m m u n i c a t i o n   n e t w o r k s   a n d   c o n s i d e r s   h o w   t h e i r   e m e r g e n c e   a n d   e v o l u t i o n   i s   a f f e c t e d   b y   t h e   o r g a n i z a t i o n a l   f e a t u r e s   o f   f r a g m e n t e d   a d h o c r a c i e s .   T h e   e m p i r i c a l   a s p e c t   f o c u s e s   o n   f o r m a l   s c h o l a r l y   c o m m u n i c a t i o n   t h r o u g h   p u b l i c a t i o n   i n   a   s a m p l e   o f   s e v e n   l e a d i n g   j o u r n a l s   i n   t h e   f i e l d   o f   m a n a g e m e n t   a n d   o r g a n i z a t i o n   s t u d i e s   o v e r   t h r e e   d e c a d e s .   T h e   m e t h o d o l o g y   i s   r o o t e d   i n   b i b l i o m e t r i c s   a n d   c o m b i n e s   c o - c i t a t i o n   a n a l y s i s   w i t h   n e t w o r k   v i s u a l i z a t i o n .   T h e   r e s u l t i n g   n e t w o r k s ,   w h i c h   r e f l e c t   t h e   c o m m u n i t y   s t r u c t u r e   o f   t h e   f i e l d ,   m a p   4 0   d i f f e r e n t   c o l l e g e s .   S e v e n   p a t t e r n s   o f   h o w   t h i s   n e s t e d   s t r u c t u r e   e v o l v e s   a r e   d e r i v e d :   c o l l e g e   a p p e a r a n c e ,   t r a n s f o r m a t i o n ,   d r i f t ,   d i f f e r e n t i a t i o n ,   f u s i o n ,   i m p l o s i o n   a n d   r e v i v a l .   T h e   p a p e r   c l o s e s   w i t h   s u g g e s t i o n s   f o r   f u r t h e r   r e s e a r c h   o n   t h o s e   p a t t e r n s . 	 [ V o g e l ,   R i c k ]   Z e p p e l i n   U n i v ,   F r i e d r i c h s h a f e n ,   G e r m a n y 	 V o g e l ,   R   ( r e p r i n t   a u t h o r ) ,   D e p t   P u b l   M a n a g e m e n t   &   G o v e r n a n c e ,   S e e m o o s e r   H o r n   2 0 ,   D - 8 8 0 4 5   F r i e d r i c h s h a f e n ,   G e r m a n y . 	 r i c k . v o g e l @ z e p p e l i n - u n i v e r s i t y . d e 	 	 	 	 	 A B R A H A M S O N   E ,   1 9 9 1 ,   A C A D   M A N A G E   R E V ,   V 1 6 ,   P 5 8 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 9 1 9 ;   A b r a h a m s o n   E ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 2 5 4 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 9 6 . 9 6 0 2 1 6 1 5 7 2 ;   A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A r g y r i s   C . ,   1 9 7 8 ,   O R G   L E A R N I N G   T H E O R Y ;   A x e l r o d   R . ,   1 9 8 4 ,   E V O L U T I O N   C O O P E R A T I O ;   B a r k e r   P ,   1 9 9 8 ,   C O N F I G U R A T I O N S ,   V 6 ,   P 2 1 ,   D O I   1 0 . 1 3 5 3 / c o n . 1 9 9 8 . 0 0 0 1 ;   B a r n e s   B a r r y ,   1 9 7 4 ,   S C I   K N O W L E D G E   S O C I O L ;   B A R N E Y   J B ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 2 3 0 ;   B a r r y   D ,   1 9 9 7 ,   A C A D   M A N A G E   R E V ,   V 2 2 ,   P 4 2 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 3 2 9 ;   B a t t i l a n a   J ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 6 9 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 0 3 7 2 5 7 3 ;   B e c h e r   T ,   1 9 8 9 ,   A C A D   T R I B E S   T E R R I T O R ;   B e r g e r   P e t e r   L . ,   1 9 6 7 ,   S O C I A L   C O N S T R U C T I O N ;   B l a u   P .   M . ,   1 9 6 4 ,   E X C H A N G E   P O W E R   S O C I A ;   B l o o r   D a v i d ,   1 9 7 6 ,   K N O W L E D G E   S O C I A L   I M A ;   B o r g a t t i   S P ,   1 9 9 9 ,   S O C   N E T W O R K S ,   V 2 1 ,   P 3 7 5 ;   F r e e m a n   L .   C . ,   2 0 0 2 ,   U C I N E T   W I N D O W S   S O F T W ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r t   S ,   2 0 1 1 ,   O R G A N   S T U D ,   V 3 2 ,   P 6 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 1 4 0 5 4 2 7 ;   B o u r d i e u   P . ,   1 9 9 0 ,   L O G I C   P R A C T I C E ;   B r a v e r m a n   H . ,   1 9 7 4 ,   L A B O R   M O N O P O L Y   C A P I T ;   B r a x t o n   J .   M . ,   1 9 9 6 ,   H I G H E R   E D   H D B   T H E O R Y ,   P 1 ;   B u r n s   T . ,   1 9 6 1 ,   M A N A G E M E N T   I N N O V A T I O ;   B u r r e l l   G . ,   1 9 7 9 ,   S O C I O L O G I C A L   P A R A D I G ;   B u r t   R S ,   2 0 0 0 ,   R E S   O R G A N   B E H A V ,   V 2 2 ,   P 3 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 1 - 3 0 8 5 ( 0 0 ) 2 2 0 0 9 - 1 ;   C A L A S   M B ,   1 9 9 1 ,   O R G A N   S T U D ,   V 1 2 ,   P 5 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 1 0 1 2 0 0 4 0 6 ;   C A N N E L L A   A A ,   1 9 9 4 ,   A C A D   M A N A G E   R E V ,   V 1 9 ,   P 3 3 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 7 0 8 ;   C h a n d l e r   A .   D . ,   1 9 6 2 ,   S T R A T E G Y   S T R U C T U R E   C ;   C H I L D   J ,   1 9 7 3 ,   A D M I N   S C I   Q U A R T ,   V 1 8 ,   P 1 6 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 0 6 1 ;   C H U B I N   D E ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 2 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 8 ;   C O N N E R   K R ,   1 9 9 1 ,   J   M A N A G E ,   V 1 7 ,   P 1 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 1 0 1 7 0 0 1 0 9 ;   C o u r p a s s o n   D ,   2 0 0 8 ,   O R G A N   S T U D ,   V 2 9 ,   P 1 3 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 8 0 9 9 5 2 0 ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C r a w f o r d   S . ,   1 9 7 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 2 ,   P 2 8 ;   C R O N I N   B ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 2 1 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 3 0 ;   D i   S t e f a n o   G ,   2 0 1 0 ,   I N D   C O R P   C H A N G E ,   V 1 9 ,   P 1 1 8 7 ,   D O I   1 0 . 1 0 9 3 / i c c / d t q 0 2 7 ;   D I M A G G I O   P J ,   1 9 8 3 ,   A M   S O C I O L   R E V ,   V 4 8 ,   P 1 4 7 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 1 0 1 ;   D o n a l d s o n   L e x ,   1 9 8 5 ,   D E F E N C E   O R G   T H E O R Y   R ;   D R A Z I N   R ,   1 9 8 5 ,   A D M   S C I   Q ,   V 3 0 ,   P 5 1 4 ,   D O I   D O I   1 0 . 2 3 0 7 / 2 3 9 2 6 9 5 ;   E i s e n h a r d t   K M ,   2 0 0 0 ,   S T R A T E G I C   M A N A G E   J ,   V 2 1 ,   P 1 1 0 5 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 0 2 6 6 ( 2 0 0 0 1 0 / 1 1 ) 2 1 : 1 0 / 1 1 < 1 1 0 5 : : A I D - S M J 1 3 3 > 3 . 0 . C O ; 2 - E ;   E M E R S O N   R M ,   1 9 6 2 ,   A M   S O C I O L   R E V ,   V 2 7 ,   P 3 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 8 9 7 1 6 ;   F o s s   N .   J . ,   2 0 0 9 ,   J   M A N A G E   S T U D ,   V 4 7 ,   P 4 5 5 ;   F o s s   N J ,   2 0 0 7 ,   O R G A N I Z A T I O N ,   V 1 4 ,   P 2 9 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 0 7 0 7 1 8 5 9 ;   F o u c a u l t   M . ,   1 9 7 7 ,   D I S C I P L I N E   P U N I S H   B I ;   F o u c a u l t   M . ,   1 9 8 0 ,   P O W E R   K N O W L E D G E   S E L E ;   G a b r i e l   Y ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 7 5 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 0 3 7 2 5 7 4 ;   G e e r t z   C . ,   1 9 7 3 ,   I N T E R P R E T A T I O N   C U L T U ;   G m u r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 1 9 5 0 3 0 0 5 ;   G R A N O V E T T E R   M S ,   1 9 7 3 ,   A M   J   S O C I O L ,   V 7 8 ,   P 1 3 6 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 5 4 6 9 ;   G r e e n w o o d   R ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 1 0 2 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 1 6 3 ;   G r e y   C ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 6 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 0 3 7 2 5 7 5 ;   G R I F F I T H   B C ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 7 ,   P 9 5 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 7 . 4 0 5 3 . 9 5 9 ;   G r i f f i t h   B .   C . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 1 2 5 ;   H a b e r m a s   J . ,   1 9 6 8 ,   K N O W L E D G E   H U M A N   I N T E ;   H a g s t r o m   W .   O . ,   1 9 6 5 ,   S C I   C O M M U N I T Y ;   H a r g e n s   L L ,   2 0 0 0 ,   A M   S O C I O L   R E V ,   V 6 5 ,   P 8 4 6 ,   D O I   1 0 . 2 3 0 7 / 2 6 5 7 5 1 6 ;   H E L M I C H   D L ,   1 9 7 2 ,   A D M I N   S C I   Q U A R T ,   V 1 7 ,   P 3 7 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 1 5 0 ;   H I C K S O N   D J ,   1 9 6 9 ,   A D M I N   S C I   Q U A R T ,   V 1 4 ,   P 3 7 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 1 1 3 4 ;   H I L L   C W L ,   1 9 9 0 ,   A C A D   M A N A G E   R E V ,   V 1 5 ,   P 5 0 0 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 0 2 0 ;   H O S K I S S O N   R E ,   1 9 9 0 ,   J   M A N A G E ,   V 1 6 ,   P 4 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 0 0 1 6 0 0 2 1 0 ;   J A M E S   D R ,   1 9 8 1 ,   A M   S O C I O L   R E V ,   V 4 6 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 0 2 3 ;   J a n i s   I . L . ,   1 9 7 7 ,   D E C I S I O N   M A K I N G   P S Y C ;   K A D U S H I N   C ,   1 9 6 6 ,   A M   S O C I O L   R E V ,   V 3 1 ,   P 7 8 6 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 1 6 5 8 ;   K i r k m a n   B L ,   2 0 0 6 ,   J   I N T   B U S   S T U D ,   V 3 7 ,   P 2 8 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 2 0 2 ;   K n o r r - C e t i n a   K . K . ,   1 9 8 1 ,   M A N U F A C T U R E   K N O W L E D G ;   K o g u t   B ,   1 9 9 6 ,   O R G A N   S C I ,   V 7 ,   P 5 0 2 ,   D O I   1 0 . 1 2 8 7 / o r s c . 7 . 5 . 5 0 2 ;   K R A N T Z   D L ,   1 9 7 1 ,   J   A P P L   B E H A V   A N A L ,   V 4 ,   P 6 1 ,   D O I   1 0 . 1 9 0 1 / j a b a . 1 9 7 1 . 4 - 6 1 ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   L a t o u r   B . ,   1 9 9 2 ,   S H A P I N G   T E C H N O L O G Y   B ,   P 2 2 5 ;   L a t o u r   B . ,   1 9 7 9 ,   L A B   L I F E   S O C I A L   C O N S ;   L a t o u r   B ,   1 9 8 7 ,   S C I   A C T I O N   F O L L O W   S C ;   L a w   J ,   1 9 9 1 ,   S O C I O L O G Y   M O N S T E R S   E ;   L a w r e n c e   P . ,   1 9 6 7 ,   O R G   E N V   M A N A G I N G   D I F ;   L E O N A R D B A R T O N   D ,   1 9 9 2 ,   S T R A T E G I C   M A N A G E   J ,   V 1 3 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 3 1 0 0 9 ;   L E V I T T   B ,   1 9 8 8 ,   A N N U   R E V   S O C I O L ,   V 1 4 ,   P 3 1 9 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . s o . 1 4 . 0 8 0 1 8 8 . 0 0 1 5 3 5 ;   L e y d e s d o r f f   L . ,   2 0 0 1 ,   C H A L L E N G E   S C I E N T O M E T ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   L I E V R O U W   L A ,   1 9 8 7 ,   S O C   N E T W O R K S ,   V 9 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 8 7 ) 9 0 0 2 1 - 9 ;   L o u n s b u r y   M ,   2 0 0 5 ,   O R G A N   S T U D ,   V 2 6 ,   P 5 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 5 0 5 1 4 8 6 ;   L u h m a n n   N i k l a s ,   1 9 9 7 ,   G E S E L L S C H A F T   G E S E L L S ;   M a r c h   J ,   1 9 5 8 ,   O R G A N I Z A T I O N S ;   M a r c h   J . ,   1 9 7 6 ,   A M B I G U I T Y   C H O I C E   O R G ;   M a r c h   J G ,   2 0 0 7 ,   O R G A N   S T U D ,   V 2 8 ,   P 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 7 0 7 5 2 7 7 ;   M a r c h   J G ,   1 9 9 1 ,   O R G A N   S C I ,   V 2 ,   P 7 1 ,   D O I   1 0 . 1 2 8 7 / o r s c . 2 . 1 . 7 1 ;   M A R T I N   J ,   1 9 9 4 ,   O R G A N I Z A T I O N ,   V 1 ,   P 4 0 1 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 9 4 1 2 0 1 1 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C K I N L E Y   W ,   1 9 9 9 ,   A C A D   M A N A G E   R E V ,   V 2 4 ,   P 6 3 4 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 3 4 6 ;   M c K i n l e y   W ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 9 3 4 7 0 5 5 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ;   M E Y E R   A D ,   1 9 9 3 ,   A C A D   M A N A G E   J ,   V 3 6 ,   P 1 1 7 5 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 8 0 9 ;   M E Y E R   J W ,   1 9 7 7 ,   A M   J   S O C I O L ,   V 8 3 ,   P 3 4 0 ,   D O I   1 0 . 1 0 8 6 / 2 2 6 5 5 0 ;   M e y e r   R E ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 7 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 0 3 7 2 5 7 9 ;   M i l l e r   D ,   2 0 0 9 ,   J   M A N A G E   I N Q U I R Y ,   V 1 8 ,   P 2 7 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 9 3 4 4 6 7 2 ;   M I N T Z B E R G   H ,   1 9 7 8 ,   M A N A G E   S C I ,   V 2 4 ,   P 9 3 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 4 . 9 . 9 3 4 ;   M O R R O W   P C ,   1 9 8 3 ,   A C A D   M A N A G E   R E V ,   V 8 ,   P 4 8 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 8 3 7 ;   M O W D A Y   R T ,   1 9 7 9 ,   J   V O C A T   B E H A V ,   V 1 4 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 1 - 8 7 9 1 ( 7 9 ) 9 0 0 7 2 - 1 ;   M U L K A Y   M J ,   1 9 7 5 ,   S O C I O L   R E V ,   V 2 3 ,   P 5 0 9 ;   M U L K A Y   M J ,   1 9 7 5 ,   S O C I O L O G Y ,   V 9 ,   P 1 8 7 ,   D O I   1 0 . 1 1 7 7 / 0 0 3 8 0 3 8 5 7 5 0 0 9 0 0 2 0 1 ;   M U L L I N S   N C ,   1 9 7 3 ,   S C I   S T U D ,   V 3 ,   P 2 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 3 0 0 3 0 0 3 0 2 ;   M U L L I N S   N C ,   1 9 7 2 ,   M I N E R V A ,   V 1 0 ,   P 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 8 8 1 3 9 0 ;   M U L L I N S   N C ,   1 9 7 3 ,   T H E O R I E S   T H E O R Y   G R O U ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   N O M A   E ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 1 0 5 ;   O L I V E R   C ,   1 9 9 2 ,   O R G A N   S T U D ,   V 1 3 ,   P 5 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 2 0 1 3 0 0 4 0 3 ;   P e t e r s   T . ,   1 9 8 2 ,   S E A R C H   E X C E L L E N C E ;   P E T T I G R E W   A M ,   1 9 7 9 ,   A D M I N   S C I   Q U A R T ,   V 2 4 ,   P 5 7 0 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 3 6 3 ;   P F E F F E R   J ,   1 9 9 3 ,   A C A D   M A N A G E   R E V ,   V 1 8 ,   P 5 9 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 5 9 2 ;   P f e f f e r   J . ,   1 9 7 8 ,   E X T E R N A L   C O N T R O L   O R G ;   P O W E L L   W W ,   1 9 9 0 ,   R E S   O R G A N   B E H A V ,   V 1 2 ,   P 2 9 5 ;   d e   S o l l a   P r i c e   D e r e k   J . ,   1 9 6 5 ,   L I T T L E   S C I   B I G   S C I ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 6 3 ,   S C I   B A B Y L O N ;   R A M A N U J A M   V ,   1 9 8 9 ,   S T R A T E G I C   M A N A G E   J ,   V 1 0 ,   P 5 2 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 0 0 6 0 3 ;   R I N G   P S ,   1 9 9 4 ,   A C A D   M A N A G E   R E V ,   V 1 9 ,   P 9 0 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 8 3 6 ;   R u m e l t   R . ,   1 9 8 4 ,   C O M P E T I T I V E   S T R A T E G I ,   P 5 5 6 ;   S c h a t z k i   T . ,   2 0 0 1 ,   P R A C T I C E   T U R N   C O N T   T ;   S c o t t   R . ,   1 9 9 5 ,   I   O R G   I D E A S   I N T E R E S T ;   S H A D I S H   W R ,   1 9 9 5 ,   S O C   S T U D   S C I ,   V 2 5 ,   P 4 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 5 0 2 5 0 0 3 0 0 3 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S n o w   C C ,   2 0 0 6 ,   I N F O R M   O R G A N   D E S   S E R ,   V 6 ,   P 3 ;   S p e n d e r   J C ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 4 5 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 7 1 1 0 6 ;   S t a r b u c k   W H ,   2 0 1 0 ,   J   M A N A G E   S T U D ,   V 4 7 ,   P 1 3 9 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 2 0 0 9 . 0 0 9 0 3 . x ;   T e e c e   D J ,   1 9 9 7 ,   S T R A T E G I C   M A N A G E   J ,   V 1 8 ,   P 5 0 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 7 0 8 ) 1 8 : 7 < 5 0 9 : : A I D - S M J 8 8 2 > 3 . 0 . C O ; 2 - Z ;   T s u i   A S ,   2 0 0 7 ,   J   M A N A G E ,   V 3 3 ,   P 4 2 6 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 7 3 0 0 8 1 8 ;   U s d i k e n   B ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 7 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 0 3 7 2 5 8 1 ;   v a n   D i j k   T . ,   1 9 9 7 ,   D I S C O U R S E   S T R U C T U R E ;   V A N M A A N E N   J ,   1 9 9 5 ,   O R G A N   S C I ,   V 6 ,   P 1 3 3 ,   D O I   1 0 . 1 2 8 7 / o r s c . 6 . 1 . 1 3 3 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W e b e r   M ,   1 9 4 6 ,   M   W E B E R   E S S A Y S   S O C I O ;   W e i c k   K .   E ,   1 9 7 9 ,   S O C I A L   P S Y C H O L   O R G ;   W E R N E R F E L T   B ,   1 9 8 4 ,   S T R A T E G I C   M A N A G E   J ,   V 5 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 5 0 2 0 7 ;   W H I T L E Y   R ,   1 9 8 4 ,   J   M A N A G E   S T U D ,   V 2 1 ,   P 3 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 1 9 8 4 . t b 0 0 4 1 5 . x ;   W h i t l e y   R . ,   1 9 8 4 ,   I N T E L L E C T U A L   S O C I A L ;   W H I T L E Y   R D ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 6 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 4 0 0 4 ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 6 	 1 3 5 	 1 8 	 1 8 	 6 	 8 5 	 S A G E   P U B L I C A T I O N S   L T D 	 L O N D O N 	 1   O L I V E R S   Y A R D ,   5 5   C I T Y   R O A D ,   L O N D O N   E C 1 Y   1 S P ,   E N G L A N D 	 0 1 7 0 - 8 4 0 6 	 1 7 4 1 - 3 0 4 4 	 	 O R G A N   S T U D 	 O r g a n .   S t u d . 	 A U G 	 2 0 1 2 	 3 3 	 8 	 	 	 	 	 1 0 1 5 	 1 0 4 3 	 	 1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 2 4 4 8 0 2 8 	 	 2 9 	 M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 9 9 3 H B 	 W O S : 0 0 0 3 0 7 8 4 7 1 0 0 0 0 2 	 	 
 
 J 	 H o d g e ,   D R ;   L a c a s s e ,   J R ;   B e n s o n ,   O 	 	 	 	 H o d g e ,   D a v i d   R . ;   L a c a s s e ,   J e f f r e y   R . ;   B e n s o n ,   O d e s s a 	 	 	 I n f l u e n t i a l   P u b l i c a t i o n s   i n   S o c i a l   W o r k   D i s c o u r s e :   T h e   1 0 0   M o s t   H i g h l y   C i t e d   A r t i c l e s   i n   D i s c i p l i n a r y   J o u r n a l s :   2 0 0 0 0 9 	 B R I T I S H   J O U R N A L   O F   S O C I A L   W O R K 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   p r o f e s s i o n a l   d i s c o u r s e ;   s o c i a l   w o r k   l i t e r a t u r e ;   h i g h l y   c i t e d   a r t i c l e s 	 G O O G L E - S C H O L A R ;   C I T A T I O N - C L A S S I C S ;   O P H T H A L M O L O G Y   J O U R N A L S ;   S U R G I C A L   J O U R N A L S ;   S C I E N C E ;   I M P A C T ;   W E B ;   S C O P U S ;   I N D I C A T O R S ;   P R O F E S S I O N 	 E x a m i n a t i o n s   o f   h i g h l y   c i t e d   a r t i c l e s   a r e   c o m m o n   i n   p r o f e s s i o n s   s u c h   a s   m e d i c i n e   a s   a   w a y   t o   e n h a n c e   p r o f e s s i o n a l   s e l f - r e f l e c t i o n .   Y e t ,   l i t t l e   r e s e a r c h   h a s   e x a m i n e d   i n f l u e n t i a l   a r t i c l e s   i n   s o c i a l   w o r k .   I n   l i g h t   o f   t h e   e m e r g e n c e   o f   a   d i s t i n c t   d i s c i p l i n a r y   k n o w l e d g e   b a s e   o v e r   t h e   p a s t   f e w   d e c a d e s ,   t h i s   s t u d y   i d e n t i f i e s   t h e   1 0 0   m o s t   c i t e d   a r t i c l e s   i n   d i s c i p l i n a r y   s o c i a l   w o r k   j o u r n a l s   ( N   7 9 )   p u b l i s h e d   d u r i n g   2 0 0 0 0 9 .   A n a l y s i s   r e v e a l e d   t w e l v e   c i t a t i o n   c l a s s i c s   s p a n n i n g   a   r e l a t i v e l y   d i v e r s e   a r r a y   o f   s u b j e c t s .   A m o n g   t h e   v a r i o u s   t o p i c s   t h a t   a p p e a r e d   a m o n g   t h e   1 0 0   m o s t   c i t e d   a r t i c l e s ,   t h e   r e s u l t s   s u g g e s t   t h a t   e v i d e n c e - b a s e d   p r a c t i c e / s o c i a l   w o r k   r e s e a r c h   p l a y s   a   p a r t i c u l a r l y   i m p o r t a n t   r o l e   i n   p r o f e s s i o n a l   d i s c o u r s e .   A l s o   n o t a b l e   i s   t h e   f a c t   t h a t   s o m e   t w o - t h i r d s   o f   t h e   m o s t   h i g h l y   c i t e d   a r t i c l e s   w e r e   p u b l i s h e d   i n   j u s t   f o u r   j o u r n a l s . 	 [ H o d g e ,   D a v i d   R . ]   A r i z o n a   S t a t e   U n i v ,   S c h   S o c i a l   W o r k ,   C o P P ,   P h o e n i x ,   A Z   8 5 0 0 4   U S A 	 H o d g e ,   D R   ( r e p r i n t   a u t h o r ) ,   A r i z o n a   S t a t e   U n i v ,   S c h   S o c i a l   W o r k ,   C o P P ,   M a i l   C o d e   3 9 2 0 , 4 1 1   N   C e n t   A v e , S u i t e   8 0 0 ,   P h o e n i x ,   A Z   8 5 0 0 4   U S A . 	 	 	 	 	 	 A s h k a n a s y   N M ,   2 0 0 7 ,   J   O R G A N   B E H A V ,   V 2 8 ,   P 6 4 3 ,   D O I   1 0 . 1 0 0 2 / j o b . 4 7 6 ;   A u f f h a m m e r   M ,   2 0 0 9 ,   R E V   E N V   E C O N   P O L I C Y ,   V 3 ,   P 2 5 1 ,   D O I   1 0 . 1 0 9 3 / r e e p / r e p 0 0 1 ;   B a k k a l b a s i   N . ,   2 0 0 6 ,   B I O M E D I C A L   D I G I T A L   L ,   V 3 ;   B a l t u s s e n   A ,   2 0 0 4 ,   I N T E N S   C A R E   M E D ,   V 3 0 ,   P 9 0 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 3 4 - 0 0 4 - 2 1 9 5 - 7 ;   B a l t u s s e n   A ,   2 0 0 4 ,   A N E S T H   A N A L G ,   V 9 8 ,   P 4 4 3 ,   D O I   1 0 . 1 2 1 3 / 0 1 . A N E . 0 0 0 0 0 9 6 1 8 5 . 1 3 4 7 4 . 0 A ;   B a n e y x   A ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 4 3 - 0 ;   B a r k e r   K L ,   2 0 0 5 ,   J   S O C   S E R V   R E S ,   V 3 2 ,   P 1 7 ,   D O I   1 0 . 1 3 0 0 / J 0 7 9 v 3 2 n 0 1 _ 0 2 ;   C a m e r o n   B D ,   2 0 0 5 ,   P O R T A L - L I B R   A C A D ,   V 5 ,   P 1 0 5 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 5 . 0 0 0 3 ;   C e l a y i r   S ,   2 0 0 8 ,   E U R   J   P E D I A T R   S U R G ,   V 1 8 ,   P 1 6 0 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 8 - 1 0 3 8 5 8 6 ;   C l a r k e   R . ,   2 0 0 8 ,   C O M M U N I C A T I O N S   A S S   I ,   V 2 2 ,   P 1 ;   C r a w f o r d   J M ,   2 0 0 6 ,   L A B   I N V E S T ,   V 8 6 ,   P 3 2 6 ,   D O I   1 0 . 1 0 3 8 / l a b i n v e s t . 3 7 0 0 4 0 3 ;   E p s t e i n   W M ,   2 0 0 4 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 4 ,   P 4 5 0 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 4 2 6 5 8 3 8 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F a n   J C ,   2 0 0 8 ,   C L I N   E X P   O P H T H A L M O L ,   V 3 6 ,   P 5 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 9 0 7 1 . 2 0 0 8 . 0 1 6 7 4 . x ;   F l e x n e r   A ,   2 0 0 1 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 1 ,   P 1 5 2 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 1 - 2 ;   G e h a n n o   J F ,   2 0 0 7 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 3 ,   P 2 4 5 ;   G r e e n   R G ,   2 0 0 7 ,   J   S O C   W O R K   E D U C ,   V 4 3 ,   P 2 8 1 ;   G r e e n   R G ,   2 0 0 8 ,   J   S O C   W O R K   E D U C ,   V 4 4 ,   P 1 1 7 ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H o d g e   D .   R . ,   J   S O C I A L   W O   I N   P R E S S ;   H o l d e n   G . ,   2 0 0 5 ,   B I B L I O M E T R I C S   S O C I A L ;   H o l d e n   G ,   2 0 0 8 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 8 ,   P 4 8 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 7 3 0 8 9 8 6 ;   J a c o b s   J A ,   2 0 0 9 ,   G E N D E R   S O C ,   V 2 3 ,   P 8 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 3 2 0 9 3 5 1 0 2 9 ;   J o n e s   D .   R . ,   1 9 9 8 ,   J   P S Y C H O L   C H R I S T I A N I ,   V 1 7 ,   P 4 3 ;   K e l o h a r j u   M ,   2 0 0 8 ,   E U R   F I N A N C   M A N A G ,   V 1 4 ,   P 5 6 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 3 6 X . 2 0 0 8 . 0 0 4 5 1 . x ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   L o o n e n   M P J ,   2 0 0 8 ,   P L A S T   R E C O N S T R   S U R G ,   V 1 2 1 ,   p 3 2 0 E ,   D O I   1 0 . 1 0 9 7 / P R S . 0 b 0 1 3 e 3 1 8 1 6 b 1 3 a 9 ;   M a c R o b e r t s   M H ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 2 8 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M i k k i   S ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 8 - 6 ;   M i n g e r s   J ,   2 0 0 9 ,   J   O P E R   R E S   S O C ,   V 6 0 ,   P 1 1 4 3 ,   D O I   1 0 . 1 0 5 7 / j o r s . 2 0 0 8 . 9 4 ;   M o u s s a   S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 0 . 0 0 1 ;   N a t i o n a l   A s s o c i a t i o n   o f   S o c i a l   W o r k e r s   ( N A S W )   P r e s s ,   1 9 9 7 ,   A U T H   G U I D   S O C   W O R K   J ;   N i e r i   M ,   2 0 0 7 ,   J   C L I N   P E R I O D O N T O L ,   V 3 4 ,   P 3 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 5 1 X . 2 0 0 7 . 0 1 0 6 0 . x ;   O h b a   N ,   2 0 0 7 ,   A R C H   O P H T H A L M O L - C H I C ,   V 1 2 5 ,   P 9 5 2 ,   D O I   1 0 . 1 0 0 1 / a r c h o p h t . 1 2 5 . 7 . 9 5 2 ;   P a l a d u g u   R ,   2 0 0 2 ,   W O R L D   J   S U R G ,   V 2 6 ,   P 1 0 9 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 6 8 - 0 0 2 - 6 3 7 6 - 7 ;   P r i c e   J .   H . ,   2 0 0 1 ,   A M   J   H L T H   E D ,   V 3 2 ,   P 3 1 ;   R a n d a l l   G E ,   2 0 0 8 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 9 8 1 3 8 0 8 0 2 1 7 3 8 5 5 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e i p e l   M M O ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 7 9 ;   S e l l e r s   S L ,   2 0 0 4 ,   J   S O C   W O R K   E D U C ,   V 4 0 ,   P 1 4 3 ;   S m i t h   A G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 9 - 8 ;   S o u t a r   G .   N . ,   2 0 0 9 ,   A U S T R A L A S I A N   M A R K E T I ,   V 1 7 ,   P 1 5 0 ;   S p i v e y   C A ,   2 0 0 4 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 4 ,   P 2 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 3 2 6 2 1 3 1 ;   T e r a j i m a   K ,   2 0 0 3 ,   A C T A   A N A E S T H   S C A N D ,   V 4 7 ,   P 6 5 5 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 3 7 . x ;   T h y e r   B .   A . ,   2 0 0 1 ,   J   S O C I A L   W O R K   E D ,   V 3 8 ,   P 1 0 1 ;   T h y e r   B .   A . ,   2 0 0 5 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 5 ,   P 3 1 0 ,   D O I   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 5 2 7 6 3 8 1 ;   T h y e r   B A ,   2 0 1 0 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 0 ,   P 5 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 9 3 4 7 8 8 5 ;   V a n c l a y   J K ,   2 0 0 8 ,   F O R E S T   E C O L   M A N A G ,   V 2 5 6 ,   P 5 0 7 ,   D O I   1 0 . 1 0 1 6 / j . f o r e c o . 2 0 0 8 . 0 5 . 0 2 0 ;   W a l t e r s   W H ,   2 0 0 9 ,   P O R T A L - L I B R   A C A D ,   V 9 ,   P 5 ;   W e i s s - G a l   I ,   2 0 0 8 ,   I N T   J   S O C   W E L F ,   V 1 7 ,   P 2 8 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 3 9 7 . 2 0 0 8 . 0 0 5 7 4 . x ;   W h i t e h o u s e   G H ,   2 0 0 2 ,   E U R   R A D I O L ,   V 1 2 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 3 3 0 - 0 0 1 - 1 2 1 2 - 2 ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   J   C I T A T I O N   R E P O R T S 	 5 8 	 1 8 	 1 8 	 2 	 2 3 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 0 0 4 5 - 3 1 0 2 	 	 	 B R I T   J   S O C   W O R K 	 B r .   J .   S o c .   W o r k 	 J U N 	 2 0 1 2 	 4 2 	 4 	 	 	 	 	 7 6 5 	 7 8 2 	 	 1 0 . 1 0 9 3 / b j s w / b c r 0 9 3 	 	 1 8 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 9 6 3 R E 	 W O S : 0 0 0 3 0 5 6 4 0 5 0 0 0 1 1 	 	 
 
 J 	 K o s t o f f ,   R N 	 	 	 	 K o s t o f f ,   R o n a l d   N . 	 	 	 C h i n a / U S A   n a n o t e c h n o l o g y   r e s e a r c h   o u t p u t   c o m p a r i s o n - 2 0 1 1   u p d a t e 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 N a n o t e c h n o l o g y ;   N a n o s c i e n c e ;   N a n o c o m p o s i t e s ;   C h i n a ;   B i b l i o m e t r i c s ;   S c i e n t o m e t r i c s ;   C i t a t i o n   a n a l y s i s 	 S C I E N C E - A N D - T E C H N O L O G Y ;   N A N O S C I E N C E ;   I N F R A S T R U C T U R E ;   C O L L A B O R A T I O N ;   P U B L I C A T I O N S ;   C H I N E S E ;   I N D I A 	 T h i s   R e s e a r c h   N o t e   u p d a t e s   o u r   2 0 0 6   a n d   2 0 0 9   C h i n a / U S A   n a n o t e c h n o l o g y   a n d   n a n o s c i e n c e   ( N N )   r e s e a r c h   o u t p u t   c o m p a r i s o n s .   A   2 0 0 9   c o m p a r i s o n   o f   C h i n a / U S A   r e s e a r c h   p u b l i c a t i o n   o u t p u t s   s h o w e d   t h a t   C h i n a   i s   a b o u t   t o   o v e r t a k e   t h e   U S A   i n   N N   r e s e a r c h   o u t p u t .   A s   p r e d i c t e d   b y   t h e   e x t r a p o l a t e d   2 0 0 9   c u r v e ,   C h i n a   h a s   p a s s e d   U S A   i n   N N   r e s e a r c h   p u b l i c a t i o n   o u t p u t .   T h i s   t r a n s i t i o n   o c c u r r e d   i n   t h e   2 0 0 8 / 2 0 0 9   t i m e   f r a m e ,   a n d   i f   t h e   2 0 1 1   r e s u l t s   ( t a k e n   a t   m i d - 2 0 1 1 )   h o l d   f o r   t h e   f u l l   y e a r ,   w i l l   b e c o m e   q u i t e   p r o n o u n c e d   ( s i m i l a r   t o   2 0 % ) .   W h e n   s p e c i f i c   s u b - d i s c i p l i n e s   a r e   e x a m i n e d ,   t h e   d i f f e r e n c e s   b e t w e e n   C h i n a   a n d   U S A   b e c o m e   m o r e   p r o n o u n c e d .   F o r   e x a m p l e ,   t h e   2 0 0 9   p a p e r   p r e s e n t e d   t h e   t i m e   t r e n d   f o r   C h i n a / U S A   p u b l i c a t i o n s   i n   n a n o c o m p o s i t e s ,   a n   i m p o r t a n t   s u b - d i s c i p l i n e   o f   N N .   T h e   u p d a t e d   n a n o c o m p o s i t e s   c u r v e   h a s   i n c r e a s e d   a b o u t   t w i c e   t h e   r a t e   o f   t h e   o v e r a l l   N N   c u r v e ,   a n d   s h o w s   n o   s i g n   o f   a b a t i n g .   T h e   U S A   p a p e r s   l e a d   i n   t h e   n u m b e r s   o f   c i t a t i o n s   b y   a l l   m e t r i c s   c o n s i d e r e d ,   b u t   t h e   C h i n e s e   p a p e r s   a r e   s h o w i n g   s i g n i f i c a n t   i m p r o v e m e n t   w i t h   t i m e .   O v e r a l l ,   t h e   C h i n e s e   p a p e r s   a r e   c i t e d   v e r y   m o d e s t l y ,   b u t   t h e r e   i s   a   c o r e   o f   ' h e a v y   h i t t e r s '   t h a t   a p p e a r s   t o   b e   i n c r e a s i n g   s u b s t a n t i a l l y   w i t h   t i m e ,   a n d   i s   i n c r e a s i n g l y   m a k i n g   i t s   p r e s e n c e   k n o w n   i n   t h e   h i g h e r   I m p a c t   F a c t o r   j o u r n a l s .   ( C )   2 0 1 2   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   G a i n e s v i l l e ,   V A   2 0 1 5 5   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   G e o r g i a   I n s t   T e c h n o l ,   S c h   P u b l   P o l i c y ,   1 3 5 0 0   T a l l y r a n d   W a y ,   G a i n e s v i l l e ,   V A   2 0 1 5 5   U S A . 	 r o n a l d . k o s t o f f @ p u b p o l i c y . g a t e c h . e d u 	 	 	 	 	 C h e n   H C ,   2 0 0 9 ,   I E E E   I N T E L L   S Y S T ,   V 2 4 ,   P 6 8 ,   D O I   1 0 . 1 1 0 9 / M I S . 2 0 0 9 . 6 8 ;   C h e n   K H ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 7 ;   G u a n   J C ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 8 8 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 2 . 0 0 4 ;   G u a n   J C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 3 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 4 0 - 9 ;   H u l l m a n n   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 7 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 1 0 - 6 ;   J i a   L ,   2 0 1 1 ,   N A N O   T O D A Y ,   V 6 ,   P 6 ,   D O I   1 0 . 1 0 1 6 / j . n a n t o d . 2 0 1 0 . 1 1 . 0 0 3 ;   K o s t o f f   R .   N . ,   2 0 0 6 ,   N a n o t e c h n o l o g y   P e r c e p t i o n s ,   V 2 ,   D O I   1 0 . 4 0 2 4 / N 1 0 K O 0 6 . n t p . 0 2 . 0 3 ;   K o s t o f f   R . N . ,   E N C Y   N A N O S C   I N   P R E S S ;   K o s t o f f   R . N . ,   2 0 0 5 ,   A D A 4 3 5 9 8 4   D T I C ;   K o s t o f f   R .   N . ,   2 0 0 6 ,   A D A 4 4 3 3 1 5   D T I C ;   K o s t o f f   R . N . ,   2 0 0 7 ,   A D A 4 6 1 9 3 0   D T I C ;   K o s t o f f   R . N . ,   2 0 0 5 ,   A D A 4 3 5 9 8 6   D T I C ;   K o s t o f f   R . N . ,   2 0 0 7 ,   S C I   F O C U S ,   V 2 ,   P 1 ;   K o s t o f f   R N ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 5 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 6 . 0 0 4 ;   K o s t o f f   R N ,   2 0 0 8 ,   J   T E C H N O L   T R A N S F E R ,   V 3 3 ,   P 4 7 2 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 7 - 9 0 4 2 - 2 ;   K o s t o f f   R N ,   2 0 0 8 ,   C H I N E S E   S C I   B U L L ,   V 5 3 ,   P 1 2 7 2 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 8 - 0 1 8 3 - y ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 5 1 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 4 ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 6 0 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 7 ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 5 3 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 8 ;   K o s t o f f   R N ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 3 ,   P 1 0 8 8 ;   K o s t o f f   R N ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 2 ,   P 1 4 9 2 ;   K o s t o f f   R N ,   2 0 0 7 ,   J   N A N O P A R T   R E S ,   V 9 ,   P 7 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 2 4 - 8 ;   K o s t o f f   R N ,   2 0 0 7 ,   C U R R   N A N O S C I ,   V 3 ,   P 1 3 5 ,   D O I   1 0 . 2 1 7 4 / 1 5 7 3 4 1 3 0 7 7 8 0 6 1 9 2 1 5 ;   K o s t o f f   R N ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 5 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 0 3 - 5 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 4 - 9 ;   K o s t o f f   R N ,   2 0 0 9 ,   J   N A N O S C I   N A N O T E C H N O ,   V 9 ,   P 6 2 3 9 ,   D O I   1 0 . 1 1 6 6 / j n n . 2 0 0 9 . 1 4 6 5 ;   L e e   P C ,   2 0 1 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 8 ,   P 1 3 2 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 0 . 0 6 . 0 0 2 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 8 9 - 3 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 8 3 0 - 4 ;   L i   X ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 8 - 9 4 7 3 - 1 ;   L i u   X ,   2 0 0 9 ,   J   N A N O P A R T   R E S ,   V 1 1 ,   P 1 8 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 6 9 8 - 7 ;   S h a p i r a   P ,   2 0 0 9 ,   A S I A N   B U S   M A N A G ,   V 8 ,   P 4 6 1 ,   D O I   1 0 . 1 0 5 7 / a b m . 2 0 0 9 . 1 5 ;   T a n g   L ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 7 6 - z ;   T a n g   L ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 2 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 7 4 - 9 ;   W a n g   G B ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 3 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 2 . 0 0 2 ;   Y o u t i e   J ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 8 - 9 3 6 0 - 9 ;   Z h o u   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 8 . 0 0 6 	 3 8 	 1 8 	 1 8 	 1 	 3 3 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J U N 	 2 0 1 2 	 7 9 	 5 	 	 	 	 	 9 8 6 	 9 9 0 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 2 . 0 1 . 0 0 7 	 	 5 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 9 4 9 O N 	 W O S : 0 0 0 3 0 4 5 8 5 6 0 0 0 1 4 	 	 
 
 J 	 T o r r e s - S a l i n a s ,   D ;   M o r e n o - T o r r e s ,   J G ;   D e l g a d o - L o p e z - C o z a r ,   E ;   H e r r e r a ,   F 	 	 	 	 T o r r e s - S a l i n a s ,   D a n i e l ;   M o r e n o - T o r r e s ,   J o s e   G . ;   D e l g a d o - L o p e z - C o z a r ,   E m i l i o ;   H e r r e r a ,   F r a n c i s c o 	 	 	 A   m e t h o d o l o g y   f o r   I n s t i t u t i o n - F i e l d   r a n k i n g   b a s e d   o n   a   b i d i m e n s i o n a l   a n a l y s i s :   t h e   I F Q ( 2 ) A   i n d e x 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R a n k i n g s ;   U n i v e r s i t i e s ;   H i g h e r   e d u c a t i o n ;   B i b l i o m e t r i c s ;   S h a n g h a i   r a n k i n g ;   B i d i m e n s i o n a l   a n a l y s i s ;   E v a l u a t i o n   m o d e l s ;   R e s e a r c h   p e r f o r m a n c e   a s s e s s m e n t ;   h - i n d e x 	 H I G H L Y   C I T E D   P A P E R S ;   A C A D E M I C   R A N K I N G S ;   I M P A C T 	 T h e   p r o b l e m   o f   c o m p a r i n g   a c a d e m i c   i n s t i t u t i o n s   i n   t e r m s   o f   t h e i r   r e s e a r c h   p r o d u c t i o n   i s   n o w a d a y s   a   p r i o r i t y   i s s u e .   T h i s   p a p e r   p r o p o s e s   a   r e l a t i v e   b i d i m e n s i o n a l   i n d e x   t h a t   t a k e s   i n t o   a c c o u n t   b o t h   t h e   n e t   p r o d u c t i o n   a n d   t h e   q u a l i t y   o f   i t ,   a s   a n   a t t e m p t   t o   p r o v i d e   a   c o m p r e h e n s i v e   a n d   o b j e c t i v e   w a y   t o   c o m p a r e   t h e   r e s e a r c h   o u t p u t   o f   d i f f e r e n t   i n s t i t u t i o n s   i n   a   s p e c i f i c   f i e l d ,   u s i n g   j o u r n a l   c o n t r i b u t i o n s   a n d   c i t a t i o n s .   T h e   p r o p o s e d   i n d e x   i s   t h e n   a p p l i e d ,   a s   a   c a s e   s t u d y ,   t o   r a n k   t h e   t o p   S p a n i s h   u n i v e r s i t i e s   i n   t h e   f i e l d s   o f   C h e m i s t r y   a n d   C o m p u t e r   S c i e n c e   i n   t h e   p e r i o d   r a n g i n g   f r o m   2 0 0 0   u n t i l   2 0 0 9 .   A   c o m p a r i s o n   w i t h   t h e   t o p   5 0   u n i v e r s i t i e s   i n   t h e   A R W U   r a n k i n g s   i s   a l s o   m a d e ,   s h o w i n g   t h e   p r o p o s e d   r a n k i n g   i s   b e t t e r   s u i t e d   t o   d i s t i n g u i s h   a m o n g   n o n - e l i t e   u n i v e r s i t i e s . 	 [ M o r e n o - T o r r e s ,   J o s e   G . ;   H e r r e r a ,   F r a n c i s c o ]   U n i v   G r a n a d a ,   D e p t   C o m p   S c i   &   A r t i f i c i a l   I n t e l l i g e n c e ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n ;   [ T o r r e s - S a l i n a s ,   D a n i e l ]   U n i v   N a v a r r a ,   E C 3 ,   C t r   I n v e s t   M e d   A p l i c a d a ,   N a v a r r a   3 1 0 0 8 ,   S p a i n ;   [ D e l g a d o - L o p e z - C o z a r ,   E m i l i o ]   U n i v   G r a n a d a ,   E C 3 ,   D e p t   B i b l i o t e c o n   &   D o c u m e n t a c ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n 	 M o r e n o - T o r r e s ,   J G   ( r e p r i n t   a u t h o r ) ,   U n i v   G r a n a d a ,   D e p t   C o m p   S c i   &   A r t i f i c i a l   I n t e l l i g e n c e ,   E - 1 8 0 7 1   G r a n a d a ,   S p a i n . 	 j o s e . g a r c i a . m t @ d e c s a i . u g r . e s 	 H e r r e r a ,   F r a n c i s c o / C - 6 8 5 6 - 2 0 0 8 ;   D e l g a d o   L o p e z - C o z a r ,   E m i l i o / I - 8 4 0 6 - 2 0 1 2 ;   T o r r e s - S a l i n a s ,   D a n i e l / D - 5 0 8 0 - 2 0 1 6 ;   T o r r e s - S a l i n a s ,   D a n i e l / A - 3 9 6 8 - 2 0 1 0 ;   	 H e r r e r a ,   F r a n c i s c o / 0 0 0 0 - 0 0 0 2 - 7 2 8 3 - 3 1 2 X ;   T o r r e s - S a l i n a s ,   D a n i e l / 0 0 0 0 - 0 0 0 2 - 5 6 4 8 - 2 5 0 X ;   T o r r e s - S a l i n a s ,   D a n i e l / 0 0 0 0 - 0 0 0 1 - 8 7 9 0 - 3 3 1 4 ;   D e l g a d o   L o p e z - C o z a r ,   E m i l i o / 0 0 0 0 - 0 0 0 2 - 8 1 8 4 - 5 5 1 X 	 M i n i s t e r i o   d e   E d u c a c i o n   y   C i e n c i a   o f   t h e   S p a n i s h   G o v e r n m e n t 	 J o s e   G a r c i a   M o r e n o - T o r r e s   i s   c u r r e n t l y   s u p p o r t e d   b y   a   F P U   g r a n t   f r o m   t h e   M i n i s t e r i o   d e   E d u c a c i o n   y   C i e n c i a   o f   t h e   S p a n i s h   G o v e r n m e n t .   T h e   a u t h o r s   w o u l d   l i k e   t o   t h a n k   N i c o l a s   R o b i n s o n   G a r c i a   f o r   r e v i e w i n g   t h e   m a n u s c r i p t . 	 A d l e r   N J ,   2 0 0 9 ,   A C A D   M A N A G   L E A R N   E D U ,   V 8 ,   P 7 2 ;   A g u i l l o   I F ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 9 0 - z ;   A k s n e s   D W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 1 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 2 9 . 5 8 3 3 4 . e b ;   A k s n e s   D W ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 1 5 9 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 6 4 5 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B i l l a u t   J C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 2 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 1 5 - x ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 0 1 ;   B o r n m a n n   L ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 5 ;   B u e l a - C a s a l   G ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 5 3 - 8 ;   C a b r e r i z o   F J ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 6 . 0 0 5 ;   D e h o n   C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 5 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 7 6 - 0 ;   D i l l   D D ,   2 0 0 5 ,   H I G H   E D U C ,   V 4 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 4 - 1 7 4 6 - 8 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   * I S I   W E B   S C I ,   S C I   C I T   I N D ;   K o s m u l s k i   M ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 3 4 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 5 . 0 0 3 ;   L e y d e s d o r f f   L . ,   2 0 1 0 ,   N O R M A L I Z A T I O N   C W T S   I ;   L i u   N C ,   2 0 0 5 ,   H I G H E R   E D   E U R O P E ,   V 3 0 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 0 3 7 9 7 7 2 0 5 0 0 2 6 0 1 1 6 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M O E D   H F ,   2 0 1 0 ,   A B S 1 0 0 3 5 8 8 4   C O R R ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   * S C I M A G O   I ,   2 0 0 7 ,   S C I M A G O   I   R A N K ;   S y p s a   V ,   2 0 0 9 ,   B M C   M E D   R E S   M E T H O D O L ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 9 - 3 3 ;   * U   L E I D ,   2 0 1 0 ,   L E I D   U   R A N K ;   v a n   R a a n   A F J ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 4 3 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 8 ;   V i e i r a   E S ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 5 8 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 6 ;   [ A n o n y m o u s ] ,   2 0 1 0 ,   Q S   W O R L D   U   R A N K I N G S 	 2 8 	 1 8 	 1 8 	 2 	 4 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 2 0 1 1 	 8 8 	 3 	 	 	 	 	 7 7 1 	 7 8 6 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 1 8 - 6 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 1 9 P O 	 W O S : 0 0 0 2 9 4 8 3 9 7 0 0 0 0 6 	 	 
 
 J 	 O k i k e ,   K ;   K o c h e r ,   M S ;   T o r p e y ,   J L ;   N w a c h u k w u ,   B U ;   M e h l m a n ,   C T ;   B h a n d a r i ,   M 	 	 	 	 O k i k e ,   K a n u ;   K o c h e r ,   M i n i n d e r   S . ;   T o r p e y ,   J e n n i f e r   L . ;   N w a c h u k w u ,   B e n e d i c t   U . ;   M e h l m a n ,   C h a r l e s   T . ;   B h a n d a r i ,   M o h i t 	 	 	 L e v e l   o f   e v i d e n c e   a n d   c o n f l i c t   o f   i n t e r e s t   d i s c l o s u r e   a s s o c i a t e d   w i t h   h i g h e r   c i t a t i o n   r a t e s   i n   o r t h o p e d i c s 	 J O U R N A L   O F   C L I N I C A L   E P I D E M I O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C i t a t i o n   r a t e s ;   I m p a c t   f a c t o r ;   C o n f l i c t   o f   i n t e r e s t ;   L e v e l   o f   e v i d e n c e ;   O r t h o p e d i c   s u r g e r y ;   B i b l i o m e t r i c s 	 J O U R N A L   I M P A C T   F A C T O R ;   A R T I C L E S 	 O b j e c t i v e :   T o   i d e n t i f y   t h e   s c i e n t i f i c   a n d   n o n s c i e n t i f i c   f a c t o r s   a s s o c i a t e d   w i t h   r a t e s   o f   c i t a t i o n   i n   t h e   o r t h o p e d i c   l i t e r a t u r e .   S t u d y   D e s i g n   a n d   S e t t i n g :   A l l   o r i g i n a l   c l i n i c a l   a r t i c l e s   p u b l i s h e d   i n   t h r e e   g e n e r a l   o r t h o p e d i c s   j o u r n a l s   b e t w e e n   J u l y   2 0 0 2   a n d   D e c e m b e r   2 0 0 3   w e r e   r e v i e w e d .   I n f o r m a t i o n   w a s   c o l l e c t e d   o n   v a r i a b l e s   p l a u s i b l y   r e l a t e d   t o   r a t e s   o f   c i t a t i o n ,   i n c l u d i n g   s c i e n t i f i c   a n d   n o n s c i e n t i f i c   f a c t o r s .   T h e   n u m b e r   o f   c i t a t i o n s   a t   5   y e a r s   w a s   a s c e r t a i n e d   a n d   l i n e a r   r e g r e s s i o n   w a s   u s e d   t o   i d e n t i f y   f a c t o r s   a s s o c i a t e d   w i t h   r a t e s   o f   c i t a t i o n .   R e s u l t s :   I n   t h e   m u l t i v a r i a t e   a n a l y s i s ,   f a c t o r s   a s s o c i a t e d   w i t h   i n c r e a s e d   r a t e s   o f   c i t a t i o n   a t   5   y e a r s   w e r e   h i g h   l e v e l   o f   e v i d e n c e   ( 2 2 . 2   c i t a t i o n s   f o r   l e v e l   I   o r   I I   v s .   1 0 . 8   c i t a t i o n s   f o r   l e v e l   I I I   o r   I V ;   P   =   0 . 0 0 0 1 ) ,   l a r g e   s a m p l e   s i z e   ( 1 8 . 8   c i t a t i o n s   f o r   s a m p l e   s i z e   o f   1 0 0   o r   m o r e   v s .   7 . 9   c i t a t i o n s   f o r   s a m p l e   s i z e   o f   2 5   o r   f e w e r ;   P   <   0 . 0 0 0 1 ) ,   m u l t i p l e   i n s t i t u t i o n s   ( 1 5 . 2   c i t a t i o n s   f o r   t w o   o r   m o r e   c e n t e r s   v s .   1 1 . 1   c i t a t i o n s   f o r   s i n g l e   c e n t e r ;   P   =   0 . 0 2 3 ) ,   s e l f - r e p o r t e d   c o n f l i c t   o f   i n t e r e s t   d i s c l o s u r e   i n v o l v i n g   a   n o n p r o f i t   o r g a n i z a t i o n   ( 1 7 . 4   c i t a t i o n s   f o r   n o n p r o f i t   d i s c l o s u r e   v s .   1 0 . 6   c i t a t i o n s   f o r   n o   d i s c l o s u r e ;   P   =   0 . 0 2 7 ) ,   a n d   s e l f - r e p o r t e d   c o n f l i c t   o f   i n t e r e s t   d i s c l o s u r e   i n v o l v i n g   a   f o r - p r o f i t   c o m p a n y   ( 2 6 . 1   c i t a t i o n s   f o r   f o r - p r o f i t   d i s c l o s u r e   v s .   1 0 . 6   c i t a t i o n s   f o r   n o   d i s c l o s u r e ;   P   =   0 . 0 1 1 ) .   C o n c l u s i o n :   H i g h   l e v e l   o f   e v i d e n c e ,   l a r g e   s a m p l e   s i z e ,   r e p r e s e n t a t i o n   f r o m   m u l t i p l e   i n s t i t u t i o n s ,   a n d   c o n f l i c t   o f   i n t e r e s t   d i s c l o s u r e   a r e   a s s o c i a t e d   w i t h   h i g h e r   r a t e s   o f   c i t a t i o n   i n   o r t h o p e d i c s .   ( C )   2 0 1 1   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ O k i k e ,   K a n u ]   M a s s a c h u s e t t s   G e n   H o s p ,   D e p t   O r t h o p e d   S u r g ,   B o s t o n ,   M A   0 2 1 1 4   U S A ;   [ O k i k e ,   K a n u ]   B r i g h a m   &   W o m e n s   H o s p ,   D e p t   O r t h o p e d   S u r g ,   B o s t o n ,   M A   0 2 1 1 5   U S A ;   [ K o c h e r ,   M i n i n d e r   S . ]   H a r v a r d   U n i v ,   S c h   M e d ,   C h i l d r e n s   H o s p   B o s t o n ,   D e p t   O r t h o p e d   S u r g ,   B o s t o n ,   M A   U S A ;   [ T o r p e y ,   J e n n i f e r   L . ;   N w a c h u k w u ,   B e n e d i c t   U . ]   H a r v a r d   U n i v ,   S c h   M e d ,   B o s t o n ,   M A   U S A ;   [ M e h l m a n ,   C h a r l e s   T . ]   U n i v   C i n c i n n a t i ,   C o l l   M e d ,   C i n c i n n a t i   C h i l d r e n s   H o s p   M e d   C t r ,   D i v   P e d i a t   O r t h o p e d   S u r g ,   C i n c i n n a t i ,   O H   U S A ;   [ B h a n d a r i ,   M o h i t ]   M c M a s t e r   U n i v ,   H a m i l t o n   G e n   H o s p ,   D i v   O r t h o p a e d   S u r g ,   H a m i l t o n ,   O N   L 8 S   4 L 8 ,   C a n a d a 	 O k i k e ,   K   ( r e p r i n t   a u t h o r ) ,   M a s s a c h u s e t t s   G e n   H o s p ,   D e p t   O r t h o p e d   S u r g ,   5 5   F r u i t   S t ,   B o s t o n ,   M A   0 2 1 1 4   U S A . 	 o k i k e @ p o s t . h a r v a r d . e d u 	 	 O k i k e ,   K a n u / 0 0 0 0 - 0 0 0 1 - 9 3 1 0 - 9 9 6 9 	 C o n M e d   L i n v a t e c ;   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ;   S c o l i o s i s   R e s e a r c h   S o c i e t y ;   U n i v e r s i t y   o f   C i n c i n n a t i ;   A b b o t t   S p i n e ;   D e p u y   S p i n e ;   G l o b u s   M e d i c a l ;   M e d t r o n i c ;   S y n t h e s ;   A O   F o u n d a t i o n ;   C a n a d i a n   I n s t i t u t e s   o f   H e a l t h   R e s e a r c h ;   O r t h o p a e d i c   R e s e a r c h   a n d   E d u c a t i o n   F o u n d a t i o n ;   O r t h o p a e d i c   T r a u m a   A s s o c i a t i o n ;   O s t e o s y n t h e s i s   a n d   T r a u m a   C a r e   F o u n d a t i o n ;   P h y s i c i a n s   S e r v i c e s   I n c o r p o r a t e d   F o u n d a t i o n ;   U . S   D e p a r t m e n t   o f   D e f e n s e ;   D e p u y ;   S t r y k e r ;   S m i t h   &   N e p h e w   a n d   Z i m m e r ;   A m g e n ;   O s t e o g e n i x ;   P f i z e r ;   Z e l o s 	 T h e   a u t h o r s   g r a t e f u l l y   a c k n o w l e d g e   t h e   i n v a l u a b l e   a s s i s t a n c e   o f   D r .   D a v i d   Z u r a k o w s k i .   D r .   M . S . K .   r e p o r t s   r e c e i v i n g   g r a n t   s u p p o r t   f r o m   C o n M e d   L i n v a t e c   a n d   s e r v i n g   a s   a   c o n s u l t a n t   f o r   C o n M e d   L i n v a t e c ,   C o v i d i e n ,   E B I / B i o m e t ,   a n d   S m i t h   &   N e p h e w .   D r .   C . T . M .   r e p o r t s   r e c e i v i n g   g r a n t   s u p p o r t   f r o m   t h e   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   t h e   S c o l i o s i s   R e s e a r c h   S o c i e t y ,   t h e   U n i v e r s i t y   o f   C i n c i n n a t i ,   A b b o t t   S p i n e ,   D e p u y   S p i n e ,   G l o b u s   M e d i c a l ,   M e d t r o n i c ,   a n d   S y n t h e s .   D r .   M . B .   r e p o r t s   r e c e i v i n g   g r a n t   s u p p o r t   f r o m   t h e   A O   F o u n d a t i o n ,   t h e   C a n a d i a n   I n s t i t u t e s   o f   H e a l t h   R e s e a r c h ,   t h e   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h ,   t h e   O r t h o p a e d i c   R e s e a r c h   a n d   E d u c a t i o n   F o u n d a t i o n ,   t h e   O r t h o p a e d i c   T r a u m a   A s s o c i a t i o n ,   t h e   O s t e o s y n t h e s i s   a n d   T r a u m a   C a r e   F o u n d a t i o n ,   t h e   P h y s i c i a n s   S e r v i c e s   I n c o r p o r a t e d   F o u n d a t i o n ,   t h e   U . S   D e p a r t m e n t   o f   D e f e n s e ,   D e p u y ,   S t r y k e r ,   S m i t h   &   N e p h e w   a n d   Z i m m e r   a n d   s e r v i n g   a s   a   c o n s u l t a n t   f o r   A m g e n ,   O s t e o g e n i x ,   P f i z e r ,   a n d   Z e l o s . 	 T h e   A m e r i c a n   A c a d e m y   o f   O r t h o p a e d i c   S u r g e o n s ,   L E V   E V   P R I M   R E S   Q U E S ;   B h a n d a r i   M ,   2 0 0 4 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 6 A ,   P 1 7 1 7 ;   B h a n d a r i   M ,   2 0 0 7 ,   C A N   J   S U R G ,   V 5 0 ,   P 1 1 9 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   F i g g   W D ,   2 0 0 6 ,   P H A R M A C O T H E R A P Y ,   V 2 6 ,   P 7 5 9 ,   D O I   1 0 . 1 5 9 2 / p h c o . 2 6 . 6 . 7 5 9 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   * I S I   W E B   K N O W L ,   S C I   C I T   I N D   E X P ;   * I S I   W E B   K N O W L ,   2 0 0 8 ,   J   C I T   R E P   S C I   E D ;   * I S I   W E B   K N O W L ,   T H O M S   S C I   I M P   F A C T ;   * I S I   W E B   K N O W L ,   2 0 0 3 ,   J   C I T   R E P   S C I   E D ;   * I S I   W E B   K N O W L ,   2 0 0 6 ,   J   C I T   R E P   S C I   E D ;   * I S I   W E B   K N O W L ,   2 0 0 2 ,   J   C I T   R E P   S C I   E D ;   K u l k a r n i   A V ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 4 0 3 ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   O k i k e   K ,   2 0 0 9 ,   N E W   E N G L   J   M E D ,   V 3 6 1 ,   P 1 4 6 6 ,   D O I   1 0 . 1 0 5 6 / N E J M s a 0 8 0 7 1 6 0 ;   W r i g h t   J G ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 1 	 1 7 	 1 8 	 1 8 	 1 	 5 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 8 9 5 - 4 3 5 6 	 	 	 J   C L I N   E P I D E M I O L 	 J .   C l i n .   E p i d e m i o l . 	 M A R 	 2 0 1 1 	 6 4 	 3 	 	 	 	 	 3 3 1 	 3 3 8 	 	 1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 1 0 . 0 3 . 0 1 9 	 	 8 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 7 1 2 Z D 	 W O S : 0 0 0 2 8 6 7 0 3 9 0 0 0 1 6 	 2 0 9 4 7 2 9 5 	 
 
 S 	 B i r y u k o v ,   M ;   D o n g ,   C L 	 	 L a l m a s ,   M ;   J o s e ,   J ;   R a u b e r ,   A ;   S e b a s t i a n i ,   F ;   F r o m m h o l z ,   I 	 	 B i r y u k o v ,   M a r i a ;   D o n g ,   C a i l i n g 	 	 	 A n a l y s i s   o f   C o m p u t e r   S c i e n c e   C o m m u n i t i e s   B a s e d   o n   D B L P 	 R E S E A R C H   A N D   A D V A N C E D   T E C H N O L O G Y   F O R   D I G I T A L   L I B R A R I E S 	 L e c t u r e   N o t e s   i n   C o m p u t e r   S c i e n c e 	 	 E n g l i s h 	 P r o c e e d i n g s   P a p e r 	 1 4 t h   E u r o p e a n   C o n f e r e n c e   o n   R e s e a r c h   a n d   A d v a n c e d   T e c h n o l o g y   f o r   D i g i t a l   L i b r a r i e s 	 S E P   0 6 - 1 0 ,   2 0 1 0 	 G l a s g o w ,   S C O T L A N D 	 D R e S N e t ,   E x L i b r i s ,   Y A H O O   R e s ,   C o a l i t   N e t w o r k e d   I n f o r m a t ,   U n i v   G l a s g o w ,   G l a s g o w 	 	 b i b l i o g r a p h i c   d a t a b a s e s ;   a u t h o r   p r o f i l i n g ;   s c i e n t i f i c   c o m m u n i t i e s ;   b i b l i o m e t r i c s 	 	 I t   i s   p o p u l a r   n o w a d a y s   t o   b r i n g   t e c h n i q u e s   f r o m   b i b l i o m e t r i c s   a n d   s c i e n t o m e t r i c s   i n t o   t h e   w o r l d   o f   d i g i t a l   l i b r a r i e s   t o   e x p l o r e   m e c h a n i s m s   w h i c h   u n d e r l i e   c o m m u n i t y   d e v e l o p m e n t .   I n   t h i s   p a p e r   w e   u s e   t h e   D B L P   d a t a   t o   i n v e s t i g a t e   t h e   a u t h o r ' s   s c i e n t i f i c   c a r e e r ,   a n d   a n a l y z e   s o m e   o f   t h e   c o m p u t e r   s c i e n c e   c o m m u n i t i e s .   W e   c o m p a r e   t h e m   i n   t e r m s   o f   p r o d u c t i v i t y   a n d   p o p u l a t i o n   s t a b i l i t y ,   a n d   u s e   t h e s e   f e a t u r e s   t o   c o m p a r e   t h e   s e t s   o f   t o p - r a n k e d   c o n f e r e n c e s   w i t h   t h e i r   l o w e r   r a n k e d   c o u n t e r p a r t s . ( 1 ) 	 [ B i r y u k o v ,   M a r i a ;   D o n g ,   C a i l i n g ]   U n i v   L u x e m b o u r g ,   F a c   S c i   T e c h n o l   &   C o m m u n ,   M I N E   G r p ,   L u x e m b o u r g ,   L u x e m b o u r g 	 	 m a r i a . b i r y u k o v @ u n i . l u ;   c a i l i n g _ d o n g @ m a i l . s d u . e d u . c n 	 	 	 	 	 B a c k s t r o m   L . ,   2 0 0 6 ,   K D D ;   B I R D   C ,   2 0 0 9 ,   L N C S ,   V 5 7 7 6 ,   P 8 2 6 ;   B l e i   D M ,   2 0 0 3 ,   J   M A C H   L E A R N   R E S ,   V 3 ,   P 9 9 3 ,   D O I   1 0 . 1 1 6 2 / j m l r . 2 0 0 3 . 3 . 4 - 5 . 9 9 3 ;   E L M A C I O G L U   E ,   2 0 0 5 ,   S I G M O D   R E C O R D ;   G I L E S   C L ,   2 0 0 4 ,   P N A S ,   V 1 0 1 ,   P 5 1 ;   H u a n g   J . ,   2 0 0 8 ,   W S D M ;   N e w m a n   M . ,   2 0 0 6 ,   S T R U C T U R E   D Y N A M I C S   N ;   S i d i r o p o u l o s   A ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 3 . 0 9 . 0 0 2 ;   W a t t s   D J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 3 ,   P 4 4 0 ,   D O I   1 0 . 1 0 3 8 / 3 0 9 1 8 ;   Y a n   S ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   7 T H   A C M / I E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P 2 3 5 ,   D O I   1 0 . 1 1 4 5 / 1 2 5 5 1 7 5 . 1 2 5 5 2 2 1 ;   Z A I A N E   O ,   2 0 0 7 ,   W E B K D D   S N A   K D D ,   P 5 9 ;   Z h o u   D . ,   2 0 0 6 ,   C I K M   0 6 ,   P 2 4 8 ;   Z h u a n g   Z M ,   2 0 0 7 ,   P R O C E E D I N G S   O F   T H E   7 T H   A C M / I E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S ,   P 2 2 5 ,   D O I   1 0 . 1 1 4 5 / 1 2 5 5 1 7 5 . 1 2 5 5 2 2 0 	 1 3 	 1 8 	 1 8 	 0 	 5 	 S P R I N G E R - V E R L A G   B E R L I N 	 B E R L I N 	 H E I D E L B E R G E R   P L A T Z   3 ,   D - 1 4 1 9 7   B E R L I N ,   G E R M A N Y 	 0 3 0 2 - 9 7 4 3 	 	 9 7 8 - 3 - 6 4 2 - 1 5 4 6 3 - 8 	 L E C T   N O T E S   C O M P U T   S C 	 	 	 2 0 1 0 	 6 2 7 3 	 	 	 	 	 	 2 2 8 	 2 3 5 	 	 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   C o m p u t e r   S c i e n c e ,   T h e o r y   &   M e t h o d s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 B T B 7 2 	 W O S : 0 0 0 2 8 6 4 0 2 8 0 0 0 2 4 	 	 
 
 J 	 G e h a n n o ,   J F ;   R o l l i n ,   L ;   L e   J e a n ,   T ;   L o u v e l ,   A ;   D a r m o n i ,   S ;   S h a w ,   W 	 	 	 	 G e h a n n o ,   J e a n - F r a n c o i s ;   R o l l i n ,   L a e t i t i a ;   L e   J e a n ,   T o n y ;   L o u v e l ,   A l e x a n d r e ;   D a r m o n i ,   S t e f a n ;   S h a w ,   W i l l i a m 	 	 	 P r e c i s i o n   a n d   R e c a l l   o f   S e a r c h   S t r a t e g i e s   f o r   I d e n t i f y i n g   S t u d i e s   o n   R e t u r n - T o - W o r k   i n   M e d l i n e 	 J O U R N A L   O F   O C C U P A T I O N A L   R E H A B I L I T A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e t u r n   t o   w o r k ;   M e d l i n e ;   B i b l i o m e t r i c s 	 R A N D O M I Z E D   C O N T R O L L E D - T R I A L S ;   M E D I C A L   S U B J E C T - H E A D I N G S ;   B I B L I O G R A P H I C   D A T A B A S E S ;   O C C U P A T I O N A L - H E A L T H ;   T E X T - W O R D ;   P U B L I C A T I O N S ;   R E L E V A N T ;   R E A D ;   C A R E 	 I n t r o d u c t i o n   T h e   p u r p o s e   o f   t h i s   s t u d y   w a s   t o   r e p o r t   o n   t h e   q u a l i t i e s   o f   v a r i o u s   s e a r c h   s t r a t e g i e s   a n d   k e y w o r d s   t o   f i n d   r e t u r n   t o   w o r k   ( R T W )   s t u d i e s   i n   t h e   M e d l i n e   b i b l i o g r a p h i c   d a t a b a s e .   M e t h o d s   W e   s e a r c h e d   M e d l i n e   f o r   a r t i c l e s   o n   R T W   p u b l i s h e d   i n   2 0 0 3 ,   u s i n g   m u l t i p l e   s e a r c h   s t r i n g s ,   a n d   h a n d   s e a r c h e d   1 6   m a j o r   p e r i o d i c a l s   o f   r e h a b i l i t a t i o n   o r   o c c u p a t i o n a l   m e d i c i n e .   A m o n g   t h e   r e t r i e v e d   a r t i c l e s ,   t h o s e   c o n s i d e r e d   t o   b e   r e l e v a n t ,   w e r e   p o o l e d   i n   a   G o l d   S t a n d a r d   D a t a b a s e .   F r o m   t h i s   d a t a b a s e ,   w e   i d e n t i f i e d   c a n d i d a t e   t e x t   w o r d s   o r   M e S H   t e r m s   f o r   s e a r c h   s t r a t e g i e s   u s i n g   a   w o r d   f r e q u e n c y   a n a l y s i s   o f   t h e   a b s t r a c t s   a n d   a   M E D L I N E   c a t e g o r i z a t i o n   a l g o r i t h m .   A c c o r d i n g   t o   t h e   f r e q u e n c y   o f   i d e n t i f i e d   t e r m s ,   s e a r c h e s   w e r e   r u n   f o r   e a c h   t e r m   i n d e p e n d e n t l y   a n d   i n   c o m b i n a t i o n .   W e   c o m p u t e d   R e c a l l ,   P r e c i s i o n ,   a n d   n u m b e r   n e e d e d   t o   r e a d   ( N N R   =   1 / P r e c i s i o n )   o f   e a c h   k e y w o r d   o r   c o m b i n a t i o n   o f   k e y w o r d s .   R e s u l t s   A m o n g   t h e   8 , 0 7 3   a r t i c l e s   e x a m i n e d ,   3 1 4   ( 3 . 9 % )   w e r e   c o n s i d e r e d   r e l e v a n t   a n d   i n c l u d e d   i n   t h e   G o l d   S t a n d a r d   D a t a b a s e .   T h e   s e a r c h   s t r i n g s   ( " R e h a b i l i t a t i o n ,   V o c a t i o n a l ' '   [ M e S H ] ) ,   ( " R e t u r n   t o   w o r k ' ' [ A l l ] )   a n d   ( " B a c k   t o   w o r k ' ' [ A l l ] )   h a d   R e c a l l / P r e c i s i o n   r a t i o   o f   3 0 . 4 6 / 1 9 . 1 1 ,   5 9 . 5 5 / 8 7 . 3 8   a n d   3 . 1 8 / 9 0 . 9 1 % ,   r e s p e c t i v e l y .   T h e i r   c o m b i n a t i o n   w i t h   t h e   B o o l e a n   o p e r a t o r   O R   y i e l d e d   t o   a   R e c a l l / P r e c i s i o n   r a t i o   o f   7 3 . 8 9 / 5 8 . 4 4 %   a n d   a   N N R   o f   1 . 7 .   F o r   t h e   e n d   u s e r   r e q u i r i n g   c o m p r e h e n s i v e   l i t e r a t u r e   s e a r c h ,   t h e   b e s t   s t r i n g   w a s   ( " R e t u r n   t o   w o r k ' '   O R   " B a c k   t o   w o r k ' '   O R   " R e h a b i l i t a t i o n ,   v o c a t i o n a l ' ' [ M e S H ]   O R   " r e h a b i l i t a t i o n ' ' [ S u b h e a d i n g ] ) ,   w i t h   a   R e c a l l   o f   8 8 . 2 2 %   a n d   a   N N R   o f   1 8 .   C o n c l u s i o n s   N o   s i n g l e   M e S H   t e r m   i s   a v a i l a b l e   t o   h e l p   t h e   p h y s i c i a n   t o   i d e n t i f y   r e l e v a n t   s t u d i e s   o n   R T W   i n   M e d l i n e .   L o c a t i n g   t h e s e   t y p e s   o f   s t u d i e s   r e q u i r e s   t h e   u s e   o f   v a r i o u s   M e S H   a n d   n o n - M e S H   t e r m s   i n   c o m b i n a t i o n   t o   o b t a i n   a   s a t i s f a c t o r y   R e c a l l .   N e v e r t h e l e s s ,   e n h a n c i n g   t h e   R e c a l l   o f   s e a r c h   s t r a t e g i e s   m a y   l e a d   t o   l o w e r   P r e c i s i o n ,   a n d   h i g h e r   N N R ,   a l t h o u g h   w i t h   a   n o n   l i n e a r   t r e n d .   T h i s   f a c t o r   m u s t   b e   t a k e n   i n t o   c o n s i d e r a t i o n   b y   t h e   e n d   u s e r   i n   o r d e r   t o   i m p r o v e   t h e   c o s t - e f f e c t i v e n e s s   r a t i o   o f   t h e   s e a r c h   i n   M e d l i n e . 	 [ G e h a n n o ,   J e a n - F r a n c o i s ;   R o l l i n ,   L a e t i t i a ;   L o u v e l ,   A l e x a n d r e ]   R o u e n   U n i v   H o s p ,   I n s t   O c c u p a t   H l t h ,   F - 7 6 0 0 0   R o u e n ,   F r a n c e ;   [ L e   J e a n ,   T o n y ]   G e n   H o s p   D i e p p e ,   D e p t   R e h a b i l   M e d ,   D i e p p e ,   F r a n c e ;   [ G e h a n n o ,   J e a n - F r a n c o i s ;   D a r m o n i ,   S t e f a n ]   R o u e n   U n i v   H o s p ,   G C S I S   L a b ,   F - 7 6 0 0 0   R o u e n ,   F r a n c e ;   [ S h a w ,   W i l l i a m ]   L i b e r t y   M u t u a l   R e s   I n s t   S a f e t y ,   H o p k i n t o n ,   M A   U S A 	 G e h a n n o ,   J F   ( r e p r i n t   a u t h o r ) ,   R o u e n   U n i v   H o s p ,   I n s t   O c c u p a t   H l t h ,   1   R u e   G e r m o n t ,   F - 7 6 0 0 0   R o u e n ,   F r a n c e . 	 j e a n - f r a n c o i s . g e h a n n o @ c h u - r o u e n . f r 	 S t e f a n ,   D a r m o n i / H - 4 5 5 4 - 2 0 1 6 ;   	 G e h a n n o ,   j e a n - f r a n c o i s / 0 0 0 0 - 0 0 0 2 - 2 3 0 9 - 7 3 2 2 ;   d a r m o n i ,   s t e f a n / 0 0 0 0 - 0 0 0 2 - 7 1 6 2 - 3 1 8 X 	 	 	 A D A M S   C E ,   1 9 9 4 ,   P S Y C H O L   M E D ,   V 2 4 ,   P 7 4 1 ;   A l p e r   B S ,   2 0 0 4 ,   J   M E D   L I B R   A S S O C ,   V 9 2 ,   P 4 2 9 ;   B a c h m a n n   L M ,   2 0 0 2 ,   J   A M   M E D   I N F O R M   A S S N ,   V 9 ,   P 6 5 3 ,   D O I   1 0 . 1 1 9 7 / j a m i a . M 1 1 2 4 ;   C h a n g   A A ,   2 0 0 6 ,   L A R Y N G O S C O P E ,   V 1 1 6 ,   P 3 3 6 ,   D O I   1 0 . 1 0 9 7 / 0 1 . m l g . 0 0 0 0 1 9 5 3 7 1 . 7 2 8 8 7 . a 2 ;   D a r m o n i   S t e f a n   J ,   2 0 0 6 ,   B M C   M e d   I n f o r m   D e c i s   M a k ,   V 6 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 6 - 7 ;   D e v i l l e   W L J M ,   2 0 0 0 ,   J   C L I N   E P I D E M I O L ,   V 5 3 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 4 3 5 6 ( 9 9 ) 0 0 1 4 4 - 4 ;   D o n g   P e n g ,   2 0 0 4 ,   B M C   M e d   I n f o r m   D e c i s   M a k ,   V 4 ,   P 2 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 4 - 2 1 ;   F e l b e r   S   H ,   2 0 0 0 ,   C a n c e r   C o n t r o l ,   V 7 ,   P 4 6 9 ;   G e h a n n o   J F ,   2 0 0 0 ,   O C C U P   E N V I R O N   M E D ,   V 5 7 ,   P 7 0 6 ,   D O I   1 0 . 1 1 3 6 / o e m . 5 7 . 1 0 . 7 0 6 ;   G e h a n n o   J F ,   1 9 9 8 ,   O C C U P   E N V I R O N   M E D ,   V 5 5 ,   P 5 6 2 ;   G r e e n h a l g h   T ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 5 ,   P 1 8 0 ;   H a a f k e n s   J ,   2 0 0 6 ,   O C C U P   M E D - O X F O R D ,   V 5 6 ,   P 3 9 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / k q i 1 9 3 ;   J e n u w i n e   E S ,   2 0 0 4 ,   J   M E D   L I B R   A S S O C ,   V 9 2 ,   P 3 4 9 ;   M a r s o n   A G ,   1 9 9 6 ,   E P I L E P S I A ,   V 3 7 ,   P 3 7 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 8 - 1 1 5 7 . 1 9 9 6 . t b 0 0 5 7 5 . x ;   M o n t o r i   V M ,   2 0 0 5 ,   B R I T   M E D   J ,   V 3 3 0 ,   P 6 8 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 3 3 6 . 8 0 4 1 6 7 . 4 7 ;   N w o s u   C R ,   1 9 9 8 ,   O B S T E T   G Y N E C O L ,   V 9 1 ,   P 6 1 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 9 - 7 8 4 4 ( 9 7 ) 0 0 7 0 3 - 5 ;   S a i n t   S ,   2 0 0 0 ,   J   G E N   I N T E R N   M E D ,   V 1 5 ,   P 8 8 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 5 - 1 4 9 7 . 2 0 0 0 . 0 0 2 0 2 . x ;   S c h a a f s m a   F ,   2 0 0 6 ,   A M   J   I N D   M E D ,   V 4 9 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 2 / a j i m . 2 0 2 3 5 ;   S h a w   W ,   2 0 0 8 ,   J   O C C U P   R E H A B I L ,   V 1 8 ,   P 2 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 2 6 - 0 0 7 - 9 1 1 5 - y ;   v a n d e r W e i j d e n   T ,   1 9 9 7 ,   F A M   P R A C T ,   V 1 4 ,   P 2 0 4 ,   D O I   1 0 . 1 0 9 3 / f a m p r a / 1 4 . 3 . 2 0 4 ;   V e r b e e k   J ,   2 0 0 5 ,   O C C U P   E N V I R O N   M E D ,   V 6 2 ,   P 6 8 2 ,   D O I   1 0 . 1 1 3 6 / o e m . 2 0 0 4 . 0 1 9 1 1 7 ;   V e r b e e k   J H ,   2 0 0 2 ,   S C A N D   J   W O R K   E N V   H E A ,   V 2 8 ,   P 1 9 7 ;   W a t s o n   R J D ,   1 9 9 9 ,   B R I T   J   M E D   P S Y C H O L ,   V 7 2 ,   P 5 3 5 ,   D O I   1 0 . 1 3 4 8 / 0 0 0 7 1 1 2 9 9 1 6 0 2 2 0 ;   W Y A T T   J ,   1 9 9 1 ,   L A N C E T ,   V 3 3 8 ,   P 1 3 6 8 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 0 - 6 7 3 6 ( 9 1 ) 9 2 2 4 5 - W ;   1 9 0 1 ,   J A M A ,   V 3 7 ,   P 6 4 7 	 2 5 	 1 8 	 1 8 	 1 	 8 	 S P R I N G E R / P L E N U M   P U B L I S H E R S 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 1 0 5 3 - 0 4 8 7 	 	 	 J   O C C U P   R E H A B I L 	 J .   O c c u p .   R e h a b i l . 	 S E P 	 2 0 0 9 	 1 9 	 3 	 	 	 	 	 2 2 3 	 2 3 0 	 	 1 0 . 1 0 0 7 / s 1 0 9 2 6 - 0 0 9 - 9 1 7 7 - 0 	 	 8 	 R e h a b i l i t a t i o n ;   S o c i a l   I s s u e s 	 R e h a b i l i t a t i o n ;   S o c i a l   I s s u e s 	 4 7 9 S A 	 W O S : 0 0 0 2 6 8 6 8 0 0 0 0 0 0 1 	 1 9 3 8 1 7 8 9 	 
 
 J 	 B a n s a r d ,   J Y ;   R e b h o l z - S c h u h m a n n ,   D ;   C a m e r o n ,   G ;   C l a r k ,   D ;   v a n   M u l l i g e n ,   E ;   B e l t r a m e ,   F ;   B a r b o l l a ,   E D ;   M a r t i n - S a n c h e z ,   F ;   M i l a n e s i ,   L ;   T o l l i s ,   I ;   v a n   d e r   L e i ,   J ;   C o a t r i e u x ,   J L 	 	 	 	 B a n s a r d ,   J .   Y . ;   R e b h o l z - S c h u h m a n n ,   D . ;   C a m e r o n ,   G . ;   C l a r k ,   D . ;   v a n   M u l l i g e n ,   E . ;   B e l t r a m e ,   F . ;   D e l   H o y o   B a r b o l l a ,   E . ;   M a r t i n - S a n c h e z ,   F . ;   M i l a n e s i ,   L . ;   T o l l i s ,   I . ;   v a n   d e r   L e i ,   J . ;   C o a t r i e u x ,   J .   L . 	 	 	 M e d i c a l   i n f o r m a t i c s   a n d   b i o i n f o r m a t i c s :   A   b i b l i o m e t r i c   s t u d y 	 I E E E   T R A N S A C T I O N S   O N   I N F O R M A T I O N   T E C H N O L O G Y   I N   B I O M E D I C I N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b i o i n f o r m a t i c s   ( B I ) ;   b i o l o g y ;   c o r r e s p o n d e n c e   a n a l y s i s ;   i n f o r m a t i c s ;   m e d i c i n e 	 P U B L I C A T I O N S 	 T h i s   p a p e r   r e p o r t s   o n   a n   a n a l y s i s   o f   t h e   b i o i n f o r m a t i c s   a n d   m e d i c a l   i n f o r m a t i c s   l i t e r a t u r e   w i t h   t h e   o b j e c t i v e   t o   i d e n t i f y   u p c o m i n g   t r e n d s   t h a t   a r e   s h a r e d   a m o n g   b o t h   r e s e a r c h   f i e l d s   t o   d e r i v e   b e n e f i t s   f r o m   p o t e n t i a l   c o l l a b o r a t i v e   i n i t i a t i v e s   f o r   t h e i r   f u t u r e .   O u r   r e s u l t s   p r e s e n t   t h e   m a i n   c h a r a c t e r i s t i c s   o f   t h e   t w o   f i e l d s   a n d   s h o w   t h a t   t h e s e   d o m a i n s   a r e   s t i l l   r e l a t i v e l y   s e p a r a t e d . 	 I N S E R M ,   U 6 4 2 ,   F - 3 5 0 0 0   R e n n e s ,   F r a n c e ;   U n i v   R e n n e s   1 ,   L T S I ,   F - 3 5 0 0 0   R e n n e s ,   F r a n c e ;   E M B L ,   C a m b r i d g e   C B 1 0   1 S D ,   E n g l a n d ;   E r a s m u s   M C ,   D e p t   M e d   I n f o r m a t ,   N L - 3 0 0 0   D R   R o t t e r d a m ,   N e t h e r l a n d s ;   U n i v   G e n o a ,   D I S T ,   D e p t   B i o e n g n ,   I - 1 6 1 4 5   G e n o a ,   I t a l y ;   U n i v   P o l i t e c n   M a d r i d ,   E T S I   T e l e c o m m u n ,   E - 2 8 0 4 0   M a d r i d ,   S p a i n ;   I n s t   H l t h   C a r l o s   I I I ,   M e d   B i o i n f o r m a t   D e p t ,   M a d r i d   2 8 2 2 0 ,   S p a i n ;   C N R ,   I T B ,   I - 2 0 0 9 0   M i l a n ,   I t a l y ;   F d n   R e s   &   T e c h n o l ,   G R - 7 1 1 1 0   I r a k l i o n ,   G r e e c e 	 B a n s a r d ,   J Y   ( r e p r i n t   a u t h o r ) ,   I N S E R M ,   U 6 4 2 ,   F - 3 5 0 0 0   R e n n e s ,   F r a n c e . 	 j e a n - l o u i s . c o a t r i e u x @ u n i v - r e n n e s 1 . f r 	 M a r t i n - S a n c h e z ,   F e r n a n d o / A - 7 5 8 7 - 2 0 0 8 ;   	 M a r t i n - S a n c h e z ,   F e r n a n d o / 0 0 0 0 - 0 0 0 2 - 7 3 1 2 - 5 7 0 7 ;   v a n   M u l l i g e n ,   E r i k / 0 0 0 0 - 0 0 0 3 - 1 3 7 7 - 9 3 8 6 	 	 	 B E N Z E C R I   J P ,   1 9 7 6 ,   A N A L   D O N N E E S   A N A L   C O ,   V 2 ;   B l a s c h k e   C ,   1 9 9 9 ,   P   I N T   C   I N T E L L   S Y S T ,   V 7 ,   P 6 0 ;   F I L L I A T R E A U   G ,   2 0 0 3 ,   B I B L I O M E T R I C   A N A L   R E ;   F I L L I A T R E A U   G ,   2 0 0 5 ,   A N A L   B I B L I O M E T R I Q U E ;   F R I E N D   H F ,   1 9 9 9 ,   B R I T   M E D   J ,   V 3 1 9 ,   P 1 ;   G r e e n a c r e   M . J ,   1 9 9 3 ,   C O R R E S P O N D E N C E   A N A L ;   K e r b a o l   M ,   2 0 0 6 ,   I E E E   E N G   M E D   B I O L ,   V 2 5 ,   P 6 ,   D O I   1 0 . 1 1 0 9 / M E M B . 2 0 0 6 . 1 6 0 7 6 5 7 ;   L e b a r t   L . ,   1 9 9 4 ,   S T A T   T E X T U E L L E ;   L I S A C E K   F ,   2 0 0 5 ,   D I S C O V E R I N G   P A R A D I G M ;   M a r t i n - S a n c h e z   F ,   2 0 0 4 ,   J   B I O M E D   I N F O R M ,   V 3 7 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . j b i . 2 0 0 3 . 0 9 . 0 0 3 ;   R e b h o l z - S c h u h m a n   D ,   2 0 0 7 ,   B M C   B I O I N F O R M A T I C S ,   V 8 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 1 0 5 - 8 - S 1 - S 1 8 ;   R e b h o l z - S c h u h m a n n   D ,   2 0 0 4 ,   N U C L E I C   A C I D S   R E S ,   V 3 2 ,   P 1 3 5 ,   D O I   1 0 . 1 0 9 3 / n a r / g k h 1 6 2 ;   R z h e t s k y   A ,   2 0 0 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 3 ,   P 4 9 4 0 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 6 0 0 5 9 1 1 0 3 ;   R z h e t s k y   A ,   2 0 0 4 ,   J   B I O M E D   I N F O R M ,   V 3 7 ,   P 4 3 ,   D O I   1 0 . 1 0 1 6 / j . j b i . 2 0 0 3 . 1 0 . 0 0 1 ;   T E U F E L   S ,   1 9 9 8 ,   W O R K S H   D I S C   S T R U C T   D 	 1 5 	 1 8 	 1 9 	 1 	 1 4 	 I E E E - I N S T   E L E C T R I C A L   E L E C T R O N I C S   E N G I N E E R S   I N C 	 P I S C A T A W A Y 	 4 4 5   H O E S   L A N E ,   P I S C A T A W A Y ,   N J   0 8 8 5 5   U S A 	 1 0 8 9 - 7 7 7 1 	 	 	 I E E E   T   I N F   T E C H N O L   B 	 I E E E   T .   I n f .   T e c h n o l .   B i o m e d . 	 M A Y 	 2 0 0 7 	 1 1 	 3 	 	 	 	 	 2 3 7 	 2 4 3 	 	 1 0 . 1 1 0 9 / T I T B . 2 0 0 7 . 8 9 2 6 9 4 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   M a t h e m a t i c a l   &   C o m p u t a t i o n a l   B i o l o g y ;   M e d i c a l   I n f o r m a t i c s 	 C o m p u t e r   S c i e n c e ;   M a t h e m a t i c a l   &   C o m p u t a t i o n a l   B i o l o g y ;   M e d i c a l   I n f o r m a t i c s 	 1 6 6 K X 	 W O S : 0 0 0 2 4 6 3 7 8 7 0 0 0 0 1 	 1 7 5 2 1 0 7 3 	 
 
 J 	 N a v a r r o ,   A ;   M a r t i n ,   M 	 	 	 	 N a v a r r o ,   A ;   M a r t i n ,   M 	 	 	 S c i e n t i f i c   p r o d u c t i o n   a n d   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   o c c u p a t i o n a l   h e a l t h ,   1 9 9 2 - 2 0 0 1 	 S C A N D I N A V I A N   J O U R N A L   O F   W O R K   E N V I R O N M E N T   &   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s 	 J O U R N A L S 	 O b j e c t i v e s   T h e   o b j e c t i v e s   o f   t h e   p r e s e n t   s t u d y   w e r e   t w o f o l d ,   t o   d e s c r i b e   i n t e r n a t i o n a l   s c i e n t i f i c   p r o d u c t i o n   i n   o c c u p a t i o n a l   h e a l t h   a n d   t o   e x a m i n e   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   t h i s   d i s c i p l i n e .   M e t h o d s   A   b i b l i o m e t r i c   s t u d y   w a s   c a r r i e d   o u t ,   u s i n g   S c i e n c e   C i t a t i o n   I n d e x ,   i n   o r d e r   t o   e v a l u a t e   t h e   a r t i c l e s   p u b l i s h e d   d u r i n g   t h e   p e r i o d   1 9 9 2 - 2 0 0 1   i n   e i g h t   r e p r e s e n t a t i v e   o c c u p a t i o n a l   h e a l t h   j o u r n a l s .   S c i e n t i f i c   p r o d u c t i o n ,   c o l l a b o r a t i v e   p r o f i l e s   f o r   e a c h   c o u n t r y ,   a n d   t h e   s i g n i f i c a n t   r e l a t i o n s h i p s   e s t a b l i s h e d   b e t w e e n   c o u n t r i e s   a r e   r e p o r t e d .   R e s u l t s   O n e   o r   m o r e   i n s t i t u t i o n s   i n   t h e   U n i t e d   S t a t e s   h a d   c o n t r i b u t e d   t o   o v e r   4 0 %   o f   t h e   a r t i c l e s   e x a m i n e d .   T h e   U n i t e d   S t a t e s   w a s   f o l l o w e d   b y   t h e   U n i t e d   K i n g d o m   ( 9 . 1 5 % )   a n d   t h e n   S w e d e n   ( 8 . 6 5 % ) .   W h e n   p o p u l a t i o n   s i z e   e f f e c t s   w e r e   e l i m i n a t e d ,   t h e   S c a n d i n a v i a n   c o u n t r i e s   p r o v e d   t o   b e   t h e   l e a d i n g   p r o d u c e r s .   A f t e r   c o r r e c t i o n   f o r   g r o s s   d o m e s t i c   p r o d u c t ,   t h e r e   w a s   a n   i n c r e a s e   i n   t h e   r a n k i n g   o f   a p p a r e n t l y   s c i e n t i f i c a l l y   m o d e s t   c o u n t r i e s .   T h e   S c a n d i n a v i a n   c o u n t r i e s   r e m a i n e d   h i g h .   I n   t e r m s   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   g e n e r a l ,   t h e r e   w a s   a n   i n v e r s e   r e l a t i o n s h i p   b e t w e e n   t h e   p r o d u c t i o n   o f   a   c o u n t r y   a n d   t h e   p r o p o r t i o n   o f   a r t i c l e s   c o - a u t h o r e d   w i t h   i n s t i t u t i o n s   i n   o t h e r   c o u n t r i e s .   F i n a l l y ,   t h e   s i g n i f i c a n t   r e l a t i o n s h i p s   b e t w e e n   c o u n t r i e s   p e r m i t t e d   t h e   i d e n t i f i c a t i o n   o f   u p   t o   s i x   l a r g e   c o l l a b o r a t i o n   n u c l e i .   C o n c l u s i o n s   T h e   h i g h   a b s o l u t e   a n d   r e l a t i v e   S c a n d i n a v i a n   p r o d u c t i o n   i s   s u g g e s t i v e   o f   t h e   g r e a t   i m p o r t a n c e   o f   o c c u p a t i o n a l   h e a l t h   i n   t h e s e   c o u n t r i e s .   A c c e s s   t o   p u b l i c a t i o n   b y   m o r e   m o d e s t   c o u n t r i e s ,   s c i e n t i f i c a l l y   s p e a k i n g ,   i s   o b s e r v e d   t o   o c c u r   t h r o u g h   c o l l a b o r a t i o n   w i t h   t h e   h i g h - p r o d u c t i o n   c o u n t r i e s .   I n   t h i s   s e n s e ,   i t   w o u l d   s e e m   n e c e s s a r y   t o   s t u d y   t h e   b a s i s   u n d e r l y i n g   t h e s e   r e l a t i o n s h i p s .   F i n a l l y ,   t h e   c h a r a c t e r i z a t i o n   o f   t h e   c o l l a b o r a t i v e   n u c l e i   d o e s   n o t   d i f f e r   g r e a t l y   f r o m   w h a t   w a s   e x p e c t e d . 	 U n i v   A u t o n o m a   B a r c e l o n a ,   F a c   M e d ,   L a b   B i o e s t a d i s t   &   E p i d e m i o l ,   E - 0 8 1 9 3   B a r c e l o n a ,   S p a i n 	 N a v a r r o ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   A u t o n o m a   B a r c e l o n a ,   F a c   M e d ,   L a b   B i o e s t a d i s t   &   E p i d e m i o l ,   E - 0 8 1 9 3   B a r c e l o n a ,   S p a i n . 	 a l b e r t . n a v a r r o @ u a b . e s 	 	 	 	 	 B A R R E   R ,   1 9 9 3 ,   I N F O R M E   M U N D I A L   C I E N ;   B E A V E R   D B ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 6 5 ;   B e l l a v i s t a   J . ,   1 9 9 7 ,   E V A L U A C I O N   I N V E S T I G A ;   C a k a l o   D ,   1 9 9 9 ,   A r h   H i g   R a d a   T o k s i k o l ,   V 5 0 ,   P 4 3 7 ;   C A M I   J ,   1 9 9 3 ,   P R O D U C C I O N   C I E N T I F I C ;   C A M I   J ,   2 0 0 2 ,   P R O D U C C I O N   C I E N T I F I C ;   G e h a n n o   J F ,   2 0 0 0 ,   O C C U P   E N V I R O N   M E D ,   V 5 7 ,   P 7 0 6 ,   D O I   1 0 . 1 1 3 6 / o e m . 5 7 . 1 0 . 7 0 6 ;   L A R S S O N   K S ,   1 9 9 5 ,   J   I N T E R N   M E D ,   V 2 3 8 ,   P 4 4 5 ;   L U U K K O N E N   T ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 2 ;   M C C U N N E Y   R J ,   1 9 9 2 ,   J   O C C U P   E N V I R O N   M E D ,   V 3 4 ,   P 2 7 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 3 7 6 4 - 1 9 9 2 0 3 0 0 0 - 0 0 0 1 2 ;   M I Q U E L   J F ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 2 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 9 7 7 ;   M o n t i n i   T ,   2 0 0 2 ,   P U B L I C   H E A L T H   R E P ,   V 1 1 7 ,   P 2 9 1 ,   D O I   1 0 . 1 0 9 3 / p h r / 1 1 7 . 3 . 2 9 1 ;   N e m e r y   B ,   2 0 0 1 ,   O C C U P   E N V I R O N   M E D ,   V 5 8 ,   P 6 0 4 ,   D O I   1 0 . 1 1 3 6 / o e m . 5 8 . 9 . 6 0 4 ;   R a d o s e v i c - V i d a c e k   B ,   1 9 9 9 ,   A r h   H i g   R a d a   T o k s i k o l ,   V 5 0 ,   P 4 2 3 ;   S C H U B E R T   A ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 3 0 4 6 1 ;   S i m e o n - R u d o l f   V ,   1 9 9 5 ,   A r h   H i g   R a d a   T o k s i k o l ,   V 4 6 ,   P 3 5 9 ;   T a k a h a s h i   K ,   1 9 9 6 ,   O C C U P   E N V I R O N   M E D ,   V 5 3 ,   P 4 3 3 ;   * U N E S C O   I   S T A T ,   2 0 0 1 ,   S T A T   S C I   T E C H N   W O R L D ;   W H O ,   1 9 9 3 ,   H L T H   A L L   T A R G   H L T H   P ;   * W O R L D   B A N K ,   2 0 0 3 ,   W O R L D   D E V   I N D   C D   R O M ;   Y U   T S ,   2 0 0 0 ,   A S I A   P A C   J   P U B L I C   H L ,   V 1 2 ,   P 3 4 	 2 1 	 1 8 	 1 8 	 0 	 1 0 	 S C A N D   J   W O R K   E N V   H E A L T H 	 H E L S I N K I 	 T O P E L I U K S E N K A T U   4 1 A ,   S F - 0 0 2 5 0   H E L S I N K I ,   F I N L A N D 	 0 3 5 5 - 3 1 4 0 	 	 	 S C A N D   J   W O R K   E N V   H E A 	 S c a n d .   J .   W o r k   E n v i r o n .   H e a l t h 	 J U N 	 2 0 0 4 	 3 0 	 3 	 	 	 	 	 2 2 3 	 2 3 3 	 	 	 	 1 1 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h 	 8 3 4 U O 	 W O S : 0 0 0 2 2 2 4 3 6 6 0 0 0 0 7 	 1 5 2 5 0 6 5 1 	 
 
 J 	 K o s t o f f ,   R N ;   S h l e s i n g e r ,   M F ;   M a l p o h l ,   G 	 	 	 	 K o s t o f f ,   R N ;   S h l e s i n g e r ,   M F ;   M a l p o h l ,   G 	 	 	 F r a c t a l s   t e x t   m i n i n g   u s i n g   b i b l i o m e t r i c s   a n d   d a t a b a s e   t o m o g r a p h y 	 F R A C T A L S - C O M P L E X   G E O M E T R Y   P A T T E R N S   A N D   S C A L I N G   I N   N A T U R E   A N D   S O C I E T Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 f r a c t a l s ;   s e l f - s i m i l a r i t y ;   s e l f - o r g a n i z e d   c r i t i c a l i t y ;   m u l t i - f r a c t a l ;   t e x t - m i n i n g ;   b i b l i o m e t r i c s ;   c o m p u t a t i o n a l   l i n g u i s t i c s 	 T E C H N I C A L   I N T E L L I G E N C E ;   C I T A T I O N ;   R O A D M A P S 	 D a t a b a s e   T o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   ( 1 )   a l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i - w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i - w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   ( 2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   w a s   u s e d   t o   o b t a i n   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a   F r a c t a l s   d a t a b a s e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S C I ) .   P h r a s e   f r e q u e n c y   a n a l y s i s   b y   t h e   t e c h n i c a l   d o m a i n   e x p e r t s   p r o v i d e d   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s   o f   t h e   F r a c t a l s   d a t a b a s e ,   a n d   t h e   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   B i b l i o m e t r i c   a n a l y s i s   o f   t h e   F r a c t a l s   l i t e r a t u r e   s u p p l e m e n t e d   t h e   D T   r e s u l t s   w i t h   a u t h o r / j o u r n a l / i n s t i t u t i o n   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   U n i v   K a r l s r u h e ,   D - 7 6 1 2 8   K a r l s r u h e ,   G e r m a n y 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l ;   s h l e s i m @ o n r . n a v y . m i l ;   m a l p o h l @ i p d . u k a . d e 	 	 	 	 	 C u t t i n g   D .   R . ,   1 9 9 2 ,   P   1 5   A N N   I N T   A C M   S I G ,   P 3 1 8 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 3 1 6 0 . 1 3 3 2 1 4 ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   G u h a   S ,   1 9 9 8 ,   P   A C M   S I G M O D   I N T   C   M ,   P 7 3 ,   D O I   1 0 . 1 1 4 5 / 2 7 6 3 0 4 . 2 7 6 3 1 2 ;   [ A n o n y m o u s ] ,   1 9 9 8 ,   N A T U R A L   L A N G U A G E   I N F ;   * I S I ,   2 0 0 2 ,   S C I   S C I   C I T   I N D ;   K a r y p i s   G ,   1 9 9 9 ,   C O M P U T E R ,   V 3 2 ,   P 6 8 ,   D O I   1 0 . 1 1 0 9 / 2 . 7 8 1 6 3 7 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K o s t o f f   R N ,   1 9 9 3 ,   C O M P E T   I N T E L L   R E V ,   V 4 ,   P 3 8 ,   D O I   1 0 . 1 0 0 2 / c i r . 3 8 8 0 0 4 0 1 0 9 ;   K O S T O F F   R N ,   2 0 0 3 ,   F R A C T A L S   R O A D M A P S   U S ;   K O S T O F F   R N ,   2 0 0 3 ,   I N   P R E S S   I N T   J   B I F U R ;   K o s t o f f   R .   N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 4 8 ,   D O I   1 0 . 1 0 0 2 / c i r . 3 8 8 0 0 5 0 1 0 9 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   P r e c h e l t   L ,   2 0 0 2 ,   J   U N I V E R S   C O M P U T   S C I ,   V 8 ,   P 1 0 1 6 ;   R A S M U S S E N   E ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ;   S t e i n b a c h   M i c h a e l ,   2 0 0 0 ,   0 0 0 3 4   U   M I N N   D E P   C O M ;   W I L L E T   P ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 7 7 ;   W I S E   M J ,   S T R I N G   S I M I L A R I T Y   V I ;   Z a m i r   O . ,   1 9 9 8 ,   P r o c e e d i n g s   o f   t h e   2 1 s t   A n n u a l   I n t e r n a t i o n a l   A C M   S I G I R   C o n f e r e n c e   o n   R e s e a r c h   a n d   D e v e l o p m e n t   i n   I n f o r m a t i o n   R e t r i e v a l ,   P 4 6 ,   D O I   1 0 . 1 1 4 5 / 2 9 0 9 4 1 . 2 9 0 9 5 6 ;   K O S T O F F   R N ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 2 8 	 1 8 	 1 8 	 1 	 8 	 W O R L D   S C I E N T I F I C   P U B L   C O   P T E   L T D 	 S I N G A P O R E 	 5   T O H   T U C K   L I N K ,   S I N G A P O R E   5 9 6 2 2 4 ,   S I N G A P O R E 	 0 2 1 8 - 3 4 8 X 	 	 	 F R A C T A L S 	 F r a c t a l s - C o m p l e x   G e o m .   P a t t e r n s   S c a l i n g   N a t .   S o c . 	 M A R 	 2 0 0 4 	 1 2 	 1 	 	 	 	 	 1 	 1 6 	 	 1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 	 	 1 6 	 M a t h e m a t i c s ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   M u l t i d i s c i p l i n a r y   S c i e n c e s 	 M a t h e m a t i c s ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 8 2 3 F V 	 W O S : 0 0 0 2 2 1 5 9 6 3 0 0 0 0 1 	 	 
 
 J 	 E O M ,   S B 	 	 	 	 E O M ,   S B 	 	 	 D E C I S I O N - S U P P O R T   S Y S T E M S   R E S E A R C H   -   R E F E R E N C E   D I S C I P L I N E S   A N D   A   C U M U L A T I V E   T R A D I T I O N 	 O M E G A - I N T E R N A T I O N A L   J O U R N A L   O F   M A N A G E M E N T   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 D E C I S I O N   S U P P O R T   S Y S T E M S ;   R E F E R E N C E   D I S C I P L I N E S ;   B I B L I O M E T R I C S ;   B I B L I O G R A P H Y ;   C O C I T A T I O N   A N A L Y S I S 	 I N T E L L E C T U A L   S T R U C T U R E ;   D I R E C T I O N S 	 T h i s   s t u d y   a p p l i e s   f a c t o r   a n a l y s i s   o f   a n   a u t h o r   r e c i t a t i o n   f r e q u e n c y   m a t r i x   d e r i v e d   f r o m   a   d a t a b a s e   f i l e   c o n s i s t i n g   o f   a   t o t a l   o f   1 5 , 0 3 0   c i t e d   r e f e r e n c e   r e c o r d s   t a k e n   f r o m   6 9 2   c i t i n g   a r t i c l e s .   S e v e n   i n f o r m a l   c l u s t e r s   o f   d e c i s i o n   s u p p o r t   s y s t e m s   ( D S S )   r e s e a r c h   s u b s p e c i a l t i e s   a n d   r e f e r e n c e   d i s c i p l i n e s   w e r e   u n c o v e r e d .   F o u r   o f   t h e m   r e p r e s e n t   D S S   r e s e a r c h   s u b s p e c i a l t i e s - f o u n d a t i o n s ,   g r o u p   D S S ,   m o d e l / d a t a   m a n a g e m e n t ,   a n d   i n d i v i d u a l   d i f f e r e n c e s .   T h r e e   o t h e r   c o n c e p t u a l   g r o u p i n g s   d e f i n e   t h e   r e f e r e n c e   d i s c i p l i n e s   o f   D S S - o r g a n i z a t i o n a l   s c i e n c e ,   m u l t i p l e   c r i t e r i a   d e c i s i o n   m a k i n g ,   a n d   a r t i f i c i a l   i n t e l l i g e n c e .   D S S   i s   a   v e r y   y o u n g   a c a d e m i c   f i e l d   a n d   i s   s t i l l   g r o w i n g .   D S S   h a s   j u s t   e n t e r e d   t h e   e r a   o f   g r o w t h   a f t e r   2 0   y e a r s   o f   r e s e a r c h .   D u r i n g   t h e   1 9 9 0 s ,   D S S   r e s e a r c h   w i l l   b e   f u r t h e r   g r o u n d e d   i n   a   d i v e r s e   s e t   o f   r e f e r e n c e   d i s c i p l i n e s .   F u r t h e r m o r e ,   D S S   i s   i n   t h e   a c t i v e   p r o c e s s   o f   s o l i d i f y i n g   i t s   d o m a i n   a n d   d e m a r c a t i n g   i t s   r e f e r e n c e   d i s c i p l i n e s .   A   D S S   t h e o r y   i s   i m m i n e n t   i n   t h e   v e r y   n e a r   f u t u r e   i n   s o m e   a r e a   o f   D S S   r e s e a r c h   s u c h   a s   m o d e l   m a n a g e m e n t . 	 	 E O M ,   S B   ( r e p r i n t   a u t h o r ) ,   S E   M I S S O U R I   S T A T E   U N I V , C O L L   B U S I N E S S   A D M , D E P T   M A N A G E M E N T , C A P E   G I R A R D E A U , M O   6 3 7 0 1 ,   U S A . 	 	 	 	 	 	 B A S U   A ,   1 9 9 4 ,   M A N A G E   S C I ,   V 4 0 ,   P 1 5 7 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 0 . 1 2 . 1 5 7 9 ;   B E N B A S A T   I ,   1 9 9 3 ,   N A T O   A S I   S E R I E S   F ,   V 1 0 1 ,   P 3 8 3 ;   B L A N N I N G   R W ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 1 9 - Y ;   C H A N G   A M ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 2 0 - 4 ;   D e L o n e   W H ,   1 9 9 2 ,   I N F O R M   S Y S T   R E S ,   V 3 ,   P 6 0 ,   D O I   1 0 . 1 2 8 7 / i s r e . 3 . 1 . 6 0 ;   D e n n i s   A . R . ,   1 9 9 3 ,   G R O U P   S U P P O R T   S Y S T E M ,   P 5 9 ;   D O L K   D R ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 9 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 2 2 - U ;   D Y E R   J S ,   1 9 9 2 ,   M A N A G E   S C I ,   V 3 8 ,   P 6 4 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 8 . 5 . 6 4 5 ;   E l a m   J .   J . ,   1 9 8 6 ,   D E C I S   S U P P O R T   S Y S T ,   P 2 3 9 ;   E O M   H B ,   1 9 9 0 ,   E U R   J   O P E R   R E S ,   V 4 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 9 0 ) 9 0 0 0 8 - Y ;   E O M   S B ,   1 9 9 4 ,   D A T A   B A S E ,   V 2 5 ,   P 3 5 ;   E O M   S B ,   1 9 9 3 ,   D E C I S   S U P P O R T   S Y S T ,   V 1 0 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 3 ) 9 0 0 0 3 - L ;   E O M   S B ,   1 9 9 5 ,   I N   P R E S S   I N T E R F A C E S ;   F A R H O O M A N D   A F ,   1 9 8 7 ,   D A T A   B A S E ,   V 1 8 ,   P 4 8 ;   G I N Z B E R G   M J ,   1 9 8 1 ,   M A N A G E   S C I ,   V 2 7 ,   P 4 5 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 2 7 . 4 . 4 5 9 ;   K E E N   P G W ,   1 9 8 0 ,   1 S T   P   I N T   C   I N F   S Y S T ;   K i n g   J L ,   1 9 9 3 ,   I N F O R M   S Y S T   R E S ,   V 4 ,   P 2 9 1 ,   D O I   1 0 . 1 2 8 7 / i s r e . 4 . 4 . 2 9 1 ;   K U H N   T S ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ,   P 5 3 ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M c C a i n   K .   W . ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 5 1 ;   P i n s o n n e a u l t   A . ,   1 9 8 9 ,   D e c i s i o n   S u p p o r t   S y s t e m s ,   V 5 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 8 9 ) 9 0 0 0 7 - 9 ;   S P R A G U E   R H ,   1 9 8 9 ,   D E C I S   S U P P O R T   S Y S T ,   P 4 0 3 ;   T A N   J K H ,   1 9 9 3 ,   D E C I S I O N   S C I ,   V 2 4 ,   P 1 6 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 3 . t b 0 0 4 6 8 . x ;   T E N G   J T C ,   1 9 9 0 ,   D A T A   B A S E ,   V 2 1 ,   P 1 ;   W H I T E   H D ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 0 	 2 5 	 1 8 	 1 8 	 2 	 7 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D ,   E N G L A N D   O X 5   1 G B 	 0 3 0 5 - 0 4 8 3 	 	 	 O M E G A - I N T   J   M A N A G E   S 	 O m e g a - I n t .   J .   M a n a g e .   S c i . 	 O C T 	 1 9 9 5 	 2 3 	 5 	 	 	 	 	 5 1 1 	 5 2 3 	 	 1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 5 ) 0 0 0 1 8 - J 	 	 1 3 	 M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 T B 8 8 5 	 W O S : A 1 9 9 5 T B 8 8 5 0 0 0 0 4 	 	 
 
 J 	 F a h i m n i a ,   B ;   T a n g ,   C S ;   D a v a r z a n i ,   H ;   S a r k i s ,   J 	 	 	 	 F a h i m n i a ,   B e h n a m ;   T a n g ,   C h r i s t o p h e r   S . ;   D a v a r z a n i ,   H o d a ;   S a r k i s ,   J o s e p h 	 	 	 Q u a n t i t a t i v e   m o d e l s   f o r   m a n a g i n g   s u p p l y   c h a i n   r i s k s :   A   r e v i e w 	 E U R O P E A N   J O U R N A L   O F   O P E R A T I O N A L   R E S E A R C H 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 S u p p l y   C h a i n   R i s k ;   U n c e r t a i n t y ;   Q u a n t i t a t i v e   M o d e l ;   R e v i e w ;   B i b l i o m e t r i c s   a n d   n e t w o r k   a n a l y s i s 	 S T O C H A S T I C - P R O G R A M M I N G   A P P R O A C H ;   S I M U L A T I O N - B A S E D   O P T I M I Z A T I O N ;   V E N D O R   S E L E C T I O N   P R O B L E M ;   D E M A N D   U N C E R T A I N T Y ;   N E T W O R K   D E S I G N ;   D E C I S I O N - M A K I N G ;   I N V E N T O R Y   M A N A G E M E N T ;   C O M P E T I N G   R E T A I L E R S ;   P R E D I C T I V E   C O N T R O L ;   F U Z Z Y - S E T S 	 A s   s u p p l y   c h a i n   r i s k   m a n a g e m e n t   h a s   t r a n s i t i o n e d   f r o m   a n   e m e r g i n g   t o p i c   t o   a   g r o w i n g   r e s e a r c h   a r e a ,   t h e r e   i s   a   n e e d   t o   c l a s s i f y   d i f f e r e n t   t y p e s   o f   r e s e a r c h   a n d   e x a m i n e   t h e   g e n e r a l   t r e n d s   o f   t h i s   r e s e a r c h   a r e a .   T h i s   h e l p s   i d e n t i f y   f e r t i l e   r e s e a r c h   s t r e a m s   w i t h   g r e a t   p o t e n t i a l   f o r   f u r t h e r   e x a m i n a t i o n .   T h i s   p a p e r   p r e s e n t s   a   s y s t e m a t i c   r e v i e w   o f   t h e   q u a n t i t a t i v e   a n d   a n a l y t i c a l   m o d e l s   ( i . e .   m a t h e m a t i c a l ,   o p t i m i z a t i o n   a n d   s i m u l a t i o n   m o d e l i n g   e f f o r t s )   f o r   m a n a g i n g   s u p p l y   c h a i n   r i s k s .   W e   u s e   b i b l i o m e t r i c   a n d   n e t w o r k   a n a l y s i s   t o o l s   t o   g e n e r a t e   i n s i g h t s   t h a t   h a v e   n o t   b e e n   c a p t u r e d   i n   t h e   p r e v i o u s   r e v i e w s   o n   t h e   t o p i c .   I n   p a r t i c u l a r ,   w e   c o m p l e t e   a   s y s t e m i c   m a p p i n g   o f   t h e   l i t e r a t u r e   t h a t   i d e n t i f i e s   t h e   k e y   r e s e a r c h   c l u s t e r s / t o p i c s ,   i n t e r r e l a t i o n s h i p s ,   a n d   g e n e r a t i v e   r e s e a r c h   a r e a s   t h a t   h a v e   p r o v i d e d   t h e   f i e l d   w i t h   t h e   f o u n d a t i o n a l   k n o w l e d g e ,   c o n c e p t s ,   t h e o r i e s ,   t o o l s ,   a n d   t e c h n i q u e s .   S o m e   o f   o u r   f i n d i n g s   i n c l u d e   ( 1 )   q u a n t i t a t i v e   a n a l y s i s   o f   s u p p l y   c h a i n   r i s k   i s   e x p a n d i n g   r a p i d l y ;   ( 2 )   E u r o p e a n   j o u r n a l s   a r e   t h e   m o r e   p o p u l a r   r e s e a r c h   o u t l e t s   f o r   t h e   d i s s e m i n a t i o n   o f   t h e   k n o w l e d g e   d e v e l o p e d   b y   r e s e a r c h e r s   i n   U n i t e d   S t a t e s   a n d   A s i a ;   a n d   ( 3 )   s u s t a i n a b i l i t y   r i s k   a n a l y s i s   i s   a n   e m e r g i n g   a n d   f a s t   e v o l v i n g   r e s e a r c h   t o p i c .   ( C )   2 0 1 5   E l s e v i e r   B . V .   a n d   A s s o c i a t i o n   o f   E u r o p e a n   O p e r a t i o n a l   R e s e a r c h   S o c i e t i e s   ( E U R O )   w i t h i n   t h e   I n t e r n a t i o n a l   F e d e r a t i o n   o f   O p e r a t i o n a l   R e s e a r c h   S o c i e t i e s   ( I F O R S ) .   A l l   r i g h t s   r e s e r v e d . 	 [ F a h i m n i a ,   B e h n a m ]   U n i v   S y d n e y ,   S c h   B u s i n e s s ,   I n s t   T r a n s p o r t   &   L o g i s t   S t u d i e s ,   S y d n e y ,   N S W   2 0 0 0 ,   A u s t r a l i a ;   [ T a n g ,   C h r i s t o p h e r   S . ]   U n i v   C a l i f   L o s   A n g e l e s ,   A n d e r s o n   S c h   M a n a g e m e n t ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   [ D a v a r z a n i ,   H o d a ]   U n i v   S y d n e y ,   S c h   B u s i n e s s ,   D i s c i p l i n e   B u s i n e s s   A n a l y t ,   S y d n e y ,   N S W   2 0 0 0 ,   A u s t r a l i a ;   [ S a r k i s ,   J o s e p h ]   W o r c e s t e r   P o l y t e c h   I n s t ,   F o i s i e   S c h   B u s i n e s s ,   W o r c e s t e r ,   M A   0 1 6 0 9   U S A 	 F a h i m n i a ,   B   ( r e p r i n t   a u t h o r ) ,   U n i v   S y d n e y ,   S c h   B u s i n e s s ,   I n s t   T r a n s p o r t   &   L o g i s t   S t u d i e s ,   S y d n e y ,   N S W   2 0 0 0 ,   A u s t r a l i a . 	 b e h n a m . f a h i m n i a @ s y d n e y . e d u . a u 	 S a r k i s ,   J o s e p h / F - 4 5 0 8 - 2 0 1 4 ;   	 S a r k i s ,   J o s e p h / 0 0 0 0 - 0 0 0 3 - 0 1 4 3 - 8 0 4 X ;   t a n g ,   c h r i s t o p h e r / 0 0 0 0 - 0 0 0 1 - 9 5 9 7 - 7 6 2 0 	 	 	 A g h e z z a f   E ,   2 0 0 5 ,   J   O P E R   R E S   S O C ,   V 5 6 ,   P 4 5 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j o r s . 2 6 0 1 8 3 4 ;   A g r a w a l   N ,   2 0 0 2 ,   P R O D   O P E R   M A N A G ,   V 1 1 ,   P 1 5 7 ;   A w u d u   I ,   2 0 1 3 ,   A P P L   E N E R G ,   V 1 0 3 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / j . a p e n e r g y . 2 0 1 2 . 0 9 . 0 2 5 ;   A w u d u   I ,   2 0 1 2 ,   R E N E W   S U S T   E N E R G   R E V ,   V 1 6 ,   P 1 3 5 9 ,   D O I   1 0 . 1 0 1 6 / j . r s e r . 2 0 1 1 . 1 0 . 0 1 6 ;   A z a r o n   A ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 6 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 8 . 0 8 . 0 0 2 ;   B a s t i a n   M ,   2 0 0 9 ,   3   I N T   A A A I   C   W E B L   S O ;   B a t a g e l j   V . ,   2 0 1 1 ,   P A J E K   P R O G R A M   A N A L   V ;   B e a m o n   B M ,   1 9 9 8 ,   I N T   J   P R O D   E C O N ,   V 5 5 ,   P 2 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 5 2 7 3 ( 9 8 ) 0 0 0 7 9 - 6 ;   B e l l m a n   R E ,   1 9 7 0 ,   M A N A G E   S C I ,   P 1 4 1 ,   D O I   [ 1 0 . 1 2 8 7 / m n s c . 1 7 . 4 . B 1 4 1 ,   D O I   1 0 . 1 2 8 7 / M N S C . 1 7 . 4 . B 1 4 1 ,   1 0 . 1 2 8 7 / m n s c . 1 7 . 4 . b 1 4 1 ] ;   B e r n s t e i n   F ,   2 0 0 5 ,   M A N A G E   S C I ,   V 5 1 ,   P 1 8 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 4 0 . 0 2 1 8 ;   B e r n s t e i n   F ,   2 0 0 4 ,   N A V   R E S   L O G ,   V 5 1 ,   P 2 5 8 ,   D O I   1 0 . 1 0 0 2 / n a v . 1 0 1 1 3 ;   B i d h a n d i   H M ,   2 0 1 1 ,   A P P L   M A T H   M O D E L ,   V 3 5 ,   P 2 6 1 8 ,   D O I   1 0 . 1 0 1 6 / j . a p m . 2 0 1 0 . 1 1 . 0 4 2 ;   B i r g e   J . ,   1 9 9 7 ,   I N T R O   S T O C H A S T I C   P R O ;   B l a c k h u r s t   J ,   2 0 0 4 ,   I N T   J   P R O D   R E S ,   V 4 2 ,   P 1 6 3 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 3 3 1 0 0 0 1 6 4 6 0 6 4 ;   B l a c k h u r s t   J ,   2 0 0 9 ,   M A N A G I N G   S U P P L Y   C H A I N   R I S K   A N D   V U L N E R A B I L I T Y ,   P 1 ;   B l o n d e l   V D ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 0 8 / 1 0 / P 1 0 0 0 8 ;   B r a n d e n b u r g   M ,   2 0 1 4 ,   E U R   J   O P E R   R E S ,   V 2 3 3 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 1 3 . 0 9 . 0 3 2 ;   B r a u n   M .   W . ,   2 0 0 3 ,   A n n u a l   R e v i e w s   i n   C o n t r o l ,   P 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . a r c o n t r o l . 2 0 0 3 . 0 9 . 0 0 6 ;   B r a u n   M W ,   2 0 0 3 ,   S I M U L - T   S O C   M O D   S I M ,   V 7 9 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 3 7 5 4 9 7 0 3 2 5 5 6 3 7 ;   B r i n   S ,   1 9 9 8 ,   C O M P U T   N E T W O R K S   I S D N ,   V 3 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 7 5 5 2 ( 9 8 ) 0 0 1 1 0 - X ;   C a c h o n   G P ,   2 0 0 5 ,   M A N A G E   S C I ,   V 5 1 ,   P 3 0 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 4 0 . 0 2 1 5 ;   C a r n e i r o   M C ,   2 0 1 0 ,   I N D   E N G   C H E M   R E S ,   V 4 9 ,   P 3 2 8 6 ,   D O I   1 0 . 1 0 2 1 / i e 9 0 1 2 6 5 n ;   C h a n   F T S ,   2 0 0 8 ,   I N T   J   P R O D   R E S ,   V 4 6 ,   P 3 8 2 5 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 6 0 0 7 8 7 2 0 0 ;   C h a n   F T S ,   2 0 0 7 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 5 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 5 . 0 8 . 0 0 4 ;   C h a n   F T S ,   2 0 0 5 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 3 ,   P 3 4 5 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 4 . 0 5 . 0 0 4 ;   C h a n   F T S ,   2 0 0 4 ,   I N T   J   A D V   M A N U F   T E C H ,   V 2 4 ,   P 5 1 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 7 0 - 0 0 2 - 1 4 4 5 - 5 ;   C h a n   F T S ,   2 0 0 3 ,   I N T   J   A D V   M A N U F   T E C H ,   V 2 1 ,   P 5 3 4 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 7 0 0 3 0 0 0 6 3 ;   C h a n   H K ,   2 0 0 6 ,   I E E E   T   I N D   I N F O R M ,   V 2 ,   P 4 8 ,   D O I   1 0 . 1 1 0 9 / T I I . 2 0 0 5 . 8 6 4 2 1 7 ;   C h e n   C L ,   2 0 0 4 ,   J   C H E M   E N G   J P N ,   V 3 7 ,   P 8 2 2 ,   D O I   1 0 . 1 2 5 2 / j c e j . 3 7 . 8 2 2 ;   C h e n   P ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 6 . 0 0 1 ;   C h i c k s a n d   D ,   2 0 1 2 ,   S U P P L Y   C H A I N   M A N A G ,   V 1 7 ,   P 4 5 4 ,   D O I   1 0 . 1 1 0 8 / 1 3 5 9 8 5 4 1 2 1 1 2 4 6 6 1 1 ;   C h o p r a   S . ,   2 0 0 4 ,   M I T   S L O A N   M A N A G E M E N T ;   N e w m a n   M E J ,   2 0 0 4 ,   P H Y S   R E V   E ,   V 6 9 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 7 0 . 0 6 6 1 1 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 9 . 0 2 6 1 1 3 ] ;   C O H E N   M A ,   1 9 8 8 ,   O P E R   R E S ,   V 3 6 ,   P 2 1 6 ,   D O I   1 0 . 1 2 8 7 / o p r e . 3 6 . 2 . 2 1 6 ;   C r a i g h e a d   C W ,   2 0 0 7 ,   D E C I S I O N   S C I ,   V 3 8 ,   P 1 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 2 0 0 7 . 0 0 1 5 1 . x ;   C r o n i n   B . ,   2 0 1 1 ,   I N F O R M   P R O C E S S I N G   M A ,   V 4 7 ,   P 8 0 ;   D a l - M a s   M ,   2 0 1 1 ,   B I O M A S S   B I O E N E R G ,   V 3 5 ,   P 2 0 5 9 ,   D O I   1 0 . 1 0 1 6 / j . b i o m b i o e . 2 0 1 1 . 0 1 . 0 6 0 ;   D A V I S   T ,   1 9 9 3 ,   S L O A N   M A N A G E   R E V ,   V 3 4 ,   P 3 5 ;   D i n g   Y ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 2 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 7 1 ;   D i s n e y   S M ,   2 0 0 2 ,   I N T   J   P R O D   R E S ,   V 4 0 ,   P 1 7 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 1 1 0 0 7 2 9 7 5 ;   E r h u n   F ,   2 0 0 8 ,   I I E   T R A N S ,   V 4 0 ,   P 7 3 3 ,   D O I   1 0 . 1 0 8 0 / 0 7 4 0 8 1 7 0 7 0 1 7 4 4 8 2 7 ;   E s m a e i l i k i a   M . ,   2 0 1 4 ,   A N N   O P E R   R E S ,   D O I   [ 1 0 . 1 0 0 7 / s 1 0 4 7 9 - 0 1 4 - 1 5 4 4 - 3 ,   D O I   1 0 . 1 0 0 7 / S 1 0 4 7 9 - 0 1 4 - 1 5 4 4 - 3 ] ;   E s m a e i l i k i a   M ,   2 0 1 6 ,   A N N   O P E R   R E S ,   V 2 4 4 ,   P 4 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 4 7 9 - 0 1 3 - 1 5 1 3 - 2 ;   F a h i m n i a   B . ,   2 0 1 4 ,   I N T   J   P R O D   E C O N ,   V 1 6 2 ,   P 1 0 1 ;   F a n d e l   G ,   2 0 0 4 ,   I N T   J   P R O D   E C O N ,   V 8 9 ,   P 2 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 5 2 7 3 ( 0 3 ) 0 0 1 9 8 - 1 ;   F e n g   Y ,   2 0 1 0 ,   I N T   J   P R O D   R E S ,   V 4 8 ,   P 5 8 5 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 9 0 3 2 3 2 7 8 9 ;   F e r g u s o n   M E ,   2 0 0 3 ,   N A V   R E S   L O G ,   V 5 0 ,   P 9 1 7 ,   D O I   1 0 . 1 0 0 2 / n a v . 1 0 0 9 5 ;   F o r r e s t e r   J .   W . ,   1 9 6 1 ,   I N D   D Y N A M I C S ;   G e b r e s l a s s i e   B H ,   2 0 1 2 ,   A I C H E   J ,   V 5 8 ,   P 2 1 5 5 ,   D O I   1 0 . 1 0 0 2 / a i c . 1 3 8 4 4 ;   G e p h i ,   2 0 1 3 ,   G E P H   M A K   G R A P H S   H A N D ;   G h o d s y p o u r   S H ,   1 9 9 8 ,   I N T   J   P R O D   E C O N ,   V 5 6 - 7 ,   P 1 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 5 2 7 3 ( 9 7 ) 0 0 0 0 9 - 1 ;   G i a r o l a   S ,   2 0 1 2 ,   B I O R E S O U R C E   T E C H N O L ,   V 1 0 7 ,   P 1 7 5 ,   D O I   1 0 . 1 0 1 6 / j . b i o r t e c h . 2 0 1 1 . 1 1 . 0 9 0 ;   G u m u s   A T ,   2 0 0 9 ,   E X P E R T   S Y S T   A P P L ,   V 3 6 ,   P 1 2 5 7 0 ,   D O I   1 0 . 1 0 1 6 / j . e s w a . 2 0 0 9 . 0 5 . 0 3 4 ;   G u p t a   A ,   2 0 0 0 ,   I N D   E N G   C H E M   R E S ,   V 3 9 ,   P 3 7 9 9 ,   D O I   1 0 . 1 0 2 1 / i e 9 9 0 9 2 8 4 ;   G u p t a   A ,   2 0 0 3 ,   C O M P U T   C H E M   E N G ,   V 2 7 ,   P 1 2 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 8 - 1 3 5 4 ( 0 3 ) 0 0 0 4 8 - 6 ;   H e c k m a n n   I ,   2 0 1 5 ,   O M E G A - I N T   J   M A N A G E   S ,   V 5 2 ,   P 1 1 9 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 1 4 . 1 0 . 0 0 4 ;   H e n d r i c k s   K B ,   2 0 0 5 ,   P R O D   O P E R   M A N A G ,   V 1 4 ,   P 3 5 ;   H j o r l a n d   B ,   2 0 1 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 9 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 1 3 . 0 7 . 0 0 1 ;   H s i e h   C C ,   2 0 0 8 ,   E U R   J   O P E R   R E S ,   V 1 8 4 ,   P 6 6 7 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 0 6 . 1 1 . 0 0 4 ;   H s i e h   C C ,   2 0 0 9 ,   E U R   J   O P E R   R E S ,   V 1 9 6 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 0 8 . 0 2 . 0 1 9 ;   J a b b a r z a d e h   A ,   2 0 1 4 ,   T R A N S P O R T   R E S   E - L O G ,   V 7 0 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / j . t r e . 2 0 1 4 . 0 6 . 0 0 3 ;   J a i n   V ,   2 0 0 8 ,   E N G   A P P L   A R T I F   I N T E L ,   V 2 1 ,   P 3 6 7 ,   D O I   1 0 . 1 0 1 6 / j . e n g a p p a i . 2 0 0 7 . 0 7 . 0 0 4 ;   J u n g   J Y ,   2 0 0 4 ,   C O M P U T   C H E M   E N G ,   V 2 8 ,   P 2 0 8 7 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 0 4 . 0 6 . 0 0 6 ;   J u t t n e r   U . ,   2 0 0 3 ,   I N T   J   L O G I S T - R E S   A P P ,   V 6 ,   P 1 9 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 6 7 5 5 6 0 3 1 0 0 0 1 6 2 7 0 1 6 ;   K i m   J ,   2 0 1 1 ,   C O M P U T   C H E M   E N G ,   V 3 5 ,   P 1 7 3 8 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 1 1 . 0 2 . 0 0 8 ;   K i m   J ,   2 0 1 1 ,   B I O M A S S   B I O E N E R G ,   V 3 5 ,   P 8 5 3 ,   D O I   1 0 . 1 0 1 6 / j . b i o m b i o e . 2 0 1 0 . 1 1 . 0 0 8 ;   K l e i n d o r f e r   P R ,   2 0 0 5 ,   P R O D   O P E R   M A N A G ,   V 1 4 ,   P 5 3 ;   K l i b i   W ,   2 0 1 0 ,   E U R   J   O P E R   R E S ,   V 2 0 3 ,   P 2 8 3 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 0 9 . 0 6 . 0 1 1 ;   K o u v e l i s   P ,   2 0 0 2 ,   I I E   T R A N S ,   V 3 4 ,   P 7 1 7 ,   D O I   1 0 . 1 0 8 0 / 0 7 4 0 8 1 7 0 2 0 8 9 2 8 9 0 7 ;   K u l l   T J ,   2 0 0 8 ,   I E E E   T   E N G   M A N A G E ,   V 5 5 ,   P 4 0 9 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 8 . 9 2 2 6 2 7 ;   K u m a r   M ,   2 0 0 6 ,   I N T   J   P R O D   E C O N ,   V 1 0 1 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 5 . 0 1 . 0 0 5 ;   K u m a r   M ,   2 0 0 4 ,   C O M P U T   I N D   E N G ,   V 4 6 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / j . c i e . 2 0 0 3 . 0 9 . 0 1 0 ;   K u m a r   P r a v i n ,   2 0 0 8 ,   I n t e r n a t i o n a l   J o u r n a l   o f   O p e r a t i o n a l   R e s e a r c h ,   V 3 ,   P 6 1 4 ,   D O I   1 0 . 1 5 0 4 / I J O R . 2 0 0 8 . 0 1 9 7 2 9 ;   L e e   H .   L . ,   2 0 0 4 ,   M a n a g e m e n t   S c i e n c e ,   V 5 0 ,   P 1 8 7 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 4 0 . 0 2 6 6 ;   L e e   H L ,   2 0 0 4 ,   H A R V A R D   B U S   R E V ,   V 8 2 ,   P 1 0 2 ;   L e e   H L ,   1 9 9 7 ,   M A N A G E   S C I ,   V 4 3 ,   P 5 4 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 3 . 4 . 5 4 6 ;   L E E   H L ,   1 9 9 3 ,   O P E R   R E S ,   V 4 1 ,   P 8 3 5 ,   D O I   1 0 . 1 2 8 7 / o p r e . 4 1 . 5 . 8 3 5 ;   L e e   Y H ,   2 0 0 2 ,   C O M P U T   I N D   E N G ,   V 4 3 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 0 6 3 - 3 ;   L e u n g   S C H ,   2 0 0 6 ,   J   O P E R   R E S   S O C ,   V 5 7 ,   P 1 2 3 ,   D O I   [ 1 0 . 1 0 5 7 / p a l g r a v e . j o r s . 2 6 0 1 9 8 8 ,   1 0 . 1 0 5 7 / p a l g r a v e / j o r s . 2 6 0 1 9 8 8 ] ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   E N C Y   S O C I A L   N E T W O R K S ;   L i a n g   T F ,   2 0 0 7 ,   P R O D   P L A N   C O N T R O L ,   V 1 8 ,   P 5 4 8 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 2 8 0 7 0 1 5 3 0 0 3 3 ;   L i m   S J ,   2 0 0 6 ,   I N T   J   A D V   M A N U F   T E C H ,   V 2 8 ,   P 6 1 8 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 7 0 - 0 0 4 - 2 3 9 8 - 7 ;   L o n g i n i d i s   P ,   2 0 1 1 ,   I N T   J   P R O D   E C O N ,   V 1 2 9 ,   P 2 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 1 0 . 1 0 . 0 1 8 ;   L o n g o   F ,   2 0 0 8 ,   C O M P U T   I N D   E N G ,   V 5 4 ,   P 5 7 0 ,   D O I   1 0 . 1 0 1 6 / j . c i e . 2 0 0 7 . 0 9 . 0 0 8 ;   M A R C H   J G ,   1 9 8 7 ,   M A N A G E   S C I ,   V 3 3 ,   P 1 4 0 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 3 . 1 1 . 1 4 0 4 ;   M c K i n s e y ,   2 0 0 6 ,   M C K I N S E Y   Q ;   M i n   H ,   2 0 0 2 ,   C O M P U T   I N D   E N G ,   V 4 3 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 0 - 8 3 5 2 ( 0 2 ) 0 0 0 6 6 - 9 ;   M i r a n d a   P A ,   2 0 0 4 ,   T R A N S P O R T   R E S   E - L O G ,   V 4 0 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / j . t r e . 2 0 0 3 . 0 8 . 0 0 6 ;   M i r H a s s a n i   S A ,   2 0 0 0 ,   P A R A L L E L   C O M P U T ,   V 2 6 ,   P 5 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 8 1 9 1 ( 9 9 ) 0 0 1 1 8 - 0 ;   M o y a u x   T ,   2 0 0 7 ,   I E E E   T   S Y S T   M A N   C Y   C ,   V 3 7 ,   P 3 9 6 ,   D O I   1 0 . 1 1 0 9 / T S M C C . 2 0 0 6 . 8 8 7 0 1 4 ;   M u n s o n   C L ,   2 0 0 1 ,   I I E   T R A N S ,   V 3 3 ,   P 3 7 1 ,   D O I   1 0 . 1 0 8 0 / 0 7 4 0 8 1 7 0 1 0 8 9 3 6 8 3 6 ;   P a l o v i i t a   A r i ,   2 0 0 9 ,   W o r l d   R e v i e w   o f   E n t r e p r e n e u r s h i p ,   M a n a g e m e n t   a n d   S u s t a i n a b l e   D e v e l o p m e n t ,   V 5 ,   P 3 9 5 ,   D O I   1 0 . 1 5 0 4 / W R E M S D . 2 0 0 9 . 0 3 1 6 2 7 ;   P a m p e l   F .   C . ,   2 0 0 4 ,   E N C Y   S O C I A L   S C I   R E S ;   P a n   F ,   2 0 1 0 ,   C O M P U T   O P E R   R E S ,   V 3 7 ,   P 6 6 8 ,   D O I   1 0 . 1 0 1 6 / j . c o r . 2 0 0 9 . 0 6 . 0 1 7 ;   P e c k   H . ,   2 0 0 6 ,   I N T   J   L O G I S T - R E S   A P P ,   V 9 ,   P 1 2 7 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 3 6 7 5 5 6 0 6 0 0 6 7 3 5 7 8 ;   P e r s s o n   O ,   2 0 0 9 ,   C E L E B R A T I N G   S C H O L A R L ;   P e t r o v i c   D ,   2 0 0 1 ,   I N T   J   P R O D   E C O N ,   V 7 1 ,   P 4 2 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 5 2 7 3 ( 0 0 ) 0 0 1 4 0 - 7 ;   P e t r o v i c   D ,   1 9 9 9 ,   I N T   J   P R O D   E C O N ,   V 5 9 ,   P 4 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 5 2 7 3 ( 9 8 ) 0 0 1 0 9 - 1 ;   P e t r o v i c   D ,   1 9 9 8 ,   E U R   J   O P E R   R E S ,   V 1 0 9 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 7 - 2 2 1 7 ( 9 8 ) 0 0 0 5 8 - 7 ;   P e t t i c r e w   M ,   2 0 0 6 ,   S Y S T E M A T I C   R E V I E W S   I N   T H E   S O C I A L   S C I E N C E S :   A   P R A C T I C A L   G U I D E ,   P 1 ,   D O I   1 0 . 1 0 0 2 / 9 7 8 0 4 7 0 7 5 4 8 8 7 ;   P i s h v a e e   M S ,   2 0 1 0 ,   F U Z Z Y   S E T   S Y S T ,   V 1 6 1 ,   P 2 6 6 8 ,   D O I   1 0 . 1 0 1 6 / j . f s s . 2 0 1 0 . 0 4 . 0 1 0 ;   P o o j a r i   C A ,   2 0 0 8 ,   J   O P E R   R E S   S O C ,   V 5 9 ,   P 2 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j o r s . 2 6 0 2 3 8 1 ;   R a d i c c h i   F ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 2 6 5 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 4 0 0 0 5 4 1 0 1 ;   R e n t i z e l a s   A A ,   2 0 0 9 ,   B I O M A S S   B I O E N E R G ,   V 3 3 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / j . b i o m b i o e . 2 0 0 8 . 0 5 . 0 0 8 ;   R i d d a l l s   C E ,   2 0 0 2 ,   I N T   J   P R O D   R E S ,   V 4 0 ,   P 4 5 9 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 1 1 0 0 8 5 6 2 9 ;   R o w l e y   J . ,   2 0 0 4 ,   M A N A G   R E S   N E W S ,   V 2 7 ,   P 3 1 ,   D O I   D O I   1 0 . 1 1 0 8 / 0 1 4 0 9 1 7 0 4 1 0 7 8 4 1 8 5 ;   S a a t y   T .   L ,   1 9 8 0 ,   A N A L   H I E R A R C H Y   P R O C E ;   S a b r i   E H ,   2 0 0 0 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 8 ,   P 5 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 9 ) 0 0 0 8 0 - 8 ;   S a n t o s o   T ,   2 0 0 5 ,   E U R   J   O P E R   R E S ,   V 1 6 7 ,   P 9 6 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 0 4 . 0 1 . 0 4 6 ;   S a u n d e r s   M ,   2 0 0 9 ,   R E S   M E T H O D S   B U S I N E S S ;   S a w i k   T ,   2 0 1 1 ,   C O M P U T   O P E R   R E S ,   V 3 8 ,   P 7 8 2 ,   D O I   1 0 . 1 0 1 6 / j . c o r . 2 0 1 0 . 0 9 . 0 1 1 ;   S c h m i t t   A J ,   2 0 1 0 ,   E U R   J   O P E R   R E S ,   V 2 0 6 ,   P 3 1 3 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 1 0 . 0 2 . 0 2 9 ;   S c h w a r t z   J D ,   2 0 0 6 ,   A U T O M A T I C A ,   V 4 2 ,   P 1 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . a u t o m a t i c a . 2 0 0 6 . 0 3 . 0 1 9 ;   S c h w a r t z   J D ,   2 0 1 0 ,   I N T   J   P R O D   E C O N ,   V 1 2 5 ,   P 1 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 1 0 . 0 1 . 0 1 1 ;   S e i f e r t   R W ,   2 0 0 4 ,   E U R   J   O P E R   R E S ,   V 1 5 2 ,   P 7 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 7 - 2 2 1 7 ( 0 3 ) 0 0 7 5 4 - 3 ;   S e u r i n g   S ,   2 0 0 8 ,   J   C L E A N   P R O D ,   V 1 6 ,   P 1 6 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j c l e p r o . 2 0 0 8 . 0 4 . 0 2 0 ;   S h a n g   J S ,   2 0 0 4 ,   I N T   J   P R O D   R E S ,   V 4 2 ,   P 3 8 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 4 1 0 0 0 1 7 0 4 0 5 0 ;   S h e f f i   Y . ,   2 0 0 5 ,   R E S I L I E N T   E N T E R P R I S E ;   S h e f f i   Y . ,   2 0 0 5 ,   M I T   S L O A N   M A N A G E M E N T ;   S i l v e r   E .   A . ,   1 9 9 8 ,   I N V E N T O R Y   M A N A G E M E N T ;   S o d h i   M S ,   2 0 1 2 ,   P R O D   O P E R   M A N A G ,   V 2 1 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 9 3 7 - 5 9 5 6 . 2 0 1 1 . 0 1 2 5 1 . x ;   S o d h i   M S ,   2 0 0 9 ,   I N T   J   P R O D   E C O N ,   V 1 2 1 ,   P 7 2 8 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 9 . 0 2 . 0 0 9 ;   S o d h i   M .   S . ,   2 0 1 0 ,   W I L E Y   E N C Y   O P E R A T I O N ;   S o d h i   M .   S . ,   2 0 1 2 ,   M A N A G I N G   S U P P L Y   C H A I ;   S o n g   Y Y ,   2 0 0 8 ,   M & S O M - M A N U F   S E R V   O P ,   V 1 0 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / m s o m . 1 0 6 0 . 0 1 4 0 ;   S w a m i n a t h a n   J M ,   1 9 9 8 ,   D E C I S I O N   S C I ,   V 2 9 ,   P 6 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 9 1 5 . 1 9 9 8 . t b 0 1 3 5 6 . x ;   T a n g   C ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 6 ,   P 1 2 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 8 . 0 7 . 0 0 8 ;   T a n g   C S ,   2 0 0 6 ,   I N T   J   P R O D   E C O N ,   V 1 0 3 ,   P 4 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 5 . 1 2 . 0 0 6 ;   T a n g   C S ,   2 0 1 2 ,   E U R   J   O P E R   R E S ,   V 2 2 3 ,   P 5 8 5 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 1 2 . 0 7 . 0 3 0 ;   T a n g   O ,   2 0 1 1 ,   I N T   J   P R O D   E C O N ,   V 1 3 3 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 1 0 . 0 6 . 0 1 3 ;   T h o m a s   D J ,   1 9 9 6 ,   E U R   J   O P E R   R E S ,   V 9 4 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 7 - 2 2 1 7 ( 9 6 ) 0 0 0 9 8 - 7 ;   T r a n f i e l d   D ,   2 0 0 3 ,   B R I T   J   M A N A G E ,   V 1 4 ,   P 2 0 7 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 5 1 . 0 0 3 7 5 ;   T s a y   A A ,   1 9 9 9 ,   M A N A G E   S C I ,   V 4 5 ,   P 1 3 3 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 5 . 1 0 . 1 3 3 9 ;   T s i a k i s   P ,   2 0 0 1 ,   I N D   E N G   C H E M   R E S ,   V 4 0 ,   P 3 5 8 5 ,   D O I   1 0 . 1 0 2 1 / i e 0 1 0 0 0 3 0 ;   V a n   M i e g h e m   J A ,   1 9 9 9 ,   M A N A G E   S C I ,   V 4 5 ,   P 9 5 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 5 . 7 . 9 5 4 ;   v a n   E c k   N .   J . ,   2 0 1 3 ,   M A N U A L   V O S   V I E W E R   V E ;   V i l l e g a s   F A ,   2 0 0 6 ,   I N T   J   P R O D   R E S ,   V 4 4 ,   P 1 0 3 7 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 5 0 0 3 3 8 2 0 3 ;   W a n g   W L ,   2 0 0 8 ,   I E E E   T   C O N T R   S Y S T   T ,   V 1 6 ,   P 8 4 1 ,   D O I   1 0 . 1 1 0 9 / T C S T . 2 0 0 7 . 9 1 6 3 2 7 ;   W a n g p h a n i c h   P ,   2 0 1 0 ,   I N T   J   P R O D   R E S ,   V 4 8 ,   P 4 5 0 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 9 0 2 9 5 0 8 5 2 ;   W u   C ,   2 0 1 1 ,   J   P U R C H   S U P P L Y   M A N A G ,   V 1 7 ,   P 2 5 6 ,   D O I   1 0 . 1 0 1 6 / j . p u r s u p . 2 0 1 1 . 0 9 . 0 0 2 ;   W u   D S ,   2 0 0 8 ,   I N T   J   P R O D   E C O N ,   V 1 1 4 ,   P 6 4 6 ,   D O I   1 0 . 1 0 1 6 / j . i j p e . 2 0 0 8 . 0 2 . 0 1 3 ;   X u   N X ,   2 0 0 9 ,   C O M P U T   O P E R   R E S ,   V 3 6 ,   P 2 7 8 6 ,   D O I   1 0 . 1 0 1 6 / j . c o r . 2 0 0 8 . 1 2 . 0 1 3 ;   Y a o   Z ,   2 0 0 8 ,   E U R   J   O P E R   R E S ,   V 1 8 6 ,   P 6 3 7 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 0 7 . 0 1 . 0 4 9 ;   Y o n g - H a k   J . ,   2 0 1 3 ,   W E B   O F   S C I ;   Y o u   F Q ,   2 0 0 8 ,   C O M P U T   C H E M   E N G ,   V 3 2 ,   P 3 0 9 0 ,   D O I   1 0 . 1 0 1 6 / j . c o m p c h e m e n g . 2 0 0 8 . 0 5 . 0 0 4 ;   Z A D E H   L A ,   1 9 6 5 ,   I N F O R M   C O N T R O L ,   V 8 ,   P 3 3 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 6 5 ) 9 0 2 4 1 - X ;   Z h a o   X D ,   2 0 0 1 ,   I N T   J   P R O D   R E S ,   V 3 9 ,   P 3 9 2 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 2 0 7 5 4 0 1 1 0 0 7 2 2 3 6 ;   Z s i d i s i n   G .   A . ,   2 0 1 0 ,   S U P P L Y   C H A I N   R I S K   H D ;   Z s i d i s n   G .   A . ,   2 0 0 3 ,   J   P U R C H   S U P P L Y   M A N A G ,   V 9 ,   P 2 1 7 ,   D O I   D O I   1 0 . 1 0 1 6 / J . P U R S U P . 2 0 0 3 . 0 7 . 0 0 2 	 1 4 9 	 1 7 	 1 7 	 2 0 	 2 4 4 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 3 7 7 - 2 2 1 7 	 1 8 7 2 - 6 8 6 0 	 	 E U R   J   O P E R   R E S 	 E u r .   J .   O p e r .   R e s . 	 N O V   1 6 	 2 0 1 5 	 2 4 7 	 1 	 	 	 	 	 1 	 1 5 	 	 1 0 . 1 0 1 6 / j . e j o r . 2 0 1 5 . 0 4 . 0 3 4 	 	 1 5 	 M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 C N 4 H T 	 W O S : 0 0 0 3 5 8 3 9 1 9 0 0 0 0 1 	 	 
 
 J 	 I o a n n i d i s ,   J P A ;   B o y a c k ,   K W ;   S m a l l ,   H ;   S o r e n s e n ,   A A ;   K l a v a n s ,   R 	 	 	 	 I o a n n i d i s ,   J o h n   P .   A . ;   B o y a c k ,   K e v i n   W . ;   S m a l l ,   H e n r y ;   S o r e n s e n ,   A a r o n   A . ;   K l a v a n s ,   R i c h a r d 	 	 	 B i b l i o m e t r i c s :   I s   y o u r   m o s t   c i t e d   w o r k   y o u r   b e s t ? 	 N A T U R E 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 	 	 	 [ I o a n n i d i s ,   J o h n   P .   A . ]   S t a n f o r d   U n i v ,   M e t a   R e s   I n n o v a t   C t r   S t a n f o r d   M E T R I C S ,   S t a n f o r d ,   C A   9 4 3 0 5   U S A ;   [ B o y a c k ,   K e v i n   W . ]   S c i T e c h   S t r a t e g i e s ,   A l b u q u e r q u e ,   N M   U S A ;   [ S m a l l ,   H e n r y ]   S c i T e c h   S t r a t e g i e s ,   B a l a   C y n w y d ,   P A   U S A ;   [ S o r e n s e n ,   A a r o n   A . ]   T e m p l e   U n i v ,   S c h   M e d ,   P h i l a d e l p h i a ,   P A   1 9 1 2 2   U S A ;   [ K l a v a n s ,   R i c h a r d ]   S c i T e c h   S t r a t e g i e s ,   B e r w y n ,   P A   U S A 	 I o a n n i d i s ,   J P A   ( r e p r i n t   a u t h o r ) ,   S t a n f o r d   U n i v ,   M e t a   R e s   I n n o v a t   C t r   S t a n f o r d   M E T R I C S ,   S t a n f o r d ,   C A   9 4 3 0 5   U S A . 	 	 	 	 	 	 A s t i n   H .   S . ,   1 9 9 1 ,   O U T E R   C I R C L E   W O M E N   S ,   P 5 7 ;   B o y a c k   K W ,   2 0 1 3 ,   E U R   J   C L I N   I N V E S T ,   V 4 3 ,   P 1 3 3 9 ,   D O I   1 0 . 1 1 1 1 / e c i . 1 2 1 7 1 ;   C O Z Z E N S   S E ,   1 9 8 8 ,   K N O W L E D G E ,   V 9 ,   P 5 1 1 ;   I o a n n i d i s   J P A ,   2 0 1 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 1 2 ,   P 4 8 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 1 4 . 6 9 3 2 ;   S m a l l   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 3 0 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 7 6 . 5 5 8 0 0 . 1 8 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   U z z i   B ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 2 ,   P 4 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 4 0 4 7 4 ;   V I R G O   J A ,   1 9 7 7 ,   L I B R   Q U A R T ,   V 4 7 ,   P 4 1 5 	 8 	 1 7 	 1 7 	 8 	 6 4 	 N A T U R E   P U B L I S H I N G   G R O U P 	 L O N D O N 	 M A C M I L L A N   B U I L D I N G ,   4   C R I N A N   S T ,   L O N D O N   N 1   9 X W ,   E N G L A N D 	 0 0 2 8 - 0 8 3 6 	 1 4 7 6 - 4 6 8 7 	 	 N A T U R E 	 N a t u r e 	 O C T   3 0 	 2 0 1 4 	 5 1 4 	 7 5 2 4 	 	 	 	 	 5 6 1 	 5 6 2 	 	 	 	 6 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 A R 8 B W 	 W O S : 0 0 0 3 4 3 8 0 1 5 0 0 0 2 4 	 2 5 3 5 5 3 4 6 	 
 
 J 	 K a l t m a n ,   J R ;   E v a n s ,   F J ;   D a n t h i ,   N S ;   W u ,   C O ;   D i M i c h e l e ,   D M ;   L a u e r ,   M S 	 	 	 	 K a l t m a n ,   J o n a t h a n   R . ;   E v a n s ,   F r a n k   J . ;   D a n t h i ,   N a r a s i m h a n   S . ;   W u ,   C o l i n   O . ;   D i M i c h e l e ,   D o n n a   M . ;   L a u e r ,   M i c h a e l   S . 	 	 	 P r i o r   P u b l i c a t i o n   P r o d u c t i v i t y ,   G r a n t   P e r c e n t i l e   R a n k i n g ,   a n d   T o p i c - N o r m a l i z e d   C i t a t i o n   I m p a c t   o f   N H L B I   C a r d i o v a s c u l a r   R 0 1   G r a n t s 	 C I R C U L A T I O N   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   N a t i o n a l   H e a r t ,   L u n g ,   a n d   B l o o d   I n s t i t u t e   ( U S ) 	 	 R a t i o n a l e :   W e   p r e v i o u s l y   d e m o n s t r a t e d   a b s e n c e   o f   a s s o c i a t i o n   b e t w e e n   p e e r - r e v i e w - d e r i v e d   p e r c e n t i l e   r a n k i n g   a n d   r a w   c i t a t i o n   i m p a c t   i n   a   l a r g e   c o h o r t   o f   N a t i o n a l   H e a r t ,   L u n g ,   a n d   B l o o d   I n s t i t u t e   c a r d i o v a s c u l a r   R 0 1   g r a n t s ,   b u t   w e   d i d   n o t   c o n s i d e r   p r e g r a n t   i n v e s t i g a t o r   p u b l i c a t i o n   p r o d u c t i v i t y .   W e   a l s o   d i d   n o t   n o r m a l i z e   c i t a t i o n   c o u n t s   f o r   s c i e n t i f i c   f i e l d ,   t y p e   o f   a r t i c l e ,   a n d   y e a r   o f   p u b l i c a t i o n .   O b j e c t i v e :   T o   d e t e r m i n e   w h e t h e r   m e a s u r e s   o f   i n v e s t i g a t o r   p r i o r   p r o d u c t i v i t y   p r e d i c t   a   g r a n t ' s   s u b s e q u e n t   s c i e n t i f i c   i m p a c t   a s   m e a s u r e d   b y   n o r m a l i z e d   c i t a t i o n   m e t r i c s .   M e t h o d s   a n d   R e s u l t s :   W e   i d e n t i f i e d   1 4 9 2   i n v e s t i g a t o r - i n i t i a t e d   d e   n o v o   N a t i o n a l   H e a r t ,   L u n g ,   a n d   B l o o d   I n s t i t u t e   R 0 1   g r a n t   a p p l i c a t i o n s   f u n d e d   b e t w e e n   2 0 0 1   a n d   2 0 0 8   a n d   l i n k e d   t h e   p u b l i c a t i o n s   f r o m   t h e s e   g r a n t s   t o   t h e i r   I n C i t e s   ( T h o m p s o n   R e u t e r s )   c i t a t i o n   r e c o r d .   I n C i t e s   p r o v i d e s   a   n o r m a l i z e d   c i t a t i o n   c o u n t   f o r   e a c h   p u b l i c a t i o n   s t r a t i f y i n g   b y   y e a r   o f   p u b l i c a t i o n ,   t y p e   o f   p u b l i c a t i o n ,   a n d   f i e l d   o f   s c i e n c e .   T h e   c o p r i m a r y   e n d   p o i n t s   f o r   t h i s   a n a l y s i s   w e r e   t h e   n o r m a l i z e d   c i t a t i o n   i m p a c t   p e r   m i l l i o n   d o l l a r s   a l l o c a t e d   a n d   t h e   n u m b e r   o f   p u b l i c a t i o n s   p e r   g r a n t   t h a t   h a s   n o r m a l i z e d   c i t a t i o n   r a t e   i n   t h e   t o p   d e c i l e   p e r   m i l l i o n   d o l l a r s   a l l o c a t e d   ( t o p   1 0 %   a r t i c l e s ) .   P r i o r   p r o d u c t i v i t y   m e a s u r e s   i n c l u d e d   t h e   n u m b e r   o f   N a t i o n a l   H e a r t ,   L u n g ,   a n d   B l o o d   I n s t i t u t e - s u p p o r t e d   p u b l i c a t i o n s   e a c h   p r i n c i p a l   i n v e s t i g a t o r   p u b l i s h e d   i n   t h e   5   y e a r s   b e f o r e   g r a n t   r e v i e w   a n d   t h e   c o r r e s p o n d i n g   p r i o r   n o r m a l i z e d   c i t a t i o n   i m p a c t   s c o r e .   A f t e r   a c c o u n t i n g   f o r   p o t e n t i a l   c o n f o u n d e r s ,   t h e r e   w a s   n o   a s s o c i a t i o n   b e t w e e n   p e e r - r e v i e w   p e r c e n t i l e   r a n k i n g   a n d   b i b l i o m e t r i c   e n d   p o i n t s   ( a l l   a d j u s t e d   P > 0 . 5 ) .   H o w e v e r ,   p r i o r   p r o d u c t i v i t y   w a s   p r e d i c t i v e   ( P < 0 . 0 0 0 1 ) .   C o n c l u s i o n s :   E v e n   a f t e r   n o r m a l i z i n g   c i t a t i o n   c o u n t s ,   w e   c o n f i r m e d   a   l a c k   o f   a s s o c i a t i o n   b e t w e e n   p e e r - r e v i e w   g r a n t   p e r c e n t i l e   r a n k i n g   a n d   g r a n t   c i t a t i o n   i m p a c t .   H o w e v e r ,   p r i o r   i n v e s t i g a t o r   p u b l i c a t i o n   p r o d u c t i v i t y   w a s   p r e d i c t i v e   o f   g r a n t - s p e c i f i c   c i t a t i o n   i m p a c t . 	 [ K a l t m a n ,   J o n a t h a n   R . ;   E v a n s ,   F r a n k   J . ]   N H L B I ,   H e a r t   D e v   &   S t r u c t   D i s   B r a n c h ,   D i v   C a r d i o v a s c   S c i ,   B e t h e s d a ,   M D   2 0 8 1 7   U S A ;   [ D a n t h i ,   N a r a s i m h a n   S . ]   N H L B I ,   A d v   T e c h n o l   &   S u r g   B r a n c h ,   D i v   C a r d i o v a s c   S c i ,   B e t h e s d a ,   M D   2 0 8 1 7   U S A ;   [ W u ,   C o l i n   O . ]   N H L B I ,   O f f   B i o s t a t   R e s ,   D i v   C a r d i o v a s c   S c i ,   B e t h e s d a ,   M D   2 0 8 1 7   U S A ;   [ L a u e r ,   M i c h a e l   S . ]   N H L B I ,   O f f   D i r e c t o r ,   D i v   C a r d i o v a s c   S c i ,   B e t h e s d a ,   M D   2 0 8 1 7   U S A ;   [ D i M i c h e l e ,   D o n n a   M . ]   N H L B I ,   O f f   D i r e c t o r ,   D i v   B l o o d   D i s   &   R e s o u r c e s ,   B e t h e s d a ,   M D   2 0 8 1 7   U S A 	 L a u e r ,   M S   ( r e p r i n t   a u t h o r ) ,   N H L B I ,   D i v   C a r d i o v a s c   S c i ,   6 7 0 1   R o c k l e d g e   D r , R o o m   8 1 2 8 ,   B e t h e s d a ,   M D   2 0 8 1 7   U S A . 	 l a u e r m @ n h l b i . n i h . g o v 	 	 	 I n t r a m u r a l   N I H   H H S   [ Z 9 9   H L 9 9 9 9 9 9 ] 	 	 A c u n a   D E ,   2 0 1 2 ,   N A T U R E ,   V 4 8 9 ,   P 2 0 1 ,   D O I   1 0 . 1 0 3 8 / 4 8 9 2 0 1 a ;   B o r n m a n n   L ,   2 0 1 3 ,   E M B O   R E P ,   V 1 4 ,   P 2 2 6 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 1 3 . 9 ;   C o u n c i l   o f   C a n a d i a n   A c a d e m i e s ,   2 0 1 2 ,   I N F   R E S   C H O I C   I N D   J U ;   D a n t h i   N ,   2 0 1 4 ,   C I R C   R E S ,   V 1 1 4 ,   P 6 0 0 ,   D O I   1 0 . 1 1 6 1 / C I R C R E S A H A . 1 1 4 . 3 0 2 6 5 6 ;   D e m i c h e l i   V ,   2 0 0 7 ,   C O C H R A N E   D B   S Y S T   R E V ,   D O I   1 0 . 1 0 0 2 / 1 4 6 5 1 8 5 8 . M R 0 0 0 0 0 3 . p u b 2 ;   H a r r e l l   F E ,   2 0 0 1 ,   R E G R E S S I O N   M O D E L I N G ;   I o a n n i d i s   J P A ,   2 0 1 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 1 2 ,   P 4 8 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 1 4 . 6 9 3 2 ;   I o a n n i d i s   J P A ,   2 0 1 1 ,   N A T U R E ,   V 4 7 7 ,   P 5 2 9 ,   D O I   1 0 . 1 0 3 8 / 4 7 7 5 2 9 a ;   I s h w a r a n   H ,   2 0 1 0 ,   J   A M   S T A T   A S S O C ,   V 1 0 5 ,   P 2 0 5 ,   D O I   1 0 . 1 1 9 8 / j a s a . 2 0 0 9 . t m 0 8 6 2 2 ;   L a n g e r   J S ,   2 0 1 2 ,   S C I E N C E ,   V 3 3 8 ,   P 1 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 3 0 9 4 7 ;   M a z l o u m i a n   A ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 4 9 2 4 6 ;   P e n n e r   O ,   2 0 1 3 ,   S C I   R E P - U K ,   V 3 ,   D O I   1 0 . 1 0 3 8 / s r e p 0 3 0 5 2 	 1 2 	 1 7 	 1 7 	 3 	 1 9 	 L I P P I N C O T T   W I L L I A M S   &   W I L K I N S 	 P H I L A D E L P H I A 	 5 3 0   W A L N U T   S T ,   P H I L A D E L P H I A ,   P A   1 9 1 0 6 - 3 6 2 1   U S A 	 0 0 0 9 - 7 3 3 0 	 1 5 2 4 - 4 5 7 1 	 	 C I R C   R E S 	 C i r c . R e s . 	 S E P   1 2 	 2 0 1 4 	 1 1 5 	 7 	 	 	 	 	 6 1 7 	 6 2 4 	 	 1 0 . 1 1 6 1 / C I R C R E S A H A . 1 1 5 . 3 0 4 7 6 6 	 	 8 	 C a r d i a c   &   C a r d i o v a s c u l a r   S y s t e m s ;   H e m a t o l o g y ;   P e r i p h e r a l   V a s c u l a r   D i s e a s e 	 C a r d i o v a s c u l a r   S y s t e m   &   C a r d i o l o g y ;   H e m a t o l o g y 	 A P 4 V I 	 W O S : 0 0 0 3 4 2 0 7 6 7 0 0 0 0 9 	 2 5 2 1 4 5 7 5 	 
 
 J 	 R a f o l s ,   I ;   H o p k i n s ,   M M ;   H o e k m a n ,   J ;   S i e p e l ,   J ;   O ' H a r e ,   A ;   P e r i a n e s - R o d r i g u e z ,   A ;   N i g h t i n g a l e ,   P 	 	 	 	 R a f o l s ,   I s m a e l ;   H o p k i n s ,   M i c h a e l   M . ;   H o e k m a n ,   J a r n o ;   S i e p e l ,   J o s h ;   O ' H a r e ,   A l i c e ;   P e r i a n e s - R o d r i g u e z ,   A n t o n i o ;   N i g h t i n g a l e ,   P a u l 	 	 	 B i g   P h a r m a ,   l i t t l e   s c i e n c e ?   A   b i b l i o m e t r i c   p e r s p e c t i v e   o n   B i g   P h a r m a ' s   R & D   d e c l i n e 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P h a r m a c e u t i c a l s ;   B i b l i o m e t r i c s ;   O u t s o u r c i n g ;   E u r o p e ;   G l o b a l i s a t i o n ;   R e s e a r c h   n e t w o r k ;   I n n o v a t i o n ;   C o l l a b o r a t i o n 	 P H A R M A C E U T I C A L   I N N O V A T I O N ;   D R U G   D I S C O V E R Y ;   K N O W L E D G E ;   I N T E R N A T I O N A L I Z A T I O N ;   B I O T E C H N O L O G Y ;   C O L L A B O R A T I O N ;   G L O B A L I Z A T I O N ;   P R O D U C T I V I T Y ;   T E C H N O L O G Y ;   E C O N O M I C S 	 T h e r e   i s   a   w i d e s p r e a d   p e r c e p t i o n   t h a t   p h a r m a c e u t i c a l   R & D   i s   f a c i n g   a   p r o d u c t i v i t y   c r i s i s   c h a r a c t e r i s e d   b y   s t a g n a t i o n   i n   t h e   n u m b e r s   o f   n e w   d r u g   a p p r o v a l s   i n   t h e   f a c e   o f   i n c r e a s i n g   R & D   c o s t s .   T h i s   s t u d y   e x p l o r e s   p h a r m a c e u t i c a l   R & D   d y n a m i c s   b y   e x a m i n i n g   t h e   p u b l i c a t i o n   a c t i v i t i e s   o f   a l l   R & D   l a b o r a t o r i e s   o f   t h e   m a j o r   E u r o p e a n   a n d   U S   p h a r m a c e u t i c a l   f i r m s   ( B i g   P h a r m a )   d u r i n g   t h e   p e r i o d   1 9 9 5 - 2 0 0 9 .   T h e   e m p i r i c a l   f i n d i n g s   p r e s e n t   a n   i n d u s t r y   i n   t r a n s f o r m a t i o n .   I n   t h e   f i r s t   p l a c e ,   w e   o b s e r v e   a   d e c l i n e   o f   t h e   t o t a l   n u m b e r   o f   p u b l i c a t i o n s   b y   l a r g e   f i r m s .   S e c o n d ,   w e   s h o w   a   r e l a t i v e   i n c r e a s e   o f   t h e i r   e x t e r n a l   c o l l a b o r a t i o n s   s u g g e s t i n g   a   t e n d e n c y   t o   o u t s o u r c e ,   a n d   a   d i v e r s i f i c a t i o n   o f   t h e   d i s c i p l i n a r y   b a s e ,   i n   p a r t i c u l a r   t o w a r d s   c o m p u t a t i o n ,   h e a l t h   s e r v i c e s   a n d   m o r e   c l i n i c a l   a p p r o a c h e s .   A l s o   e v i d e n t   i s   a   m o r e   p r o n o u n c e d   d e c l i n e   i n   p u b l i c a t i o n s   b y   b o t h   R & D   l a b o r a t o r i e s   l o c a t e d   i n   E u r o p e   a n d   b y   f i r m s   w i t h   E u r o p e a n   h e a d q u a r t e r s .   F i n a l l y ,   w h i l e   p u b l i c a t i o n s   b y   B i g   P h a r m a   i n   e m e r g i n g   e c o n o m i e s   s h a r p l y   i n c r e a s e ,   t h e y   r e m a i n   e x t r e m e l y   l o w   c o m p a r e d   w i t h   t h o s e   i n   d e v e l o p e d   c o u n t r i e s .   I n   s u m m a r y ,   t h e   t r e n d   i n   t h i s   t r a n s f o r m a t i o n   i s   o n e   o f   a   g r a d u a l   d e c r e a s e   i n   i n t e r n a l   r e s e a r c h   e f f o r t s   a n d   i n c r e a s i n g   r e l i a n c e   o n   e x t e r n a l   r e s e a r c h .   T h e s e   e m p i r i c a l   i n s i g h t s   s u p p o r t   t h e   v i e w   t h a t   B i g   P h a r m a   a r e   i n c r e a s i n g l y   b e c o m i n g   ' n e t w o r k   i n t e g r a t o r s '   r a t h e r   t h a n   t h e   p r i m e   l o c u s   o f   d r u g   d i s c o v e r y .   ( C )   2 0 1 2   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ R a f o l s ,   I s m a e l ;   H o p k i n s ,   M i c h a e l   M . ;   S i e p e l ,   J o s h ;   O ' H a r e ,   A l i c e ;   N i g h t i n g a l e ,   P a u l ]   U n i v   S u s s e x ,   S P R U   S c i   &   T e c h n o l   P o l i c y   R e s ,   B r i g h t o n   B N 1   9 Q E ,   E   S u s s e x ,   E n g l a n d ;   [ R a f o l s ,   I s m a e l ]   U n i v   P o l i t e c n   V a l e n c i a ,   I N G E N I O   C S I C   U P V ,   E - 4 6 0 7 1   V a l e n c i a ,   S p a i n ;   [ H o e k m a n ,   J a r n o ]   U n i v   G r o n i n g e n ,   U n i v   M e d   C t r   G r o n i n g e n ,   D e p t   C l i n   P h a r m a c o l ,   G r o n i n g e n ,   N e t h e r l a n d s ;   [ P e r i a n e s - R o d r i g u e z ,   A n t o n i o ]   U n i v   C a r l o s   I I I   M a d r i d ,   D e p t   L i b   &   I n f o r m a t   S c i ,   S C I m a g o   R e s   G r p ,   M a d r i d ,   S p a i n 	 R a f o l s ,   I   ( r e p r i n t   a u t h o r ) ,   U n i v   S u s s e x ,   F r e e m a n   C t r ,   S P R U ,   B r i g h t o n   B N 1   9 Q E ,   E   S u s s e x ,   E n g l a n d . 	 i . r a f o l s @ s u s s e x . a c . u k 	 P e r i a n e s - R o d r i g u e z ,   A n t o n i o / A - 1 9 1 7 - 2 0 1 0 ;   R a f o l s ,   I s m a e l / D - 1 5 0 9 - 2 0 0 9 ;   H o e k m a n ,   J a r n o / C - 3 2 8 7 - 2 0 1 7 ;   	 P e r i a n e s - R o d r i g u e z ,   A n t o n i o / 0 0 0 0 - 0 0 0 2 - 1 1 8 8 - 3 4 8 1 ;   R a f o l s ,   I s m a e l / 0 0 0 0 - 0 0 0 2 - 6 5 2 7 - 7 7 7 8 ;   H o e k m a n ,   J a r n o / 0 0 0 0 - 0 0 0 2 - 2 8 1 7 - 1 2 2 9 ;   N i g h t i n g a l e ,   P a u l / 0 0 0 0 - 0 0 0 2 - 4 1 5 5 - 0 8 8 0 	 	 	 A m i r - A s l a n i   A ,   2 0 1 0 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 7 ,   P 2 0 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 0 9 . 0 0 5 ;   A n g e l l   M . ,   2 0 0 4 ,   T R U T H   D R U G   C O   T H E Y   D ;   A r c h i b u g i   D ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 1 1 6 - 4 ;   A r r o w s m i t h   J ,   2 0 1 2 ,   N A T   R E V   D R U G   D I S C O V ,   V 1 1 ,   P 1 7 ,   D O I   1 0 . 1 0 3 8 / n r d 3 6 3 0 ;   A s t r a Z e n e c a ,   2 0 1 0 ,   A S T R A Z E N E C A   A N N   R E P ;   B a u m   A . ,   2 0 1 0 ,   P H A R M   E X I T   R E S   C R E A T ;   B o n a c c o r s i   A ,   2 0 0 8 ,   M I N E R V A ,   V 4 6 ,   P 2 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 2 4 - 0 0 8 - 9 1 0 1 - 3 ;   C o c k b u r n   I M ,   1 9 9 8 ,   J   I N D   E C O N ,   V 4 6 ,   P 1 5 7 ;   C o l l i n s   F . S . ,   2 0 1 1 ,   S C I   T R A N S   M E D ,   V 3 ;   C r o m m e l i n   D ,   2 0 1 0 ,   N A T   R E V   D R U G   D I S C O V ,   V 9 ,   P 9 9 ,   D O I   1 0 . 1 0 3 8 / n r d 3 0 8 7 ;   D ' E s t e   P ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 3 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 1 0 . 0 0 7 ;   D A S G U P T A   P ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 4 8 7 ;   D i M a s i   J A ,   2 0 1 1 ,   N A T   R E V   D R U G   D I S C O V ,   V 1 0 ,   P 2 3 ,   D O I   1 0 . 1 0 3 8 / n r d 3 2 9 6 ;   D o s i   G ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 4 5 0 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 1 2 ;   F r i e d m a n   Y ,   2 0 1 0 ,   N A T   R E V   D R U G   D I S C O V ,   V 9 ,   P 8 3 5 ,   D O I   1 0 . 1 0 3 8 / n r d 3 2 9 8 ;   G a m i e r   J . - P . ,   2 0 0 8 ,   H A R V A R D   B U S   R E V ,   P 6 9 ;   H i c k s   D . ,   1 9 9 5 ,   I N D   C O R P   C H A N G E ,   V 4 ,   P 4 0 1 ,   D O I   1 0 . 1 0 9 3 / i c c / 4 . 2 . 4 0 1 ;   H i c k s   D M ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 3 7 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 4 0 1 ;   H i r s c h l e r   B ,   2 0 1 0 ,   R E U T E R S ;   H o e k m a n   J . ,   2 0 1 2 ,   G E O G R A P H I C A L   C O N S T I ;   H o p k i n s   M .   M . ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ;   H o w e l l s   J ,   2 0 0 8 ,   R & D   M A N A G E ,   V 3 8 ,   P 2 0 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 2 0 0 8 . 0 0 5 0 8 . x ;   H u g h e s   B ,   2 0 1 0 ,   N A T   R E V   D R U G   D I S C O V ,   V 9 ,   P 4 1 7 ,   D O I   1 0 . 1 0 3 8 / n r d 3 2 0 4 ;   H w a n g   J ,   2 0 0 8 ,   H E A L T H   A F F A I R ,   V 2 7 ,   P 1 3 2 9 ,   D O I   1 0 . 1 3 7 7 / h l t h a f f . 2 7 . 5 . 1 3 2 9 ;   J e n s e n   D .   G . ,   2 0 1 0 ,   L I T T L E   R   B I G   D ;   J o n g   S . ,   S H A R E   N O T   P U B L   U N P U B ;   K n e l l e r   R ,   2 0 1 0 ,   N A T   R E V   D R U G   D I S C O V ,   V 9 ,   P 8 6 7 ,   D O I   1 0 . 1 0 3 8 / n r d 3 2 5 1 ;   L a M a t t i n a   J L ,   2 0 1 1 ,   N A T   R E V   D R U G   D I S C O V ,   V 1 0 ,   P 5 5 9 ,   D O I   1 0 . 1 0 3 8 / n r d 3 5 1 4 ;   L e y d e s d o r f f   L . ,   J   A M   S O C   I F   I N   P R E S ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 8 3 0 - 4 ;   M a z z u c a t o   M ,   2 0 1 1 ,   E N T R E P R E N E U R I A L   S T A T ;   M c B r i d e   R . ,   2 0 1 2 ,   T O P   1 0   P H A R M   L O Y O F F S ;   M c K e l v e y   M ,   2 0 0 4 ,   S E C T O R A L   S Y S T E M S   O F   I N N O V A T I O N ,   P 7 3 ,   D O I   1 0 . 1 0 1 7 / C B O 9 7 8 0 5 1 1 4 9 3 2 7 0 . 0 0 4 ;   M c M i l l a n   G S ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 0 - X ;   M e r t o n   R K ,   1 9 7 3 ,   S O C I O L   S C I ,   P 2 6 8 ;   M o n t o r i   V M ,   2 0 0 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 0 ,   P 1 8 1 4 ,   D O I   1 0 . 1 0 0 1 / j a m a . 3 0 0 . 1 5 . 1 8 1 4 ;   M u n o s   B ,   2 0 0 9 ,   N A T   R E V   D R U G   D I S C O V ,   V 8 ,   P 9 5 9 ,   D O I   1 0 . 1 0 3 8 / n r d 2 9 6 1 ;   M u n o s   B .   H . ,   2 0 1 1 ,   S C I   T R A N S   M E D ,   V 3 ;   N i g h t i n g a l e   P ,   2 0 0 4 ,   T R E N D S   B I O T E C H N O L ,   V 2 2 ,   P 5 6 4 ,   D O I   1 0 . 1 0 1 6 / j . t i b t e c h . 2 0 0 4 . 0 9 . 0 1 0 ;   N i g h t i n g a l e   P . ,   2 0 0 0 ,   I N D   C O R P   C H A N G E ,   V 9 ,   P 3 1 5 ,   D O I   1 0 . 1 0 9 3 / i c c / 9 . 2 . 3 1 5 ;   P a m m o l l i   F ,   2 0 1 1 ,   N A T   R E V   D R U G   D I S C O V ,   V 1 0 ,   P 4 2 8 ,   D O I   1 0 . 1 0 3 8 / n r d 3 4 0 5 ;   P a t e l   P ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 0 5 - X ;   P a t e l   P . ,   2 0 0 8 ,   S E C T O R A L   I N N O V A T I O N ;   P a u l   S M ,   2 0 1 0 ,   N A T   R E V   D R U G   D I S C O V ,   V 9 ,   P 2 0 3 ,   D O I   1 0 . 1 0 3 8 / n r d 3 0 7 8 ;   P e r i a n e s - R o d r i g u e z   A ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 0 - z ;   P e r i a n e s - R o d r i g u e z   A . ,   2 0 1 1 ,   1 3   C   I N T   S O C   S C I   I N F ,   P 6 5 6 ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   P e t r y n a   A . ,   2 0 0 9 ,   E X P T   T R A V E L   C L I N   T R I ;   P e t s k o   G .   A . ,   2 0 1 1 ,   S C I   T R A N S   M E D ,   V 3 ;   P i s a n o   G .   P . ,   2 0 0 6 ,   S C I   B U S I N E S S   P R O M I S E ;   P o l i d o r o   F . ,   2 0 1 1 ,   O R G A N   S C I ;   P o r t e r   A L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 7 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 9 7 - 2 ;   P o w e l l   W W ,   1 9 9 6 ,   A D M I N   S C I   Q U A R T ,   V 4 1 ,   P 1 1 6 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 9 8 8 ;   L e y d e s d o r f f   L . ,   2 0 1 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 1 ,   P 8 7 1 ;   R a t n e r   M ,   2 0 1 2 ,   N A T   B I O T E C H N O L ,   V 3 0 ,   P 1 1 9 ,   D O I   1 0 . 1 0 3 8 / n b t 0 2 1 2 - 1 1 9 ;   S a n o f i - A v e n t i s ,   2 0 1 0 ,   S A N   A V   A N N   R E P   2 0 1 0 ;   S i s m o n d o   S ,   2 0 0 7 ,   P L O S   M E D ,   V 4 ,   P 1 4 2 9 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p m e d . 0 0 4 0 2 8 6 ;   S t a t o n   T . ,   2 0 1 1 ,   R O C H E   C H I E F   W A R N S   P E ;   S t e p h a n   P E ,   1 9 9 6 ,   J   E C O N   L I T ,   V 3 4 ,   P 1 1 9 9 ;   S u b r a m a n i a n   R a m ,   2 0 1 1 ,   I n t e r n a t i o n a l   J o u r n a l   o f   B u s i n e s s   I n n o v a t i o n   a n d   R e s e a r c h ,   V 5 ,   P 6 3 ,   D O I   1 0 . 1 5 0 4 / I J B I R . 2 0 1 1 . 0 3 7 2 5 7 ;   T h i e r s   F A ,   2 0 0 8 ,   N A T   R E V   D R U G   D I S C O V ,   V 7 ,   P 1 3 ,   D O I   1 0 . 1 0 3 8 / n r d 2 4 4 1 ;   T i j s s e n   R J W ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 3 . 1 1 . 0 0 2 ;   T i j s s e n   R J W ,   2 0 0 9 ,   T E C H N O L   A N A L   S T R A T E G ,   V 2 1 ,   P 8 5 9 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 9 0 3 1 8 2 3 3 0 ;   T i m m e r m a n s   S ,   2 0 0 3 ,   S O C I O L   H E A L T H   I L L ,   V 2 5 ,   P 9 7 ;   U j j u a l   V . ,   2 0 1 1 ,   S P R U   E L E C T   W O R K I N G   P ,   V 1 9 2 ;   V a l l a s   S .   P . ,   2 0 0 8 ,   S O C I O - E C O N   R E V ,   V 6 ,   P 2 8 3 ,   D O I   [ D O I   1 0 . 1 0 9 3 / S E R / M W L 0 3 5 ,   D O I   1 0 . 1 0 9 3 / S E R / M W 1 0 3 5 ] ;   v a n   E c k   N J ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 5 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 4 6 - 3 ;   v o n   Z e d t w i t z   M ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 5 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 2 5 - 1 ;   W e s t   W ,   2 0 0 9 ,   T R E N D S   B I O T E C H N O L ,   V 2 7 ,   P 5 5 8 ,   D O I   1 0 . 1 0 1 6 / j . t i b t e c h . 2 0 0 9 . 0 6 . 0 0 7 ;   W u c h t y   S ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 6 ,   P 1 0 3 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 3 6 0 9 9 ;   [ A n o n y m o u s ] ,   2 0 0 7 ,   E C O N O M I S T 	 7 1 	 1 7 	 1 8 	 1 0 	 8 9 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J A N 	 2 0 1 4 	 8 1 	 	 	 	 	 	 2 2 	 3 8 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 2 . 0 6 . 0 0 7 	 	 1 7 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 7 8 Y P 	 W O S : 0 0 0 3 2 8 9 2 6 1 0 0 0 0 3 	 	 
 
 J 	 B a n e r j e e ,   I ;   N g u y e n ,   B ;   G a r o u s i ,   V ;   M e m o n ,   A 	 	 	 	 B a n e r j e e ,   I s h a n ;   N g u y e n ,   B a o ;   G a r o u s i ,   V a h i d ;   M e m o n ,   A t i f 	 	 	 G r a p h i c a l   u s e r   i n t e r f a c e   ( G U I )   t e s t i n g :   S y s t e m a t i c   m a p p i n g   a n d   r e p o s i t o r y 	 I N F O R M A T I O N   A N D   S O F T W A R E   T E C H N O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 S y s t e m a t i c   m a p p i n g ;   G U I   a p p l i c a t i o n ;   T e s t i n g ;   P a p e r   r e p o s i t o r y ;   B i b l i o m e t r i c s 	 D I R E C T E D   T E S T   S C R I P T S ;   S M A R T P H O N E   A P P L I C A T I O N S ;   G E N E R A T I O N ;   T O O L ;   E X E C U T I O N ;   F R A M E W O R K ;   F E E D B A C K 	 C o n t e x t :   G U I   t e s t i n g   i s   s y s t e m   t e s t i n g   o f   a   s o f t w a r e   t h a t   h a s   a   g r a p h i c a l - u s e r   i n t e r f a c e   ( G U I )   f r o n t - e n d .   B e c a u s e   s y s t e m   t e s t i n g   e n t a i l s   t h a t   t h e   e n t i r e   s o f t w a r e   s y s t e m ,   i n c l u d i n g   t h e   u s e r   i n t e r f a c e ,   b e   t e s t e d   a s   a   w h o l e ,   d u r i n g   G U I   t e s t i n g ,   t e s t   c a s e s - m o d e l e d   a s   s e q u e n c e s   o f   u s e r   i n p u t   e v e n t s - a r e   d e v e l o p e d   a n d   e x e c u t e d   o n   t h e   s o f t w a r e   b y   e x e r c i s i n g   t h e   G U I ' s   w i d g e t s   ( e . g . ,   t e x t   b o x e s   a n d   c l i c k a b l e   b u t t o n s ) .   M o r e   t h a n   2 3 0   a r t i c l e s   h a v e   a p p e a r e d   i n   t h e   a r e a   o f   G U I   t e s t i n g   s i n c e   1 9 9 1 .   O b j e c t i v e :   I n   t h i s   p a p e r ,   w e   s t u d y   t h i s   e x i s t i n g   b o d y   o f   k n o w l e d g e   u s i n g   a   s y s t e m a t i c   m a p p i n g   ( S M ) .   M e t h o d :   T h e   S M   i s   c o n d u c t e d   u s i n g   t h e   g u i d e l i n e s   p r o p o s e d   b y   P e t e r s e n   e t   a l .   W e   p o s e   t h r e e   s e t s   o f   r e s e a r c h   q u e s t i o n s .   W e   d e f i n e   s e l e c t i o n   a n d   e x c l u s i o n   c r i t e r i a .   F r o m   t h e   i n i t i a l   p o o l   o f   2 3 0   a r t i c l e s ,   p u b l i s h e d   i n   y e a r s   1 9 9 1 - 2 0 1 1 ,   o u r   f i n a l   p o o l   c o n s i s t e d   o f   1 3 6   a r t i c l e s .   W e   s y s t e m a t i c a l l y   d e v e l o p   a   c l a s s i f i c a t i o n   s c h e m e   a n d   m a p   t h e   s e l e c t e d   a r t i c l e s   t o   t h i s   s c h e m e .   R e s u l t s :   W e   p r e s e n t   t w o   t y p e s   o f   r e s u l t s .   F i r s t ,   w e   r e p o r t   t h e   d e m o g r a p h i c s   a n d   b i b l i o m e t r i c s   t r e n d s   i n   t h i s   d o m a i n ,   i n c l u d i n g :   t o p - c i t e d   a r t i c l e s ,   a c t i v e   r e s e a r c h e r s ,   t o p   v e n u e s ,   a n d   a c t i v e   c o u n t r i e s   i n   t h i s   r e s e a r c h   a r e a .   M o r e o v e r ,   w e   d e r i v e   t h e   t r e n d s ,   f o r   i n s t a n c e ,   i n   t e r m s   o f   t y p e s   o f   a r t i c l e s ,   s o u r c e s   o f   i n f o r m a t i o n   t o   d e r i v e   t e s t   c a s e s ,   t y p e s   o f   e v a l u a t i o n s   u s e d   i n   a r t i c l e s ,   e t c .   O u r   s e c o n d   m a j o r   r e s u l t   i s   a   p u b l i c l y - a c c e s s i b l e   r e p o s i t o r y   t h a t   c o n t a i n s   a l l   o u r   m a p p i n g   d a t a .   W e   p l a n   t o   u p d a t e   t h i s   r e p o s i t o r y   o n   a   r e g u l a r   b a s i s ,   m a k i n g   i t   a   " l i v e "   r e s o u r c e   f o r   a l l   r e s e a r c h e r s .   C o n c l u s i o n :   O u r   S M   p r o v i d e s   a n   o v e r v i e w   o f   e x i s t i n g   G U I   t e s t i n g   a p p r o a c h e s   a n d   h e l p s   s p o t   a r e a s   i n   t h e   f i e l d   t h a t   r e q u i r e   m o r e   a t t e n t i o n   f r o m   t h e   r e s e a r c h   c o m m u n i t y .   F o r   e x a m p l e ,   m u c h   w o r k   i s   n e e d e d   t o   c o n n e c t   a c a d e m i c   m o d e l - b a s e d   t e c h n i q u e s   w i t h   c o m m e r c i a l l y   a v a i l a b l e   t o o l s .   T o   t h i s   e n d ,   s t u d i e s   a r e   n e e d e d   t o   c o m p a r e   t h e   s t a t e - o f - t h e - a r t   i n   G U I   t e s t i n g   i n   a c a d e m i c   t e c h n i q u e s   a n d   i n d u s t r i a l   t o o l s .   ( C )   2 0 1 3   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ B a n e r j e e ,   I s h a n ;   N g u y e n ,   B a o ;   M e m o n ,   A t i f ]   U n i v   M a r y l a n d ,   D e p t   C o m p   S c i ,   C o l l e g e   P k ,   M D   2 0 7 4 2   U S A ;   [ G a r o u s i ,   V a h i d ]   U n i v   C a l g a r y ,   C a l g a r y ,   A B ,   C a n a d a ;   [ G a r o u s i ,   V a h i d ]   M i d d l e   E   T e c h   U n i v ,   I n s t   I n f o r m a t ,   T R - 0 6 5 3 1   A n k a r a ,   T u r k e y 	 G a r o u s i ,   V   ( r e p r i n t   a u t h o r ) ,   U n i v   C a l g a r y ,   C a l g a r y ,   A B ,   C a n a d a . 	 i s h a n @ c s . u m d . e d u ;   b a o n n @ c s . u m d . e d u ;   v g a r o u s i @ u c a l g a r y . c a ;   a t i f @ c s . u m d . e d u 	 	 G a r o u s i ,   V a h i d / 0 0 0 0 - 0 0 0 1 - 6 5 9 0 - 7 5 7 6 	 D i s c o v e r y   G r a n t   f r o m   t h e   N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   R e s e a r c h   C o u n c i l   o f   C a n a d a   [ 3 4 1 5 1 1 - 0 7 ] ;   V i s i t i n g   S c i e n t i s t   F e l l o w s h i p   P r o g r a m   o f   t h e   S c i e n t i f i c   a n d   T e c h n o l o g i c a l   R e s e a r c h   C o u n c i l   o f   T u r k e y   ( T U B I T A K )   [ 2 2 2 1 ] ;   U S   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( N S F )   u n d e r   N S F   G r a n t s   [ C C F - 0 4 4 7 8 6 4 ,   C N S - 0 8 5 5 0 5 5 ,   C N S - 1 2 0 5 5 0 1 ] 	 T h e   i n i t i a l   d a t a   c o l l e c t i o n   s t a g e   o f   t h i s   w o r k   w a s   s t a r t e d   i n   a   g r a d u a t e   c o u r s e   o f f e r e d   b y   V a h i d   G a r o u s i   i n   y e a r   2 0 1 0 ,   i n   w h i c h   t h e   f o l l o w i n g   s t u d e n t s   m a d e   s o m e   i n i t i a l   c o n t r i b u t i o n s :   R o s h a n a k   F a r h o o d i ,   S h a h n e w a z   A .   J o l l y ,   R i n a   R a o ,   A i d a   S h i r v a n i ,   a n d   C h r i s t i a n   W i e d e r s e i n e r .   T h e i r   e f f o r t s   a r e   h e r e b y   a c k n o w l e d g e d .   V a h i d   G a r o u s i   w a s   s u p p o r t e d   b y   t h e   D i s c o v e r y   G r a n t   3 4 1 5 1 1 - 0 7   f r o m   t h e   N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   R e s e a r c h   C o u n c i l   o f   C a n a d a   a n d   b y   t h e   V i s i t i n g   S c i e n t i s t   F e l l o w s h i p   P r o g r a m   ( # 2 2 2 1 )   o f   t h e   S c i e n t i f i c   a n d   T e c h n o l o g i c a l   R e s e a r c h   C o u n c i l   o f   T u r k e y   ( T U B I T A K ) .   T h e   U S   a u t h o r s   w e r e   w a s   p a r t i a l l y   s u p p o r t e d   b y   t h e   U S   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( N S F )   u n d e r   N S F   G r a n t s   C C F - 0 4 4 7 8 6 4 ,   C N S - 0 8 5 5 0 5 5 ,   a n d   C N S - 1 2 0 5 5 0 1 . 	 A b d a l l a h   N . ,   2 0 0 9 ,   I N T   S   S O F T W   R E L   E N G ;   A f z a l   W . ,   2 0 0 8 ,   2 0   I N T   C   S O F T W   E N G   K ;   A f z a l   W ,   2 0 0 9 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 1 ,   P 9 5 7 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 8 . 1 2 . 0 0 5 ;   A l i   S ,   2 0 1 0 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 6 ,   P 7 4 2 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 0 9 . 5 2 ;   A l l e s   M . ,   2 0 0 6 ,   P   A G I L E   0 6 ,   P 2 7 6 ;   A m a l f i t a n o   D . ,   2 0 1 1 ,   P   2 0 1 1   I E E E   4   I N T   C ,   P 2 5 2 ;   A m a l f i t a n o   D . ,   2 0 1 0 ,   C   S O F T W   T E S T   V E R   V A L ,   P 2 7 4 ;   A r i s s   O . E . ,   2 0 1 0 ,   C   I N F   T E C H N ,   P 1 0 3 8 ;   A r l t   S . ,   2 0 1 1 ,   P   2 0 1 1   I E E E   4   I N T   C ,   P 2 2 2 ;   B a r e s i   L . ,   2 0 0 1 ,   C I S T R 0 1 0 2   U   O R   D E P   C ;   B a r m i   Z A ,   2 0 1 1 ,   P   2 0 1 1   I E E E   4   I N T   C ,   P 4 7 6 ;   B a s i l i   V . ,   1 9 9 4 ,   E N C Y   S O F T W A R E   E N G ,   V 1 ,   P 5 2 8 ;   B e l l i   F ,   2 0 0 1 ,   1 2 T H   I N T E R N A T I O N A L   S Y M P O S I U M   O N   S O F T W A R E   R E L I A B I L I T Y   E N G I N E E R I N G ,   P R O C E E D I N G S ,   P 3 4 ,   D O I   1 0 . 1 1 0 9 / I S S R E . 2 0 0 1 . 9 8 9 4 5 6 ;   B e r t o l i n i   C . ,   2 0 1 0 ,   C   S O F T W   T E S T   V E R   V A L ,   P 2 3 5 ;   B e r t o l i n i   C . ,   2 0 1 0 ,   C   S O F T W   T E S T   V E R   V A L ,   P 2 5 2 ;   B e r t o l i n i   C ,   2 0 0 9 ,   S E F M   2 0 0 9 :   S E V E N T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   E N G I N E E R I N G   A N D   F O R M A L   M E T H O D S ,   P 1 1 5 ,   D O I   1 0 . 1 1 0 9 / S E F M . 2 0 0 9 . 2 8 ;   B e r t o l i n i   C ,   2 0 0 9 ,   S E C O N D   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   T E S T I N G ,   V E R I F I C A T I O N ,   A N D   V A L I D A T I O N ,   P R O C E E D I N G S ,   P 2 1 ,   D O I   1 0 . 1 1 0 9 / I C S T . 2 0 0 9 . 2 7 ;   B i n d e r   R . V . ,   1 9 9 7 ,   P   T O O L S   2 3   T E C H N   O B J ,   P 3 7 4 ;   B u d g e n   D a v i d ,   2 0 0 8 ,   P   P P I G   2 0 0 8   L A N C   U ,   P 1 9 5 ;   C a i   K . - Y . ,   2 0 0 5 ,   C   Q U A L   S O F T W ,   P 1 9 ;   C h a n g   T H ,   2 0 1 0 ,   C H I 2 0 1 0 :   P R O C E E D I N G S   O F   T H E   2 8 T H   A N N U A L   C H I   C O N F E R E N C E   O N   H U M A N   F A C T O R S   I N   C O M P U T I N G   S Y S T E M S ,   V O L S   1 - 4 ,   P 1 5 3 5 ;   C h e n   J ,   2 0 0 2 ,   S O F T W A R E   Q U A L   J ,   V 1 0 ,   P 2 0 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 6 3 4 4 2 2 5 0 4 ;   C h e n   W . K . ,   2 0 0 5 ,   C   A D V   I N F   N E T W   A P P L ,   P 9 6 7 ;   C h i n n a p o n g s e a   V . ,   2 0 0 9 ,   W O R K S H   S O F T W   T E C H N   E ,   P 2 0 3 ;   C o n r o y   K . ,   2 0 0 7 ,   C   S O F T W   M A I N T ,   P 3 4 5 ;   C u n h a   M . ,   2 0 1 0 ,   I N T   C   S O F T W   T E C H N   E N ,   P 2 0 2 ;   N e t o   P A D S ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 1 2 . 0 0 3 ;   D a b o c z i   T L ,   2 0 0 3 ,   I E E E   I M T C   P ,   P 4 4 1 ;   D a n i e l   B . ,   2 0 1 1 ,   P   1   I N T   W O R K S H   E N D   T ,   P 3 8 ;   D e r e z i n s k a   A . ,   2 0 0 6 ,   M U L T   C O M P   S C I   I N F   T E ,   P 5 4 9 ;   D e r e z i n s k a   A . ,   2 0 0 7 ,   J   C O M P U T E R   S C I   A P P L ,   V 4 ,   P 1 3 ;   D w y e r   M B ,   1 9 9 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 1 3 0 1 ,   P 2 4 4 ;   F e n g   L ,   2 0 0 7 ,   I E E E   A U T O T E S T C O N ,   P 2 2 ;   F e r n a n d e z   A ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 7 8 9 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 1 . 0 2 . 0 0 7 ;   G a n o v   S . ,   2 0 0 8 ,   P   I N T   W O R K S H   A U T   S O F ;   G a n o v   S ,   2 0 0 9 ,   L E C T   N O T E S   C O M P U T   S C ,   V 5 8 8 5 ,   P 6 9 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 6 4 2 - 1 0 3 7 3 - 5 _ 4 ;   G o v e   R . ,   2 0 1 1 ,   P   2 0 1 1   I E E E   4   I N T   C ,   P 2 0 2 ;   G r e c h a n i k   M ,   2 0 0 9 ,   P R O C   I E E E   I N T   C O N F   S ,   P 9 ,   D O I   1 0 . 1 1 0 9 / I C S M . 2 0 0 9 . 5 3 0 6 3 4 5 ;   G r e c h a n i k   M ,   2 0 0 9 ,   P R O C   I N T   C O N F   S O F T W ,   P 4 0 8 ,   D O I   1 0 . 1 1 0 9 / I C S E . 2 0 0 9 . 5 0 7 0 5 4 0 ;   G r i n d a l   M ,   2 0 0 5 ,   S O F T W   T E S T   V E R I F   R E L ,   V 1 5 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 2 / s t v r . 3 1 9 ;   H a r m a n   S . A . M .   M a r k ,   2 0 0 9 ,   T R 0 9 0 3   K I N G S   C O L L   L O ;   H a r r o l d   M . J . ,   2 0 0 0 ,   P   C   F U T   S O F T W   E N G ,   P 6 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 3 3 6 5 1 2 . 3 3 6 5 3 2 ;   H e r b o l d   S . ,   2 0 1 1 ,   P   2 0 1 1   I E E E   4   I N T   C ,   P 2 3 2 ;   H o l m e s   A ,   2 0 0 6 ,   A G I L E   2 0 0 6 ,   P r o c e e d i n g s ,   P 2 7 0 ,   D O I   1 0 . 1 1 0 9 / A G I L E . 2 0 0 6 . 1 9 ;   H o u   Y ,   2 0 0 9 ,   2 0 0 9   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S C A L A B L E   C O M P U T I N G   A N D   C O M M U N I C A T I O N S   &   E I G H T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   E M B E D D E D   C O M P U T I N G ,   P 3 4 1 ,   D O I   1 0 . 1 1 0 9 / E m b e d d e d C o m - S c a l C o m . 2 0 0 9 . 6 7 ;   H u   C . ,   2 0 1 1 ,   P   2 0 1 1   A C M   S   A P P L   C O ,   P 1 4 9 0 ;   H u   C . ,   2 0 1 1 ,   P   6   I N T   W O R K S H   A U T   S ,   P 7 7 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 9 8 2 5 9 5 . 1 9 8 2 6 1 2 ;   H u i   Z . ,   2 0 1 0 ,   I N T   C O M P   I N T   S Y S T   I C ,   V 2 ,   P 5 5 9 ;   J a a s k e l a i n e n   A ,   2 0 0 8 ,   I N T   C O N F   Q U A L   S O F T W ,   P 2 7 6 ,   D O I   1 0 . 1 1 0 9 / Q S I C . 2 0 0 8 . 2 6 ;   J a a s k e l a i n e n   A ,   2 0 0 9 ,   P R O C   I N T   C O N F   S O F T W ,   P 1 1 2 ,   D O I   1 0 . 1 1 0 9 / I C S E - C O M P A N I O N . 2 0 0 9 . 5 0 7 0 9 6 9 ;   J i a   Y . ,   2 0 1 0 ,   I E E E   T   S O F T W A R E   E N G ,   V 2 0 0 8 ,   P 1 ;   J u r i s t o   N ,   2 0 0 4 ,   E M P I R   S O F T W   E N G ,   V 9 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / B : E M S E . 0 0 0 0 0 1 3 5 1 3 . 4 8 9 6 3 . 1 b ;   K e r v i n e n   A ,   2 0 0 6 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 9 9 7 ,   P 1 6 ;   K i t c h e n h a m   B . ,   2 0 0 7 ,   G U I D E L I N E S   P E R F O R M I N ;   K i t c h e n h a m   B A ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 6 3 8 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 1 2 . 0 1 1 ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   C   C O M P   I N F   S C I ,   D O I   D O I   1 0 . 1 1 0 9 / I C I S . 2 0 0 8 . 5 4 ;   L i   P ,   2 0 0 7 ,   E M P I R   S O F T W   E N G ,   V 1 2 ,   P 3 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 6 4 - 0 0 6 - 9 0 3 1 - 3 ;   L o   R ,   1 9 9 6 ,   P R O C E E D I N G S   O F   T H E   3 R D   I N T E R N A T I O N A L   S O F T W A R E   M E T R I C S   S Y M P O S I U M ,   P 1 6 6 ,   D O I   1 0 . 1 1 0 9 / M E T R I C . 1 9 9 6 . 4 9 2 4 5 3 ;   L o w e l l   C . ,   2 0 0 3 ,   E X T R E M E   P R O G R A M M I N G ,   V 2 6 7 5 ,   P 1 0 1 1 ;   M a g e l   K . ,   2 0 0 7 ,   C   S O F T W   E N G   A P P L ,   P 9 1 ;   M c C o n n e l l   S ,   1 9 9 6 ,   I E E E   S O F T W A R E ,   V 1 3 ,   P 1 4 3 ;   M c M a h o n   C ,   2 0 0 9 ,   A G I L E   2 0 0 9   C O N F E R E N C E ,   P 3 6 3 ,   D O I   1 0 . 1 1 0 9 / A G I L E . 2 0 0 9 . 9 ;   M c M i n n   P ,   2 0 0 4 ,   S O F T W   T E S T   V E R I F   R E L ,   V 1 4 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 2 / s t v r . 2 9 4 ;   M e m o n   A . ,   2 0 0 0 ,   A C M   S I G S O F T   S O F T W A R E ,   V 2 5 ,   P 3 0 ,   D O I   1 0 . 1 1 4 5 / 3 5 7 4 7 4 . 3 5 5 0 5 0 ;   M e m o n   A M ,   2 0 0 1 ,   I E E E   T   S O F T W A R E   E N G ,   V 2 7 ,   P 1 4 4 ,   D O I   1 0 . 1 1 0 9 / 3 2 . 9 0 8 9 5 9 ;   M e m o n   A . M . ,   2 0 0 0 ,   C   A R T   I N T   P L A N N   S C H E ,   P 2 2 6 ;   M e m o n   A . M . ,   2 0 0 1 ,   S O F T W   E N G   C   H E L D   J O I ,   P 2 5 6 ;   M e m o n   A M ,   2 0 1 0 ,   A D V   C O M P U T ,   V 8 0 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 6 5 - 2 4 5 8 ( 1 0 ) 8 0 0 0 3 - 8 ;   M e m o n   A M ,   2 0 0 8 ,   A C M   T   S O F T W   E N G   M E T H ,   V 1 8 ,   D O I   1 0 . 1 1 4 5 / 1 4 1 6 5 6 3 . 1 4 1 6 5 6 4 ;   N a v a r r o   M . ,   2 0 1 0 ,   A D V   S O F T W A R E   E N G ,   V 2 0 1 0 ,   P 1 ;   N g u y e n   D . H . ,   2 0 1 0 ,   W O R K S H   A U T   S O F T W   T E S ,   P 2 4 ;   O k a d a   H ,   1 9 9 9 ,   I E I C E   T   I N F   S Y S T ,   V E 8 2 D ,   P 1 0 3 0 ;   P a i v a   A C R ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 7 8 5 ,   P 4 5 0 ;   P a i v a   A . C . R . ,   2 0 0 5 ,   W O R K S H   S T A T   M A C H ;   P a i v a   A C R ,   2 0 0 8 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 9 1 6 ,   P 2 1 8 ;   P a l a c i o s   M ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 1 1 . 0 1 4 ;   P a s a r e a n u   C o r i n a   S . ,   2 0 0 9 ,   I n t e r n a t i o n a l   J o u r n a l   o n   S o f t w a r e   T o o l s   f o r   T e c h n o l o g y   T r a n s f e r ,   V 1 1 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 9 - 0 0 9 - 0 1 1 8 - 1 ;   P a t t o n   R . M . ,   2 0 0 3 ,   I N T   I N D   T R A I N   S I M   E D ;   P e t e r s e n   K . ,   2 0 0 7 ,   1 2   I N T   C   E V   A S S   S O F T ,   V 1 7 ,   P 1 ;   P o r t i l l o - R o d r i g u e z   J . ,   2 0 1 2 ,   T O O L S   U S E D   G L O B A L   S O ;   R o b i n s o n   B ,   2 0 0 9 ,   I E E E   I C S T   W O R K S H O P ,   P 2 6 7 ,   D O I   1 0 . 1 1 0 9 / I C S T W . 2 0 0 9 . 2 2 ;   S a f o u t i n   M J ,   2 0 0 0 ,   I E E E   T   E D U C ,   V 4 3 ,   P 1 8 8 ,   D O I   1 0 . 1 1 0 9 / 1 3 . 8 4 8 0 7 2 ;   S h e h a d y   R . K . ,   1 9 9 7 ,   S   F A U L T   T O L   C O M P ,   P 8 0 ;   S h e w c h u k   Y ,   2 0 1 0 ,   2 2 N D   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   E N G I N E E R I N G   &   K N O W L E D G E   E N G I N E E R I N G   ( S E K E   2 0 1 0 ) ,   P 4 8 9 ;   S t r e c k e r   J . ,   2 0 0 8 ,   C   S O F T W   T E S T   V E R   V A L ,   P 1 2 ;   T a k a h a s h i   J . ,   2 0 0 1 ,   A C M   S I G S O F T   S O F T W A R E ,   V 2 6 ,   P 8 3 ;   T h e o d o r e   F . M . ,   2 0 1 0 ,   A G I L E   I N T E R A C T I O N   D E ,   V 9 ;   T s u j i n o   Y . ,   2 0 0 0 ,   S Y S T E M S   C O M P U T E R S   J A ,   P 3 8 ;   W h i t e   L . ,   2 0 0 0 ,   S R E   0 0 ,   P 1 1 0 ;   W H I T E   L J ,   1 9 9 6 ,   C   S O F T W   M A I N T ,   P 3 5 0 ;   X i e   Q ,   2 0 0 5 ,   P R O C   I E E E   I N T   C O N F   S ,   P 4 7 3 ;   M c M i n n   P . ,   2 0 0 7 ,   A C M   T   S O F T W   E N G   M E T H ,   P 1 4 1 ;   X I E   Q ,   2 0 0 8 ,   A C M   T   S O F T W   E N G   M E T H ,   V 1 8 ,   P 1 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 4 1 6 5 6 3 . 1 4 1 6 5 6 7 ;   Y e   M . ,   2 0 0 6 ,   C   I N T   C O N T R   A U T ,   P 5 7 7 3 ;   Y i p   S . ,   1 9 9 1 ,   C   S Y S T   S C I ;   Y I P   S W L ,   1 9 9 1 ,   A D V A N C E D   C O M P U T E R   T E C H N O L O G Y ,   R E L I A B L E   S Y S T E M S   A N D   A P P L I C A T I O N S ,   P 5 5 7 ;   Y u a n   X . ,   2 0 1 0 ,   I E E E   T   S O F T W A R E   E N G ;   Y u a n   X ,   2 0 0 7 ,   P R O C   I N T   C O N F   S O F T W ,   P 3 9 6 ;   Y u a n   X ,   2 0 1 0 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 2 ,   P 5 5 9 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 9 . 1 1 . 0 0 9 ;   Y u a n   X ,   2 0 1 0 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 6 ,   P 8 1 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 0 9 . 6 8 ;   Z h a n g   H ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 6 2 5 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 1 2 . 0 1 0 ;   Z h a o   L . ,   2 0 1 0 ,   C   Q U A L   S O F T W ,   P 3 2 6 	 1 0 2 	 1 7 	 1 8 	 1 	 2 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 9 5 0 - 5 8 4 9 	 	 	 I N F O R M   S O F T W A R E   T E C H 	 I n f .   S o f t w .   T e c h n o l . 	 O C T 	 2 0 1 3 	 5 5 	 1 0 	 	 	 	 	 1 6 7 9 	 1 6 9 4 	 	 1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 3 . 0 3 . 0 0 4 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   C o m p u t e r   S c i e n c e ,   S o f t w a r e   E n g i n e e r i n g 	 C o m p u t e r   S c i e n c e 	 2 0 3 M T 	 W O S : 0 0 0 3 2 3 2 9 8 0 0 0 0 0 1 	 	 
 
 J 	 B u r b a n o ,   P ;   M a r t i n - S a n c h e z ,   F J ;   B u r i l l o - P u t z e ,   G ;   F e r n a n d e z   P e r e z ,   C ;   D e l   P r a d o   G o n z a l e z ,   N ;   M i r o ,   O 	 	 	 	 B u r b a n o ,   P a b l o ;   J a v i e r   M a r t i n - S a n c h e z ,   F r a n c i s c o ;   B u r i l l o - P u t z e ,   G u i l l e r m o ;   F e r n a n d e z   P e r e z ,   C r i s t i n a ;   D e l   P r a d o   G o n z a l e z ,   N a y a d e ;   M i r o ,   O s c a r 	 	 	 R e s e a r c h   o u t p u t   a n d   i m p a c t   o f   a   g r o u p   o f   e m e r g e n c y   p h y s i c i a n s   s e l e c t e d   a c c o r d i n g   t o   r e s e a r c h   c a r e e r   c r i t e r i a 	 E M E R G E N C I A S 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 H - i n d e x ;   B i b l i o m e t r i c s ;   B i b l i o m e t r i c   i m p a c t ;   I m p a c t   f a c t o r ;   R e s e a r c h   o u t p u t ;   E m e r g e n c y   h e a l t h   s e r v i c e s ;   R e s e a r c h ;   E m e r g e n c y   p h y s i c i a n 	 H - I N D E X ;   S E L F - C I T A T I O N S ;   M E D I C I N E ;   J O U R N A L S ;   P R O D U C T I V I T Y 	 O b j e c t i v e s :   T o   i n v e s t i g a t e   b i b l i o m e t r i c   i n d i c a t o r s   o f   r e s e a r c h   o u t p u t ,   o r   p r o d u c t i v i t y ,   a n d   i m p a c t   o f   s e l e c t e d   S p a n i s h   e m e r g e n c y   p h y s i c i a n s   w h o   e n g a g e   i n   r e s e a r c h   a n d   t o   d e s c r i b e   t h e   b e h a v i o r   o f   t h e s e   i n d i c a t o r s   f o r   t h i s   g r o u p   o f   r e s e a r c h e r s   a s   a   w h o l e .   M e t h o d s :   P i l o t   s t u d y   e x p l o r i n g   i n d i c a t o r s   f o r   a   g r o u p   o f   2 4   e m e r g e n c y   p h y s i c i a n s   w h o   e n g a g e   i n   r e s e a r c h .   T h e   p h y s i c i a n s   w e r e   e l e c t e d   f r o m   a m o n g   m e m b e r s   o f   t h e   e d i t o r i a l   b o a r d   a n d   p e e r   r e v i e w e r s   o f   t h e   j o u r n a l   E m e r g e n c i a s .   A l l   h a d   b e e n   p u b l i s h i n g   p a p e r s   f o r   a t   l e a s t   1 0   y e a r s   a n d   h a d   a u t h o r e d   a t   l e a s t   2 0   p a p e r s ,   i n c l u d i n g   5   i n   t h e   l a s t   3   y e a r s .   T h e   f o l l o w i n g   i n f o r m a t i o n   w a s   c o l l e c t e d   f o r   e a c h   a u t h o r :   p u b l i c a t i o n s   i n   j o u r n a l s   i n c l u d e d   i n   S c i e n c e   C i t a t i o n   I n d e x   E x p a n d e d ;   d u r a t i o n   o f   c a r e e r   i n   m e d i c a l   r e s e a r c h ;   n u m b e r   o f   p u b l i c a t i o n s   a s   t h e   o u t p u t   i n d i c a t o r ;   a n d   n u m b e r   o f   c i t e s ,   a c c u m u l a t e d   i m p a c t   f a c t o r ,   a n d   h - i n d e x   a s   t h e   i m p a c t   i n d i c a t o r s .   T h e s e   i n d i c a t o r s   w e r e   c a l c u l a t e d   f o r   e a c h   y e a r   o f   t h e   p h y s i c i a n s '   r e s e a r c h   c a r e e r s .   T h e   r e s u l t s ,   i n c l u d i n g   c h a n g e   i n   t h e   i n d i c a t o r s   o v e r   t i m e ,   w e r e   a n a l y z e d   f o r   i n d i v i d u a l s   a n d   f o r   t h e   g r o u p   a s   a   w h o l e   b y   m e a n s   o f   b o t h   l i n e a r   a n d   p o l y n o m i a l   r e g r e s s i o n   m o d e l s .   R e s u l t s :   T h e   p h y s i c i a n s   h a d   b e e n   e n g a g e d   i n   r e s e a r c h   f o r   a   m e a n   ( S D )   o f   1 9   ( 7 )   y e a r s   ( r a n g e ,   1 0 - 3 5   y e a r s ) .   T h e   a s s o c i a t i o n s   b e t w e e n   y e a r s   o f   e x p e r i e n c e   a n d   t h e   i n d i c a t o r s   o f   o u t p u t   a n d   i m p a c t   w e r e   n o t   s i g n i f i c a n t .   P o l y n o m i a l   r e g r e s s i o n   m o d e l s   f i t   t h e   c h a n g e s   i n   t h e s e   i n d i c a t o r s   o v e r   t i m e   b e t t e r   t h a n   l i n e a r   m o d e l s .   A n a l y z e d   i n d i v i d u a l l y   t h e   R 2   v a l u e s   w e r e   a l w a y s   o v e r   0 . 9 0   f o r   a l l   i n d i c a t o r s   i n   p o l y n o m i a l   m o d e l i n g ;   f o r   t h e   g r o u p   a s   a   w h o l e ,   t h e   h - i n d e x   s h o w e d   t h e   b e s t   f i t   ( R 2   =   0 . 5 4 ) .   T h e   h - i n d e x   b e h a v e d   d i f f e r e n t l y   f o r   r e s e a r c h e r s   w i t h   u p   t o   2 0   y e a r s   o f   e x p e r i e n c e   ( b e t t e r   f i t ,   R 2   =   0 . 7 1   a s   w e l l   a s   a c c e l e r a t e d   i n c r e a s e )   a n d   f o r   t h o s e   w i t h   m o r e   t h a n   2 0   y e a r s   o f   e x p e r i e n c e   ( R 2   =   0 . 6 1 ) .   C o n c l u s i o n s :   I t   i s   p o s s i b l e   t o   m o d e l   c h a n g e s   i n   t h e   o u t p u t   a n d   i m p a c t   f a c t o r s   o f   S p a n i s h   e m e r g e n c y   p h y s i c i a n s   w h o   e n g a g e   i n   r e s e a r c h .   T h e   m o d e l s   c a n   b e   u s e d   i n   t h e   f u t u r e   t o   c o m p a r e   t h e   b e h a v i o r   o f   t h e s e   r e s e a r c h   i n d i c a t o r s   w i t h   t h o s e   o f   o t h e r   S p a n i s h   r e s e a r c h   g r o u p s   o r   t h o s e   o f   e m e r g e n c y   p h y s i c i a n s   e n g a g i n g   i n   r e s e a r c h   i n   o t h e r   c o u n t r i e s . 	 [ B u r b a n o ,   P a b l o ;   M i r o ,   O s c a r ]   I D I B A P S ,   G r p   I n v e s t   U r g e n c i a s   P r o c   &   P a t o l   U P P s ,   B a r c e l o n a ,   S p a i n ;   [ B u r b a n o ,   P a b l o ]   S e c r e t a r i a   E d u c   S u p e r   C i e n c i a   T e c n o l   &   I n n o v a c   S E ,   Q u i t o ,   E c u a d o r ;   [ J a v i e r   M a r t i n - S a n c h e z ,   F r a n c i s c o ]   H o s p   C l i n   S a n   C a r l o s ,   S e r v   U r g e n c i a s ,   M a d r i d ,   S p a i n ;   [ J a v i e r   M a r t i n - S a n c h e z ,   F r a n c i s c o ;   F e r n a n d e z   P e r e z ,   C r i s t i n a ]   H o s p   C l i n   S a n   C a r l o s ,   I n s t   I n v e s t   S a n i t a r i a ,   M a d r i d ,   S p a i n ;   [ B u r i l l o - P u t z e ,   G u i l l e r m o ]   H o s p   U n i v   C a n a r i a s ,   S e r v   U r g e n c i a s ,   T e n e r i f e ,   S p a i n ;   [ B u r i l l o - P u t z e ,   G u i l l e r m o ]   U n i v   E u r o p e a   C a n a r i a s ,   T e n e r i f e ,   S p a i n ;   [ F e r n a n d e z   P e r e z ,   C r i s t i n a ;   D e l   P r a d o   G o n z a l e z ,   N a y a d e ]   H o s p   C l i n   S a n   C a r l o s ,   S e r v   M e d   P r e v e n t ,   U n i d a d   I n v e s t ,   M a d r i d ,   S p a i n ;   [ F e r n a n d e z   P e r e z ,   C r i s t i n a ]   U n i v   C o m p l u t e n s e ,   E - 2 8 0 4 0   M a d r i d ,   S p a i n ;   [ M i r o ,   O s c a r ]   H o s p   C l i n   B a r c e l o n a ,   A r e a   U r g e n c i a s ,   E - 0 8 0 3 6   B a r c e l o n a ,   S p a i n 	 M i r o ,   O   ( r e p r i n t   a u t h o r ) ,   H o s p   C l i n   B a r c e l o n a ,   A r e a   U r g e n c i a s ,   V i l l a r r o e l   1 7 0 ,   E - 0 8 0 3 6   B a r c e l o n a ,   S p a i n . 	 o m i r o @ c l i n i c . c a t 	 B u r i l l o - P u t z e ,   G u i l l e r m o / L - 2 3 7 3 - 2 0 1 5 	 B u r i l l o - P u t z e ,   G u i l l e r m o / 0 0 0 0 - 0 0 0 1 - 5 6 7 9 - 7 8 4 6 	 	 	 A z n a r   J ,   2 0 1 1 ,   R E V   C L I N   E S P ,   V 2 1 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / j . r c e . 2 0 1 0 . 1 1 . 0 1 3 ;   B A T I S T A   P   D ,   I S   I T   P O S S I B L E   C O M P ;   B e n a v e n t   R A ,   2 0 0 4 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 3 ,   P 6 9 7 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 5 1 5 ;   R u i z   C a n t e r o   M ,   E N F O Q U E   G E N E R O   I N V E S ;   C o n e   D C ,   2 0 1 2 ,   A C A D   E M E R G   M E D ,   V 1 9 ,   p E 1 0 8 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 5 3 - 2 7 1 2 . 2 0 1 2 . 0 1 4 3 4 . x ;   G o n z a l e z   d e   D i o s   J ,   1 9 9 8 ,   R E V   E S P   P E D I A T ,   V 5 4 ,   P 4 3 0 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   E s c u d e r o - G o m e z   C r i s t i n a ,   2 0 0 8 ,   M e d   C l i n   ( B a r c ) ,   V 1 3 1   S u p p l   5 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 5 - 7 7 5 3 ( 0 8 ) 7 6 4 0 3 - 0 ;   F i g u e r e d o - G a s p a r i   E ,   2 0 0 5 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 5 ,   P 6 6 1 ;   G a r c i a - R o m e r o   A n t o n i o ,   2 0 0 8 ,   M e d   C l i n   ( B a r c ) ,   V 1 3 1   S u p p l   5 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 5 - 7 7 5 3 ( 0 8 ) 7 6 3 9 9 - 1 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G o n z a l e z - A l c a i d e   G ,   2 0 0 6 ,   A N A L I S I S   G E N E R A   P R O D ;   H a n n e y   S t e p h e n ,   2 0 0 8 ,   M e d   C l i n   ( B a r c ) ,   V 1 3 1   S u p p l   5 ,   P 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 5 - 7 7 5 3 ( 0 8 ) 7 6 4 1 2 - 1 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H u a n g   M H ,   2 0 1 1 ,   J   I N F   S C I ,   V 3 7 ,   P 4 5 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 1 4 1 2 0 2 7 ;   I m p e r i a l   J . ,   2 0 0 5 ,   R O D R I G U E Z   N A V A R R O   U T ;   J e n s e n   P ,   2 0 0 8 ,   T E S T I N G   B I B L I O M E T R I C ;   L i   Q ,   2 0 1 2 ,   A M   J   E M E R G   M E D ,   V 3 0 ,   P 1 5 3 0 ,   D O I   1 0 . 1 0 1 6 / j . a j e m . 2 0 1 1 . 1 2 . 0 2 3 ;   M i n t e g i   S ,   2 0 1 2 ,   E M E R G E N C I A S ,   V 2 4 ,   P 2 3 8 ;   M i r o   O ,   2 0 1 2 ,   R E V   C L I N   E S P ,   V 2 1 2 ,   P 4 8 ,   D O I   1 0 . 1 0 1 6 / j . r c e . 2 0 1 1 . 0 7 . 0 2 0 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 5 9 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 6 ;   M i r o   O ,   2 0 1 2 ,   E M E R G E N C I A S ,   V 2 4 ,   P 3 4 1 ;   M i r o   O ,   2 0 1 2 ,   E M E R G E N C I A S ,   V 2 4 ,   P 2 6 2 ;   M i r o   O ,   2 0 1 2 ,   E M E R G E N C I A S ,   V 2 4 ,   P 1 6 4 ;   M i r o   O ,   2 0 1 2 ,   E U R   J   E M E R G   M E D ,   V 1 9 ,   P 6 3 ,   D O I   1 0 . 1 0 9 7 / M E J . 0 b 0 1 3 e 3 2 8 3 4 7 4 9 a 0 ;   M i r o   O ,   2 0 1 1 ,   E M E R G E N C I A S ,   V 2 3 ,   P 2 6 1 ;   M i r o   O ,   2 0 1 0 ,   E M E R G E N C I A S ,   V 2 2 ,   P 4 0 1 ;   M i r o   O ,   2 0 0 8 ,   E M E R G E N C I A S ,   V 2 0 ,   P 3 0 8 ;   M i r o   O ,   2 0 1 0 ,   M E D   C L I N - B A R C E L O N A ,   V 1 3 5 ,   P 4 1 ,   D O I   1 0 . 1 0 1 6 / j . m e d c l i . 2 0 0 9 . 0 4 . 0 0 4 ;   M i r o   O ,   2 0 0 9 ,   T O X I C O L   L E T T ,   V 1 8 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . t o x l e t . 2 0 0 9 . 0 4 . 0 2 9 ;   N a v a r r e t e   C o r t e s   J ,   2 0 0 8 ,   M E D   C L I N   B A R C   S 5 ,   V 1 3 1 ,   P 7 1 ;   C e n a   D P ,   2 0 1 2 ,   E M E R G E N C I A S ,   V 2 4 ,   P 4 1 0 ;   P A N I C H K I T K O S O L K U L   W ,   2 0 0 9 ,   T H A I L A N D   S T A T I S T I C I A ,   V 7 ,   P 1 9 3 ;   S a l m e r o n   P P ,   2 0 1 2 ,   E M E R G E N C I A S ,   V 2 4 ,   P 2 3 4 ;   R e y n o l d s   J C ,   2 0 1 2 ,   A C A D   E M E R G   M E D ,   V 1 9 ,   P 1 2 4 8 ,   D O I   1 0 . 1 1 1 1 / a c e m . 1 2 0 1 7 ;   S a l g a d o   J F ,   2 0 0 7 ,   P S I C O T H E M A ,   V 1 9 ,   P 1 7 9 ;   S c h r e i b e r   M . ,   2 0 0 7 ,   C A S E   S T U D Y   H I R S C H   I N ;   S c i m a g o   G r u p o ,   2 0 0 7 ,   P R O F   I N F O R M ,   V 1 6 ,   P 4 7 ;   S h e n v i   C L ,   2 0 1 3 ,   E M E R G E N C I A S ,   V 2 5 ,   P 9 ;   P o n s   J M V ,   2 0 1 3 ,   M E D   C L I N - B A R C E L O N A ,   V 1 4 0 ,   P 3 2 5 ,   D O I   1 0 . 1 0 1 6 / j . m e d c l i . 2 0 1 2 . 1 0 . 0 1 1 	 4 3 	 1 7 	 1 8 	 1 	 9 	 S A N I D A D   E D I C I O N E S 	 M A D R I D 	 C A P I T A L   H A Y A ,   6 0 ,   M A D R I D ,   2 8 0 2 0 ,   S P A I N 	 1 1 3 7 - 6 8 2 1 	 	 	 E M E R G E N C I A S 	 E m e r g e n c i a s 	 A U G 	 2 0 1 3 	 2 5 	 4 	 	 	 	 	 2 4 5 	 2 5 4 	 	 	 	 1 0 	 E m e r g e n c y   M e d i c i n e 	 E m e r g e n c y   M e d i c i n e 	 1 9 4 C T 	 W O S : 0 0 0 3 2 2 6 0 9 3 0 0 0 0 3 	 	 
 
 J 	 D e   B a t t i s t i ,   F ;   S a l i n i ,   S 	 	 	 	 D e   B a t t i s t i ,   F r a n c e s c a ;   S a l i n i ,   S i l v i a 	 	 	 R o b u s t   a n a l y s i s   o f   b i b l i o m e t r i c   d a t a 	 S T A T I S T I C A L   M E T H O D S   A N D   A P P L I C A T I O N S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c   i n d i c a t o r s ;   M u l t i v a r i a t e   t r a n s f o r m a t i o n ;   C l u s t e r   a n a l y s i s ;   F o r w a r d   s e a r c h 	 W E B - O F - S C I E N C E ;   G O O G L E - S C H O L A R ;   S C O P U S ;   T R A N S F O R M A T I O N S ;   C O V E R A G E 	 T h i s   w o r k   s t e m s   f r o m   t h e   i d e a   o f   d e s c r i b i n g   t h e   s c i e n t i f i c   p r o d u c t i v i t y   o f   I t a l i a n   s t a t i s t i c i a n s .   T h e r e   a r e   s e v e r a l   p r o b l e m s   t h a t   m u s t   b e   a d d r e s s e d   i n   a c h i e v i n g   t h i s   g o a l :   W h a t   d a t a   s h o u l d   b e   u s e d ?   H a v e   t h e   d a t a   b e e n   c l e a n e d ?   W h a t   t e c h n i q u e s   c a n   b e   u s e d ?   W e   p r o p o s e   t h e   u s e   o f   m u l t i p l e   s o u r c e s   a n d   m u l t i p l e   m e t r i c s   t o   g e t   a   c o m p l e t e   i n f o r m a t i o n   b a s e .   W e   c h e c k   t h e   c o r r e c t n e s s   o f   t h e   d a t a   u s i n g   m u l t i v a r i a t e   o u t l i e r   i d e n t i f i c a t i o n   t e c h n i q u e s .   W e   a p p r o p r i a t e l y   t r a n s f o r m   t h e   d a t a .   W e   a p p l y   r o b u s t   c l u s t e r i n g   t o   v e r i f y   t h e   e x i s t e n c e   o f   h o m o g e n e o u s   g r o u p s .   W e   s u g g e s t   t h e   u s e   o f   f o r w a r d   s e a r c h   t o   e s t a b l i s h   a   r a n k i n g   a m o n g   s c h o l a r s .   T h e   p r o p o s e d   m e t h o d o l o g y ,   w h i c h ,   i n   t h i s   c a s e ,   a l l o w e d   u s   t o   g r o u p   s c h o l a r s   i n t o   f o u r   h o m o g e n e o u s   g r o u p s   a n d   s o r t   t h e m   a c c o r d i n g   t o   m u l t i d i m e n s i o n a l   d a t a ,   c a n   b e   a p p l i e d   t o   o t h e r   s i m i l a r   a p p l i c a t i o n s   i n   b i b l i o m e t r i c s . 	 [ D e   B a t t i s t i ,   F r a n c e s c a ;   S a l i n i ,   S i l v i a ]   U n i v   M i l a n ,   D e p t   E c o n   M a n a g e m e n t   &   Q u a n t i t a t   M e t h o d s ,   M i l a n ,   I t a l y 	 S a l i n i ,   S   ( r e p r i n t   a u t h o r ) ,   U n i v   M i l a n ,   D e p t   E c o n   M a n a g e m e n t   &   Q u a n t i t a t   M e t h o d s ,   M i l a n ,   I t a l y . 	 f r a n c e s c a . d e b a t t i s t i @ u n i m i . i t ;   s i l v i a . s a l i n i @ u n i m i . i t 	 	 S a l i n i   ,   S i l v i a / 0 0 0 0 - 0 0 0 1 - 6 1 0 6 - 9 8 3 5 	 	 	 A d l e r   R ,   2 0 0 9 ,   S T A T   S C I ,   V 2 4 ,   P 1 ,   D O I   1 0 . 1 2 1 4 / 0 9 - S T S 2 8 5 ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ;   R i a n i   M . ,   2 0 0 4 ,   E X P L O R I N G   M U L T I V A R I A ;   A t k i n s o n   A ,   2 0 0 0 ,   R O B U S T   D I A G N O S T I C   R E ;   A t k i n s o n   A C ,   2 0 0 7 ,   C O M P U T   S T A T   D A T A   A N ,   V 5 2 ,   P 2 7 2 ,   D O I   1 0 . 1 0 1 6 / j . c s d a . 2 0 0 6 . 1 2 . 0 3 4 ;   A t k i n s o n   A C ,   2 0 0 6 ,   D A T A   A N A L   C L A S S I F I C A ;   B a c c i n i   A . ,   2 0 0 9 ,   C H A N C E ,   V 2 2 ,   P 3 4 ;   B a c c i n i   A ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 8 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 1 . 0 1 2 ;   B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B A N F I E L D   J D ,   1 9 9 3 ,   B I O M E T R I C S ,   V 4 9 ,   P 8 0 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 3 2 2 0 1 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B O X   G E P ,   1 9 6 4 ,   J   R O Y   S T A T   S O C   B ,   V 2 6 ,   P 2 1 1 ;   D e   M o y a - A n e g o n   F ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 1 - 4 ;   E m e r s o n   J D ,   1 9 9 1 ,   F U N D A M E N T A L S   E X P L O R A ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F e r r a r a   A ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 3 ,   P 7 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 1 0 - x ;   F i l z m o s e r   P ,   2 0 0 8 ,   C O M P U T   S T A T   D A T A   A N ,   V 5 2 ,   P 1 6 9 4 ,   D O I   1 0 . 1 0 1 6 / j . c s d a . 2 0 0 7 . 0 5 . 0 1 8 ;   F r a l e y   C ,   2 0 0 2 ,   J   A M   S T A T   A S S O C ,   V 9 7 ,   P 6 1 1 ,   D O I   1 0 . 1 1 9 8 / 0 1 6 2 1 4 5 0 2 7 6 0 0 4 7 1 3 1 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 1 - 2 ;   G o d i n   B ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 8 6 - 0 ;   H i r s c h   E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S ,   V 1 0 2 ;   J a c s o   P ,   2 0 0 5 ,   O N L I N E   I N F O R M   R E V ,   V 2 9 ,   P 2 0 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 5 1 0 5 9 8 0 6 6 ;   K a t s a r o s   C ,   2 0 0 6 ,   G E N   H   I N D E X   D I S C L O S I ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M a r c h a n t   T . ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 2 7 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   N o r r i s   M ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 1 2 . 0 0 1 ;   R i v e l l i n i   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 3 ;   Y e o   I K ,   2 0 0 0 ,   B I O M E T R I K A ,   V 8 7 ,   P 9 5 4 ,   D O I   1 0 . 1 0 9 3 / b i o m e t / 8 7 . 4 . 9 5 4 	 2 9 	 1 7 	 1 8 	 2 	 1 8 	 S P R I N G E R   H E I D E L B E R G 	 H E I D E L B E R G 	 T I E R G A R T E N S T R A S S E   1 7 ,   D - 6 9 1 2 1   H E I D E L B E R G ,   G E R M A N Y 	 1 6 1 8 - 2 5 1 0 	 1 6 1 3 - 9 8 1 X 	 	 S T A T   M E T H O D   A P P L - G E R 	 S t a t .   M e t h o d .   A p p l . 	 J U N 	 2 0 1 3 	 2 2 	 2 	 	 	 	 	 2 6 9 	 2 8 3 	 	 1 0 . 1 0 0 7 / s 1 0 2 6 0 - 0 1 2 - 0 2 1 7 - 0 	 	 1 5 	 S t a t i s t i c s   &   P r o b a b i l i t y 	 M a t h e m a t i c s 	 1 7 1 T A 	 W O S : 0 0 0 3 2 0 9 5 0 8 0 0 0 0 8 	 	 
 
 J 	 U g o l i n i ,   D ;   N e r i ,   M ;   C e s a r i o ,   A ;   B o n a s s i ,   S ;   M i l a z z o ,   D ;   B e n n a t i ,   L ;   L a p e n n a ,   L M ;   P a s q u a l e t t i ,   P 	 	 	 	 U g o l i n i ,   D o n a t e l l a ;   N e r i ,   M o n i c a ;   C e s a r i o ,   A l f r e d o ;   B o n a s s i ,   S t e f a n o ;   M i l a z z o ,   D a n i e l e ;   B e n n a t i ,   L u c a ;   L a p e n n a ,   L u i s a   M a r i a ;   P a s q u a l e t t i ,   P a t r i z i o 	 	 	 S c i e n t i f i c   p r o d u c t i o n   i n   c a n c e r   r e h a b i l i t a t i o n   g r o w s   h i g h e r :   a   b i b l i o m e t r i c   a n a l y s i s 	 S U P P O R T I V E   C A R E   I N   C A N C E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e h a b i l i t a t i o n ;   N e o p l a s m s ;   P u b l i c a t i o n s ;   B i b l i o m e t r i c s 	 E U R O P E A N - U N I O N 	 T h e   a i m   o f   t h e   s t u d y   w a s   t o   e v a l u a t e   s c i e n t i f i c   p r o d u c t i o n   i n   t h e   f i e l d   o f   c a n c e r   r e h a b i l i t a t i o n   c o m p a r i n g   p u b l i c a t i o n   t r e n d s   a n d   i m p a c t   f a c t o r   ( I F )   a m o n g   c o u n t r i e s .   T h e   P u b M e d   d a t a b a s e   w a s   s e a r c h e d .   P u b l i c a t i o n s   n u m b e r s   a n d   I F   w e r e   e v a l u a t e d   b o t h   a s   a b s o l u t e   v a l u e s   a n d   a f t e r   s t a n d a r d i z a t i o n   b y   p o p u l a t i o n   a n d   g r o s s   d o m e s t i c   p r o d u c t   ( G D P ) .   A   d e d i c a t e d   s o f t w a r e   w a s   d e v e l o p e d   t o   c r e a t e   a   r e l a t i o n a l   d a t a b a s e   c o n t a i n i n g   a l l   i n f o r m a t i o n   a b o u t   c o n s i d e r e d   p u b l i c a t i o n s   ( R e s e a r c h   M a n a g e m e n t   S y s t e m ) .   S o m e   1 , 7 4 3   p u b l i c a t i o n s   w e r e   r e t r i e v e d   f r o m   1 9 6 7   t o   2 0 0 8 .   C a n c e r   r e h a b i l i t a t i o n   p u b l i c a t i o n s   h a v e   g r o w n   1 1 . 6   t i m e s ,   w h i l e   t h e   w h o l e   f i e l d   o f   d i s e a s e   r e h a b i l i t a t i o n   h a s   g r o w n   7 . 8   t i m e s .   B r e a s t   n e o p l a s m s ,   s q u a m o u s   c e l l   c a r c i n o m a ,   t r e a t m e n t   o u t c o m e ,   e n d o s s e o u s   d e n t a l   i m p l a n t a t i o n ,   f o l l o w - u p   s t u d i e s ,   a n d   s u r g i c a l   f l a p s   w e r e   t h e   m o s t   c o m m o n l y   u s e d   k e y w o r d s .   F r o m   1 9 9 4   t o   2 0 0 8 ,   9 4 6   c i t a t i o n s   w e r e   r e t r i e v e d :   3 6 . 8 %   c a m e   f r o m   t h e   E u r o p e a n   U n i o n   ( E U )   ( G e r m a n y ,   t h e   U K ,   a n d   t h e   N e t h e r l a n d s   r a n k i n g   a t   t h e   t o p )   a n d   3 6 . 9 %   f r o m   t h e   U S A .   T h e   h i g h e s t   m e a n   I F   w a s   r e p o r t e d   f o r   t h e   U S A   ( 3 . 3 8 4 )   f o l l o w e d   b y   C a n a d a   ( 3 . 2 6 5 )   a n d   A u s t r a l i a   ( 2 . 6 4 3 ) .   T h e   E U   h a s   a   m e a n   I F   o f   0 . 8 3 9   w i t h   t h e   N e t h e r l a n d s   r a n k i n g   f i r s t .   C a n a d a ,   A u s t r a l i a ,   a n d   t h e   U S A   h a d   t h e   b e s t   r a t i o   b e t w e e n   I F   ( s u m )   a n d   r e s i d e n t   p o p u l a t i o n   o r   G D P .   C a n c e r   r e h a b i l i t a t i o n   i s   a n   e x p a n d i n g   a r e a   w i t h   a   g r o w i n g   s c i e n t i f i c   p r o d u c t i o n .   T h e   r a p i d l y   a g e i n g   p o p u l a t i o n ,   t h e   h i g h e r   n u m b e r   o f   c a n c e r   s u r v i v o r s ,   a n d   t h e   i n c r e a s i n g   n e e d   o f   r e s o u r c e s   f o r   t h e   a f t e r   t r e a t m e n t   o f   c a n c e r   p a t i e n t s   c o n t r i b u t e   t o   e x p l a i n   t h e   i n t e r e s t   f o r   t h i s   f i e l d . 	 [ U g o l i n i ,   D o n a t e l l a ]   I s t   N a z l   R i c   C a n c ,   D i p a r t i m e n t o   O n c o l   B i o l   &   G e n e t ,   I - 1 6 1 3 2   G e n o a ,   I t a l y ;   [ U g o l i n i ,   D o n a t e l l a ;   B e n n a t i ,   L u c a ]   U n i v   G e n o a ,   D i p a r t i m e n t o   O n c o l   B i o l   &   G e n e t ,   G e n o a ,   I t a l y ;   [ U g o l i n i ,   D o n a t e l l a ]   N a t l   I n s t   C a n c   R e s ,   U n i t   E p i d e m i o l   &   B i o s t a t   &   C l i n   T r i a l s ,   G e n o a ,   I t a l y ;   [ N e r i ,   M o n i c a ;   B o n a s s i ,   S t e f a n o ]   S a n   R a f f a e l e   P i s a n a ,   U n i t   C l i n   &   M o l   E p i d e m i o l ,   R o m e ,   I t a l y ;   [ C e s a r i o ,   A l f r e d o ]   C a t h o l i c   U n i v ,   D i v   T h o r a c   S u r g ,   D e p t   G e n   S u r g ,   R o m e ,   I t a l y ;   [ C e s a r i o ,   A l f r e d o ]   I R C C S   S a n   R a f f a e l e   P i s a n a ,   R o m e ,   I t a l y ;   [ M i l a z z o ,   D a n i e l e ;   P a s q u a l e t t i ,   P a t r i z i o ]   S a n   G i o v a n n i   C a l i b i t a   F a t e b e n e f r a t e l l i   H o s p ,   F a t e b e n e f r a t e l l i   A s s o c   B i o m e d   R e s   A F a R ,   S e S M I T ,   R o m e ,   I t a l y ;   [ L a p e n n a ,   L u i s a   M a r i a ]   C D C   S a n   R a f f a e l e   V e l l e t r i ,   R o m e ,   I t a l y ;   [ P a s q u a l e t t i ,   P a t r i z i o ]   S a n   R a f f a e l e   C a s s i n o ,   U n i t   E p i d e m i o l   &   B i o s t a t ,   C a s s i n o ,   F R ,   I t a l y 	 U g o l i n i ,   D   ( r e p r i n t   a u t h o r ) ,   I s t   N a z l   R i c   C a n c ,   D i p a r t i m e n t o   O n c o l   B i o l   &   G e n e t ,   L a r g o   R   B e n z i   1 0 ,   I - 1 6 1 3 2   G e n o a ,   I t a l y . 	 d o n a t e l l a . u g o l i n i @ i s t g e . i t 	 P a s q u a l e t t i ,   P a t r i z i o / D - 4 4 9 6 - 2 0 1 3 ;   C E S A R I O ,   A l f r e d o / O - 4 2 1 5 - 2 0 1 5 ;   N e r i ,   M o n i c a / J - 6 3 0 8 - 2 0 1 2 ;   	 P a s q u a l e t t i ,   P a t r i z i o / 0 0 0 0 - 0 0 0 1 - 5 5 6 0 - 1 9 7 9 ;   C E S A R I O ,   A l f r e d o / 0 0 0 0 - 0 0 0 3 - 4 6 8 7 - 0 7 0 9 ;   N e r i ,   M o n i c a / 0 0 0 0 - 0 0 0 3 - 4 7 9 6 - 3 6 7 5 ;   b o n a s s i ,   s t e f a n o / 0 0 0 0 - 0 0 0 3 - 3 8 3 3 - 6 7 1 7 	 F o n d a z i o n e   B u z z i - U n i c e m   p e r   l a   R i c e r c a   s u l   M e s o t e l i o m a ;   U n i v e r s i t y   o f   G e n o a 	 T h i s   s t u d y   w a s   s u p p o r t e d   b y   g r a n t s   f u n d e d   b y   F o n d a z i o n e   B u z z i - U n i c e m   p e r   l a   R i c e r c a   s u l   M e s o t e l i o m a   a n d   U n i v e r s i t y   o f   G e n o a . 	 A k a i   M ,   2 0 0 4 ,   J   R E H A B I L   M E D ,   V 3 6 ,   P 1 4 5 ,   D O I   1 0 . 1 0 8 0 / 1 6 5 0 1 9 7 0 4 1 0 0 2 6 1 1 6 ;   B o h a n n o n   R   W ,   1 9 8 9 ,   A m   J   P h y s   M e d   R e h a b i l ,   V 6 8 ,   P 2 5 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 2 0 6 0 - 1 9 8 9 1 0 0 0 0 - 0 0 0 1 4 ;   B o h a n n o n   R   W ,   1 9 9 1 ,   I n t   J   R e h a b i l   R e s ,   V 1 4 ,   P 3 3 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 4 3 5 6 - 1 9 9 1 1 2 0 0 0 - 0 0 0 0 6 ;   C i m m i n o   M A ,   2 0 0 5 ,   O T O L A R Y N G   H E A D   N E C K ,   V 1 3 2 ,   P 2 9 5 ,   D O I   1 0 . 1 0 1 6 / j . o t o h n s . 2 0 0 4 . 0 9 . 0 2 6 ;   F a l a g a s   M E ,   2 0 0 5 ,   J   M E D   V I R O L ,   V 7 6 ,   P 2 2 9 ,   D O I   1 0 . 1 0 0 2 / j m v . 2 0 3 4 6 ;   G r o s s i   F ,   2 0 0 3 ,   E U R   J   C A N C E R ,   V 3 9 ,   P 1 0 6 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 2 3 9 - 3 ;   M e l a   G S ,   1 9 9 8 ,   A N N   R H E U M   D I S ,   V 5 7 ,   P 6 4 3 ,   D O I   1 0 . 1 1 3 6 / a r d . 5 7 . 1 1 . 6 4 3 ;   M i c h a l o p o u l o s   A ,   2 0 0 5 ,   C H E S T ,   V 1 2 8 ,   P 3 9 9 3 ,   D O I   1 0 . 1 3 7 8 / c h e s t . 1 2 8 . 6 . 3 9 9 3 ;   N a t i o n a l   L i b r a r y   o f   M e d i c i n e   B e t h e s d a   M D   U S A ,   2 0 0 5 ,   P U B M E D   M A N ;   R a h m a n   M ,   2 0 0 5 ,   A C A D   R A D I O L ,   V 1 2 ,   P 8 2 5 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 0 5 . 0 3 . 0 6 1 ;   S h a d g a n   B ,   2 0 1 0 ,   A R C H   P H Y S   M E D   R E H A B ,   V 9 ,   P 8 0 6 ;   [ A n o n y m o u s ] ,   2 0 0 6 ,   J   C I T   R E P ;   U g o l i n i   D ,   2 0 0 3 ,   E U R   J   C A N C E R ,   V 3 9 ,   P 1 8 8 8 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 3 ) 0 0 4 3 1 - 3 ;   U g o l i n i   D ,   2 0 0 2 ,   E U R   J   C A N C E R ,   V 3 8 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 8 0 4 9 ( 0 2 ) 0 0 0 2 5 - 4 ;   U g o l i n i   D ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 4 6 9 2 7 7 2 1 ;   U g o l i n i   D ,   2 0 0 7 ,   C A R C I N O G E N E S I S ,   V 2 8 ,   P 1 7 7 4 ,   D O I   1 0 . 1 0 9 3 / c a r c i n / b g m 1 2 9 ;   U g o l i n i   D ,   2 0 1 0 ,   L U N G   C A N C E R ,   V 7 0 ,   P 1 2 9 ,   D O I   1 0 . 1 0 1 6 / j . l u n g c a n . 2 0 1 0 . 0 1 . 0 1 3 ;   W H O ,   2 0 0 1 ,   I C F   I N T   C L A S S   F U N C T ;   W H O ,   2 0 1 0 ,   C A N C 	 1 9 	 1 7 	 1 8 	 1 	 3 0 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 9 4 1 - 4 3 5 5 	 1 4 3 3 - 7 3 3 9 	 	 S U P P O R T   C A R E   C A N C E R 	 S u p p o r t .   C a r e   C a n c e r 	 A U G 	 2 0 1 2 	 2 0 	 8 	 	 	 	 	 1 6 2 9 	 1 6 3 8 	 	 1 0 . 1 0 0 7 / s 0 0 5 2 0 - 0 1 1 - 1 2 5 3 - 2 	 	 1 0 	 O n c o l o g y ;   H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   R e h a b i l i t a t i o n 	 O n c o l o g y ;   H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   R e h a b i l i t a t i o n 	 9 7 0 L G 	 W O S : 0 0 0 3 0 6 1 2 9 6 0 0 0 0 5 	 2 1 8 8 1 9 1 0 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 A   f i e l d - s t a n d a r d i z e d   a p p l i c a t i o n   o f   D E A   t o   n a t i o n a l - s c a l e   r e s e a r c h   a s s e s s m e n t   o f   u n i v e r s i t i e s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   E f f i c i e n c y ;   D E A ;   B i b l i o m e t r i c s ;   U n i v e r s i t y ;   I t a l y 	 D A T A   E N V E L O P M E N T   A N A L Y S I S ;   R E S E A R C H   P R O D U C T I V I T Y ;   R E S E A R C H   P E R F O R M A N C E ;   E F F I C I E N C Y ;   D E P A R T M E N T S 	 T h e   c u r r e n t   w o r k   p r o p o s e s   a n   a p p l i c a t i o n   o f   D E A   m e t h o d o l o g y   f o r   m e a s u r e m e n t   o f   t e c h n i c a l   a n d   a l l o c a t i v e   e f f i c i e n c y   o f   u n i v e r s i t y   r e s e a r c h   a c t i v i t y .   T h e   a n a l y s i s   i s   b a s e d   o n   b i b l i o m e t r i c   d a t a   f r o m   t h e   I t a l i a n   u n i v e r s i t y   s y s t e m   f o r   t h e   f i v e - y e a r   p e r i o d   2 0 0 4 - 2 0 0 8 .   T e c h n i c a l   a n d   a l l o c a t i v e   e f f i c i e n c y   i s   m e a s u r e d   w i t h   i n p u t   b e i n g   c o n s i d e r e d   a s   a   u n i v e r s i t y ' s   r e s e a r c h   s t a f f ,   c l a s s i f i e d   a c c o r d i n g   t o   a c a d e m i c   r a n k ,   a n d   w i t h   o u t p u t   c o n s i d e r e d   a s   t h e   f i e l d - s t a n d a r d i z e d   i m p a c t   o f   t h e   r e s e a r c h   p r o d u c t   r e a l i z e d   b y   t h e s e   s t a f f .   T h e   a n a l y s i s   i s   a p p l i e d   t o   a l l   s c i e n t i f i c   d i s c i p l i n e s   o f   t h e   s o - c a l l e d   h a r d   s c i e n c e s ,   a n d   c o n d u c t e d   a t   s u b f i e l d   l e v e l ,   t h u s   a t   a   g r e a t e r   l e v e l   o f   d e t a i l   t h a n   e v e r   b e f o r e   a c h i e v e d   i n   n a t i o n a l - s c a l e   r e s e a r c h   a s s e s s m e n t s .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b b o t t   M ,   2 0 0 3 ,   E C O N   E D U C   R E V ,   V 2 2 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 7 7 5 7 ( 0 1 ) 0 0 0 6 8 - 1 ;   A b r a m o   G ,   2 0 0 6 ,   I N T   J   T E C H N O L O G Y   T R A ,   V 5 ,   P 3 3 8 ,   D O I   1 0 . 1 5 0 4 / I J T T C . 2 0 0 6 . 0 1 3 3 4 2 ;   A b r a m o   G ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 2 - 2 ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   A b r a m o   G ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 1 . 0 0 1 ;   A d a m s   J .   D . ,   1 9 9 8 ,   A N N   E C   S T A T ,   V 4 9 ,   P 1 2 7 ;   A H N   T ,   1 9 8 8 ,   S O C I O   E C O N   P L A N   S C I ,   V 2 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 8 - 0 1 2 1 ( 8 8 ) 9 0 0 0 8 - 0 ;   B E A S L E Y   J E ,   1 9 9 5 ,   J   O P E R   R E S   S O C ,   V 4 6 ,   P 4 4 1 ,   D O I   1 0 . 1 0 5 7 / j o r s . 1 9 9 5 . 6 3 ;   B o n a c c o r s i   A ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 4 7 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 7 2 6 ;   C o e l l i   T . ,   1 9 9 6 ,   9 6 0 8   C E P A ;   C o r o n a d o   D ,   2 0 0 5 ,   A N N   R E G I O N A L   S C I ,   V 3 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 6 8 - 0 0 4 - 0 2 2 5 - 6 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   G l a s s   J C ,   1 9 9 8 ,   J   P R O D   A N A L ,   V 1 0 ,   P 1 5 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 8 6 0 7 2 2 3 2 7 6 ;   J A F F E   A B ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 9 5 7 ;   J O H N E S   G ,   1 9 9 3 ,   O X F O R D   E C O N   P A P ,   V 4 5 ,   P 3 3 2 ;   K a o   C A ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 6 5 3 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 6 . 0 2 . 0 0 3 ;   L A C H   S ,   2 0 0 3 ,   9 7 2 7   N A T   B U R   E C   R E S ;   L a n g   W . ,   2 0 0 5 ,   R E G   S T U D   A S S   I N T   C   R ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   K e m p   S . ,   1 9 9 7 ,   E D   E C ,   V 5 ,   P 1 5 3 ,   D O I   [ 1 0 . 1 0 8 0 / 0 9 6 4 5 2 9 9 7 0 0 0 0 0 0 1 3 ,   D O I   1 0 . 1 0 8 0 / 0 9 6 4 5 2 9 9 7 0 0 0 0 0 0 1 3 ] ;   M e n g   W ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 9 5 0 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 7 . 1 2 . 0 0 5 ;   * M I U R ,   2 0 0 9 ,   D E C   R A P P   S T A T   S I S T   U ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   S a a t y   T . L . ,   2 0 0 0 ,   M O D E L S   M E T H O D S   C O N C E ;   T o m k i n s   C . ,   1 9 8 8 ,   F I N   A C C O U N T A B I L I T Y   M ,   V 4 ,   P 1 4 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 4 0 8 . 1 9 8 8 . t b 0 0 0 6 6 . x ;   * U G C ,   1 9 8 6 ,   4 8 6   U G C   L I B   D E P   E D   3 ;   V a n   L o o y   B ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 5 9 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 2 . 0 0 3 ;   * V T R ,   2 0 0 6 ,   V T R   2 0 0 1   2 0 0 3   R I S   V A ;   X U   J ,   2 0 0 9 ,   T S I N G H U A   J   E D ,   V 2 ;   Y A N G   Z ,   2 0 0 9 ,   I N T   C   I N F   M A N   I N N   M A ,   P 4 0 0 	 3 2 	 1 7 	 1 7 	 7 	 4 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 1 	 5 	 4 	 	 	 	 	 6 1 8 	 6 2 8 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 1 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 4 1 P I 	 W O S : 0 0 0 2 9 6 5 2 4 2 0 0 0 1 3 	 	 
 
 J 	 P r a t h a p ,   G 	 	 	 	 P r a t h a p ,   G a n g a n 	 	 	 Q u a s i t y ,   w h e n   q u a n t i t y   h a s   a   q u a l i t y   a l l   o f   i t s   o w n - t o w a r d   a   t h e o r y   o f   p e r f o r m a n c e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 Q u a l i t y ;   Q u a n t i t y ;   Q u a s i t y ;   P e r f o r m a n c e ;   B i b l i o m e t r i c s ;   p - i n d e x ;   E n e r g y - i n d e x ;   X   =   l O   =   l ( 2 ) I 	 I N D E X 	 Q u a l i t y ,   Q u a n t i t y ,   P e r f o r m a n c e , a E u r o   b r o k e n   v e r t i c a l   b a r   A n   u n r e s o l v e d   c h a l l e n g e   i n   p e r f o r m a n c e   e v a l u a t i o n   i n   a   v e r y   g e n e r a l   c o n t e x t   t h a t   g o e s   b e y o n d   s c i e n t o m e t r i c s ,   h a s   b e e n   t o   d e t e r m i n e   a   s i n g l e   i n d i c a t o r   t h a t   c a n   c o m b i n e   q u a l i t y   a n d   q u a n t i t y   o f   o u t p u t   o r   o u t c o m e .   T o w a r d   t h i s   e n d ,   w e   s t a r t   f r o m   m e t a p h y s i c a l   c o n s i d e r a t i o n s   a n d   p r o p o s e   i n t r o d u c i n g   a   n e w   n a m e   c a l l e d   Q u a s i t y   t o   d e s c r i b e   t h o s e   q u a n t i t y   t e r m s   w h i c h   i n c o r p o r a t e   a   d e g r e e   o f   q u a l i t y   a n d   b e s t   m e a s u r e s   t h e   o u t p u t .   T h e   p r o d u c t   o f   q u a l i t y   a n d   q u a s i t y   t h e n   b e c o m e s   a n   e n e r g y   t e r m   w h i c h   s e r v e s   a s   a   p e r f o r m a n c e   i n d i c a t o r .   L e s s o n s   f r o m   k i n e t i c s ,   b i b l i o m e t r i c s   a n d   s p o r t o m e t r i c s   a r e   u s e d   t o   b u i l d   u p   t h i s   t h e m e . 	 C S I R   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a 	 P r a t h a p ,   G   ( r e p r i n t   a u t h o r ) ,   C S I R   N a t l   I n s t   S c i   C o m m u n   &   I n f o r m a t   R e s o u r c e s ,   N e w   D e l h i   1 1 0 0 1 2 ,   I n d i a . 	 g p @ c m m a c s . e r n e t . i n 	 P r a t h a p ,   G a n g a n / C - 1 1 7 3 - 2 0 0 9 	 P r a t h a p ,   G a n g a n / 0 0 0 0 - 0 0 0 3 - 1 4 7 2 - 6 3 5 8 	 	 	 G L A N Z E L   W ,   2 0 0 8 ,   S O M E   N E W   B I B L I O M E T R I ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   P r a t h a p   G ,   2 0 1 0 ,   C U R R   S C I   I N D I A ,   V 9 9 ,   P 1 6 3 9 ;   P r a t h a p   G ,   2 0 1 1 ,   C U R R   S C I   I N D I A ,   V 1 0 0 ,   P 8 ;   P r a t h a p   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 6 6 - 2 ;   T e r a l l   G ,   2 0 0 4 ,   H I S T   S C I ,   V 4 2 ,   P 1 8 9 	 6 	 1 7 	 1 7 	 0 	 1 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A U G 	 2 0 1 1 	 8 8 	 2 	 	 	 	 	 5 5 5 	 5 6 2 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 0 1 - 2 	 	 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 5 E O 	 W O S : 0 0 0 2 9 2 2 1 0 4 0 0 0 1 4 	 	 
 
 J 	 C h o i ,   D G ;   L e e ,   H ;   S u n g ,   T K 	 	 	 	 C h o i ,   D o n g   G e u n ;   L e e ,   H e e s a n g ;   S u n g ,   T a e - k y u n g 	 	 	 R e s e a r c h   p r o f i l i n g   f o r   ' s t a n d a r d i z a t i o n   a n d   i n n o v a t i o n ' 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S t a n d a r d i z a t i o n ;   I n n o v a t i o n ;   P u b l i c a t i o n   a n a l y s i s ;   C l u s t e r i n g   a n a l y s i s ;   T a x o n o m y ;   R e s e a r c h   p r o f i l i n g ;   B i b l i o m e t r i c s 	 I N T E L L E C T U A L   P R O P E R T Y - R I G H T S ;   S C I E N C E - A N D - T E C H N O L O G Y ;   D O M I N A N T   D E S I G N S ;   T E C H N I C A L   I N N O V A T I O N S ;   S E T T I N G   O R G A N I Z A T I O N S ;   I N F O R M A T I O N - S Y S T E M S ;   I N D U S T R Y   S T A N D A R D S ;   E M P I R I C A L - A N A L Y S I S ;   Q U A L I T Y   S T A N D A R D S ;   P E R F O R M A N C E 	 T h i s   p a p e r   a d d r e s s e s   t h e   p r o f i l i n g   o f   r e s e a r c h   p a p e r s   o n   ' s t a n d a r d i z a t i o n   a n d   i n n o v a t i o n ' - e x p l o r i n g   m a j o r   t o p i c s   a n d   a r g u m e n t s   i n   t h i s   f i e l d .   D r a w i n g   o n   5 2 8   p a p e r s   r e t r i e v e d   f r o m   t h e   d a t a b a s e ,   W e b   o f   S c i e n c e ,   w e   e m p l o y e d   t r e n d ,   f a c t o r ,   a n d   c l u s t e r i n g   a n a l y s e s   t o   d e m o n s t r a t e   t h a t   t h e   s t a n d a r d i z a t i o n   a n d   i n n o v a t i o n   r e s e a r c h   h a s   c o n t i n u o u s l y   g r o w n   f r o m   p u b l i c a t i o n   o f   1 3   p a p e r s   i n   1 9 9 5   t o   6 8   p a p e r s   i n   2 0 0 8 ;   t h e   m a j o r i t y   o f   t h e s e   p a p e r s   h a v e   b e e n   p u b l i s h e d   i n   t h e   s i x   s u b j e c t   g r o u p   d o m a i n s   o f   m a n a g e m e n t ,   e c o n o m i c s ,   e n v i r o n m e n t ,   c h e m i s t r y ,   c o m p u t e r   s c i e n c e ,   a n d   t e l e c o m m u n i c a t i o n s .   T e c h n o l o g y   i n n o v a t i o n   m a n a g e m e n t   s p e c i a l t y   j o u r n a l s   a r e   t h e   m o s t   c e n t r a l   s o u r c e s   f a v o r a b l e   f o r   t h e s e   t h e m e s .   W e   a l s o   p r e s e n t   a n   e x p l o r a t o r y   t a x o n o m y   t h a t   o f f e r s   n i n e   t o p i c a l   c l u s t e r s   t o   d e m o n s t r a t e   t h e   c o n t e x t u a l   s t r u c t u r e s   o f   s t a n d a r d i z a t i o n   a n d   i n n o v a t i o n .   T h e   i m p l i c a t i o n s   o f   o u r   r e s u l t s   f o r   o n g o i n g   c o n s i s t e n t   p o l i c y   a n d   f u t u r e   r e s e a r c h   i n t o   s t a n d a r d i z a t i o n   a n d   i n n o v a t i o n   a r e   d i s c u s s e d . 	 [ C h o i ,   D o n g   G e u n ]   K o r e a n   S t a n d   A s s o c ,   S t a n d   &   Q u a l   D i v ,   S e o u l   1 3 5 5 1 3 ,   S o u t h   K o r e a ;   [ L e e ,   H e e s a n g ]   S u n g k y u n k w a n   U n i v ,   D e p t   M a n a g e m e n t   T e c h n o l ,   S u w o n   4 4 0 7 4 6 ,   G y e o n g i   D o ,   S o u t h   K o r e a ;   [ S u n g ,   T a e - k y u n g ]   J e o n j u   U n i v ,   S c h   M a n a g e m e n t ,   J e o n j u   5 6 0 7 5 9 ,   S o u t h   K o r e a 	 L e e ,   H   ( r e p r i n t   a u t h o r ) ,   S u n g k y u n k w a n   U n i v ,   D e p t   M a n a g e m e n t   T e c h n o l ,   S u w o n   4 4 0 7 4 6 ,   G y e o n g i   D o ,   S o u t h   K o r e a . 	 d g c h o i @ k s a . o r . k r ;   l e e h e e @ s k k u . e d u ;   s u n g t k @ j j . a c . k r 	 C h o i ,   D o n g - G e u n / F - 2 9 9 2 - 2 0 1 1 	 	 M E S T   [ 2 0 0 8 - 0 0 5 8 4 5 9 ] 	 T h i s   w o r k   w a s   p a r t i a l l y   s u p p o r t e d   b y   M i d - c a r e e r   R e s e a r c h e r   P r o g r a m   t h r o u g h   N R F   g r a n t   f u n d e d   b y   t h e   M E S T   ( n o .   2 0 0 8 - 0 0 5 8 4 5 9 ) . 	 A b r a h a m s o n   E ,   1 9 9 7 ,   O R G A N   S C I ,   V 8 ,   P 2 8 9 ,   D O I   1 0 . 1 2 8 7 / o r s c . 8 . 3 . 2 8 9 ;   A l l e n   R H ,   2 0 0 0 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 4 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 9 9 ) 0 0 1 0 4 - 3 ;   A l l r e d   B B ,   2 0 0 7 ,   J   I N T   B U S   S T U D ,   V 3 8 ,   P 8 7 8 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 3 0 6 ;   B e k k e r s   R ,   2 0 0 2 ,   T E L E C O M M U N   P O L I C Y ,   V 2 6 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 8 - 5 9 6 1 ( 0 2 ) 0 0 0 0 7 - 1 ;   B e n d e r   G ,   1 9 9 9 ,   Z   S O Z I O L ,   V 2 8 ,   P 7 7 ;   B E N N E T T   J A ,   1 9 9 4 ,   T R A N S M   D I S T R   C   1 0   1 5 ,   P 4 0 4 ;   B l i n d   K ,   2 0 0 3 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 0 ,   P 6 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 2 9 - 5 ;   B l i n d   K n u t ,   2 0 0 9 ,   I N A U G U R A L   A D D R E S S   S E ;   B o u r r e a u   M ,   2 0 0 1 ,   T E L E C O M M U N   P O L I C Y ,   V 2 5 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 8 - 5 9 6 1 ( 0 0 ) 0 0 0 8 7 - 2 ;   B r a a   J ,   2 0 0 7 ,   M I S   Q U A R T ,   V 3 1 ,   P 3 8 1 ;   B r a u n   T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 3 3 - 3 ;   B r u n n e r m e i e r   S B ,   2 0 0 3 ,   J   E N V I R O N   E C O N   M A N A G ,   V 4 5 ,   P 2 7 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 5 - 0 6 9 6 ( 0 2 ) 0 0 0 5 8 - X ;   C h o u n g   J Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 4 1 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 6 6 0 6 5 9 5 ;   C o l e   R E ,   2 0 0 7 ,   C A L I F   M A N A G E   R E V ,   V 5 0 ,   P 7 7 ;   D e b a c k e r e   K ,   1 9 9 7 ,   R & D   M A N A G E ,   V 2 7 ,   P 1 9 7 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 3 1 0 . 0 0 0 5 7 ;   D E V R I E S   H J ,   2 0 0 1 ,   S T A N D   I N N   I N F   T E C H N ,   P 9 1 ;   * D I U S ,   2 0 0 9 ,   U R N 2 2 4 0 9 I N O N   D I U S ;   D r a h o s   P ,   2 0 0 4 ,   I N F   E C O N   P O L I C Y ,   V 1 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i n f o e c o p o l . 2 0 0 3 . 0 9 . 0 0 1 ;   E G Y E D I   T M J ,   2 0 0 8 ,   I N N O V A T I O N S   N G N   F U T U ,   P 1 2 7 ;   E h r h a r d t   M ,   2 0 0 4 ,   I N T   J   T E C H N O L   M A N A G E ,   V 2 7 ,   P 2 7 2 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 4 . 0 0 3 9 5 6 ;   E n c a o u a   D ,   2 0 0 2 ,   O X F O R D   R E V   E C O N   P O L ,   V 1 8 ,   P 6 3 ,   D O I   1 0 . 1 0 9 3 / o x r e p / 1 8 . 1 . 6 3 ;   F A R R E L L   J ,   1 9 8 5 ,   R A N D   J   E C O N ,   V 1 6 ,   P 7 0 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 5 5 8 9 ;   F u n k   J L ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 5 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 9 5 - 0 ;   G a l l a g h e r   S ,   2 0 0 7 ,   I E E E   T   E N G   M A N A G E ,   V 5 4 ,   P 3 7 1 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 7 . 8 9 3 9 9 1 ;   G a l v i n   P ,   2 0 0 8 ,   I N T   J   T E C H N O L   M A N A G E ,   V 4 2 ,   P 4 2 6 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 8 . 0 1 9 3 8 4 ;   G a m b e r   T ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 5 - 4 ;   G a n n   D M ,   1 9 9 8 ,   B U I L D   R E S   I N F ,   V 2 6 ,   P 2 8 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G a u f f r i a u   M ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 1 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 0 0 - 2 ;   H a u s m a n   J ,   2 0 0 6 ,   J   E C O N   S U R V ,   V 2 0 ,   P 4 9 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 1 9 . 2 0 0 6 . 0 0 2 5 8 . x ;   H u r m e l i n n a   P ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 1 3 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 5 . 0 9 . 0 1 1 ;   J u n q u e r a   B ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 4 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 9 - 9 ;   K a n j i   G K ,   1 9 9 8 ,   T O T A L   Q U A L   M A N A G E ,   V 9 ,   P 6 7 ;   K a n o   S ,   2 0 0 0 ,   T E L E C O M M U N   P O L I C Y ,   V 2 4 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 8 - 5 9 6 1 ( 0 0 ) 0 0 0 2 0 - 3 ;   K i m   J B ,   2 0 0 6 ,   I N T   J   T E C H N O L   M A N A G E ,   V 3 6 ,   P 2 9 5 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 0 6 . 0 1 0 2 6 8 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K o s t o f f   R N ,   2 0 0 7 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 4 ,   P 1 5 7 4 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 2 . 0 0 9 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   L e e   C ,   2 0 0 8 ,   C O M P U T E R ,   V 4 1 ,   P 5 0 ,   D O I   1 0 . 1 1 0 9 / M C . 2 0 0 8 . 4 6 8 ;   L e m l e y   M A ,   2 0 0 2 ,   C A L I F   L A W   R E V ,   V 9 0 ,   P 1 8 8 9 ,   D O I   1 0 . 2 3 0 7 / 3 4 8 1 4 3 7 ;   L i m   A S ,   2 0 0 8 ,   E L E C T R O N   C O M M E R   R   A ,   V 7 ,   P 2 0 2 ,   D O I   1 0 . 1 0 1 6 / j . e l e r a p . 2 0 0 7 . 0 5 . 0 0 3 ;   L i n   C H ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 9 6 - 9 ;   L i n k   S ,   2 0 0 6 ,   I E E E   T   E N G   M A N A G E ,   V 5 3 ,   P 5 0 8 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 6 . 8 8 3 7 0 4 ;   L i n t o n   J ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 6 . 0 1 . 0 0 2 ;   L i n t o n   J D ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 9 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 6 . 1 2 . 0 0 1 ;   L i n t o n   J D ,   2 0 0 9 ,   T E C H N O V A T I O N ,   V 2 9 ,   P 6 4 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 9 . 0 7 . 0 0 1 ;   M ' B a r e k   S ,   2 0 0 3 ,   J   B I O L   C H E M ,   V 2 7 8 ,   P 3 1 0 9 5 ,   D O I   1 0 . 1 0 7 4 / j b c . M 3 0 4 2 7 1 2 0 0 ;   M a r k u s   L ,   2 0 0 6 ,   M I S   Q U A R T ,   V 3 0 ,   P 4 3 9 ;   M a x w e l l   J W ,   1 9 9 8 ,   E C O N   L E T T ,   V 5 8 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 1 7 6 5 ( 9 7 ) 0 0 2 9 3 - 0 ;   M c K e o w n   M . ,   2 0 0 8 ,   T R U T H   I N N O V A T I O N ;   M e r r i l l   T W ,   2 0 0 0 ,   Y A L E   L A W   J ,   V 1 1 0 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 7 9 7 5 8 6 ;   M o n t e r o   J P ,   2 0 0 2 ,   J   E N V I R O N   E C O N   M A N A G ,   V 4 4 ,   P 2 3 ,   D O I   1 0 . 1 0 0 6 / j e e m . 2 0 0 1 . 1 1 9 4 ;   M u r m a n n   J P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 9 2 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 4 . 0 1 1 ;   N a v e h   E ,   2 0 0 4 ,   I E E E   T   E N G   M A N A G E ,   V 5 1 ,   P 3 5 2 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 4 . 8 3 0 8 6 4 ;   P a r r y   I W H ,   1 9 9 8 ,   J   R E G U L   E C O N ,   V 1 4 ,   P 2 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 0 7 9 2 2 3 0 3 3 ;   P f i s t e r e r   J ,   2 0 0 7 ,   P A T H O L O G E ,   V 2 8 ,   P 2 2 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 9 2 - 0 0 7 - 0 9 0 7 - 9 ;   P o r t e r   A L ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 5 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 7 3 0 2 9 2 5 8 ;   R a n a l l i   A ,   2 0 0 3 ,   J   A G R   F O O D   C H E M ,   V 5 1 ,   P 2 5 9 7 ,   D O I   1 0 . 1 0 2 1 / j f 0 2 6 1 7 6 x ;   R e n n i n g s   K ,   2 0 0 6 ,   E C O L   E C O N ,   V 5 7 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 5 . 0 3 . 0 1 3 ;   R I L L I O   C A F ,   2 0 0 9 ,   2 0 0 9   E U R A S   C   F R A N C ,   P 2 7 9 ;   R o v a t i   F S ,   2 0 0 0 ,   I E E E   T   C O N S U M   E L E C T R ,   V 4 6 ,   P 6 9 7 ,   D O I   1 0 . 1 1 0 9 / 3 0 . 8 8 3 4 3 4 ;   R y s m a n   M ,   2 0 0 8 ,   M A N A G E   S C I ,   V 5 4 ,   P 1 9 2 0 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 8 0 . 0 9 1 9 ;   S a h a y   A ,   2 0 0 3 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 0 ,   P 3 3 8 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 5 8 8 5 . 0 0 0 3 3 ;   S e d l a c e k   G ,   2 0 0 6 ,   J   C O N S T R   S T E E L   R E S ,   V 6 2 ,   P 1 0 4 7 ,   D O I   1 0 . 1 0 1 6 / j . j c s r . 2 0 0 6 . 0 6 . 0 2 7 ;   S u n   Y ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 6 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 7 9 - 7 ;   S u n g   T K ,   2 0 0 8 ,   A S I A N   J   T E C H N O L   I N N O ,   V 1 6 ,   P 1 5 3 ,   D O I   1 0 . 1 0 8 0 / 1 9 7 6 1 5 9 7 . 2 0 0 8 . 9 6 6 8 6 6 1 ;   S w a n n   G . ,   2 0 0 0 ,   E C   S T A N D A R D I Z A T I O N   F ;   T a s s e y   G ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 5 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 9 1 - 8 ;   T e e c e   D J ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 1 3 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 0 9 ;   T e t h e r   B S ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 1 1 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 1 3 3 - 5 ;   U n n e v e h r   L J ,   1 9 9 6 ,   A M   J   A G R   E C O N ,   V 7 8 ,   P 7 6 4 ,   D O I   1 0 . 2 3 0 7 / 1 2 4 3 3 0 1 ;   U z u n   A ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 5 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 4 0 - 1 ;   V a l l a n c e   C ,   2 0 0 5 ,   N E W   J   C H E M ,   V 2 9 ,   P 8 6 7 ,   D O I   1 0 . 1 0 3 9 / b 5 0 4 6 2 8 a ;   V e g l i o   F ,   2 0 0 3 ,   P R O C E S S   B I O C H E M ,   V 3 8 ,   P 9 5 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 3 2 - 9 5 9 2 ( 0 2 ) 0 0 2 3 5 - 2 ;   V e r m a n   L C ,   1 9 7 3 ,   S T A N D A R D I Z A T I O N   N E W ;   Y o o   Y ,   2 0 0 5 ,   J   S T R A T E G I C   I N F   S Y S T ,   V 1 4 ,   P 3 2 3 ,   D O I   1 0 . 1 0 1 6 / j . j s i s . 2 0 0 5 . 0 7 . 0 0 7 ;   Y U E N   H ,   2 0 0 0 ,   N A T L   U   S I N G A P O R E   D E P ;   Z h u   K ,   2 0 0 6 ,   M I S   Q U A R T ,   V 3 0 ,   P 5 1 5 	 7 8 	 1 7 	 1 7 	 3 	 4 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 2 0 1 1 	 8 8 	 1 	 	 	 	 	 2 5 9 	 2 7 8 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 4 4 - 7 	 	 2 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 5 E M 	 W O S : 0 0 0 2 9 2 2 1 0 2 0 0 0 1 7 	 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 T h e   d a n g e r s   o f   p e r f o r m a n c e - b a s e d   r e s e a r c h   f u n d i n g   i n   n o n - c o m p e t i t i v e   h i g h e r   e d u c a t i o n   s y s t e m s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P e r f o r m a n c e - b a s e d   r e s e a r c h   f u n d i n g ;   R e s e a r c h   a s s e s s m e n t   e x e r c i s e s ;   P e r f o r m a n c e   v a r i a b i l i t y ;   U n i v e r s i t y ;   B i b l i o m e t r i c s ;   T o p   s c i e n t i s t s ;   I t a l y 	 U N I V E R S I T Y - R E S E A R C H 	 A n   i n c r e a s i n g   n u m b e r   o f   n a t i o n s   a l l o c a t e   p u b l i c   f u n d s   t o   r e s e a r c h   i n s t i t u t i o n s   o n   t h e   b a s i s   o f   r a n k i n g s   o b t a i n e d   f r o m   n a t i o n a l   e v a l u a t i o n   e x e r c i s e s .   T h e r e f o r e ,   i n   n o n - c o m p e t i t i v e   h i g h e r   e d u c a t i o n   s y s t e m s   w h e r e   t o p   s c i e n t i s t s   a r e   d i s p e r s e d   a m o n g   a l l   t h e   u n i v e r s i t i e s ,   r a t h e r   t h a n   c o n c e n t r a t e d   a m o n g   a   f e w ,   t h e r e   i s   a   h i g h   r i s k   o f   p e n a l i z i n g   t h o s e   t o p   s c i e n t i s t s   w h o   w o r k   i n   l o w e r - p e r f o r m a n c e   u n i v e r s i t i e s .   U s i n g   a   5   y e a r   b i b l i o m e t r i c   a n a l y s i s   c o n d u c t e d   o n   a l l   I t a l i a n   u n i v e r s i t i e s   a c t i v e   i n   t h e   h a r d   s c i e n c e s   f r o m   2 0 0 4   t o   2 0 0 8 ,   t h i s   w o r k   a n a l y z e s   t h e   d i s t r i b u t i o n   o f   p u b l i c a t i o n s   a n d   r e l e v a n t   c i t a t i o n s   b y   s c i e n t i s t s   w i t h i n   t h e   u n i v e r s i t i e s ,   m e a s u r e s   t h e   r e s e a r c h   p e r f o r m a n c e   o f   i n d i v i d u a l   s c i e n t i s t s ,   q u a n t i f i e s   t h e   i n t e n s i t y   o f   c o n c e n t r a t i o n   o f   t o p   s c i e n t i s t s   a t   e a c h   u n i v e r s i t y ,   p r o v i d e s   p e r f o r m a n c e   r a n k i n g s   f o r   t h e   u n i v e r s i t i e s ,   a n d   i n d i c a t e s   t h e   e f f e c t s   o f   s e l e c t i v e   f u n d i n g   o n   t h e   t o p   s c i e n t i s t s   o f   l o w - r a n k e d   u n i v e r s i t i e s . 	 [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 3 3   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   R e s   C o u n c i l   I t a l y ,   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A B R A M O   G ,   2 0 1 0 ,   D I S P E R S I O N   R E S   P E R F O ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   A u r a n e n   O ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 8 2 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 3 . 0 0 3 ;   B H A T T A C H A R Y A   A ,   2 0 0 8 ,   A L L O C A T I V E   E F F I C I E N C ;   B u t l e r   L ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 0 7 - 0 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   D e b a c k e r e   K ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 5 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 3 2 . 7 0 1 4 6 . 0 2 ;   G E O R G H I O U   L ,   2 0 0 5 ,   R E P   B E R L   I N T   W O R K S H ;   G e u n a   A ,   2 0 0 3 ,   M I N E R V A ,   V 4 1 ,   P 2 7 7 ,   D O I   1 0 . 1 0 2 3 / B : M I N E . 0 0 0 0 0 0 5 1 5 5 . 7 0 8 7 0 . b d ;   G l a n z e l   W . ,   2 0 0 8 ,   P   W I S   4   I N T   C   W E B   I N ;   L a n g f o r d   C H ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 5 8 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 2 1 ;   L a u d e l   G . ,   2 0 0 6 ,   S C I   P U B L   P O L I C Y ,   V 3 3 ,   P 4 8 9 ,   D O I   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 6 7 8 1 7 7 8 7 7 7 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H F ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 1 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 8 - 1 ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   O r r   D . ,   2 0 0 7 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 2 9 ,   P 3 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 0 0 8 0 0 6 0 0 9 8 0 0 7 2 ;   R o u s s e a u   R ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 7 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 5 1 4 2 9 3 6 8 ;   S H A T T O C K   M ,   2 0 0 4 ,   P E R S P E C T I V E S   P O L I C Y ,   V 8 ,   P 1 1 9 ;   S t r e h l   F . ,   2 0 0 7 ,   O E C D   E D   W O R K I N G   P A P E ,   D O I   [ 1 0 . 1 7 8 7 / 2 2 0 2 4 4 8 0 1 4 1 7 ,   D O I   1 0 . 1 7 8 7 / 2 2 0 2 4 4 8 0 1 4 1 7 ] ;   V T R ,   2 0 0 6 ,   I T   T R I E N N   R E S   E V   V T R 	 2 1 	 1 7 	 1 8 	 3 	 3 3 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 1 1 	 8 7 	 3 	 	 	 	 	 6 4 1 	 6 5 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 5 - 4 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 3 P S 	 W O S : 0 0 0 2 8 9 7 9 2 6 0 0 0 1 3 	 	 
 
 J 	 B j u r s t r o m ,   A ;   P o l k ,   M 	 	 	 	 B j u r s t r o m ,   A n d r e a s ;   P o l k ,   M e r r i t t 	 	 	 C l i m a t e   c h a n g e   a n d   i n t e r d i s c i p l i n a r i t y :   a   c o - c i t a t i o n   a n a l y s i s   o f   I P C C   T h i r d   A s s e s s m e n t   R e p o r t 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C l i m a t e   r e s e a r c h ;   I P C C ;   I n t e r d i s c i p l i n a r y ;   M u l t i d i s c i p l i n a r y ;   B i b l i o m e t r i c s 	 G L O B A L   E N V I R O N M E N T A L - C H A N G E ;   I N T E R N A T I O N A L   C O L L A B O R A T I O N ;   I N T E R G O V E R N M E N T A L   P A N E L ;   S U S T A I N A B L E   D E V E L O P M E N T ;   S C I E N C E ;   K N O W L E D G E ;   T R A N S D I S C I P L I N A R I T Y ;   N A N O T E C H N O L O G Y ;   D I S C I P L I N E S ;   N E T W O R K S 	 T h i s   s t u d y   a d d r e s s e s   w h e t h e r   i n t e r d i s c i p l i n a r i t y   i s   a   p r o m i n e n t   f e a t u r e   o f   c l i m a t e   r e s e a r c h   b y   m e a n s   o f   a   c o - c i t a t i o n   a n a l y s i s   o f   t h e   I P C C   T h i r d   A s s e s s m e n t   R e p o r t .   T h e   d e b a t e   o n   i n t e r d i s c i p l i n a r i t y   a n d   b i b l i o m e t r i c   m e a s u r e s   i s   r e v i e w e d   t o   o p e r a t i o n a l i z e   t h e   c o n t e s t e d   n o t i o n   o f   i n t e r d i s c i p l i n a r i t y .   T h e   r e s u l t s ,   b a s e d   o n   6 4 1 7   r e f e r e n c e s   o f   t h e   9 6   m o s t   f r e q u e n t l y   u s e d   j o u r n a l s ,   d e m o n s t r a t e   t h a t   t h e   I P C C   a s s e s s m e n t   o f   c l i m a t e   c h a n g e   i s   b e s t   c h a r a c t e r i z e d   b y   i t s   m u l t i d i s c i p l i n a r i t y   w h e r e   t h e   p h y s i c a l ,   b i o l o g i c a l ,   b o d i l y   a n d   s o c i e t a l   d i m e n s i o n s   a r e   c l e a r l y   s e p a r a t e d .   A l t h o u g h   a   f e w   f i e l d s   a n d   j o u r n a l s   i n t e g r a t e   a   w i d e   v a r i e t y   o f   d i s c i p l i n e s ,   i n t e g r a t i o n   o c c u r s   m a i n l y   b e t w e e n   r e l a t e d   d i s c i p l i n e s   ( n a r r o w   i n t e r d i s c i p l i n a r i t y )   w h i c h   i n d i c a t e   a n   o v e r a l l   d i s c i p l i n a r y   b a s i s   o f   c l i m a t e   r e s e a r c h .   I t   i s   c o n c l u d e d   t h a t   i n t e r d i s c i p l i n a r i t y   i s   n o t   a   p r o m i n e n t   f e a t u r e   o f   c l i m a t e   r e s e a r c h .   T h e   s i g n i f i c a n c e   o f   t h i s   f i n d i n g   i s   e x p l o r e d ,   g i v e n   t h a t   t h e   p r o b l e m   s c o p e   o f   c l i m a t e   c h a n g e   n e c e s s i t a t e s   i n t e r d i s c i p l i n a r i t y .   W a y s   t o   p r o m o t e   i n t e r d i s c i p l i n a r i t y   a r e   s u g g e s t e d   b y   w a y   o f   c o n c l u s i o n . 	 [ B j u r s t r o m ,   A n d r e a s ;   P o l k ,   M e r r i t t ]   U n i v   G o t h e n b u r g ,   S c h   G l o b a l   S t u d i e s ,   S E - 4 0 5 3 0   G o t h e n b u r g ,   S w e d e n 	 B j u r s t r o m ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   G o t h e n b u r g ,   S c h   G l o b a l   S t u d i e s ,   S E - 4 0 5 3 0   G o t h e n b u r g ,   S w e d e n . 	 a n d r e a s . b j u r s t r o m @ g l o b a l s t u d i e s . g u . s e 	 	 	 C e n t r e   f o r   E n v i r o n m e n t   a n d   S u s t a i n a b i l i t y   a t   G o t e b o r g   U n i v e r s i t y 	 G u n i l l a   A .   O l s s o n ,   K a r l   B r u c k m e i e r ,   T o m   R .   B u r n s ,   J a n   T e o r e l l ,   M a r i e   D e m k e r ,   P e r   K n u t s s o n   a n d   S t i n a   E d q v i s t   a r e   a c k n o w l e d g e d   f o r   c o m m e n t s   a n d   s u p p o r t .   T h e   C e n t r e   f o r   E n v i r o n m e n t   a n d   S u s t a i n a b i l i t y   a t   G o t e b o r g   U n i v e r s i t y   i s   a c k n o w l e d g e d   f o r   f i n a n c i a l   s u p p o r t . 	 A b b o t t   A . ,   2 0 0 1 ,   C H A O S   O F   D I S C I P L I N E S ;   A g r a w a l a   S ,   1 9 9 8 ,   C L I M A T I C   C H A N G E ,   V 3 9 ,   P 6 0 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 3 1 5 5 3 2 3 8 6 ;   A g r a w a l a   S ,   1 9 9 8 ,   C L I M A T I C   C H A N G E ,   V 3 9 ,   P 6 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 3 1 2 3 3 1 4 7 7 ;   B a l a b a n   A T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 7 3 - 2 ;   B e c h e r   T ,   2 0 0 1 ,   A C A D   T R I B E S   T E R R I T O R ;   B J U R S T R O M   A ,   2 0 1 1 ,   C L I M A T I C   C H A N G E ;   B o l i n   B ,   2 0 0 7 ,   H I S T O R Y   O F   T H E   S C I E N C E   A N D   P O L I T I C S   O F   C L I M A T E   C H A N G E :   T H E   R O L E   O F   T H E   I N T E R G O V E R N M E N T A L   P A N E L   O N   C L I M A T E   C H A N G E ,   P 1 ,   D O I   1 0 . 1 0 1 7 / C B O 9 7 8 0 5 1 1 7 2 1 7 3 1 ;   B o r d o n s   M ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 2 7 5 5 - 9 _ 2 0 ;   B o r d o n s   M ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 0 ;   F r e e m a n   L .   C . ,   2 0 0 2 ,   U C I N E T   W I N D O W S   S O F T W ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   B o y a c k   K W ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 5 5 - 6 ;   B r a u n   T ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 3 9 9 1 0 2 7 8 ;   B r u c e   A ,   2 0 0 4 ,   F U T U R E S ,   V 3 6 ,   P 4 5 7 ,   D O I   1 0 . 1 0 1 6 / j . f u t u r e s . 2 0 0 3 . 1 0 . 0 0 3 ;   B r u u n   H . ,   2 0 0 0 ,   T H E S I S   G O T E B O R G   U   G O ;   B u a n e s   A ,   2 0 0 9 ,   F U T U R E S ,   V 4 1 ,   P 4 4 6 ,   D O I   1 0 . 1 0 1 6 / j . f u t u r e s . 2 0 0 9 . 0 1 . 0 1 0 ;   C a m i c   C . ,   2 0 0 3 ,   D I A L O G I C A L   T U R N   N E W ;   C a r o l a n   M S ,   2 0 0 8 ,   C R I T I C A L   S O C I O L O G Y ,   V 3 4 ,   P 7 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 6 9 2 0 5 0 8 0 9 3 3 6 5 ;   C a s e   S E ,   2 0 0 1 ,   T H E A T R E   R E S   I N T ,   V 2 6 ,   P 1 4 5 ;   C h a r l e s w o r t h   M ,   2 0 1 0 ,   G L O B A L   E N V I R O N   C H A N G ,   V 2 0 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 9 . 0 9 . 0 0 1 ;   C o h e n   S ,   1 9 9 8 ,   G L O B A L   E N V I R O N   C H A N G ,   V 8 ,   P 3 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 9 - 3 7 8 0 ( 9 8 ) 0 0 0 1 7 - X ;   C r u t z e n   P J ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 2 3 ,   D O I   1 0 . 1 0 3 8 / 4 1 5 0 2 3 a ;   D e m e r i t t   D ,   2 0 0 1 ,   A N N   A S S O C   A M   G E O G R ,   V 9 1 ,   P 3 0 7 ,   D O I   1 0 . 1 1 1 1 / 0 0 0 4 - 5 6 0 8 . 0 0 2 4 5 ;   E n g e l s   A ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 4 - x ;   E n g e l s   A n i t a ,   2 0 0 8 ,   S C I   P U B L   P O L I C Y ,   V 3 5 ,   P 3 4 7 ,   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 8 X 3 1 7 1 6 0 ;   F l e m i n g   J a m e s ,   1 9 9 8 ,   H I S T   P E R S P E C T I V E S   C L ;   F u l l e r   S ,   1 9 9 3 ,   P H I L O S   R H E T O R I C   E N D ;   F U N T O W I C Z   S O ,   1 9 9 1 ,   E C O L O G I C A L   E C O N O M I C S   :   T H E   S C I E N C E   A N D   M A N A G E M E N T   O F   S U S T A I N A B I L I T Y ,   P 1 3 7 ;   G E E R T Z   C ,   1 9 8 0 ,   A M   S C H O L A R ,   V 4 9 ,   P 1 6 5 ;   G i b b o n s   M . ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G i d d e n s   A . ,   2 0 0 9 ,   P O L I T I C S   C L I M A T E   C H A ;   G l a n z e l   W . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   G o d i n   B ,   1 9 9 8 ,   S O C   S T U D   S C I ,   V 2 8 ,   P 4 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 8 0 2 8 0 0 3 0 0 4 ;   G o m e z   I ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 8 0 ;   G o o d   G A ,   2 0 0 0 ,   S T U D   H I S T   P H I L O S   M   P ,   V 3 1 B ,   P 2 5 9 ,   D O I   1 0 . 1 0 1 6 / S 1 3 5 5 - 2 1 9 8 ( 0 0 ) 0 0 0 1 8 - 6 ;   H E S S E L S   L L ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 2 8 ,   P 7 4 0 ;   H o r l i c k - J o n e s   T ,   2 0 0 4 ,   F U T U R E S ,   V 3 6 ,   P 4 4 1 ,   D O I   1 0 . 1 0 1 6 / j . f u t u r e s . 2 0 0 3 . 1 0 . 0 0 6 ;   H o u g h t o n   J .   T . ,   2 0 0 1 ,   C L I M   C H A N G   2 0 0 1   S C I ;   H u l m e   M ,   2 0 0 9 ,   W H Y   W E   D I S A G R E E   A B O U T   C L I M A T E   C H A N G E :   U N D E R S T A N D I N G   C O N T R O V E R S Y ,   I N A C T I O N   A N D   O P P O R T U N I T Y ,   P 1 ;   I P C C   ( I n t e r g o v e r n m e n t a l   P a n e l   o n   C l i m a t e   C h a n g e ) ,   2 0 0 1 ,   C L I M   C H A N G   2 0 0 1   I M P ;   J a c o b s   J A ,   2 0 0 9 ,   A N N U   R E V   S O C I O L ,   V 3 5 ,   P 4 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v - s o c - 0 7 0 3 0 8 - 1 1 5 9 5 4 ;   J a n s s e n   M A ,   2 0 0 6 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 6 ,   P 2 4 0 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 6 . 0 4 . 0 0 1 ;   J a p p e   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 7 6 - 1 ;   J a s a n o f f   S . ,   1 9 9 8 ,   H U M A N   C H O I C E   C L I M A T E ,   V 1 ,   P 1 ;   K l e i n   J . T . ,   1 9 9 0 ,   I N T E R D I S C I P L I N A R I T Y ;   K l e i n   J .   T h o m p s o n ,   1 9 9 6 ,   C R O S S I N G   B O U N D A R I E S ;   K w a   C ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 9 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 5 0 5 2 1 0 0 ;   K W A   C ,   2 0 0 1 ,   C H A N G I N G   A T M O S P H E R E ;   L A M B   H . H . ,   1 9 8 2 ,   C L I M A T E   H I S T   M O D E R N ;   L e i c h e n k o   R .   M . ,   2 0 0 8 ,   E N V   C H A N G E   G L O B A L I Z A ;   L e n h a r d   J . ,   2 0 0 6 ,   S C I   P U B L   P O L I C Y ,   V 3 3 ,   P 3 4 1 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 6 7 8 1 7 7 8 8 7 6 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 3 ;   L E Y E D E S D O R F F   L ,   2 0 0 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 8 ,   P 1 3 0 3 ;   L E Y E D E S D O R F F   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 9 1 ;   L i u   Z ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 3 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 2 9 - 1 ;   M a l o n e   E L ,   2 0 0 1 ,   C L I M A T E   R E S ,   V 1 9 ,   P 1 7 3 ,   D O I   1 0 . 3 3 5 4 / c r 0 1 9 1 7 3 ;   M a x - N e e f   M A ,   2 0 0 5 ,   E C O L   E C O N ,   V 5 3 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / j . e c o l e c o n . 2 0 0 5 . 0 1 . 0 1 4 ;   M C C A R T H Y   J J ,   2 0 0 1 ,   C L I M   C H A N G   2 0 0 1   M I T ;   M e t z   B ,   2 0 0 7 ,   C L I M   C H A N G   2 0 0 7   M I T ;   M i l l e r   C ,   2 0 0 1 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 6 ,   P 4 7 8 ;   M o b j o r k   M . ,   2 0 0 9 ,   C T R   H O U S I N G   U R B A N   R E ,   P 1 ;   M o e d   H .   F . ,   2 0 0 4 ,   H D B   Q U A N T I T A T I V E   S C I ;   M o r i l l o   F ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 3 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 6 ;   M O Y A A N E G O   N F ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 1 2 9 ;   M u n a s i n g h e   M ,   2 0 0 1 ,   C O N S E R V   E C O L ,   V 5 ,   p a r t .   n o . ;   N e w e l l   B ,   2 0 0 5 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 5 ,   P 2 9 9 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 5 . 0 6 . 0 0 3 ;   N e w e l l   P . ,   2 0 0 6 ,   C L I M A T E   C H A N G E   N O N S T ;   N o w o t n y   H . ,   2 0 0 1 ,   R E T H I N K I N G   S C I   K N O W L ;   O N E I L L   S ,   2 0 1 0 ,   B   A M   M E T E O R O L O G I C A L ;   P a r r y   M . L . ,   2 0 0 7 ,   C L I M   C H A N G   2 0 0 7   I M P ;   P i e l k e   R A ,   2 0 0 5 ,   P O P U L   E N V I R O N ,   V 2 6 ,   P 2 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 1 1 - 0 0 5 - 1 8 7 7 - 6 ;   P o h l   C ,   2 0 0 5 ,   F U T U R E S ,   V 3 7 ,   P 1 1 5 9 ,   D O I   1 0 . 1 0 1 6 / j . f u t u r e s . 2 0 0 5 . 0 2 . 0 0 9 ;   P o r t e r   A L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 0 0 - 5 ;   P o r t e r   A L ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 7 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 9 7 - 2 ;   P o r t e r   A L ,   2 0 0 9 ,   J   N A N O P A R T   R E S ,   V 1 1 ,   P 1 0 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 9 - 9 6 0 7 - 0 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   Q I N   J ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 2 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 9 7 4 ;   R a f o l s   I ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 1 - y ;   R A Y N E R   S ,   1 9 9 8 ,   S O C I E T A L   F R A M E W O R K   H ;   R o b e r t s   J .   T i m m o n s ,   2 0 0 6 ,   C L I M A T E   I N J U S T I C E   G L ;   S a l o r a n t a   T M ,   2 0 0 1 ,   C L I M A T I C   C H A N G E ,   V 5 0 ,   P 3 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 6 3 6 8 2 2 5 8 1 ;   S a r e w i t z   D ,   2 0 0 4 ,   E N V I R O N   S C I   P O L I C Y ,   V 7 ,   P 3 8 5 ,   D O I   1 0 . 1 0 1 6 / j . e n v s c i . 2 0 0 4 . 0 6 . 0 0 1 ;   S c h u m m e r   J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 2 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 2 . 7 1 3 1 4 . 3 8 ;   S h i n n   T ,   2 0 0 2 ,   S O C   S T U D   S C I ,   V 3 2 ,   P 5 9 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 0 2 1 2 8 9 6 7 2 7 1 ;   S i e b e n h u n e r   B . ,   2 0 0 2 ,   E N V I R O N   S C I   P O L I C Y ,   V 5 ,   P 4 1 1 ,   D O I   1 0 . 1 0 1 6 / S 1 4 6 2 - 9 0 1 1 ( 0 2 ) 0 0 0 5 0 - 3 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S o l o m o n   S ,   2 0 0 7 ,   C L I M A T E   C H A N G E   2 0 0 7 :   T H E   P H Y S I C A L   S C I E N C E   B A S I S ,   P 1 9 ;   S o n g   C H ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 1 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 8 3 6 2 5 2 9 9 ;   S t a n h i l l   G ,   2 0 0 1 ,   C L I M A T I C   C H A N G E ,   V 4 8 ,   P 5 1 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 7 2 1 6 0 0 8 9 6 ;   S T O R C H   H V ,   2 0 0 0 ,   N A T U R E ,   V 4 0 5 ,   P 6 1 5 ;   T u r n e r   S . ,   2 0 0 0 ,   P R A C T I S I N G   I N T E R D I S C ;   V A N R A A N   A ,   2 0 0 0 ,   P R A C T I S I N G   I N T E R D I S C ;   W e i n g a r t   P ,   1 9 9 7 ,   S O C   S C I   I N F O R M ,   V 3 6 ,   P 5 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 9 7 0 3 6 0 0 4 0 0 2 ;   W e i n g a r t   P e t e r ,   2 0 0 0 ,   P R A C T I S I N G   I N T E R D I S C 	 9 5 	 1 7 	 1 8 	 3 	 5 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U N 	 2 0 1 1 	 8 7 	 3 	 	 	 	 	 5 2 5 	 5 5 0 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 6 - 3 	 	 2 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 3 P S 	 W O S : 0 0 0 2 8 9 7 9 2 6 0 0 0 0 7 	 	 
 
 J 	 B r o w n ,   T 	 	 	 	 B r o w n ,   T e d 	 	 	 J o u r n a l   Q u a l i t y   M e t r i c s :   O p t i o n s   t o   C o n s i d e r   O t h e r   T h a n   I m p a c t   F a c t o r s 	 A M E R I C A N   J O U R N A L   O F   O C C U P A T I O N A L   T H E R A P Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   j o u r n a l   i m p a c t   f a c t o r s ;   o c c u p a t i o n a l   t h e r a p y ;   p u b l i c a t i o n s 	 O C C U P A T I O N A L - T H E R A P Y ;   H - I N D E X ;   C I T A T I O N S 	 J o u r n a l   q u a l i t y   m e t r i c s   ( a l s o   r e f e r r e d   t o   a s   b i b l i o m e t r i c s ) ,   s u c h   a s   i m p a c t   f a c t o r s ,   a r e   i n c r e a s i n g l y   b e i n g   u s e d   a s   a   m e a s u r e   o f   r e s e a r c h e r s '   a n d   e d u c a t o r s '   s u c c e s s   a n d   p r e s t i g e .   O c c u p a t i o n a l   t h e r a p i s t s   w h o   s u b m i t   a r t i c l e s   t o   p e e r - r e v i e w e d   j o u r n a l s   m a y   f a c e   a   p r o f e s s i o n a l   a n d   r e s e a r c h   d i l e m m a :   D o   t h e y   s u b m i t   t h e i r   a r t i c l e s   t o   j o u r n a l s   t h a t   l a r g e l y   h a v e   a   p r o f e s s i o n a l   a u d i e n c e   a n d   p o t e n t i a l l y   d o   n o t   h a v e   a n   i m p a c t   f a c t o r ,   o r   d o   t h e y   o p t   n o t   t o   p u b l i s h   t h e i r   r e s e a r c h   m a t e r i a l   i n   o c c u p a t i o n a l   t h e r a p y   o r i e n t e d   j o u r n a l s ?   O c c u p a t i o n a l   t h e r a p y   a u t h o r s   c a n   c o n s i d e r   o t h e r   j o u r n a l   q u a l i t y   m e t r i c   a l t e r n a t i v e s ,   i n   a d d i t i o n   t o   t h e   i m p a c t   f a c t o r   o p t i o n ,   i n c l u d i n g   t h e   E i g e n f a c t o r   S c o r e ,   A r t i c l e   I n f l u e n c e   S c o r e ,   h - i n d e x ,   S C I m a g o   J o u r n a l   R a n k   ( S J R ) ,   S o u r c e   N o r m a l i s e d   I m p a c t   p e r   P a p e r   ( S N I P ) ,   a n d   d i s c i p l i n e - s p e c i f i c   g e n e r a t e d   j o u r n a l   q u a l i t y   m e a s u r e s .   T h e s e   o t h e r   j o u r n a l   q u a l i t y   m e t r i c s   c a n   b e   i m p o r t a n t   r e f e r e n c e   p o i n t s   f o r   o c c u p a t i o n a l   t h e r a p i s t s   w h o   p u b l i s h   a n d   m a y   e n c o u r a g e   a u t h o r s   t o   p u b l i s h   i n   j o u r n a l s   r e l e v a n t   t o   t h e   d i s c i p l i n e .   T h i s   p r o c e s s ,   i n   t u r n ,   w i l l   b u i l d   t h e   o c c u p a t i o n a l   t h e r a p y   b o d y   o f   k n o w l e d g e   a s   w e l l   a s   p r o v i d e   a n   e s s e n t i a l ,   g r o w i n g   r e f e r e n c e   s o u r c e   f o r   e v i d e n c e - b a s e d   p r a c t i c e . 	 M o n a s h   U n i v ,   D e p t   O c c u p a t   T h e r a p y ,   S c h   P r i m a r y   H l t h   C a r e ,   F a c   M e d   N u r s i n g   &   H l t h   S c i ,   F r a n k s t o n ,   V i c   3 1 9 9 ,   A u s t r a l i a 	 B r o w n ,   T   ( r e p r i n t   a u t h o r ) ,   M o n a s h   U n i v ,   D e p t   O c c u p a t   T h e r a p y ,   S c h   P r i m a r y   H l t h   C a r e ,   F a c   M e d   N u r s i n g   &   H l t h   S c i ,   P e n i n s u l a   C a m p u s , B l d g   G , 4 t h   F l o o r , M c M a h o n   R d ,   F r a n k s t o n ,   V i c   3 1 9 9 ,   A u s t r a l i a . 	 t e d . b r o w n @ m o n a s h . e d u 	 	 B r o w n ,   T e d / 0 0 0 0 - 0 0 0 1 - 9 4 0 3 - 5 8 7 7 	 	 	 A d a m s   K M ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 6 0 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 5 - 1 ;   B a l d o c k   C ,   2 0 0 9 ,   M E D   P H Y S ,   V 3 6 ,   P 1 0 4 3 ,   D O I   1 0 . 1 1 1 8 / 1 . 3 0 8 9 4 2 1 ;   B r o w n   G .   T . ,   2 0 0 5 ,   B R I T   J   O C C U P A T I O N A L ,   V 6 8 ,   P 8 5 ;   B R O W N   G T ,   1 9 9 7 ,   O C C U P A T I O N A L   T H E R A P Y ,   V 4 ,   P 1 1 6 ,   D O I   D O I   1 0 . 1 0 0 2 / O T I . 5 1 ;   B r o w n   T ,   2 0 1 0 ,   A U S T   O C C U P   T H E R   J ,   V 5 7 ,   P 2 8 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 0 - 1 6 3 0 . 2 0 1 0 . 0 0 8 9 4 . x ;   B r u m b a c k   R A ,   2 0 0 8 ,   J   C H I L D   N E U R O L ,   V 2 3 ,   P 3 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 3 0 7 3 8 0 8 3 1 5 1 7 0 ;   C O R R   S ,   2 0 0 5 ,   B R I T   J   O C C U P A T I O N A L ,   V 6 8 ,   P 9 7 ;   C r e p e a u   E B ,   1 9 9 9 ,   A M   J   O C C U P   T H E R ,   V 5 3 ,   P 2 5 ;   F a l a g a s   M E ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 2 4 - 5 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 2 6 2 3 ,   D O I   1 0 . 1 0 9 6 / f j . 0 8 - 1 0 7 9 3 8 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G r e e n   R ,   2 0 0 8 ,   A M   J   O C C U P   T H E R ,   V 6 2 ,   P 7 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o l g u i n   J A ,   2 0 0 9 ,   A M   J   O C C U P   T H E R ,   V 6 3 ,   P 1 0 5 ;   I o a n n i d i s   J P A ,   2 0 0 6 ,   P L O S   O N E ,   V 1 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 0 0 5 ;   J O H N S O N   K S ,   1 9 8 6 ,   A M   J   O C C U P   T H E R ,   V 4 0 ,   P 3 9 0 ;   J o h n s t o n e   M J ,   2 0 0 7 ,   I N T   N U R S   R E V ,   V 5 4 ,   P 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 5 2 7 . x ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   L e w i s o n   G ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 4 6 0 8 7 8 5 ;   L e y d e s d o r f f   L ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 3 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 7 1 ;   M a d i l l   H . ,   1 9 8 9 ,   A U S T R   O C C U P A T I O N A L   T ,   V 3 6 ,   P 1 1 0 ;   M O E D   H F ,   2 0 0 9 ,   M E A S U R I N G   C O N T E X T U A L ;   N e u b e r g e r   J ,   2 0 0 2 ,   E U R   J   G A S T R O E N   H E P A T ,   V 1 4 ,   P 2 0 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 2 7 3 7 - 2 0 0 2 0 3 0 0 0 - 0 0 0 0 1 ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   O T T E N B A C H E R   K ,   1 9 8 2 ,   O C C U P   T H E R   J   R E S ,   V 2 ,   P 8 0 ;   P o s t m a   E ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 9 9 9 ;   R E E D   K L ,   1 9 8 8 ,   B   M E D   L I B R   A S S O C ,   V 7 6 ,   P 1 2 5 ;   R e y - R o c h a   J ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 3 - 8 ;   R o d g e r   S ,   2 0 0 7 ,   A U S T   O C C U P   T H E R   J ,   V 5 4 ,   P 1 7 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 0 - 1 6 3 0 . 2 0 0 6 . 0 0 5 9 5 . x ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   S C   I m a g o ,   2 0 0 7 ,   S J R   S C I M A G O   J   C O U N T R ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   S i e b e l t   M ,   2 0 1 0 ,   B M C   M U S C U L O S K E L   D I S ,   V 1 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 4 7 4 - 1 1 - 4 ;   U r q u h a r t   C ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 5 . 1 0 . 0 0 2 ;   V a s s a n t a c h a r t   D S M ,   1 9 9 7 ,   A M   J   O C C U P   T H E R ,   V 5 1 ,   P 5 8 4 ;   W a l k e r   M ,   2 0 0 5 ,   B R I T   J   O C C U P A T I O N A L ,   V 6 8 ,   P 5 5 ;   W a l t e r   G ,   2 0 0 3 ,   M E D   J   A U S T R A L I A ,   V 1 7 8 ,   P 2 8 0 ;   W H I T E   E ,   2 0 0 0 ,   B R I T   J   O C C U P A T I O N A L ,   V 6 3 ,   P 5 6 5 	 4 0 	 1 7 	 1 8 	 2 	 1 6 	 A M E R   O C C U P A T I O N A L   T H E R A P Y   A S S O C ,   I N C 	 B E T H E S D A 	 4 7 2 0   M O N T G O M E R Y   L A N E ,   B E T H E S D A ,   M D   2 0 8 1 4 - 3 4 2 5   U S A 	 0 2 7 2 - 9 4 9 0 	 	 	 A M   J   O C C U P   T H E R 	 A m .   J .   O c c u p .   T h e r . 	 M A Y - J U N 	 2 0 1 1 	 6 5 	 3 	 	 	 S I 	 	 3 4 6 	 3 5 0 	 	 1 0 . 5 0 1 4 / a j o t . 2 0 1 1 . 0 0 1 3 9 6 	 	 5 	 R e h a b i l i t a t i o n 	 R e h a b i l i t a t i o n 	 7 6 5 K Q 	 W O S : 0 0 0 2 9 0 7 0 4 9 0 0 0 1 4 	 2 1 6 7 5 3 4 1 	 
 
 J 	 V e r a - V i l l a r r o e l ,   P ;   L o p e z - L o p e z ,   W ;   L i l l o ,   S ;   S i l v a ,   L M 	 	 	 	 V e r a - V i l l a r r o e l ,   P a b l o ;   L o p e z - L o p e z ,   W i l s o n ;   L i l l o ,   S e b a s t i a n ;   S i l v a ,   L u i s   M a n u e l 	 	 	 S c i e n t i f i c   p r o d u c t i o n   i n   l a t i n   a m e r i c a n   p s y c h o l o g y :   a n   a n a l y s i s   o f   r e s e a r c h   i n   d i f f e r e n t   c o u n t r i e s 	 R E V I S T A   L A T I N O A M E R I C A N A   D E   P S I C O L O G I A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 s c i e n c i o m e t r i c s ;   P s y c h o l o g y ;   L a t i n a m e r i c a ;   b i b l i o m e t r i c s 	 I B E R O - A M E R I C A ;   J O U R N A L S ;   S C I E N C E ;   W E B ;   I N T E R N A T I O N A L I T Y 	 S c i e n c e   p r o d u c t i o n   i s   o n e   o f   t h e   c r i t i c a l   f a c t o r s   f o r   c o u n t r y   d e v e l o p m e n t .   I n   L a t i n   A m e r i c a ,   s c i e n c e   d e v e l o p m e n t   i n d i c a t o r s   i n   t e r m s   o f   p u b l i c a t i o n s   a n d   i m p a c t   a r e   t r a d i t i o n a l l y   f a r   f r o m   t h e   s t a n d a r d s   i n   c o u n t r i e s   w i t h   f u r t h e r   s c i e n t i f i c   a n d   t e c h n o l o g i c a l   d e v e l o p m e n t .   T h e s e   i n d i c a t o r s ,   b o t h   i n   g e n e r a l   a n d   i n   P s y c h o l o g y ,   w e r e   e v a l u a t e d   i n   t h i s   s t u d y ,   t h r o u g h   a n   a n a l y s i s   o f   L a t i n - A m e r i c a n   p r o d u c t i v i t y   o f   s c i e n t i f i c   a r t i c l e s   b e t w e e n   1 9 9 6   a n d   2 0 0 8   i n   S c o p u s   a n d   W e b   o f   S c i e n c e   d a t a b a s e s .   M a c r o - t r e n d s   t h a t   g u i d e d   t h e   d e v e l o p m e n t   o f   s c i e n c e   a n d   P s y c h o l o g y   i n   c o u n t r i e s   a n d   i n s t i t u t i o n s   w e r e   i d e n t i f i e d ,   a s   t h e   s c i e n t i f i c   i m p a c t   o f   t h e   p u b l i c a t i o n s .   R e s u l t s   s u g g e s t   t h a t   B r a z i l ,   M e x i c o ,   A r g e n t i n a ,   C h i l e   a n d   C o l o m b i a   h a v e   t h e   b e s t   i n d i c a t o r s   i n   t e r m s   o f   p r o d u c t i o n   a n d   i m p a c t ,   b o t h   i n   s c i e n c e   a n d   P s y c h o l o g y .   C h i l e ,   A r g e n t i n a   a n d   B r a z i l   a r e   t h e   m o s t   p r o d u c t i v e   c o u n t r i e s   p e r   m i l l i o n   i n h a b i t a n t s . 	 [ V e r a - V i l l a r r o e l ,   P a b l o ;   L i l l o ,   S e b a s t i a n ]   U n i v   S a n t i a g o   C h i l e   U S A C H ,   S a n t i a g o ,   C h i l e ;   [ L o p e z - L o p e z ,   W i l s o n ;   S i l v a ,   L u i s   M a n u e l ]   P o n t i f i c i a   U n i v   J a v e r i a n a ,   B o g o t a ,   C o l o m b i a 	 V e r a - V i l l a r r o e l ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   S a n t i a g o   C h i l e   U S A C H ,   S a n t i a g o ,   C h i l e . 	 p a b l o . v e r a @ u s a c h . c l ;   l o p e z w @ j a v e r i a n a . e d u . c o ;   s e b a s t i a n . l i l l o @ u s a c h . c l ;   l u i s . s i l v a @ j a v e r i a n a . e d u . c o 	 V e r a - V i l l a r r o e l ,   P a b l o / A - 1 1 3 4 - 2 0 1 1 ;   S i l v a   M a r t i n ,   L u i s   M a n u e l / B - 2 2 1 3 - 2 0 0 9 	 V e r a - V i l l a r r o e l ,   P a b l o / 0 0 0 0 - 0 0 0 1 - 9 1 8 7 - 8 4 1 4 ;   S i l v a   M a r t i n ,   L u i s   M a n u e l / 0 0 0 0 - 0 0 0 1 - 7 0 5 1 - 0 1 8 6 	 	 	 A g u i l a r   B .   M a r  a   C o n s t a n z a ,   2 0 0 7 ,   D i v e r s . :   P e r s p e c t .   P s i c o l . ,   V 3 ,   P 3 1 7 ;   B u e l a - C a s a l   G ,   2 0 0 7 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 7 ,   P 8 9 9 ;   B u e l a - C a s a l   G ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 7 1 5 - 6 ;   B u e l a - C a s a l   G . ,   2 0 0 9 ,   P S I C O T H E M A ,   V 2 1 ,   P 3 0 9 ;   B u e l a - C a s a l   G . ,   2 0 0 5 ,   R E V   L A T I N O A M E R I C A N A ,   V 3 7 ,   P 2 1 1 ;   C o n t r e r a s   C ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 6 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 6 5 - 2 ;   M a r t i n e z   A T G ,   2 0 0 8 ,   R E V   L A T   A M   P S I C O L ,   V 4 0 ,   P 4 0 9 ;   G u t i e r r e z   G ,   2 0 0 9 ,   R E V   L A T   A M   P S I C O L ,   V 4 1 ,   P 4 1 3 ;   L o p e z   W L ,   1 9 9 8 ,   R E V   L A T   A M   P S I C O L ,   V 3 0 ,   P 4 0 1 ;   G a r c i a   M a r t i n e z   A .   T . ,   2 0 0 9 ,   U N I V   P S Y C H O L ,   V 8 ,   P 1 3 ;   R i v e r a - G a r z o n   D M ,   2 0 0 8 ,   U N I V   P S Y C H O L ,   V 7 ,   P 9 1 7 ;   M u s i - L e c h u g a   B ,   2 0 0 9 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 9 ,   P 1 6 1 ;   N a v a r r e t e - C o r t e s   J ,   2 0 1 0 ,   U N I V   P S Y C H O L ,   V 9 ,   P 5 5 3 ;   N a v a r r e t e - C o r t e s   J ,   2 0 0 9 ,   R E V   M E X   P S I C O L ,   V 2 6 ,   P 1 3 1 ;   N i e l s e n   M . ,   2 0 0 8 ,   W H Y   H   I N D E X   I S   L I T T L ;   O r t i z   J . ,   2 0 0 3 ,   T E R   P S I C O L ,   V 2 1 ,   P 6 1 ;   R e y   A n a c o n a   C  s a r   A r m a n d o ,   2 0 0 9 ,   T e r   P s i c o l ,   V 2 7 ,   P 6 1 ,   D O I   1 0 . 4 0 6 7 / S 0 7 1 8 - 4 8 0 8 2 0 0 9 0 0 0 1 0 0 0 0 6 ;   S a n d e l i n   B o ,   2 0 0 4 ,   L A N G   P R O B L   L A N G   P L A N ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 7 5 / l p l p . 2 8 . 1 . 0 2 s a n ;   T r i s t a o   A . ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 8 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 8 9 - 6 ;   U r z u a   A . ,   2 0 0 8 ,   R E V   I N T E R A M E R I C A N A   P ,   V 4 2 ,   P 4 4 6 ;   L i l l o   S . ,   2 0 0 6 ,   T E R   P S I C O L ,   V 2 4 ,   P 2 2 1 ;   V e r a - V i l l a r r o e l   P . ,   2 0 1 0 ,   R E V   D I G I T A L   U ,   V 1 1 ;   Z y c h   I ,   2 0 1 0 ,   U N I V   P S Y C H O L ,   V 9 ,   P 2 7 	 2 3 	 1 7 	 2 8 	 2 	 2 3 	 F O U N D A T I O N   A D V A N C E M E N T   P S Y C H O L O G Y 	 B O G O T A   D   C 	 A P A R T A D O   A E R E O   9 2 6 2 1 ,   B O G O T A   D   C ,   C O L O M B I A 	 0 1 2 0 - 0 5 3 4 	 	 	 R E V   L A T   A M   P S I C O L 	 R e v .   L a t i n o a m .   P s i c o l . 	 	 2 0 1 1 	 4 3 	 1 	 	 	 	 	 9 5 	 1 0 4 	 	 	 	 1 0 	 P s y c h o l o g y ,   M u l t i d i s c i p l i n a r y 	 P s y c h o l o g y 	 7 5 1 I N 	 W O S : 0 0 0 2 8 9 6 1 0 8 0 0 0 0 9 	 	 
 
 J 	 B u b e l a ,   T ;   S t r o t m a n n ,   A ;   A d a m s ,   R ;   M o r r i s o n ,   S 	 	 	 	 B u b e l a ,   T a n i a ;   S t r o t m a n n ,   A n d r e a s ;   A d a m s ,   R h i a n n o n ;   M o r r i s o n ,   S h a w n 	 	 	 C o m m e r c i a l i z a t i o n   a n d   C o l l a b o r a t i o n :   C o m p e t i n g   P o l i c i e s   i n   P u b l i c l y   F u n d e d   S t e m   C e l l   R e s e a r c h ? 	 C E L L   S T E M   C E L L 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 	 P A T E N T S 	 A d v a n c e s   i n   b i b l i o m e t r i c s   p r e s e n t   n e w   m e t h o d s   f o r   a n a l y z i n g   e m e r g i n g   c o l l a b o r a t i v e   i n n o v a t i o n   m o d e l s .   T h e s e   m e t h o d s   a r e   i l l u s t r a t e d   b y   t h e   C a n a d i a n   S t e m   C e l l   N e t w o r k ,   w h i c h   f o s t e r s   h i g h - p r o f i l e   m u l t i d i s c i p l i n a r y ,   c o l l a b o r a t i v e ,   i n t e r n a t i o n a l   r e s e a r c h .   H o w e v e r ,   p a t e n t i n g   n e g a t i v e l y   i m p a c t s   c o l l a b o r a t i o n   p a t t e r n s   i n   p u b l i s h e d   r e s e a r c h .   P o l i c i e s   d i r e c t e d   a t   c o l l a b o r a t i o n   a n d   c o m m e r c i a l i z a t i o n   m a y   b e   i n   c o n f l i c t ,   d e p e n d i n g   o n   t h e   d e g r e e   t o   w h i c h   o n e   a c t i v i t y   i s   e m p h a s i z e d   o v e r   t h e   o t h e r . 	 [ B u b e l a ,   T a n i a ;   S t r o t m a n n ,   A n d r e a s ]   U n i v   A l b e r t a ,   S c h   P u b l   H l t h ,   D e p t   P u b l   H l t h   S c i ,   E d m o n t o n ,   A B   T 6 G   2 G 3 ,   C a n a d a ;   [ A d a m s ,   R h i a n n o n ]   U n i v   A l b e r t a ,   F a c   L a w ,   H l t h   L a w   I n s t ,   E d m o n t o n ,   A B   T 6 G   2 H 5 ,   C a n a d a ;   [ M o r r i s o n ,   S h a w n ]   D r y a s   R e s   L t d ,   E d m o n t o n ,   A B   T 6 C   2 R 6 ,   C a n a d a 	 B u b e l a ,   T   ( r e p r i n t   a u t h o r ) ,   U n i v   A l b e r t a ,   S c h   P u b l   H l t h ,   D e p t   P u b l   H l t h   S c i ,   E d m o n t o n ,   A B   T 6 G   2 G 3 ,   C a n a d a . 	 t b u b e l a @ u a l b e r t a . c a 	 M o r r i s o n ,   S h a w n / F - 3 9 5 3 - 2 0 1 0 ;   B u b e l a ,   T a n i a / F - 4 8 6 0 - 2 0 1 4 ;   	 B u b e l a ,   T a n i a / 0 0 0 0 - 0 0 0 2 - 0 8 0 7 - 2 8 9 9 ;   S t r o t m a n n ,   A n d r e a s / 0 0 0 0 - 0 0 0 2 - 0 6 7 9 - 6 4 9 8 	 S t e m   C e l l   N e t w o r k ;   G e n o m e   C a n a d a 	 F u n d i n g   f o r   t h i s   p r o j e c t   w a s   p r o v i d e d   b y   a   C a t a l y s t   G r a n t   f r o m   t h e   S t e m   C e l l   N e t w o r k   t o   T . B . ,   a   G e n o m e   C a n a d a   G r a n t   t o   G e o f f   H i c k s ,   M a n i t o b a   I n s t i t u t e   o f   C e l l   B i o l o g y ,   a n d   J a n e t   R o s s a n t ,   H o s p i t a l   f o r   S i c k   C h i l d r e n ,   a t   w h i c h   T . B .   i s   a   c o i n v e s t i g a t o r ;   a n d   a   S S H R C   I N E   g r a n t   t o   E .   R i c h a r d   G o l d   i n   w h o s e   l a b   T . B .   w a s   a   c o i n v e s t i g a t o r .   T h e s e   g r a n t s   h a v e   p r o v i d e d   p o s t d o c t o r a l   f e l l o w   s a l a r y   s u p p o r t   t o   A . S .   D a n g z h i   Z h a o   p r o v i d e d   g r e a t   a s s i s t a n c e   a n d   e x p e r t i s e   i n   a l l   a s p e c t s   o f   t h e   b i b l i o m e t r i c   a n a l y s e s ,   a n d   L o g a n   M c L e o d   a n d   G i a n   J h a n g r i   p r o v i d e d   a d d i t i o n a l   a s s i s t a n c e   w i t h   r e g r e s s i o n   m o d e l s .   H e l p f u l   c o m m e n t s   w e r e   p r o v i d e d   o n   e a r l i e r   d r a f t s   o f   t h e   m a n u s c r i p t   b y   T i m o t h y   C a u l f i e l d ,   R i c h a r d   G o l d ,   D a v i d   C a s t l e ,   a n d   D a v i d   H i k . 	 A T K I N S O N G R O S J E A . A ,   2 0 0 5 ,   P U B L I C   S C I   P R I V A T E   I ;   B e r g m a n   K ,   2 0 0 7 ,   N A T   B I O T E C H N O L ,   V 2 5 ,   P 4 1 9 ,   D O I   1 0 . 1 0 3 8 / n b t 0 4 0 7 - 4 1 9 ;   C a u l f i e l d   T ,   2 0 0 8 ,   R E G E N   M E D ,   V 3 ,   P 4 8 3 ,   D O I   1 0 . 2 2 1 7 / 1 7 4 6 0 7 5 1 . 3 . 4 . 4 8 3 ;   E d w a r d s   A M ,   2 0 0 9 ,   N A T   C H E M   B I O L ,   V 5 ,   P 4 3 6 ,   D O I   1 0 . 1 0 3 8 / n c h e m b i o 0 7 0 9 - 4 3 6 ;   G i e b e l   L B ,   2 0 0 5 ,   N A T   B I O T E C H N O L ,   V 2 3 ,   P 7 9 8 ,   D O I   1 0 . 1 0 3 8 / n b t 0 7 0 5 - 7 9 8 ;   H e r d e r   M ,   2 0 0 8 ,   J   B U S   E T H I C S ,   V 7 7 ,   P 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 0 6 - 9 2 9 4 - z ;   H o n g   W ,   2 0 0 9 ,   S O C I O L   Q U A R T ,   V 5 0 ,   P 1 4 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 3 3 - 8 5 2 5 . 2 0 0 8 . 0 1 1 3 6 . x ;   H u a n g   K G ,   2 0 0 9 ,   A C A D   M A N A G E   J ,   V 5 2 ,   P 1 1 9 3 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   L e e   S ,   2 0 0 5 ,   S O C   S T U D   S C I ,   V 3 5 ,   P 6 7 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 5 0 5 2 3 5 9 ;   L i t t l e   M ,   2 0 0 6 ,   E M B O   R E P ,   V 7 ,   P 1 1 8 8 ,   D O I   1 0 . 1 0 3 8 / s j . e m b o r . 7 4 0 0 8 6 1 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M u n o s   B ,   2 0 0 9 ,   N A T   R E V   D R U G   D I S C O V ,   V 8 ,   P 9 5 9 ,   D O I   1 0 . 1 0 3 8 / n r d 2 9 6 1 ;   P L A G N O L   A C ,   2 0 0 9 ,   F U T U R E   M E D ,   V 4 ,   P 5 4 9 ;   S c h o f i e l d   P N ,   2 0 0 9 ,   N A T U R E ,   V 4 6 1 ,   P 1 7 1 ,   D O I   1 0 . 1 0 3 8 / 4 6 1 1 7 1 a ;   S t r a n d b u r g   K a t h e r i n e   J . ,   2 0 0 6 ,   B E R K E L E Y   T E C H   L J ,   V 2 1 ,   P 1 2 9 3 ;   W a l s h   J P ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 9 ,   P 2 0 0 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 1 5 8 1 3 ;   W i n i c k o f f   D E ,   2 0 0 9 ,   Y A L E   J   H L T H   P O L I C Y   L ,   V 9 ,   P 5 4 	 1 8 	 1 7 	 1 7 	 2 	 1 1 	 C E L L   P R E S S 	 C A M B R I D G E 	 6 0 0   T E C H N O L O G Y   S Q U A R E ,   5 T H   F L O O R ,   C A M B R I D G E ,   M A   0 2 1 3 9   U S A 	 1 9 3 4 - 5 9 0 9 	 	 	 C E L L   S T E M   C E L L 	 C e l l   S t e m   C e l l 	 J U L   2 	 2 0 1 0 	 7 	 1 	 	 	 	 	 2 5 	 3 0 	 	 1 0 . 1 0 1 6 / j . s t e m . 2 0 1 0 . 0 6 . 0 1 0 	 	 6 	 C e l l   &   T i s s u e   E n g i n e e r i n g ;   C e l l   B i o l o g y 	 C e l l   B i o l o g y 	 6 2 9 T J 	 W O S : 0 0 0 2 8 0 2 2 2 3 0 0 0 0 9 	 2 0 6 2 1 0 4 6 	 
 
 J 	 B o u y s s o u ,   D ;   M a r c h a n t ,   T 	 	 	 	 B o u y s s o u ,   D . ;   M a r c h a n t ,   T . 	 	 	 C o n s i s t e n t   b i b l i o m e t r i c   r a n k i n g s   o f   a u t h o r s   a n d   o f   j o u r n a l s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   R a n k i n g   o f   j o u r n a l s ;   R a n k i n g   o f   a u t h o r s ;   C o n s i s t e n t   r a n k i n g s ;   I m p a c t   f a c t o r ;   C i t a t i o n s 	 H I R S C H - I N D E X ;   I M P A C T ;   I N D I V I D U A L S 	 R a n k i n g s   o f   j o u r n a l s   a n d   r a n k i n g s   o f   s c i e n t i s t s   a r e   u s u a l l y   d i s c u s s e d   s e p a r a t e l y .   W e   a r g u e   t h a t   a   c o n s i s t e n t   a p p r o a c h   t o   b o t h   r a n k i n g s   i s   d e s i r a b l e   b e c a u s e   b o t h   t h e   q u a l i t y   o f   a   j o u r n a l   a n d   t h e   q u a l i t y   o f   a   s c i e n t i s t   d e p e n d   o n   t h e   p a p e r s   i t / h e   p u b l i s h e s .   W e   p r e s e n t   a   p a i r   o f   c o n s i s t e n t   r a n k i n g s   ( i m p a c t   f a c t o r   f o r   t h e   j o u r n a l s   a n d   t o t a l   n u m b e r   o f   c i t a t i o n s   f o r   t h e   a u t h o r s )   a n d   w e   p r o v i d e   a n   a x i o m a t i c   c h a r a c t e r i z a t i o n   t h e r e o f .   ( C )   R a n k i n g s   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ M a r c h a n t ,   T . ]   U n i v   G h e n t ,   B - 9 0 0 0   G h e n t ,   B e l g i u m ;   [ B o u y s s o u ,   D . ]   U n i v   P a r i s   0 9 ,   L A M S A D E ,   F - 7 5 7 7 5   P a r i s   1 6 ,   F r a n c e 	 M a r c h a n t ,   T   ( r e p r i n t   a u t h o r ) ,   U n i v   G h e n t ,   D u n a n t l a a n   1 ,   B - 9 0 0 0   G h e n t ,   B e l g i u m . 	 b o u y s s o u @ l a m s a d e . d a u p h i n e . f r ;   t h i e r r y . m a r c h a n t @ u g e n t . b e 	 M a r c h a n t ,   t h i e r r y / F - 2 6 9 9 - 2 0 1 1 	 	 	 	 A d l e r   R . ,   2 0 0 8 ,   C I T A T I O N   S T A T ;   B I L L A U T   J C ,   S C I E N T O M E T R   I N   P R E S S ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B O U Y S S O U   D ,   2 0 0 9 ,   B I B L I O M E T R I C   R A N K I N G ;   B r o w n   L D ,   1 9 9 6 ,   A C C O U N T   O R G   S O C ,   V 2 1 ,   P 7 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 6 1 - 3 6 8 2 ( 9 6 ) 0 0 0 1 2 - 8 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G r e i n e r   W . ,   1 9 9 5 ,   T H E R M O D Y N A M I C S   S T A T ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K o k k o   H ,   1 9 9 9 ,   T R E N D S   E C O L   E V O L ,   V 1 4 ,   P 3 8 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 5 3 4 7 ( 9 9 ) 0 1 7 1 1 - 5 ;   M a r c h a n t   T ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 1 3 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 5 9 ;   M a r c h a n t   T ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 0 7 5 - y ;   O s t e r l o h   M ,   2 0 0 9 ,   2 7 9 7   C E S I F O ;   P a l a c i o s - H u e r t a   I ,   2 0 0 4 ,   E C O N O M E T R I C A ,   V 7 2 ,   P 9 6 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 2 6 2 . 2 0 0 4 . 0 0 5 1 9 . x ;   P I J P E R S   F P ,   2 0 0 6 ,   A S T R O N O M Y   G E O P H Y S ,   V 4 7 ;   P I N S K I   G ,   1 9 7 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 2 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 6 ) 9 0 0 4 8 - 0 ;   Q u e s a d a   A ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 1 . 0 0 2 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   T a b e r   D F ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 9 ,   P 2 1 6 6 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 2 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   M A T H   S O C   S C I ,   V 5 6 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t h s o c s c i . 2 0 0 8 . 0 3 . 0 0 1 	 2 2 	 1 7 	 1 7 	 1 	 1 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J U L 	 2 0 1 0 	 4 	 3 	 	 	 	 	 3 6 5 	 3 7 8 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 3 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 0 7 Y Q 	 W O S : 0 0 0 2 7 8 5 4 3 6 0 0 0 1 6 	 	 
 
 J 	 S a s t r y ,   R K ;   R a s h m i ,   H B ;   R a o ,   N H ;   I l y a s ,   S M 	 	 	 	 S a s t r y ,   R .   K a l p a n a ;   R a s h m i ,   H .   B . ;   R a o ,   N .   H . ;   I l y a s ,   S .   M . 	 	 	 I n t e g r a t i n g   n a n o t e c h n o l o g y   i n t o   a g r i - f o o d   s y s t e m s   r e s e a r c h   i n   I n d i a :   A   c o n c e p t u a l   f r a m e w o r k 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 N a n o t e c h n o l o g y ;   B i b l i o m e t r i c s ;   P a t e n t s   s e a r c h ;   A g r i - f o o d   s y s t e m s 	 S I L V E R   N A N O P A R T I C L E S ;   E X T R A C E L L U L A R   B I O S Y N T H E S I S ;   A L L O Y   N A N O P A R T I C L E S ;   G O L D   N A N O P A R T I C L E S ;   F U N G U S ;   A U 	 T h e   i m p l i c a t i o n s   o f   c u r r e n t   t r e n d s   i n   n a n o t e c h n o l o g y   f o r   t h e   a g r i - f o o d   s e c t o r   i n   I n d i a   a r e   a s s e s s e d .   U s i n g   p u b l i s h e d   l i t e r a t u r e   a n d   p a t e n t s   d a t a ,   a   m o d e l   t o   o r g a n i z e   t h e   i n f o r m a t i o n   i s   d e v e l o p e d   t h r o u g h   a   s p e c i a l l y   d e s i g n e d   d a t a b a s e .   T h e   d a t a b a s e   a l l o w s   m a p p i n g   r e s e a r c h   t h e m e s   i n   n a n o t e c h n o l o g y   t o   s p e c i f i c   s e c t o r s   i n   t h e   a g r i c u l t u r a l   v a l u e   c h a i n   t o   e n a b l e   a   r a t i o n a l   a s s e s s m e n t   o f   t h e   p o t e n t i a l   a p p l i c a t i o n s   o f   n a n o t e c h n o l o g y   i n   t h e   a g r i - f o o d   s e c t o r ,   i d e n t i f y i n g   a n d   p r i o r i t i z i n g   r e s e a r c h   n e e d s   a c r o s s   t h e   a g r i c u l t u r a l   v a l u e   c h a i n ,   a n d   a s s e s s i n g   t h e   e n v i r o n m e n t a l   a n d   s o c i e t a l   i m p l i c a t i o n s   o f   t h i s   e m e r g i n g   t e c h n o l o g y .   ( C )   2 0 0 9   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ S a s t r y ,   R .   K a l p a n a ;   R a s h m i ,   H .   B . ;   R a o ,   N .   H . ;   I l y a s ,   S .   M . ]   N a t l   A c a d   A g r   R e s   M a n a g e m e n t ,   H y d e r a b a d ,   A n d h r a   P r a d e s h ,   I n d i a 	 S a s t r y ,   R K   ( r e p r i n t   a u t h o r ) ,   N a t l   A c a d   A g r   R e s   M a n a g e m e n t ,   H y d e r a b a d ,   A n d h r a   P r a d e s h ,   I n d i a . 	 k a l p a n a @ n a a r m . e r n e t . i n ;   r a s h m i @ n a a r m . e r n e t . i n ;   n h r a o @ n a a r m . e r n e t . i n ;   s m i l y a s @ s i f y . c o m 	 	 	 	 	 B a n s a l   V ,   2 0 0 4 ,   J   M A T E R   C H E M ,   V 1 4 ,   P 3 3 0 3 ,   D O I   1 0 . 1 0 3 9 / b 4 0 7 9 0 4 c ;   B a s a v a r a j a   S ,   2 0 0 8 ,   M A T E R   R E S   B U L L ,   V 4 3 ,   P 1 1 6 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t e r r e s b u l l . 2 0 0 7 . 0 6 . 0 2 0 ;   B h a r d e   A ,   2 0 0 6 ,   S M A L L ,   V 2 ,   P 1 3 5 ,   D O I   [ 1 0 . 1 0 0 2 / s m l l . 2 0 0 5 0 0 1 8 0 ,   1 0 . 1 0 0 2 / s m l l . 2 0 0 5 0 0 0 1 8 0 ] ;   B h a t t a c h a r y a   D ,   2 0 0 5 ,   C R I T   R E V   B I O T E C H N O L ,   V 2 5 ,   P 1 9 9 ,   D O I   1 0 . 1 0 8 0 / 0 7 3 8 8 5 5 0 5 0 0 3 6 1 9 9 4 ;   G o v i n d a r a j u   K ,   2 0 0 8 ,   J   M A T E R   S C I ,   V 4 3 ,   P 5 1 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 8 5 3 - 0 0 8 - 2 7 4 5 - 4 ;   K u m a r   V ,   2 0 0 8 ,   J   C H E M   T E C H N O L   B I O T ,   V 8 4 ,   P 1 5 1 ,   D O I   D O I   1 0 . 1 0 0 2 / J C T B . 2 0 2 3 ;   K u z m a   J . ,   2 0 0 6 ,   N A N O T E C H N O L O G Y   A G R   F ;   L e e l a   A ,   2 0 0 8 ,   A F R   J   B I O T E C H N O L ,   V 7 ,   P 3 1 6 2 ;   M a j u m d e r   D .   D . ,   2 0 0 7 ,   P   I N T   C   C O M P   T H E O R   A ,   P 5 6 3 ,   D O I   [ 1 0 . 1 1 0 9 / I C C T A . 2 0 0 7 . 4 6 ,   D O I   1 0 . 1 1 0 9 / I C C T A . 2 0 0 7 . 4 6 ] ;   M o h a n p u r i a   P ,   2 0 0 8 ,   J   N A N O P A R T   R E S ,   V 1 0 ,   P 5 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 7 - 9 2 7 5 - x ;   M U D E   N ,   2 0 0 9 ,   J   P L A N T   B I O C H E M   B I O T ,   V 1 8 ,   P 4 ;   M u k h e r j e e   P ,   2 0 0 8 ,   N A N O T E C H N O L O G Y ,   V 1 9 ,   D O I   1 0 . 1 0 8 8 / 0 9 5 7 - 4 4 8 4 / 1 9 / 7 / 0 7 5 1 0 3 ;   M u k h e r j e e   P ,   2 0 0 1 ,   A N G E W   C H E M   I N T   E D I T ,   V 4 0 ,   P 3 5 8 5 ,   D O I   1 0 . 1 0 0 2 / 1 5 2 1 - 3 7 7 3 ( 2 0 0 1 1 0 0 1 ) 4 0 : 1 9 < 3 5 8 5 : : A I D - A N I E 3 5 8 5 > 3 . 0 . C O ; 2 - K ;   N a r a y a n a n   K B ,   2 0 0 8 ,   M A T E R   L E T T ,   V 6 2 ,   P 4 5 8 8 ,   D O I   1 0 . 1 0 1 6 / j . m a t l e t . 2 0 0 8 . 0 8 . 0 4 4 ;   O p a r a   L i n u s   U ,   2 0 0 4 ,   C I G R   J   S C I   R E S   D E V ,   V V I ;   P a r i k h   R Y ,   2 0 0 8 ,   C H E M B I O C H E M ,   V 9 ,   P 1 4 1 5 ,   D O I   1 0 . 1 0 0 2 / c b i c . 2 0 0 7 0 0 5 9 2 ;   R o c o   M C ,   2 0 0 3 ,   J   N A N O P A R T   R E S ,   V 5 ,   P 1 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 5 4 8 5 1 2 4 3 8 ;   S a s t r y   M ,   2 0 0 3 ,   C U R R   S C I   I N D I A ,   V 8 5 ,   P 1 6 2 ;   S A S T R Y   R K ,   2 0 0 7 ,   2 0 0 7   N S F   N A N   S C I   E N G ;   S A W L E   D B ,   2 0 0 8 ,   S C I   T E C H N O L   A D V   M A T ,   V 9 ,   P 1 ;   S e n a p a t i   S ,   2 0 0 5 ,   S M A L L ,   V 1 ,   P 5 1 7 ,   D O I   1 0 . 1 0 0 2 / s m l l . 2 0 0 4 0 0 0 5 3 ;   S h a n k a r   S S ,   2 0 0 4 ,   J   C O L L O I D   I N T E R F   S C I ,   V 2 7 5 ,   P 4 9 6 ,   D O I   1 0 . 1 0 1 6 / j . j c i s . 2 0 0 4 . 0 3 . 0 0 3 ;   S h a n k a r   S S ,   2 0 0 3 ,   B I O T E C H N O L   P R O G R ,   V 1 9 ,   P 1 6 2 7 ,   D O I   1 0 . 1 0 2 1 / b p 0 3 4 0 7 0 w ;   S h e e p a r a m a t t i   B G ,   2 0 0 7 ,   I E T E   T E C H   R E V ,   V 2 4 ,   P 5 ;   S i n g h   A V ,   2 0 0 5 ,   J   M A T E R   C H E M ,   V 1 5 ,   P 5 1 1 5 ,   D O I   1 0 . 1 0 3 9 / b 5 1 0 3 9 8 c ;   U S D A   ( U n i t e d   S t a t e s   D e p a r t m e n t   o f   A g r i c u l t u r e ) ,   2 0 0 3 ,   N A N   S C I   E N G   A G R   F O O D ;   W A R D   H C ,   2 0 0 5 ,   N A N O T E C H N O L O G Y   A G R   F ,   P 1 4 	 2 7 	 1 7 	 1 7 	 1 	 2 0 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 M A Y 	 2 0 1 0 	 7 7 	 4 	 	 	 S I 	 	 6 3 9 	 6 4 8 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 9 . 1 1 . 0 0 8 	 	 1 0 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 5 9 2 D R 	 W O S : 0 0 0 2 7 7 3 5 6 1 0 0 0 0 9 	 	 
 
 J 	 F r a n c e s c h i n i ,   F ;   M a i s a n o ,   D 	 	 	 	 F r a n c e s c h i n i ,   F i o r e n z o ;   M a i s a n o ,   D o m e n i c o 	 	 	 T h e   H i r s c h   s p e c t r u m :   A   n o v e l   t o o l   f o r   a n a l y z i n g   s c i e n t i f i c   j o u r n a l s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 H i r s c h   i n d e x ;   H i r s c h   s p e c t r u m ;   J o u r n a l ' s   ( c o - ) a u t h o r s ;   C i t a t i o n s ;   B i b l i o m e t r i c s ;   Q u a l i t y   E n g i n e e r i n g / Q u a l i t y   M a n a g e m e n t   j o u r n a l s ;   J o u r n a l   q u a l i m e t r i c s 	 H - I N D E X ;   I M P A C T   F A C T O R ;   B I B L I O M E T R I C   I N D I C A T O R S ;   S C I E N C E ;   C I T A T I O N S 	 T h i s   p a p e r   i n t r o d u c e s   t h e   H i r s c h   s p e c t r u m   ( h - s p e c t r u m )   f o r   a n a l y z i n g   t h e   a c a d e m i c   r e p u t a t i o n   o f   a   s c i e n t i f i c   j o u r n a l .   h - S p e c t r u m   i s   a   n o v e l   t o o l   b a s e d   o n   t h e   H i r s c h   ( h )   i n d e x .   I t   i s   e a s y   t o   c o n s t r u c t :   c o n s i d e r i n g   a   s p e c i f i c   j o u r n a l   i n   a   s p e c i f i c   i n t e r v a l   o f   t i m e ,   h - s p e c t r u m   i s   d e f i n e d   a s   t h e   d i s t r i b u t i o n   r e p r e s e n t i n g   t h e   h - i n d e x e s   a s s o c i a t e d   t o   t h e   a u t h o r s   o f   t h e   j o u r n a l   a r t i c l e s .   T h i s   t o o l   a l l o w s   d e f i n i n g   a   r e f e r e n c e   p r o f i l e   o f   t h e   t y p i c a l   a u t h o r   o f   a   j o u r n a l ,   c o m p a r e   d i f f e r e n t   j o u r n a l s   w i t h i n   t h e   s a m e   s c i e n t i f i c   f i e l d ,   a n d   p r o v i d e   a   r o u g h   i n d i c a t i o n   o f   p r e s t i g e / r e p u t a t i o n   o f   a   j o u r n a l   i n   t h e   s c i e n t i f i c   c o m m u n i t y .   h - S p e c t r u m   c a n   b e   a s s o c i a t e d   t o   e v e r y   j o u r n a l .   T e n   s p e c i f i c   j o u r n a l s   i n   t h e   Q u a l i t y   E n g i n e e r i n g / Q u a l i t y   M a n a g e m e n t   f i e l d   a r e   a n a l y z e d   s o   a s   t o   p r e l i m i n a r i l y   i n v e s t i g a t e   t h e   h - s p e c t r u m   c h a r a c t e r i s t i c s .   ( C )   2 0 0 9   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ F r a n c e s c h i n i ,   F i o r e n z o ;   M a i s a n o ,   D o m e n i c o ]   P o l i t e c n   T o r i n o ,   D I S P E A ,   I - 1 0 1 2 9   T u r i n ,   I t a l y 	 F r a n c e s c h i n i ,   F   ( r e p r i n t   a u t h o r ) ,   P o l i t e c n   T o r i n o ,   D I S P E A ,   C o r s o   D u c a   A b r u z z i   2 4 ,   I - 1 0 1 2 9   T u r i n ,   I t a l y . 	 f i o r e n z o . f r a n c e s c h i n i @ p o l i t o . i t 	 M A I S A N O ,   D o m e n i c o / B - 4 3 0 1 - 2 0 1 0 	 M A I S A N O ,   D o m e n i c o / 0 0 0 0 - 0 0 0 2 - 8 1 5 4 - 4 4 6 9 	 	 	 A m i n   M . ,   2 0 0 0 ,   I M P A C T   F A C T O R S   U S E   A ;   A n t o n a k i s   J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 2 ;   B a n k s   M G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 6 - 5 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B i H u i   J . ,   2 0 0 7 ,   C H I N E S E   S C I   B U L L ,   V 5 2 ,   P 8 5 5 ,   D O I   [ D O I   1 0 . 1 0 0 7 / S 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ,   1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ] ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B r a u n   T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 5 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 4 4 - 3 ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B r u m b a c k   R A ,   2 0 0 8 ,   J   C H I L D   N E U R O L ,   V 2 3 ,   P 3 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 8 3 0 7 3 8 0 8 3 1 5 1 7 0 ;   B u r r e l l   Q L ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 1 . 0 0 3 ;   B u r r e l l   Q L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 1 7 7 4 - 5 ;   C a s t i l l o   C ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 7 2 6 ,   P 1 0 7 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 5 4 0 - 7 5 5 3 0 - 2 _ 1 0 ;   C H A P M A N   S ,   2 0 0 9 ,   H   I N D E X   D I S T R I B U T I O N ;   C o s t a s   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 2 . 0 0 1 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F r a n c e s c h i n i   F . ,   2 0 0 7 ,   M A N A G E M E N T   M E A S U R E M E ;   F R A N C E S C H I N I   F ,   2 0 0 8 ,   I N T   J   P R O D U C T I V I T Y   P ,   V 5 7 ,   P 1 3 7 ,   D O I   1 0 . 1 1 0 8 / 1 7 4 1 0 4 0 0 8 1 0 8 4 7 4 0 1 ;   F R A N C E S C H I N I   F ,   2 0 0 9 ,   E U R O P E A N   J   O P E R A T I O N ;   F r a n c e s c h i n i   F ,   2 0 0 9 ,   Q U A L   R E L I A B   E N G   I N T ,   V 2 5 ,   P 9 8 7 ,   D O I   1 0 . 1 0 0 2 / q r e . 1 0 1 6 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G l a n z e l   W . ,   2 0 0 6 ,   S C I   F O C U S ,   V 1 ,   P 1 0 ;   H a r z i n g   A .   W . ,   2 0 0 7 ,   R E F L E C T I O N S   H   I N D E X ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J e n n i n g s   C ,   1 9 9 8 ,   N A T   N E U R O S C I ,   V 1 ,   P 6 4 1 ;   K A T S A R O S   D ,   2 0 0 7 ,   P   W O R K S H   S O C   A S P   W E B ,   P 2 0 0 7 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   L E H M A N N   S ,   2 0 0 5 ,   M E A S U R E S   M I S M E A S U R E S ;   L e h m a n n   S ,   2 0 0 6 ,   N A T U R E ,   V 4 4 4 ,   P 1 0 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 4 1 0 0 3 a ;   L E Y D E S D O R F F   L ,   2 0 0 9 ,   J   A M   S O C   I N   I N   P R E S S ;   M A C R O B E R T S   M ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M i n g e r s   J ,   2 0 0 9 ,   J   O P E R   R E S   S O C ,   V 6 0 ,   P 1 1 4 3 ,   D O I   1 0 . 1 0 5 7 / j o r s . 2 0 0 8 . 9 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   O R B A Y   M ,   2 0 0 7 ,   T U R K I S H   J   C H E M   B I B L I ,   V 2 7 ,   P 1 ;   R o u s s e a u   R . ,   2 0 0 6 ,   N E W   D E V   R E L A T E D   H I R S ;   S a a d   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 2 - 9 ;   S C H R E I B E R   M ,   2 0 0 7 ,   E P L - E U R O P H Y S   L E T T ,   V 7 8 ,   D O I   D O I   1 0 . 1 2 0 9 / 0 2 9 5 - 5 0 7 5 / 7 8 / 3 0 0 0 2 ;   S C H R E I B E R   M ,   2 0 0 8 ,   M O D I F I C A T I O N   H   U N P U B ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e g l e n   P .   O ,   1 9 9 2 ,   R E S   E V A L U A T ,   V 2 ,   P 1 4 3 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W e n d l   M C ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 b ;   W o e g i n g e r   G J ,   2 0 0 8 ,   M A T H   S O C   S C I ,   V 5 6 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t h s o c s c i . 2 0 0 8 . 0 3 . 0 0 1 	 4 8 	 1 7 	 1 7 	 2 	 1 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 0 	 4 	 1 	 	 	 	 	 6 4 	 7 3 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 8 . 0 0 3 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 3 0 Z I 	 W O S : 0 0 0 2 7 2 6 3 1 1 0 0 0 0 7 	 	 
 
 J 	 A d a m s ,   J 	 	 	 	 A d a m s ,   J o n a t h a n 	 	 	 T h e   u s e   o f   b i b l i o m e t r i c s   t o   m e a s u r e   r e s e a r c h   q u a l i t y   i n   U K   h i g h e r   e d u c a t i o n   i n s t i t u t i o n s 	 A R C H I V U M   I M M U N O L O G I A E   E T   T H E R A P I A E   E X P E R I M E N T A L I S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a s s e s s m e n t ;   i n d i c a t o r s ;   p r o f i l i n g ;   p e e r   r e v i e w 	 	 R e s e a r c h   a s s e s s m e n t   i n   t h e   U K   h a s   e v o l v e d   o v e r   a   q u a r t e r   o f   a   c e n t u r y   f r o m   a   l o o s e l y   s t r u c t u r e d ,   p e e r - r e v i e w   b a s e d   p r o c e s s   t o   o n e   w i t h   a   w e l l   u n d e r s t o o d   d a t a   p o r t f o l i o   a n d   a s s e s s m e n t   m e t h o d o l o g y .   A f t e r   2 0 0 8 ,   t h e   a s s e s s m e n t   p r o c e s s   w i l l   s h i f t   a g a i n ,   t o   t h e   u s e   o f   i n d i c a t o r s   b a s e d   l a r g e l y   o n   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a .   T h e s e   i n d i c a t o r s   w i l l   i n   p a r t   f o l l o w   t h e   f o r m a t   i n t r o d u c e d   i n   2 0 0 8 ,   w i t h   a   p r o f i l i n g   o f   a s s e s s m e n t   o u t c o m e s   a t   n a t i o n a l   a n d   i n t e r n a t i o n a l   l e v e l s .   H o w e v e r ,   t h e   s h i f t   f r o m   p e e r   a s s e s s m e n t   t o   a   q u a n t i t a t i v e   m e t h o d o l o g y   r a i s e s   c r i t i c a l   i s s u e s   a b o u t   w h i c h   m e t r i c s   a r e   a p p r o p r i a t e   a n d   i n f o r m a t i v e   a n d   h o w   s u c h   m e t r i c s   s h o u l d   b e   m a n a g e d   t o   p r o d u c e   w e i g h t i n g   f a c t o r s   f o r   f u n d i n g   f o r m u l a e .   T h e   l i n k   b e t w e e n   p u b l i c a t i o n   m e t r i c s   a n d   o t h e r   p e r c e p t i o n s   o f   r e s e a r c h   q u a l i t y   n e e d s   t o   b e   t h o r o u g h l y   t e s t e d   a n d   r e v i e w e d ,   a n d   m a y   b e   v a r i a b l e   b e t w e e n   d i s c i p l i n e s .   M a n y   o f   t h e   i n d i c a t o r s   t h a t   d r o p   o u t   o f   p u b l i c a t i o n   d a t a   a r e   p o o r l y   l i n k e d   t o   q u a l i t y   a n d   s h o u l d   n o t   b e   u s e d   a t   a l l .   T h e r e   a r e   a l s o   i s s u e s   a b o u t   w h i c h   p u b l i c a t i o n s   a r e   t h e   c o r r e c t   b a s e   f o r   a s s e s s m e n t ,   w h i c h   s t a f f   s h o u l d   b e   i n c l u d e d   i n   a   r e v i e w ,   h o w   s u b j e c t s   s h o u l d   b e   s t r u c t u r e d   a n d   h o w   t h e   c i t a t i o n   d a t a   s h o u l d   b e   n o r m a l i s e d   t o   a c c o u n t   f o r   d i s c i p l i n e - d e p e n d e n t   v a r i a b l e s .   F i n a l l y ,   i t   i s   v i t a l   t o   c o n s i d e r   t h e   e f f e c t   t h a t   a n y   a s s e s s m e n t   p r o c e s s   w i l l   h a v e   o n   t h e   b e h a v i o u r   o f   t h o s e   t o   b e   a s s e s s e d . 	 E v i d e n c e   L t d ,   L e e d s   L S 2   9 D F ,   W   Y o r k s h i r e ,   E n g l a n d 	 A d a m s ,   J   ( r e p r i n t   a u t h o r ) ,   E v i d e n c e   L t d ,   1 0 3   C l a r e n d o n   R d ,   L e e d s   L S 2   9 D F ,   W   Y o r k s h i r e ,   E n g l a n d . 	 j o n a t h a n . a d a m s @ e v i d e n c e . c o . u k 	 A d a m s ,   J o n a t h a n / A - 5 2 2 4 - 2 0 0 9 	 A d a m s ,   J o n a t h a n / 0 0 0 0 - 0 0 0 2 - 0 3 2 5 - 4 4 3 1 	 	 	 * A B R C ,   1 9 8 3 ,   S U P P   G I V   R E S   C O U N C   I ;   * A B R C ,   1 9 8 7 ,   S T R A T   S C I   B A S   D I S C   D ;   * A B R C   U G C ,   1 9 8 2 ,   C M N D 8 5 6 7 ;   A d a m s   J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 6 ,   P 6 1 5 ,   D O I   1 0 . 1 0 3 8 / 2 5 2 1 9 ;   A D A M S   J ,   1 9 9 8 ,   B E N C H M A R K I N G   R E S   E N G ;   A d a m s   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 3 2 - 7 ;   A d a m s   J ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 6 - x ;   C O O K   W R ,   1 9 7 7 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 4 0 ,   P 5 1 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 5 2 8 2 ;   C O O K   W R ,   1 9 7 6 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 9 ,   P 3 7 4 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 4 8 4 2 ;   D A I N T O N   F ,   1 9 7 7 ,   J   R   S T A T I S T   S O C         A ,   V 1 4 0 ,   P 1 9 9 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 4 8 7 4 ;   * E V   O S I ,   2 0 0 7 ,   P S A   T A R G   M E T R   U K   R E S ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G o o d h a r t   C . ,   1 9 7 5 ,   P A P E R S   M O N E T A R Y   E C ,   V I ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 4 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 7 ;   S h a t t o c k   M i c h a e l ,   1 9 9 4 ,   U G C   M A N A G E M E N T   B R I T ;   T R E A S U R Y   H M ,   2 0 0 6 ,   P R E B U D G E T   R E P O R T   2 0 0 ,   p C H 3 ;   * U G C ,   1 9 6 7 ,   C M N D 3 1 2 0 ;   * U G C ,   1 9 8 5 ,   S T R A T   H I G H   E D   1 9 9 0 S ;   * U G C ,   1 9 6 6 ,   C M N D 3 1 9 2 ;   * U G C ,   1 9 8 4 ,   C M N D 3 2 4 5 ;   V a r c o e   I a n ,   1 9 7 4 ,   O R G   S C I   B R I T A I N ;   W A L N E   J C ,   1 9 7 3 ,   H I G H   E D U C ,   V 2 ,   P 2 2 8 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 1 3 7 7 6 7 ;   W i l k i e   T o m ,   1 9 9 1 ,   B R I T   S C I   P O L I T I C S   1 9 	 2 3 	 1 7 	 1 7 	 2 	 2 7 	 B I R K H A U S E R   V E R L A G   A G 	 B A S E L 	 V I A D U K S T R A S S E   4 0 - 4 4 ,   P O   B O X   1 3 3 ,   C H - 4 0 1 0   B A S E L ,   S W I T Z E R L A N D 	 0 0 0 4 - 0 6 9 X 	 	 	 A R C H   I M M U N O L   T H E R   E X 	 A r c h .   I m m u n o l .   T h e r .   E x p . 	 F E B 	 2 0 0 9 	 5 7 	 1 	 	 	 	 	 1 9 	 3 2 	 	 1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 3 - 3 	 	 1 4 	 I m m u n o l o g y 	 I m m u n o l o g y 	 4 0 9 N I 	 W O S : 0 0 0 2 6 3 5 1 2 0 0 0 0 0 3 	 1 9 2 1 9 5 3 1 	 
 
 J 	 G o n z a l e z - A l c a i d e ,   G ;   A l o n s o - A r r o y o ,   A ;   d e   D i o s ,   J G ;   S e m p e r e ,   A P ;   V a l d e r r a m a - Z u r i a n ,   J C ;   A l e i x a n d r e - B e n a v e n t ,   R 	 	 	 	 G o n z a l e z - A l c a i d e ,   G . ;   A l o n s o - A r r o y o ,   A . ;   G o n z a l e z   d e   D i o s ,   J . ;   S e m p e r e ,   A .   P . ;   V a l d e r r a m a - Z u r i a n ,   J .   C . ;   A l e i x a n d r e - B e n a v e n t ,   R . 	 	 	 C o a u t h o r s h i p   n e t w o r k s   a n d   i n s t i t u t i o n a l   c o l l a b o r a t i o n   i n   R e v i s t a   d e   N e u r o l o g i a 	 R E V I S T A   D E   N E U R O L O G I A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c   a n a l y s i s ;   c o a u t h o r s h i p   n e t w o r k s ;   i n s t i t u t i o n a l   c o l l a b o r a t i o n ;   R e v i s t a   d e   N e u r o l o g i a ;   s c i e n t i f i c   c o l l a b o r a t i o n ;   s o c i a l   n e t w o r k   a n a l y s i s 	 B I O M E D I C A L   P U B L I C A T I O N S ;   J O U R N A L S ;   S P A I N 	 I n t r o d u c t i o n .   S c i e n t i f i c   c o o p e r a t i o n   i s   e s s e n t i a l   f o r   t h e   a d v a n c e   o f   s c i e n c e .   B i b l i o m e t r i c s   a n d   s o c i a l   n e t w o r k   a n a l y s i s   o f f e r   e v a l u a t i o n   i n d i c a t e s   t o   a n a l y s e   c o l l a b o r a t i o n   i n   s c i e n t i f i c   p a p e r s .   T h e   a i m   o f   t h i s   s t u d y   i s   t o   c h a r a c t e r i z e   s c i e n t i f i c   c o l l a b o r a t i o n   p a t t e r n s   i n   R e v i s t a   d e   N e u r o l o g i a   b e t w e e n   2 0 0 2   a n d   2 0 0 6 .   M a t e r i a l s   a n d   m e t h o d s .   C o a u t h o r s h i p s   a n d   i n s t i t u t i o n a l   r e l a t i o n s h i p s   o f   p a p e r s   p u b l i s h e d   i n   R e v i s t a   d e   N e u r o l o g i a   h a v e   b e e n   i d e n t i f i e d .   C o l l a b o r a t i o n   I n d e x ,   t h e   m o s t   p r o d u c t i v e   a u t h o r ' s   a n d   i n s t i t u t i o n a l   c o l l a b o r a t i o n   p a t t e r n s   a n d   t h e   t y p e s   o f   i n s t i t u t i o n a l   c o l l a b o r a t i o n   p a t t e r n s   a n d   t h e   t y p e s   o f   i n s t i t u t i o n a l   c o l l a b o r a t i o n s   h a v e   b e e n   q u a n t i f i e d .   A l s o ,   i t   h a s   b e e n   c o n s t r u c t e d   t h e   c o a u t h o r s h i p   n e t w o r k s   a n d   t h e   i n s t i t u t i o n a l   c o l l a b o r a t i o n   n e t w o r k .   N e t w o r k s   h a v e   b e e n   i d e n t i f i e d   a n d   r e p r e s e n t e d   u s i n g   A c c e s s   a n d   P a j e k   s o f t w a r e   t o o l s .   R e s u l t s .   T h e   C o l l a b o r a t i o n   I n d e x   w a s   4 . 0 1 ,   5 6 . 5 4 %   o f   p a p e r s   i n v o l v e d   i n s t i t u t i o n a l   c o l l a b o r a t i o n .   T h e   c o l l a b o r a t i o n   b e t w e e n   i n s t i t u t i o n s   o f   t h e   s a m e   c o u n t r y   p r e v a i l s   ( 5 2 . 7 % ) ,   f o l l o w e d   b y   c o l l a b o r a t i o n s   b e t w e e n   d e p a r t m e n t s ,   s e r v i c e s   o r   u n i t s   o f   t h e   s a m e   i n s t i t u t i o n   ( 4 0 . 4 7 % )   a n d   i n t e r n a t i o n a l   c o l l a b o r a t i o n   ( 6 . 8 3 % ) .   4 5   c o a u t h o r s h i p   n e t w o r k s   i n v o l v i n g   1 4 9   i n v e s t i g a t o r s   w i t h   a   h i g h   i n t e n s i t y   o f   c o l l a b o r a t i o n   a n d   a   l a r g e   i n s t i t u t i o n a l   n e t w o r k   i n v o l v e d   8 0   c e n t r e s   w e r e   o b s e r v e d .   C o n c l u s i o n s .   R e v i s t a   d e   N e u r o l o g i a   c o v e r s   s c i e n t i f i c   p r o d u c t i o n   o f   a   h i g h   n u m b e r   o f   r e s e a r c h   g r o u p s .   I t   h a s   b e e n   o b s e r v e d   a   p o s i t i v e   e v o l u t i o n   i n   t h e   c o l l a b o r a t i v e   p a t t e r n s   o v e r   t h e   t i m e .   N e v e r t h e l e s s ,   i t   i s   e s s e n t i a l   t o   e n c o u r a g e   i n t e r - r e g i o n a l   a n d   i n t e r n a t i o n a l   c o l l a b o r a t i o n   p a t t e r n s   o v e r   t h e   t i m e .   N e v e r t h e l e s s ,   i t   i s   e s s e n t i a l   t o   e n c o u r a g e   i n t e r - r e g i o n a l   a n d   i n t e r n a t i o n a l   c o l l a b o r a t i o n . 	 [ G o n z a l e z - A l c a i d e ,   G . ;   A l o n s o - A r r o y o ,   A . ;   V a l d e r r a m a - Z u r i a n ,   J .   C . ;   A l e i x a n d r e - B e n a v e n t ,   R . ]   U n i v   V a l e n c i a ,   C S I C ,   I n s t   H i s t   C i e n c i a   &   D o c u m e n t a c   L o p e z   P i n e r o ,   E - 4 6 0 0 3   V a l e n c i a ,   S p a i n ;   [ G o n z a l e z   d e   D i o s ,   J . ]   U n i v   M i g u e l   H e r n a n d e z   E l c h e ,   H o s p   T o r r e v i e j a ,   D e p t   P e d i a t ,   A l i c a n t e ,   S p a i n ;   [ S e m p e r e ,   A .   P . ]   H o s p   G e n   U n i v   A l i c a n t e ,   S e r v   N e u r o l ,   A l i c a n t e ,   S p a i n 	 A l e i x a n d r e - B e n a v e n t ,   R   ( r e p r i n t   a u t h o r ) ,   U n i v   V a l e n c i a ,   C S I C ,   I n s t   H i s t   C i e n c i a   &   D o c u m e n t a c   L o p e z   P i n e r o ,   P a l a n   C e r v e r o   P l   C i s n e r o s   4 ,   E - 4 6 0 0 3   V a l e n c i a ,   S p a i n . 	 r a f a e l . a l e i x a n d r e @ u v . e s 	 A l e i x a n d r e - B e n a v e n t ,   R a f a e l / G - 1 0 1 1 - 2 0 1 5 ;   A l o n s o - A r r o y o ,   A d o l f o / K - 8 1 8 2 - 2 0 1 3 	 A l e i x a n d r e - B e n a v e n t ,   R a f a e l / 0 0 0 0 - 0 0 0 2 - 6 6 7 8 - 8 8 4 4 ;   A l o n s o - A r r o y o ,   A d o l f o / 0 0 0 0 - 0 0 0 2 - 5 0 8 4 - 2 8 1 8 	 	 	 A G U L L O C A L A T A Y U D   V ,   2 0 0 7 ,   B R I T   J   S P O R T   M E D ,   V 4 2 ,   P 1 0 3 ,   D O I   1 0 . 1 1 3 6 / b j s m . 2 0 0 7 . 0 3 6 2 2 8 ;   A l e i x a n d r e - B e n a v e n t   R ,   2 0 0 7 ,   R E V   N E U R O L O G I A ,   V 4 5 ,   P 1 3 7 ;   A l e i x a n d r e - B e n a v e n t   R ,   2 0 0 7 ,   N E U R O L O G I A ,   V 2 2 ,   P 1 9 ;   B A T A G E L J   V ,   2 0 0 1 ,   P A J E K   V E R S I O N   0   7 0   P ;   B E R M E J O P A R E J A   F ,   2 0 0 4 ,   N E U R O L O G I A   S 1 ,   V 1 9 ,   p S 6 4 ;   C A M I   J ,   2 0 0 8 ,   M A P A   B I B L I O M E T R I C O   E ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   E U R   C O O P   F I E L D   S C I   T ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   d e   D i o s   J G ,   2 0 0 7 ,   R E V   N E U R O L O G I A ,   V 4 4 ,   P 1 0 1 ;   d e   D i o s   J G ,   2 0 0 7 ,   R E V   N E U R O L O G I A ,   V 4 4 ,   P 3 2 ;   F R E E M A N   L C ,   1 9 7 9 ,   S O C   N E T W O R K S ,   V 1 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 7 8 - 8 7 3 3 ( 7 8 ) 9 0 0 2 1 - 7 ;   G O N Z A L E Z A L C A I D E   G ,   2 0 0 7 ,   F E R T I L   S T E R   I N   P R E S S ;   G o n z a l e z - A l c a i d e   G . ,   2 0 0 6 ,   T R A S T O R N O S   A D I C T I V O S ,   V 8 ,   P 7 8 ;   K l e i n   J T ,   1 9 9 6 ,   L I B R   T R E N D S ,   V 4 5 ,   P 1 3 4 ;   L o p e z - M u n o z   F ,   1 9 9 6 ,   R e v   N e u r o l ,   V 2 4 ,   P 4 1 7 ;   * P L A N   N A C   I N V   C I E N ,   2 0 0 8 ,   D E S   I N N   T E C N   2 0 0 8   2 0 ;   R o s e l l   A ,   1 9 9 8 ,   R E V   N E U R O L O G I A ,   V 2 7 ,   P 1 0 7 1 ;   S c o t t   J ,   1 9 9 1 ,   S O C I A L   N E T W O R K   A N A L ;   V a l d e r r a m a - Z u r i a n   J C ,   2 0 0 7 ,   R E V   E S P   C A R D I O L ,   V 6 0 ,   P 1 1 7 ,   D O I   1 0 . 1 0 1 6 / S 1 8 8 5 - 5 8 5 7 ( 0 7 ) 6 0 1 2 4 - 8 ;   2 0 0 8 ,   7   P R O G R A M A   M A R C O   1   D ;   2 0 0 8 ,   R E D E S   T E M A T I C A S   I N V E 	 2 1 	 1 7 	 2 0 	 2 	 1 6 	 R E V I S T A   D E   N E U R O L O G I A 	 B A R C E L O N A 	 C / O   C E S A R   V I G U E R A ,   E D I T O R ,   A P D O   9 4 1 2 1 ,   0 8 0 8 0   B A R C E L O N A ,   S P A I N 	 0 2 1 0 - 0 0 1 0 	 	 	 R E V   N E U R O L O G I A 	 R e v .   N e u r o l o g i a 	 J U N   1 	 2 0 0 8 	 4 6 	 1 1 	 	 	 	 	 6 4 2 	 6 5 1 	 	 	 	 1 0 	 C l i n i c a l   N e u r o l o g y 	 N e u r o s c i e n c e s   &   N e u r o l o g y 	 3 5 4 I Y 	 W O S : 0 0 0 2 5 9 6 3 4 1 0 0 0 0 2 	 1 8 5 0 9 8 2 0 	 
 
 J 	 M u g n a i n i ,   R ;   P a c k e r ,   A L ;   M e n e g h i n i ,   R 	 	 	 	 M u g n a i n i ,   R . ;   P a c k e r ,   A .   L . ;   M e n e g h i n i ,   R . 	 	 	 C o m p a r i s o n   o f   s c i e n t i s t s   o f   t h e   B r a z i l i a n   A c a d e m y   o f   S c i e n c e s   a n d   o f   t h e   N a t i o n a l   A c a d e m y   o f   S c i e n c e s   o f   t h e   U S A   o n   t h e   b a s i s   o f   t h e   h - i n d e x 	 B R A Z I L I A N   J O U R N A L   O F   M E D I C A L   A N D   B I O L O G I C A L   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s c i e n t o m e t r i c s ;   b i b l i o m e t r i c s ;   i n d e x   h ;   s c i e n c e   e v a l u a t i o n ;   s c i e n t i f i c   a c a d e m y 	 C I T A T I O N S ;   A R T I C L E S 	 A   n e w   s c i e n t o m e t r i c   i n d i c a t o r ,   t h e   h - i n d e x ,   h a s   b e e n   r e c e n t l y   p r o p o s e d   ( H i r s c h   J E .   P r o c   N a t l   A c a d   S c i   2 0 0 5 ;   1 0 2 :   1 6 5 6 9 - 1 6 5 7 2 ) .   T h e   i n d e x   a v o i d s   s o m e   s h o r t c o m i n g s   o f   t h e   c a l c u l a t i o n   o f   t h e   t o t a l   n u m b e r   o f   c i t a t i o n s   a s   a   p a r a m e t e r   t o   e v a l u a t e   s c i e n t i f i c   p e r f o r m a n c e .   A l t h o u g h   i t   h a s   b e c o m e   k n o w n   o n l y   r e c e n t l y ,   i t   h a s   h a d   w i d e s p r e a d   a c c e p t a n c e .   A   c o m p a r i s o n   o f   t h e   a v e r a g e   h - i n d e x   o f   m e m b e r s   o f   t h e   B r a z i l i a n   A c a d e m y   o f   S c i e n c e s   ( B A S )   a n d   o f   t h e   N a t i o n a l   A c a d e m y   o f   S c i e n c e s   o f   t h e   U S A   ( N A S - U S A )   w a s   c a r r i e d   o u t   f o r   1 0   d i f f e r e n t   a r e a s   o f   s c i e n c e .   A l t h o u g h ,   a s   e x p e c t e d ,   t h e   c o m p a r i s o n   w a s   u n f a v o r a b l e   t o   t h e   m e m b e r s   o f   t h e   B A S ,   t h e   i m b a l a n c e   w a s   d i s t i n c t   i n   d i f f e r e n t   a r e a s .   S i n c e   t h e s e   t w o   a c a d e m i e s   r e p r e s e n t ,   t o   a   s i g n i f i c a n t   e x t e n t ,   t h e   s c i e n c e   o f   t o p   q u a l i t y   p r o d u c e d   i n   e a c h   c o u n t r y ,   t h e   c o m p a r i s o n   a l l o w s   t h e   i d e n t i f i c a t i o n   o f   t h e   a r e a s   i n   B r a z i l   t h a t   a r e   c l o s e r   t o   t h e   i n t e r n a t i o n a l   s t a k e h o l d e r s   o f   s c i e n t i f i c   e x c e l l e n c e .   T h e   a r e a s   o f   P h y s i c s   a n d   M a t h e m a t i c s   s t a n d   o u t   i n   t h i s   c o n t e x t .   T h e   h e t e r o g e n e i t y   o f   t h e   h - i n d e x   i n   t h e   d i f f e r e n t   a r e a s ,   e s t i m a t e d   b y   t h e   m e d i a n   d i s p e r s i o n   o f   t h e   i n d e x ,   i s   s i g n i f i c a n t l y   h i g h e r   i n   t h e   B A S   t h a n   i n   t h e   N A S - U S A .   N o   e l e m e n t s   h a v e   b e e n   c o l l e c t e d   i n   t h e   p r e s e n t   s t u d y   t o   p r o v i d e   a n   e x p l a n a t i o n   f o r   t h i s   f a c t . 	 [ P a c k e r ,   A .   L . ;   M e n e g h i n i ,   R . ]   U n i v   F e d   S a o   P a u l o ,   D e p t   I n f o r m a t   S a u d e ,   S a o   P a u l o ,   B r a z i l ;   [ M u g n a i n i ,   R . ]   U n i v   F e d   S a o   P a u l o ,   E s c o l a   C o m u n i c a c o e s   &   A r t e s ,   N u c l e o   P e s q u i s a   P r o d   C i e n t ,   S a o   P a u l o ,   B r a z i l ;   [ M u g n a i n i ,   R . ;   P a c k e r ,   A .   L . ;   M e n e g h i n i ,   R . ]   C t r   L a t i n o   A m e r   &   C a r i b e   I n f o r m a c a o   C i e n c i a s   S a u d ,   O P A S   O M S ,   B I R E M E ,   S a o   P a u l o ,   B r a z i l 	 M u g n a i n i ,   R   ( r e p r i n t   a u t h o r ) ,   U n i v   F e d   S a o   P a u l o ,   D I S ,   R U A   B o t u c a t u , 8 6 2 ,   B R - 0 4 0 2 3 9 0 1   S a o   P a u l o ,   B r a z i l . 	 r o g e r i o . m e n e g h i n i @ b i r e m e . o r g 	 P a c k e r ,   A b e l / C - 1 7 0 5 - 2 0 0 9 ;   M u g n a i n i ,   R o g e r i o / G - 3 8 4 4 - 2 0 1 1 ;   P a c k e r ,   A b e l   L a e r t e / J - 9 3 5 0 - 2 0 1 2 ;   M e n e g h i n i ,   R o g e r i o / I - 2 9 6 1 - 2 0 1 5 	 M u g n a i n i ,   R o g e r i o / 0 0 0 0 - 0 0 0 1 - 9 3 3 4 - 3 4 4 8 ;   P a c k e r ,   A b e l   L a e r t e / 0 0 0 0 - 0 0 0 1 - 9 6 1 0 - 5 7 2 8 ;   	 	 	 A l t b a c h   P .   G . ,   2 0 0 6 ,   I N T E R N   H I G H E R   E D ,   P 4 2 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B L A C K W O O D   L G ,   1 9 9 2 ,   E N V I R O N   M O N I T   A S S E S S ,   V 2 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 9 9 6 8 7 ;   B o r n m a n n   L ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 8 1 - 4 ;   B r a u n   T ,   2 0 0 5 ,   S C I E N T I S T ,   V 1 9 ,   P 8 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J i n   B H ,   2 0 0 7 ,   C H I N E S E   S C I   B U L L ,   V 5 2 ,   P 8 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ;   L e t a   J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 8 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 1 . 6 ;   M E N E G H I N I   R ,   1 9 9 5 ,   C I E N C   C U L T ,   V 4 7 ,   P 4 5 ;   M e n e g h i n i   R ,   2 0 0 6 ,   A N   A C A D   B R A S   C I E N C ,   V 7 8 ,   P 8 5 5 ,   D O I   1 0 . 1 5 9 0 / S 0 0 0 1 - 3 7 6 5 2 0 0 6 0 0 0 4 0 0 0 1 8 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M u g n a i n i   R ,   2 0 0 7 ,   P r o c e e d i n g s   o f   I S S I   2 0 0 7 :   1 1 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l   S o c i e t y   f o r   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s ,   V o l s   I   a n d   I I ,   P 9 0 4 ;   P a c k e r   A L ,   2 0 0 6 ,   A N   A C A D   B R A S   C I E N C ,   V 7 8 ,   P 8 4 1 ,   D O I   1 0 . 1 5 9 0 / S 0 0 0 1 - 3 7 6 5 2 0 0 6 0 0 0 4 0 0 0 1 7 ;   P O P O V   S B ,   P A R A M E T E R   Q U A N T I F Y   D ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 	 1 5 	 1 7 	 1 9 	 1 	 1 5 	 A S S O C   B R A S   D I V U L G   C I E N T I F I C A 	 S A O   P A U L O 	 F A C U L D A D E   M E D I C I N A ,   S A L A   2 1 ,   1 4 0 4 9   R I B E I R A O   P R E T O ,   S A O   P A U L O ,   B R A Z I L 	 0 1 0 0 - 8 7 9 X 	 	 	 B R A Z   J   M E D   B I O L   R E S 	 B r a z i l i a n   J .   M e d .   B i o l .   R e s . 	 A P R 	 2 0 0 8 	 4 1 	 4 	 	 	 	 	 2 5 8 	 2 6 2 	 	 	 	 5 	 B i o l o g y ;   M e d i c i n e ,   R e s e a r c h   &   E x p e r i m e n t a l 	 L i f e   S c i e n c e s   &   B i o m e d i c i n e   -   O t h e r   T o p i c s ;   R e s e a r c h   &   E x p e r i m e n t a l   M e d i c i n e 	 2 8 4 W H 	 W O S : 0 0 0 2 5 4 7 3 7 1 0 0 0 0 1 	 1 8 3 9 2 4 4 7 	 
 
 B 	 Z h u a n g ,   Z M ;   E l m a c i o g l u ,   E ;   L e e ,   D ;   G i l e s ,   C L 	 	 L a r s o n ,   R ;   R a s m u s s e n ,   E ;   S u g i m o t o ,   S ;   T o m s ,   E 	 	 Z h u a n g ,   Z i m i n g ;   E l m a c i o g l u ,   E r g i n ;   L e e ,   D o n g w o n ;   G i l e s ,   C .   L e e 	 	 	 M e a s u r i n g   C o n f e r e n c e   Q u a l i t y   b y   M i n i n g   P r o g r a m   C o m m i t t e e   C h a r a c t e r i s t i c s 	 P R O C E E D I N G S   O F   T H E   7 T H   A C M / I E E   J O I N T   C O N F E R E N C E   O N   D I G I T A L   L I B R A R I E S 	 	 	 E n g l i s h 	 P r o c e e d i n g s   P a p e r 	 7 t h   A C M / I E E E   J o i n t   C o n f e r e n c e   o n   D i g i t a l   L i b r a r i e s 	 J U N   1 8 - 2 3 ,   2 0 0 7 	 V a n c o u v e r ,   C A N A D A 	 A C M   S I G   I n f o r m a t   R e t r i e v a l ,   A C M   S I G   H y p e r t e x ,   H y p e r m e d i a   &   W e b ,   I E E E   T C D L ,   A m e r   S o c   I n f o r m a t   S c i   &   T e c h n o l ,   C o a l i t   N e t w o r k e d   I n f o r m a t 	 	 B i b l i o m e t r i c s ;   p r o g r a m   c o m m i t t e e ;   s o c i a l   n e t w o r k   a n a l y s i s ;   d a t a   m i n i n g ;   r a n k i n g ;   i m p a c t   f a c t o r ;   c a l l   f o r   p a p e r s 	 I M P A C T 	 B i b l i o m e t r i c s   a r e   i m p o r t a n t   m e a s u r e s   f o r   v e n u e   q u a l i t y   i n   d i g i t a l   l i b r a r i e s .   I m p a c t s   o f   v e n u e s   a r e   u s u a l l y   t h e   m a j o r   c o n s i d e r a t i o n   f o r   s u b s c r i p t i o n   d e c i s i o n - m a k i n g ,   a n d   f o r   r a n k i n g   a n d   r e c o m m e n d i n g   h i g h - q u a l i t y   v e n u e s   a n d   d o c u m e n t s .   F o r   d i g i t a l   l i b r a r i e s   i n   t h e   C o m p u t e r   S c i e n c e   l i t e r a t u r e   d o m a i n ,   c o n f e r e n c e s   p l a y   a   m a j o r   r o l e   a s   a n   i m p o r t a n t   p u b l i c a t i o n   a n d   d i s s e m i n a t i o n   o u t l e t .   H o w e v e r ,   w i t h   a   r e c e n t   p r o f u s i o n   o f   c o n f e r e n c e s   a n d   r a p i d l y   e x p a n d i n g   f i e l d s ,   i t   i s   i n c r e a s i n g l y   c h a l l e n g i n g   f o r   r e s e a r c h e r s   a n d   l i b r a r i a n s   t o   c   a s s e s s   t h e   q u a l i t y   o f   c o n f e r e n c e s .   W e   p r o p o s e   a   s e t   o f   n o v e l   h e u r i s t i c s   t o   a u t o m a t i c a l l y   d i s c o v e r   p r e s t i g i o u s   ( a n d   l o w - q u a l i t y )   c o n f e r e n c e s   b y   m i n i n g   t h e   c h a r a c t e r i s t i c s   o f   P r o g r a m   C o m m i t t e e   m e m b e r s .   W e   e x a m i n e   t h e   p r o p o s e d   c r i e s   b o t h   i n   i s o l a t i o n   a n d   c o m b i n a t i o n   u n d e r   a ,   c l a s s i f i c a t i o n   s c h e m e .   E v a l u a t i o n   o n   a   c o l l e c t i o n   o f   2 , 9 7 9   c o n f e r e n c e s   a n d   1 6 , 1 4 7   P C   m e m b e r s   s h o w s   t h a t ,   o u r   h e u r i s t i c s ,   w h e n   c o m b i n e d ,   c o r r e c t l y   c l a s s i f y   a b o u t   9 2 %   o f   t h e   c o n f e r e n c e s ,   w i t h   a   l o w   f a l s e   p o s i t i v e   r a t e   o f   0 . 0 3 5   a n d   a   r e c a l l   o f   m o r e   t h a n   7 3 %   f o r   i d e n t i f y i n g   r e p u t a b l e   c o n f e r e n c e s .   F u r t h e r m o r e ,   w e   d e m o n s t r a t e   e m p i r i c a l l y   t h a t   o u r   h e u r i s t i c s   c a n   a l s o   e f f e c t i v e l y   d e t e c t .   a   s e t   o f   l o w - q u a l i t y   c o n f e r e n c e s ,   w i t h   a   f a l s e   p o s i t i v e   r a t e   o f   m e r e l y   0 . 0 0 2 .   W e   a l s o   r e p o r t   o u r   e x p e r i e n c e   o f   d e t e c t i n g   t w o   p r e v i o u s l y   u n k n o w n   l o w - q u a l i t y   c o n f e r e n c e s .   F i n a l l y ,   w e   a p p l y   t h e   p r o p o s e d   t e c h n i q u e s   t o   t h e   e n t i r e   q u a l i t y   s p e c t r u m   b y   r a n k i n g   c o n f e r e n c e s   i n   t h e   c o l l e c t i o n . 	 [ Z h u a n g ,   Z i m i n g ;   E l m a c i o g l u ,   E r g i n ;   L e e ,   D o n g w o n ;   G i l e s ,   C .   L e e ]   P e n n   S t a t e   U n i v ,   U n i v e r s i t y   P k ,   P A   1 6 8 0 2   U S A 	 	 z z h u a n g @ i s t . p s u . e d u ;   e r g i n @ p s u . e d u ;   d o n g w o n @ p s u . e d u ;   g i l e s @ i s t . p s u . e d u 	 	 	 	 	 B a r a b a s i   A L ,   2 0 0 2 ,   P H Y S I C A   A ,   V 3 1 1 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 4 3 7 1 ( 0 2 ) 0 0 7 3 6 - 7 ;   B E R N S T E I N   P A ,   2 0 0 5 ,   P   3 1   V E R   L A R G   D A T   B A ;   B o l l e n   J ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 2 4 ;   B O L L E N   J ,   2 0 0 6 ,   J   S T A T U S ;   D A L K I L I C   M M ,   2 0 0 6 ,   P   2 0 0 6   S I A M   C   D A T   M I ;   E l m a c i o g l u   E ,   2 0 0 5 ,   S I G M O D   R E C ,   V 3 4 ,   P 3 3 ,   D O I   1 0 . 1 1 4 5 / 1 0 8 3 7 8 4 . 1 0 8 3 7 9 1 ;   E L M A C I O G L U   E ,   C O M M U N I C A T I   I N   P R E S S ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   F r e u n d   Y ,   1 9 9 7 ,   J   C O M P U T   S Y S T   S C I ,   V 5 5 ,   P 1 1 9 ,   D O I   1 0 . 1 0 0 6 / j c s s . 1 9 9 7 . 1 5 0 4 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H O N G   Y ,   2 0 0 4 ,   8   E U R   C   D I G   L I B   E C D L ,   P 1 3 4 ;   K A T E R A T T A N A K U L   P ,   2 0 0 3 ,   C O M M U N I C A T I O N S   A C M ,   V 4 5 ;   K o h a v i   R . ,   1 9 9 5 ,   P   1 4   I N T   J O I N T   C   A R T ,   P 1 1 3 7 ;   L a r s e n   B . ,   2 0 0 6 ,   P   6   A C M   I E E E   C S   J O I N ,   P 3 7 0 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 1 7 5 3 . 1 1 4 1 8 6 5 ;   M a n n   G .   S . ,   2 0 0 6 ,   P   6   A C M   I E E E   C S   J O I N ,   P 6 5 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 1 7 5 3 . 1 1 4 1 7 6 5 ;   N e r u r   S . ,   2 0 0 5 ,   C O M M U N I C A T I O N S   A C M ,   V 4 8 ;   N e w m a n   M .   E .   J . ,   2 0 0 1 ,   P H Y S   R E V ,   V 6 4 ;   N t o u l a s   A . ,   2 0 0 6 ,   P   1 5   I N T   W O R L D   W I D   W ;   Q u i n l a n   J R ,   1 9 9 6 ,   P   1 3   N A T   C   A R T   I N T ,   V 1 ,   P 7 2 5 ;   Q u i n l a n   J .   R . ,   1 9 9 3 ,   C 4   5   P R O G R A M S   M A C H I N ;   R A H M   E ,   2 0 0 5 ,   S I G M O D   R E C O R D ,   V 3 4 ;   S a h a   S ,   2 0 0 3 ,   J   M E D   L I B R   A S S O C ,   V 9 1 ,   P 4 2 ;   S c h o l k o p f   B . ,   1 9 9 9 ,   A D V   K E R N E L   M E T H O D S   S ;   W a s s e r m a n   S . ,   1 9 9 4 ,   S O C I A L   N E T W O R K S   A N A L 	 2 5 	 1 7 	 1 7 	 1 	 2 	 A S S O C   C O M P U T I N G   M A C H I N E R Y 	 N E W   Y O R K 	 1 5 1 5   B R O A D W A Y ,   N E W   Y O R K ,   N Y   1 0 0 3 6 - 9 9 9 8   U S A 	 	 	 9 7 8 - 1 - 5 9 5 9 3 - 6 4 4 - 8 	 	 	 	 2 0 0 7 	 	 	 	 	 	 	 2 2 5 	 2 3 4 	 	 1 0 . 1 1 4 5 / 1 2 5 5 1 7 5 . 1 2 5 5 2 2 0 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   E n g i n e e r i n g ,   E l e c t r i c a l   &   E l e c t r o n i c ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   E n g i n e e r i n g ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 B J I 2 0 	 W O S : 0 0 0 2 6 6 0 6 2 8 0 0 0 3 4 	 	 
 
 J 	 C h u ,   H 	 	 	 	 C h u ,   H 	 	 	 T a x o n o m y   o f   i n l i n k e d   W e b   e n t i t i e s :   W h a t   d o e s   i t   i m p l y   f o r   w e b o m e t r i c   r e s e a r c h ? 	 L I B R A R Y   &   I N F O R M A T I O N   S C I E N C E   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 9 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t i c s 	 A U G   2 5 - 2 9 ,   2 0 0 3 	 B e i j i n g ,   P E O P L E S   R   C H I N A 	 	 	 	 W O R L D - W I D E - W E B ;   C I T A T I O N   A N A L Y S I S ;   C I T E R   M O T I V A T I O N S ;   S O C I A L - S C I E N C E S ;   I N F O R M A T I O N ;   C L A S S I F I C A T I O N ;   B E H A V I O R ;   L I N K S ;   C O M M U N I C A T I O N ;   R E A S O N S 	 H y p e r l i n k s   f r o m   o t h e r   W e b   s i t e s   a r e ,   i n   s o m e   r e s p e c t ,   s i m i l a r   t o   b i b l i o g r a p h i c a l   c i t a t i o n s .   L i n k   a n a l y s i s ,   l i k e   c i t a t i o n   a n a l y s i s   i n   b i b l i o m e t r i c s ,   h a s   e m e r g e d   a s   a   r e s e a r c h   a r e a   o f   w e b o m e t r i c s   i n   r e c e n t   y e a r s .   B u t   w h y   a r e   l i n k s   m a d e   a n d   w h e r e   d o   t h e y   p o i n t ?   A   s a m p l e   o f   i n l i n k e d   W e b   e n t i t i e s   ( i . e . ,   W e b   p a g e s   o r   W e b   s i t e s )   w a s   r a n d o m l y   s e l e c t e d   f r o m   a   g r o u p   o f   a c a d e m i c   i n s t i t u t i o n s '   W e b   s i t e s .   T h e   i n l i n k e d   s i t e s ,   a l o n g   w i t h   t h e   h y p e r l i n k   d a t a   a n d   o u t l i n k i n g   s i t e s ,   w e r e   a n a l y z e d   a n d   c a t e g o r i z e d   t o   f o r m   a   t a x o n o m y   o f   i n l i n k e d   s i t e s .   B a s e d   o n   t h i s   t a x o n o m y ,   a   l i s t   o f   r e a s o n s   f o r   h y p e r l i n k i n g ,   g r o u p e d   i n   f o u r   t o p - l e v e l   c a t e g o r i e s   ( t e a c h i n g / l e a r n i n g ,   r e s e a r c h ,   s e r v i c e ,   a n d   h o m e   p a g e ) ,   w a s   i d e n t i f i e d .   C o m p a r e d   w i t h   b i b l i o g r a p h i c a l   c i t a t i o n s ,   h y p e r l i n k s   w e r e   m a d e   f o r   a   d i f f e r e n t   s e t   o f   r e a s o n s .   H y p e r l i n k i n g   a l s o   h a s   f e w e r   d i m e n s i o n s ,   l e s s   c o m p l e x i t y ,   a n d   l i t t l e   n e g a t i v e   i m p l i c a t i o n .   O n   t h e   w h o l e ,   a l m o s t   5 0 %   o f   a l l   t h e   i n l i n k s   e x a m i n e d   w e r e   c r e a t e d   f o r   p o i n t i n g   t o   r e s o u r c e   o r   d i r e c t o r y   i n f o r m a t i o n   p r o v i d e d   a t   t h e   t a r g e t   W e b   s i t e s .   I n   a d d i t i o n ,   n e a r l y   t h r e e   f o u r t h s   ( 7 3 % )   o f   a l l   t h e   i n l i n k e d   s i t e s   a n a l y z e d   i n   t h i s   s t u d y   w e r e   l i n k e d   t o   f o r   r e a s o n s   r e l a t i n g   t o   s e r v i c e   o r   h o m e   p a g e   w h i l e   l e s s   t h a n   o n e   t h i r d   ( 2 7 % )   o f   t h e   l i n k s   w e r e   m a d e   o u t   o f   r e s e a r c h   o r   t e a c h i n g / l e a r n i n g   m o t i v a t i o n s .   Y e t ,   t e a c h i n g   a n d   r e s e a r c h   a r e   t h e   t w o   m a j o r   c r i t e r i a   t r a d i t i o n a l l y   u s e d   f o r   e v a l u a t i n g   a c a d e m i c   i n s t i t u t i o n s .   T h e s e   f i n d i n g s ,   a l t h o u g h   b y   n o   m e a n s   c o n c l u s i v e ,   s u g g e s t   t h a t   e v a l u a t i v e   l i n k - b a s e d   s t u d i e s   s h o u l d   n o t   o n l y   c o n s i d e r   l i n k   c o u n t s   b u t   a l s o   r e a s o n s   f o r   h y p e r l i n k i n g   i n   o r d e r   t o   e n s u r e   t h e   v a l i d i t y   o f   s u c h   r e s e a r c h .   ( c )   2 0 0 4   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 L o n g   I s l   U n i v ,   P a l m e r   S c h   L i b   &   I n f o r m a t   S c i ,   G r e e n v a l e ,   N Y   1 1 5 4 8   U S A 	 C h u ,   H   ( r e p r i n t   a u t h o r ) ,   L o n g   I s l   U n i v ,   P a l m e r   S c h   L i b   &   I n f o r m a t   S c i ,   C W   P o s t   C a m p u s , 7 2 0   N o   B l v d ,   G r e e n v a l e ,   N Y   1 1 5 4 8   U S A . 	 h c h u @ l i u . e d u 	 	 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B O N Z I   S ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 2 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 5 7 1 ;   B O U D O U R I D E S   M A ,   1 9 9 9 ,   W E B O M E T R I C S   S E L F   O R G ;   B R O O K S   T A ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 4 ;   B R O O K S   T A ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 4 0 2 ;   B r u n o   D . ,   2 0 0 3 ,   I n f o r m a t i o n   M a n a g e m e n t   J o u r n a l ,   V 3 7 ;   C A N O   V ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 8 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 8 4 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - Z ;   C a s e   D O ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 6 3 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 7 < 6 3 5 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - H ;   C H U   H ,   2 0 0 1 ,   P   8   I N T   C   S C I   I N F   S Y ,   V 1 ,   P 1 1 7 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C l e v e r d o n   C . ,   1 9 8 4 ,   I n f o r m a t i o n   S e r v i c e s   &   U s e ,   V 4 ,   P 3 7 ;   C O O P E R   W S ,   1 9 6 9 ,   A M   D O C ,   V 2 0 ,   P 2 6 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 0 0 3 1 4 ;   C r o n i n   B ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 3 1 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 1 4 < 1 3 1 9 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - W ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   G a r f i e l d   E ,   1 9 6 5 ,   S T A T   A S S   M E T H O D S   M E C ,   P 1 8 9 ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   H e t i n g   C h u ,   2 0 0 2 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 4 3 ,   P 1 1 0 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 9 7 2 ;   H I C K S   D ,   1 9 9 1 ,   S O C   S T U D   S C I ,   V 2 1 ,   P 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 1 0 2 1 0 0 3 0 0 3 ;   H o d g e s   T . ,   1 9 7 8 ,   T H E S I S   U   C A L I F O R N I A ;   I n g w e r s e n   P ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 2 3 6 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 6 7 ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   L A R S O N   R R ,   1 9 9 6 ,   P   A N N   M   A M   S O C   I N F   S ,   V 3 3 ,   P 7 1 ;   L a w r e n c e   S ,   1 9 9 9 ,   N A T U R E ,   V 4 0 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 3 8 / 2 1 9 8 7 ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   L I P E T Z   B A ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 2 0 7 ;   L I U   M X ,   1 9 9 3 ,   J   I N F O R M   S C I ,   V 1 9 ,   P 1 3 ;   L Y C O S ,   2 0 0 3 ,   P O R T I O N S   P O W E R E D   F A S ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   O P P E N H E I M   C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 5 0 4 ;   P E R I T Z   B C ,   1 9 8 3 ,   S C I E N T O M E T R I C S ,   V 5 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 4 7 2 2 6 ;   R o u s s e a u   R ,   1 9 9 7 ,   C Y B E R M E T R I C S ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S M I T H   A G ,   2 0 0 1 ,   P   8   I N T   C   S C I   I N F   S Y ,   V 2 ,   P 6 5 7 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 1 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 1 ;   T h e l w a l l   M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 9 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 6 1 ;   T h e l w a l l   M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 2 ;   T H E L W A L L   M ,   2 0 0 3 ,   I N F O R M A T I O N   R E S ,   V 8 ;   T h e l w a l l   M . ,   2 0 0 2 ,   J   I N F   S C I ,   V 2 8 ,   P 4 8 5 ;   T h o m a s   O ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 2 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 3 8 ;   V a u g h a n   L ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 8 4 ;   V I N K L E R   P ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 4 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 9 ;   V r e e l a n d   R C ,   2 0 0 0 ,   L A W   L I B R   J ,   V 9 2 ,   P 9 ;   W h i t e   M D ,   1 9 9 7 ,   L I B R   Q U A R T ,   V 6 7 ,   P 1 2 2 ;   W i l k i n s o n   D ,   2 0 0 3 ,   J   I N F O R M   S C I ,   V 2 9 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 3 7 6 2 2 0 2 0 6 9 	 4 8 	 1 7 	 1 9 	 2 	 8 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 7 4 0 - 8 1 8 8 	 	 	 L I B R   I N F O R M   S C I   R E S 	 L i b r .   I n f o r .   S c i .   R e s . 	 	 2 0 0 5 	 2 7 	 1 	 	 	 	 	 8 	 2 7 	 	 1 0 . 1 0 1 6 / j . l i s r . 2 0 0 4 . 0 9 . 0 0 2 	 	 2 0 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 1 4 D N 	 W O S : 0 0 0 2 2 8 2 0 5 3 0 0 0 0 2 	 	 
 
 J 	 F a b a - P e r e z ,   C ;   G u e r r e r o - B o t e ,   V P ;   D e   M o y a - A n e g o n ,   F 	 	 	 	 F a b a - P e r e z ,   C ;   G u e r r e r o - B o t e ,   V P ;   D e   M o y a - A n e g o n ,   F 	 	 	 D a t a   m i n i n g   i n   a   c l o s e d   W e b   e n v i r o n m e n t 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 W O R L D - W I D E - W E B ;   A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   I N F O R M A T I O N - R E T R I E V A L ;   C I T A T I O N   A N A L Y S I S ;   S P A C E ;   M A P ;   I N T E R N E T ;   B I B L I O M E T R I C S ;   W E B O M E T R I C S ;   S C I E N C E 	 T h e   n e e d   t o   u n d e r s t a n d   t h e   f a b r i c   o f   r e l a t i o n s h i p s   t h a t   a r e   b u i l d i n g   u p   o n   t h e   W o r l d   W i d e   W e b   c a l l s   f o r   t h e   a p p l i c a t i o n   o f   t o o l s   t h a t   a l l o w   o n e   t o   e x t r a c t   t h e   u n d e r l y i n g   k n o w l e d g e .   S o m e   o f   t h e   m o s t   i n t e r e s t i n g   r e l a t i o n s h i p s   a r e   t h o s e   t h a t   a r e   b r o u g h t   t o   l i g h t   b y   c o - l i n k i n g   a n a l y s i s   ( t h e   W e b   a n a l o g u e   o f   c o c i t a t i o n   a n a l y s i s ) .   W e   h e r e   p r o p o s e   s u c h   a n   a n a l y s i s   b a s e d   o n   t h e   c o - l i n k s   t h a t   a r e   g e n e r a t e d   w i t h i n   a   c l o s e d   w e b   e n v i r o n m e n t ,   u s i n g   m u l t i v a r i a t e   s t a t i s t i c s   ( P r i n c i p a l   C o m p o n e n t   A n a l y s i s ,   a n d   M u l t i d i m e n s i o n a l   S c a l i n g )   a n d   a   c o n n e c t i o n - b a s e d   t e c h n i q u e   ( K o h o n e n ' s   S e l f - O r g a n i z i n g   M a p s ) .   A n   a p p l i c a t i o n   w a s   m a d e   t o   a   g e n e r i c   t h e m a t i c   e n v i r o n m e n t ,   a n d   t h e   u n d e r l y i n g   r e l a t i o n s h i p s   a n d   s t r u c t u r e s   w e r e   m a n i f e s t   i n   t h e   i n t e r p r e t a t i o n   o f   t h e   r e s u l t s . 	 U n i v   E x t r e m a d u r a ,   F a c   L i b   &   I n f o r m a t   S c i ,   A n t i g u o   H o s p   M i l i t a r ,   E - 0 6 0 7 1   B a d a j o z ,   S p a i n ;   U n i v   G r a n a d a ,   F a c   L i b   &   I n f o r m a t   S c i ,   G r a n a d a ,   S p a i n 	 G u e r r e r o - B o t e ,   V P   ( r e p r i n t   a u t h o r ) ,   U n i v   E x t r e m a d u r a ,   F a c   L i b   &   I n f o r m a t   S c i ,   A n t i g u o   H o s p   M i l i t a r ,   E - 0 6 0 7 1   B a d a j o z ,   S p a i n . 	 	 M o y a   A n e g o n ,   F e l i x / C - 4 0 0 4 - 2 0 0 9 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / E - 7 5 4 6 - 2 0 1 6 	 M o y a   A n e g o n ,   F e l i x / 0 0 0 0 - 0 0 0 2 - 0 2 5 5 - 8 6 2 8 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / 0 0 0 0 - 0 0 0 3 - 4 8 2 1 - 9 7 6 8 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B j o r n e b o r n   L ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 2 2 1 8 9 0 7 ;   B O U D O U R I D E S   M A ,   1 9 9 9 ,   W E B O M E T R I C S   S E L F   O R G ;   C h e n   H C ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 8 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 ) 4 9 : 7 < 5 8 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - V ;   C h e n   H M ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 5 9 . a b s ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   D i n g   Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 5 7 0 9 1 0 9 ;   E g g h e   L ,   2 0 0 0 ,   J   I N F   S C I ,   V 2 6 ,   P 3 2 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 3 4 8 ;   F A B A P E R E Z   C ,   2 0 0 3 ,   T H E S I S   U   G R A N A D A   S P A ;   F u j i g a k i   Y ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 7 ;   G A R C I A S A N T I A G O   M D ,   2 0 0 1 ,   T H E S I S   U   G R A N A D A   S P A ;   G a r f i e l d   E ,   1 9 9 8 ,   L I B R I ,   V 4 8 ,   P 6 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 8 . 4 8 . 2 . 6 7 ;   G u e r r e r o   V P ,   2 0 0 2 ,   L I B R   I N F O R M   S C I   R E S ,   V 2 4 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 7 4 0 - 8 1 8 8 ( 0 2 ) 0 0 1 2 4 - X ;   G u e r r e r o   V P ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 2 3 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 9 ;   G U E R R E R O B O T E   V ,   1 9 9 7 ,   T H E S I S   U   G R A N A D A   S P A ;   G u e r r o - B o t e   V . P . ,   2 0 0 2 ,   I N F O R M A T I O N   P R O C E S S I ,   V 3 8 ,   P 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 6 6 - 2 ;   H a r t e r   S P ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 1 5 9 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 0 2 9 > 3 . 0 . C O ; 2 - P ;   H e   Y L ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 ;   H E R R E R O S O L A N A   V ,   2 0 0 0 ,   T H E S I S   U   G R A N A D A   S P A ;   H e t i n g   C h u ,   2 0 0 2 ,   J o u r n a l   o f   E d u c a t i o n   f o r   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e ,   V 4 3 ,   P 1 1 0 ,   D O I   1 0 . 2 3 0 7 / 4 0 3 2 3 9 7 2 ;   H i l e r a   J . ,   1 9 9 5 ,   R E D E S   N E U R O N A L E S   A R T ;   K A S K I   S ,   1 9 9 9 ,   P   9   I N T   C   A R T   N E U R   N ,   P 9 4 0 ;   K i m   H J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 8 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 1 0 < 8 8 7 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - 1 ;   K o h o n e n   T ,   1 9 9 9 ,   K O H O N E N   M A P S ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 4 4 4 5 0 2 7 0 - 4 / 5 0 0 1 3 - 9 ;   K O H O N E N   T ,   1 9 8 2 ,   B I O L   C Y B E R N ,   V 4 3 ,   P 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 3 7 2 8 8 ;   K O H O N E N   T ,   1 9 9 0 ,   P   I E E E ,   V 7 8 ,   P 1 4 6 4 ,   D O I   1 0 . 1 1 0 9 / 5 . 5 8 3 2 5 ;   K o h o n e n   T . ,   1 9 8 9 ,   S E L F   O R G   A S S   M E M O R Y ;   K o h o n e n   T . ,   1 9 9 5 ,   S E L F   O R G   M A P S ;   L a g u s   K ,   1 9 9 9 ,   A R T I F   I N T E L L   R E V ,   V 1 3 ,   P 3 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 6 5 8 6 2 2 1 2 5 0 ;   L a g u s   K . ,   1 9 9 9 ,   P   9   I N T   C   A R T   N E U R   N ,   P 3 7 1 ;   L a r s e n   J ,   2 0 0 2 ,   C O M P U T   S T A T   D A T A   A N ,   V 3 8 ,   P 5 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 9 4 7 3 ( 0 1 ) 0 0 0 7 6 - 7 ;   L a r s o n   R . ,   1 9 9 6 ,   P   5 9   A N N   M   A M   S O C   I N ,   P 7 1 ;   L i n   X ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 1 ) 4 8 : 1 < 4 0 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - 1 ;   L O P E Z - L O P E Z   P . ,   1 9 9 6 ,   I N T R O   B I B L I O M E T R I A ;   M A R S H A K O V A   V ,   1 9 7 3 ,   N A U C H   T E K H   I N F O R M   2 ,   P 3 ;   M C K I E R N A N   G ,   1 9 9 6 ,   C I T E D S I T E S   S M   C I T A T I ;   M I L M A N   B L ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 1 ;   M o y a   F . ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 5 7 ;   M O Y A A N E G O N   F ,   1 9 9 9 ,   A C T   4   C   I S K O   E S P   E O C ,   P 1 5 1 ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   d e   S o l l a   P r i c e   D .   J . ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   R o u s s e a u   R . ,   1 9 9 7 ,   C Y B E R M E T R I C S   I N T   J   S ,   V 1 ,   P 1 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 7 ;   S m i t h   A . G ,   1 9 9 9 ,   I M P A C T   W E B   S I T E S   C O M ;   v a n   R a a n   A F J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 0 1 0 2 0 6 9 ;   V A N D E R B E S S E L A A R   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 4 1 5 ;   V A N R A A N   A F J ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 0 ,   P 4 3 9 ;   V r e e l a n d   R C ,   2 0 0 0 ,   L A W   L I B R   J ,   V 9 2 ,   P 9 ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 1 0 3 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W H I T E   H D ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 5 0 2 	 5 4 	 1 7 	 1 7 	 1 	 1 9 	 K L U W E R   A C A D E M I C   P U B L 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 	 2 0 0 3 	 5 8 	 3 	 	 	 	 	 6 2 3 	 6 4 0 	 	 1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 0 6 8 8 4 . 0 8 0 3 6 . 7 3 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 5 0 M D 	 W O S : 0 0 0 1 8 6 9 9 9 6 0 0 0 1 0 	 	 
 
 J 	 K o s t o f f ,   R N ;   D e M a r c o ,   R A 	 	 	 	 K o s t o f f ,   R N ;   D e M a r c o ,   R A 	 	 	 E x t r a c t i n g   i n f o r m a t i o n   f r o m   t h e   l i t e r a t u r e   b y   t e x t   m i n i n g 	 A N A L Y T I C A L   C H E M I S T R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 D A T A B A S E   T O M O G R A P H Y ;   F I S H - O I L ;   S C I E N C E ;   B I B L I O M E T R I C S ;   M A N A G E M E N T ;   D I S C O V E R Y ;   R A Y N A U D S 	 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 	 	 	 	 	 B r a u n   T . ,   1 9 8 7 ,   L I T   A N A L   C H E M   S C I E N T ;   F i n n   R ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 2 ;   G o r d o n   M D ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 1 1 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 2 ) 4 7 : 2 < 1 1 6 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 1 ;   H E A R S T   M ,   1 9 9 9 ,   P   S I G I R   9 9   P   C   2 2   I N ;   H e a r s t   M A ,   1 9 9 9 ,   P   A C L   9 9   3 7   A N N   M   A S ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 1 ,   P 4 9 3 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   S M A L H E I S E R   N R ,   1 9 9 4 ,   N E U R O S C I   R E S   C O M M U N ,   V 1 5 ,   P 1 ;   S m a l h e i s e r   N R ,   1 9 9 8 ,   A R C H   G E N   P S Y C H I A T ,   V 5 5 ,   P 7 5 2 ,   D O I   1 0 . 1 0 0 1 / a r c h p s y c . 5 5 . 8 . 7 5 2 ;   S m a l h e i s e r   N R ,   1 9 9 8 ,   C O M P U T   M E T H   P R O G   B I O ,   V 5 7 ,   P 1 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 9 - 2 6 0 7 ( 9 8 ) 0 0 0 3 3 - 9 ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   S W A N S O N   D R ,   1 9 9 9 ,   A B S T R   P A P   A M   C H E M   S ,   V 2 1 7 ,   P 1 0 ;   V O O R H E E S   E M ,   1 9 9 8 ,   N I S T   S P E C A L   P U B L I C A T ;   Z a m i r   O . ,   1 9 9 9 ,   T H E S I S   U   W A S H I N G T O N 	 2 2 	 1 7 	 1 8 	 0 	 6 	 A M E R   C H E M I C A L   S O C 	 W A S H I N G T O N 	 1 1 5 5   1 6 T H   S T ,   N W ,   W A S H I N G T O N ,   D C   2 0 0 3 6   U S A 	 0 0 0 3 - 2 7 0 0 	 	 	 A N A L   C H E M 	 A n a l .   C h e m . 	 J U L   1 	 2 0 0 1 	 7 3 	 1 3 	 	 	 	 	 3 7 0 A 	 3 7 8 A 	 	 1 0 . 1 0 2 1 / a c 0 1 2 4 7 2 h 	 	 9 	 C h e m i s t r y ,   A n a l y t i c a l 	 C h e m i s t r y 	 4 4 8 Z P 	 W O S : 0 0 0 1 6 9 6 6 0 1 0 0 0 0 8 	 1 1 4 6 7 5 8 6 	 
 
 J 	 M c M i l l a n ,   G S ;   H a m i l t o n ,   R D 	 	 	 	 M c M i l l a n ,   G S ;   H a m i l t o n ,   R D 	 	 	 U s i n g   b i b l i o m e t r i c s   t o   m e a s u r e   f i r m   k n o w l e d g e :   A n   a n a l y s i s   o f   t h e   U S   p h a r m a c e u t i c a l   i n d u s t r y 	 T E C H N O L O G Y   A N A L Y S I S   &   S T R A T E G I C   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 I N D I C A T O R S ;   P E R S P E C T I V E ;   T E C H N O L O G Y ;   P A T E N T S 	 A   r e c e n t   l i t e r a t u r e   r e v i e w   h i g h l i g h t e d   t h e   k n o w l e d g e - b a s e d   v i e w   a s   a n   i m p o r t a n t   c u r r e n t   t h e o r y   i n   t h e   s t r a t e g i c   m a n a g e m e n t   a r e a .   T h e   c u r r e n t   p a p e r   u t i l i z e s   t h a t   t h e o r y   a s   t h e   c o n t e x t   f o r   e m p l o y i n g   b i b l i o m e t r i c s   t o   u n c o v e r   t h e   p u b l i s h i n g   a n d   p a t e n t i n g   c i t a t i o n   p a t t e r n s   i n   a   g r o u p   o f   t w e l v e   U S   p h a r m a c e u t i c a l   c o m p a n i e s   o v e r   a   1 3 - y e a r   p e r i o d .   O u r   i n i t i a l   f i n d i n g s   s u g g e s t   t h a t   f i r m s   s e l f - c i t e   a   g r e a t   d e a l ,   a n d   t h a t   t h e y   r e l y   h e a v i l y   o n   p u b l i c   s c i e n c e .   I n   a d d i t i o n ,   w e   f o u n d   t h a t   M e r c k   a n d   C o .   i s   t h e   m o s t   f r e q u e n t l y   c i t e d   c o m p a n y   i n   b o t h   t h e   s c i e n c e   a n d   t e c h n o l o g y   a r e a s ,   t h o u g h   s o m e w h a t   l e s s   s o   i n   t e c h n o l o g y .   T h e   m a n a g e r i a l   i m p l i c a t i o n s ,   p a r t i c u l a r l y   f r o m   a   k n o w l e d g e   p e r s p e c t i v e ,   a r e   d i s c u s s e d   a s   w e l l   a s   s o m e   s u g g e s t i o n s   f o r   f u t u r e   r e s e a r c h . 	 P e n n   S t a t e   U n i v ,   D e p t   S o c i a l   S c i ,   A b i n g t o n ,   P A   U S A ;   T e m p l e   U n i v ,   D e p t   G e n   &   S t r a t e g   M a n a g e m e n t ,   P h i l a d e l p h i a ,   P A   1 9 1 2 2   U S A 	 M c M i l l a n ,   G S   ( r e p r i n t   a u t h o r ) ,   1 6 0 0   W o o d l a n d   R d ,   A b i n g t o n ,   P A   1 9 0 0 1   U S A . 	 	 	 	 	 	 A L B E R T   M B ,   1 9 9 1 ,   R E S   P O L I C Y ,   V 2 0 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 1 ) 9 0 0 5 5 - U ;   B a r n a r d   C . L ,   1 9 3 8 ,   F U N C T I O N S   E X E C U T I V E ;   B i e r l y   P ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 1 2 3 ;   B i e r l y   P ,   1 9 9 6 ,   R & D   M A N A G E ,   V 2 6 ,   P 1 1 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 6 . t b 0 0 9 3 6 . x ;   C O H E N   W M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 1 2 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 5 3 ;   C O O L   K ,   1 9 9 3 ,   S T R A T E G I C   M A N A G E   J ,   V 1 4 ,   P 4 7 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 4 0 1 0 6 ;   C y e r t   R M ,   1 9 9 7 ,   O R G A N   D Y N ,   V 2 5 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 9 0 - 2 6 1 6 ( 9 7 ) 9 0 0 3 6 - X ;   D E C A R O L I S   D ,   1 9 9 4 ,   T H E S I S   T E M P L E   U ;   G R A V E S   S ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E M E N T ,   V 1 4 ,   P 5 9 3 ;   G R I L I C H E S   Z ,   1 9 9 0 ,   J   E C O N   L I T ,   V 2 8 ,   P 1 6 6 1 ;   H o s k i s s o n   R E ,   1 9 9 9 ,   J   M A N A G E ,   V 2 5 ,   P 4 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 9 - 2 0 6 3 ( 9 9 ) 0 0 0 0 8 - 2 ;   K O E N I G   M E D ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 2 4 - 0 ;   L e v i n   R i c h a r d   C . ,   1 9 8 7 ,   B R O O K I N G S   P A P E R S   E C ,   V 3 ,   P 7 8 3 ,   D O I   D O I   1 0 . 2 3 0 7 / 2 5 3 4 4 5 4 ;   L i e b e s k i n d   J P ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 9 3 ;   M c M i l l a n   G S ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 0 - X ;   N A R I N   F ,   1 9 8 7 ,   R E S   P O L I C Y ,   V 1 6 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 7 ) 9 0 0 2 8 - X ;   N A R I N   F ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 1 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 3 9 - X ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   P e n r o s e   E . ,   1 9 5 9 ,   T H E O R Y   G R O W T H   F I R M ;   * P H A R M   M A N   A S S ,   1 9 8 9 ,   P M A   S T A T   F A C T   B O O K ;   P o l a n y i   M . ,   1 9 6 6 ,   T A C I T   D I M E N S I O N ;   S e l z n i c k   P h i l i p ,   1 9 5 7 ,   L E A D E R S H I P   A D M   S O C I O ;   S p e n d e r   J C ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 5 	 2 3 	 1 7 	 1 9 	 3 	 1 1 	 C A R F A X   P U B L I S H I N G 	 B A S I N G S T O K E 	 R A N K I N E   R D ,   B A S I N G S T O K E   R G 2 4   8 P R ,   H A N T S ,   E N G L A N D 	 0 9 5 3 - 7 3 2 5 	 	 	 T E C H N O L   A N A L   S T R A T E G 	 T e c h n o l .   A n a l .   S t r a t e g .   M a n a g e . 	 D E C 	 2 0 0 0 	 1 2 	 4 	 	 	 	 	 4 6 5 	 4 7 5 	 	 	 	 1 1 	 M a n a g e m e n t ;   M u l t i d i s c i p l i n a r y   S c i e n c e s 	 B u s i n e s s   &   E c o n o m i c s ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 3 7 8 K W 	 W O S : 0 0 0 1 6 5 5 8 4 4 0 0 0 0 3 	 	 
 
 J 	 M o n g e o n ,   P ;   P a u l - H u s ,   A 	 	 	 	 M o n g e o n ,   P h i l i p p e ;   P a u l - H u s ,   A d e l e 	 	 	 T h e   j o u r n a l   c o v e r a g e   o f   W e b   o f   S c i e n c e   a n d   S c o p u s :   a   c o m p a r a t i v e   a n a l y s i s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n   i n d e x e s ;   S c o p u s ;   W e b   o f   S c i e n c e ;   R e s e a r c h   e v a l u a t i o n 	 S O C I A L - S C I E N C E S ;   O F - S C I E N C E ;   G O O G L E   S C H O L A R ;   R E S E A R C H   P E R F O R M A N C E ;   C I T A T I O N - I N D E X ;   H U M A N I T I E S ;   O V E R L A P ;   I M P A C T 	 B i b l i o m e t r i c   m e t h o d s   a r e   u s e d   i n   m u l t i p l e   f i e l d s   f o r   a   v a r i e t y   o f   p u r p o s e s ,   n a m e l y   f o r   r e s e a r c h   e v a l u a t i o n .   M o s t   b i b l i o m e t r i c   a n a l y s e s   h a v e   i n   c o m m o n   t h e i r   d a t a   s o u r c e s :   T h o m s o n   R e u t e r s '   W e b   o f   S c i e n c e   ( W o S )   a n d   E l s e v i e r ' s   S c o p u s .   T h e   o b j e c t i v e   o f   t h i s   r e s e a r c h   i s   t o   d e s c r i b e   t h e   j o u r n a l   c o v e r a g e   o f   t h o s e   t w o   d a t a b a s e s   a n d   t o   a s s e s s   w h e t h e r   s o m e   f i e l d ,   p u b l i s h i n g   c o u n t r y   a n d   l a n g u a g e   a r e   o v e r   o r   u n d e r r e p r e s e n t e d .   T o   d o   t h i s   w e   c o m p a r e d   t h e   c o v e r a g e   o f   a c t i v e   s c h o l a r l y   j o u r n a l s   i n   W o S   ( 1 3 , 6 0 5   j o u r n a l s )   a n d   S c o p u s   ( 2 0 , 3 4 6   j o u r n a l s )   w i t h   U l r i c h ' s   e x t e n s i v e   p e r i o d i c a l   d i r e c t o r y   ( 6 3 , 0 1 3   j o u r n a l s ) .   R e s u l t s   i n d i c a t e   t h a t   t h e   u s e   o f   e i t h e r   W o S   o r   S c o p u s   f o r   r e s e a r c h   e v a l u a t i o n   m a y   i n t r o d u c e   b i a s e s   t h a t   f a v o r   N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   a s   w e l l   a s   B i o m e d i c a l   R e s e a r c h   t o   t h e   d e t r i m e n t   o f   S o c i a l   S c i e n c e s   a n d   A r t s   a n d   H u m a n i t i e s .   S i m i l a r l y ,   E n g l i s h - l a n g u a g e   j o u r n a l s   a r e   o v e r r e p r e s e n t e d   t o   t h e   d e t r i m e n t   o f   o t h e r   l a n g u a g e s .   W h i l e   b o t h   d a t a b a s e s   s h a r e   t h e s e   b i a s e s ,   t h e i r   c o v e r a g e   d i f f e r s   s u b s t a n t i a l l y .   A s   a   c o n s e q u e n c e ,   t h e   r e s u l t s   o f   b i b l i o m e t r i c   a n a l y s e s   m a y   v a r y   d e p e n d i n g   o n   t h e   d a t a b a s e   u s e d .   T h e s e   r e s u l t s   i m p l y   t h a t   i n   t h e   c o n t e x t   o f   c o m p a r a t i v e   r e s e a r c h   e v a l u a t i o n ,   W o S   a n d   S c o p u s   s h o u l d   b e   u s e d   w i t h   c a u t i o n ,   e s p e c i a l l y   w h e n   c o m p a r i n g   d i f f e r e n t   f i e l d s ,   i n s t i t u t i o n s ,   c o u n t r i e s   o r   l a n g u a g e s .   T h e   b i b l i o m e t r i c   c o m m u n i t y   s h o u l d   c o n t i n u e   i t s   e f f o r t s   t o   d e v e l o p   m e t h o d s   a n d   i n d i c a t o r s   t h a t   i n c l u d e   s c i e n t i f i c   o u t p u t   t h a t   a r e   n o t   c o v e r e d   i n   W o S   o r   S c o p u s ,   s u c h   a s   f i e l d - s p e c i f i c   a n d   n a t i o n a l   c i t a t i o n   i n d e x e s . 	 [ M o n g e o n ,   P h i l i p p e ;   P a u l - H u s ,   A d e l e ]   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   M o n t r e a l ,   P Q   H 3 C   3 J 7 ,   C a n a d a 	 M o n g e o n ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   M o n t r e a l ,   E c o l e   B i b l i o t h e c o n   &   S c i   I n f o r m a t ,   S u c c   C t r   V i l l e , C P   6 1 2 8 ,   M o n t r e a l ,   P Q   H 3 C   3 J 7 ,   C a n a d a . 	 p h i l i p p e . m o n g e o n @ u m o n t r e a l . c a ;   a d e l e . p a u l - h u s @ u m o n t r e a l . c a 	 	 P a u l - H u s ,   A d e l e / 0 0 0 0 - 0 0 0 2 - 4 5 7 2 - 5 3 8 5 	 	 	 A b r i z a h   A ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 7 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 1 3 - 7 ;   A i c h a m b a u n   E . ,   2 0 0 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 1 3 2 0 ,   D O I   [ 1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ,   D O I   1 0 . 1 0 0 2 / A S I . 2 1 0 6 2 ] ;   A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   B a r n e t t   P h i l i p ,   2 0 1 2 ,   I s s u e s   i n   S c i e n c e   &   T e c h n o l o g y   L i b r a r i a n s h i p ,   D O I   1 0 . 5 0 6 2 / F 4 W 3 7 T 8 C ;   C l e r m o n t   M . ,   2 0 1 2 ,   2 0 1 6 8 5 0   S S R N ;   D e   G r o o t e   S L ,   2 0 1 2 ,   N U R S   O U T L O O K ,   V 6 0 ,   P 3 9 1 ,   D O I   1 0 . 1 0 1 6 / j . o u t l o o k . 2 0 1 2 . 0 4 . 0 0 7 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 1 - 2 ;   G a v e l   Y ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 6 5 9 5 8 ;   G i n g r a s   Y . ,   2 0 1 4 ,   D E R I V E S   E V A L U A T I O N   R ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   H i c k s   D ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 8 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 5 8 ;   K n o r r - C e t i n a   K .   D . ,   1 9 9 1 ,   H I S T   P O L I T   E C O N ,   V 2 3 ,   P 1 0 5 ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   L a r i v i e r e   V ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 4 9 ;   L a r i v i e r e   V ,   2 0 1 5 ,   P L O S   O N E ,   V 1 0 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 1 2 7 5 0 2 ;   L o p e z - I l l e s c a s   C ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 0 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 8 . 0 0 1 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M i k k i   S ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 3 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 8 - 6 ;   M i n g e r s   J ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 6 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 7 0 - 0 ;   N a t i o n a l   S c i e n c e   F o u n d a t i o n ,   2 0 0 6 ,   S C I   E N G   I N D ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   O s c a - L l u c h   J ,   2 0 1 3 ,   A N   P S I C O L - S P A I N ,   V 2 9 ,   P 1 0 2 5 ,   D O I   1 0 . 6 0 1 8 / a n a l e s p s . 2 9 . 3 . 1 5 4 9 1 1 ;   S a n t a   S ,   2 0 1 0 ,   I N V E S T I G   B I B L I O T E C O L ,   V 2 4 ,   P 1 3 ;   v a n   L e e u w e n   T N ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 9 7 1 9 4 8 4 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I M   C O N T ;   W o u t e r s   P . ,   2 0 0 6 ,   A C T E S   R E C H E R C H E   S C I ,   V 4 ,   P 1 0 ,   D O I   [ 1 0 . 3 9 1 7 / a r s s . 1 6 4 . 0 0 1 1 ,   D O I   1 0 . 3 9 1 7 / A R S S . 1 6 4 . 0 0 1 1 ] 	 2 6 	 1 6 	 1 6 	 2 8 	 9 0 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 2 0 1 6 	 1 0 6 	 1 	 	 	 	 	 2 1 3 	 2 2 8 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 5 - 1 7 6 5 - 5 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 D A 8 S G 	 W O S : 0 0 0 3 6 8 0 7 5 8 0 0 0 1 2 	 	 
 
 J 	 H u a n g ,   L ;   Z h a n g ,   Y ;   G u o ,   Y ;   Z h u ,   D H ;   P o r t e r ,   A L 	 	 	 	 H u a n g ,   L u ;   Z h a n g ,   Y i ;   G u o ,   Y i n g ;   Z h u ,   D o n g h u a ;   P o r t e r ,   A l a n   L . 	 	 	 F o u r   d i m e n s i o n a l   S c i e n c e   a n d   T e c h n o l o g y   p l a n n i n g :   A   n e w   a p p r o a c h   b a s e d   o n   b i b l i o m e t r i c s   a n d   t e c h n o l o g y   r o a d m a p p i n g 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S c i e n c e   a n d   T e c h n o l o g y   ( S & T )   p l a n n i n g ;   F o u r   d i m e n s i o n a l   p l a n n i n g ;   T e c h n o l o g y   r o a d m a p p i n g ;   B i b l i o m e t r i c s ;   P a t e n t   a n a l y s i s ;   S o l a r   c e l l s 	 O R G A N I Z A T I O N S 	 S e e m i n g l y   e n d l e s s   n e w   t e c h n o l o g i e s   a r e   e m e r g i n g .   M a p p i n g   o u t   S c i e n c e   a n d   T e c h n o l o g y   ( S & T )   p l a n n i n g   c o r r e c t l y   o n   t h e   n a t i o n a l   l e v e l   w o u l d   h e l p   i n n o v a t i o n   s h a r e h o l d e r s   r e m a i n   c u r r e n t   o n   t e c h n o l o g i c a l   d e v e l o p m e n t   t r e n d s   a n d   g a i n   a n   a d v a n t a g e o u s   p o s i t i o n   a m o n g   t h e   f i e r c e   f u t u r e   c o m p e t i t i o n   o f   t h e   g l o b a l   m a r k e t .   T h u s ,   f o r m u l a t i n g   e f f e c t i v e   S & T   p l a n n i n g   i s   s i g n i f i c a n t   f o r   a   n a t i o n ,   e s p e c i a l l y   f o r   n e w   a n d   e m e r g i n g   t e c h n o l o g i e s .   T h i s   p a p e r   p r o p o s e s   a n   i n d u s t r y   S & T   p l a n n i n g   f r a m e w o r k .   D i f f e r e n t   f r o m   p r e v i o u s   f r a m e w o r k s ,   t h i s   m e t h o d o l o g y ' s   d y n a m i c   i s   d i r e c t e d   i n   f o u r   d i m e n s i o n s   ( n a t i o n ,   t e c h n o l o g y ,   i n d u s t r y ,   r i s k s   a n d   i m p a c t s ) ,   t r i e s   t o   f i n d   t h e   k e y   e l e m e n t s   i n   a   s p e c i f i c   t e c h n o l o g y   a r e a ,   a n d   a i m s   t o   a i d   i n   n a t i o n a l   S & T   p l a n n i n g .   C h i n a ' s   s o l a r   c e l l   i n d u s t r y   i s   e m p l o y e d   a s   t h e   c a s e   s t u d y .   ( C )   2 0 1 2   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ H u a n g ,   L u ;   Z h a n g ,   Y i ;   G u o ,   Y i n g ;   Z h u ,   D o n g h u a ]   B e i j i n g   I n s t   T e c h n o l ,   S c h   M a n a g e m e n t   &   E c o n ,   B e i j i n g   1 0 0 0 8 1 ,   P e o p l e s   R   C h i n a ;   [ P o r t e r ,   A l a n   L . ]   G e o r g i a   I n s t   T e c h n o l ,   T e c h n o l   P o l i c y   &   A s s e s s m e n t   C t r ,   A t l a n t a ,   G A   3 0 3 3 2   U S A ;   [ P o r t e r ,   A l a n   L . ]   S e a r c h   T e c h n o l   I n c ,   R & D ,   N o r c r o s s ,   G A   U S A 	 G u o ,   Y   ( r e p r i n t   a u t h o r ) ,   B e i j i n g   I n s t   T e c h n o l ,   S c h   M a n a g e m e n t   &   E c o n ,   B e i j i n g   1 0 0 0 8 1 ,   P e o p l e s   R   C h i n a . 	 h u a n g l u 6 2 8 @ b i t . e d u . c n ;   y i z h a n g b i t @ g m a i l . c o m ;   v i o l e t 7 3 7 6 @ g m a i l . c o m ;   z h u d h 1 1 1 @ 1 6 3 . c o m ;   a l a n . p o r t e r @ i s y e . g a t e c h . e d u 	 p o r t e r ,   a l a n / A - 7 0 1 3 - 2 0 0 9 	 p o r t e r ,   a l a n / 0 0 0 0 - 0 0 0 2 - 4 5 2 0 - 6 5 1 8 	 	 	 C h o i   C ,   2 0 0 9 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 6 ,   P 7 5 4 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 1 0 . 0 0 7 ;   E Z R A   A A ,   1 9 7 5 ,   S C I E N C E ,   V 1 8 7 ,   P 7 0 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 8 7 . 4 1 7 8 . 7 0 7 ;   G r o e n v e l d   P . ,   1 9 9 7 ,   R E S   T E C H N O L   M A N A G E ,   V 4 0 ;   J u z n i c   P ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 4 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 3 0 - 8 ;   K a p p e l   T A ,   2 0 0 1 ,   J   P R O D   I N N O V A T   M A N A G ,   V 1 8 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 7 3 7 - 6 7 8 2 ( 0 0 ) 0 0 0 6 6 - 7 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 1 ,   P 4 9 3 ;   L e e   Y G ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 6 . 0 4 . 0 0 3 ;   L i   J . ,   2 0 0 7 ,   2 0 0 7   C H I N A   S O L A R   P V ;   M o e d   H . ,   2 0 0 5 ,   H D B   Q U A N T I T A T I V E   S C I ;   P h a a l   R ,   2 0 0 4 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 3 ) 0 0 0 7 2 - 6 ;   P O R T E R   A L ,   1 9 9 5 ,   T E C H N O L   F O R E C A S T   S O C ,   V 4 9 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 0 - 1 6 2 5 ( 9 5 ) 0 0 0 2 2 - 3 ;   P o r t e r   A . L . ,   2 0 0 5 ,   T E C H   M I N I N G   E X P L O I T I ;   R o p e r   A .   T . ,   2 0 1 1 ,   F O R E C A S T I N G   M A N A G E M E ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   W e n k   J r .   E . ,   1 9 7 7 ,   S C I   T E C H N O L O G Y   P O L I C ,   P 1 5 3 	 1 5 	 1 6 	 1 7 	 7 	 7 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 J A N 	 2 0 1 4 	 8 1 	 	 	 	 	 	 3 9 	 4 8 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 1 2 . 0 9 . 0 1 0 	 	 1 0 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 2 7 8 Y P 	 W O S : 0 0 0 3 2 8 9 2 6 1 0 0 0 0 4 	 	 
 
 J 	 H j o r l a n d ,   B 	 	 	 	 H j o r l a n d ,   B i r g e r 	 	 	 C i t a t i o n   a n a l y s i s :   A   s o c i a l   a n d   d y n a m i c   a p p r o a c h   t o   k n o w l e d g e   o r g a n i z a t i o n 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A p p r o a c h e s   t o   k n o w l e d g e   o r g a n i z a t i o n ;   I n f o r m a t i o n   o r g a n i z a t i o n ;   B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   E p i s t e m o l o g y 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   I N F O R M A T I O N - S C I E N C E ;   S C I E N T I F I C   P A P E R S ;   R E S E A R C H   F R O N T ;   W O R D   A N A L Y S I S ;   R E T R I E V A L ;   S U B J E C T ;   M A P S ;   S E M A N T I C S ;   N E T W O R K S 	 K n o w l e d g e   o r g a n i z a t i o n   ( K O )   a n d   b i b l i o m e t r i c s   h a v e   t r a d i t i o n a l l y   b e e n   s e e n   a s   s e p a r a t e   s u b f i e l d s   o f   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e ,   b u t   b i b l i o m e t r i c   t e c h n i q u e s   m a k e   i t   p o s s i b l e   t o   i d e n t i f y   c a n d i d a t e   t e r m s   f o r   t h e s a u r i   a n d   t o   o r g a n i z e   k n o w l e d g e   b y   r e l a t i n g   s c i e n t i f i c   p a p e r s   a n d   a u t h o r s   t o   e a c h   o t h e r   a n d   t h e r e b y   i n d i c a t i n g   k i n d s   o f   r e l a t e d n e s s   a n d   s e m a n t i c   d i s t a n c e .   I t   i s   t h e r e f o r e   i m p o r t a n t   t o   v i e w   b i b l i o m e t r i c   t e c h n i q u e s   a s   a   f a m i l y   o f   a p p r o a c h e s   t o   K O   i n   o r d e r   t o   i l l u s t r a t e   t h e i r   r e l a t i v e   s t r e n g t h s   a n d   w e a k n e s s e s .   T h e   s u b f i e l d   o f   b i b l i o m e t r i c s   c o n c e r n e d   w i t h   c i t a t i o n   a n a l y s i s   f o r m s   a   d i s t i n c t   a p p r o a c h   t o   K O   w h i c h   i s   c h a r a c t e r i z e d   b y   i t s   s o c i a l ,   h i s t o r i c a l   a n d   d y n a m i c   n a t u r e ,   i t s   c l o s e   d e p e n d e n c e   o n   s c h o l a r l y   l i t e r a t u r e   a n d   i t s   e x p l i c i t   k i n d   o f   l i t e r a r y   w a r r a n t .   T h e   t w o   m a i n   m e t h o d s ,   c o - c i t a t i o n   a n a l y s i s   a n d   b i b l i o g r a p h i c   c o u p l i n g   r e p r e s e n t   d i f f e r e n t   t h i n g s   a n d   t h u s   n e i t h e r   c a n   b e   c o n s i d e r e d   s u p e r i o r   f o r   a l l   p u r p o s e s .   T h e   m a i n   d i f f e r e n c e   b e t w e e n   t r a d i t i o n a l   k n o w l e d g e   o r g a n i z a t i o n   s y s t e m s   ( K O S s )   a n d   m a p s   b a s e d   o n   c i t a t i o n   a n a l y s i s   i s   t h a t   t h e   f i r s t   g r o u p   r e p r e s e n t s   i n t e l l e c t u a l   K O S s ,   w h e r e a s   t h e   s e c o n d   r e p r e s e n t s   s o c i a l   K O S s .   F o r   t h i s   r e a s o n   b i b l i o m e t r i c   m a p s   c a n n o t   b e   e x p e c t e d   e v e r   t o   b e   f u l l y   e q u i v a l e n t   t o   s c h o l a r l y   t a x o n o m i e s ,   b u t   t h e y   a r e   -   a l o n g   w i t h   o t h e r   f o r m s   o f   K O S s   -   v a l u a b l e   t o o l s   f o r   a s s i s t i n g   u s e r s '   t o   o r i e n t   t h e m s e l v e s   t o   t h e   i n f o r m a t i o n   e c o l o g y .   L i k e   o t h e r   K O S s ,   c i t a t i o n - b a s e d   m a p s   c a n n o t   b e   n e u t r a l   b u t   w i l l   a l w a y s   b e   b a s e d   o n   r e s e a r c h e r s '   d e c i s i o n s ,   w h i c h   t e n d   t o   f a v o r   c e r t a i n   i n t e r e s t s   a n d   v i e w s   a t   t h e   e x p e n s e   o f   o t h e r s .   ( C )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   C o p e n h a g e n ,   R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   D K - 2 3 0 0   C o p e n h a g e n   S ,   D e n m a r k 	 H j o r l a n d ,   B   ( r e p r i n t   a u t h o r ) ,   U n i v   C o p e n h a g e n ,   R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   6   B i r k e t i n g e t ,   D K - 2 3 0 0   C o p e n h a g e n   S ,   D e n m a r k . 	 p n l 6 1 7 @ i v a . k u . d k 	 	 H j o r l a n d ,   B i r g e r / 0 0 0 0 - 0 0 0 1 - 9 5 3 5 - 1 7 3 2 	 	 	 A n d e r s e n   H ,   2 0 0 6 ,   C O G N I T I V E   S T R U C T U R E   O F   S C I E N T I F I C   R E V O L U T I O N S ,   P 1 ,   D O I   1 0 . 2 2 7 7 /   0 5 2 1 8 5 5 7 5 6 ;   A n d e r s e n   H ,   2 0 0 0 ,   J   D O C ,   V 5 6 ,   P 6 7 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 3 2 ;   A s t r o m   F ,   2 0 0 2 ,   E M E R G I N G   F R A M E W O R K S ,   P 1 8 5 ;   A v r a m   S ,   2 0 1 2 ,   C O N T R O L   E N G   A P P L   I N F ,   V 1 4 ,   P 3 5 ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   B o y a c k   K W ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 3 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 1 9 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C h e n   C . ,   2 0 0 3 ,   M A P P I N G   S C I   F R O N T I E R ;   C h e n   C M ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 3 8 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 0 9 ;   C h u a   A Y K ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 1 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 2 9 ;   C o o p e r   R ,   2 0 0 5 ,   P H I L O S   M E D ,   V 8 6 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 3 4 5 - 1 ;   D E H A R T   F E ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 3 8 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 6 ) 4 2 : 5 < 3 8 6 : : A I D - A S I 1 0 > 3 . 0 . C O ; 2 - I ;   E l i o t   T .   S . ,   1 9 4 4 ,   4   Q U A R T E T S ;   E r e s h e f s k y   M a r c ,   2 0 0 1 ,   P O V E R T Y   L I N N A E A N   H I E ;   G A R F I E L D   E ,   1 9 8 0 ,   L I B R   Q U A R T ,   V 5 0 ,   P 4 0 ;   G A R F I E L D   E ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 2 9 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 0 6 ) 4 4 : 5 < 2 9 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - A ;   G u n s   R ,   2 0 1 3 ,   J   D O C ,   V 6 9 ,   P 2 9 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 1 3 1 1 3 0 0 0 9 3 ;   H a r d e m a n   S ,   2 0 1 2 ,   S C I E N T O M E T R I C S ;   H A R T E R   S P ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 5 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 1 0 ) 4 4 : 9 < 5 4 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - F ;   H j o r l a n d   B i r g e r ,   2 0 1 3 ,   K n o w l e d g e   O r g a n i z a t i o n ,   V 4 0 ,   P 1 6 9 ;   H j o r l a n d   B ,   1 9 9 8 ,   K N O W L   O R G A N ,   V 2 5 ,   P 1 6 ;   H J O R L A N D   B ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 1 7 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 9 5 ;   H j o r l a n d   B i r g e r ,   2 0 0 2 ,   A D V   K N O W L E D G E   O R G ,   V 8 ,   P 4 5 0 ;   H j o r l a n d   B ,   2 0 0 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 1 ,   P 3 6 7 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 7 . 1 4 4 0 4 1 0 1 1 5 ;   H j o r l a n d   B ,   2 0 1 3 ,   K N O W L   O R G A N ,   V 4 0 ,   P 1 1 ;   H j o r l a n d   B ,   2 0 1 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 9 ,   P 5 4 5 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 1 2 . 1 0 . 0 0 1 ;   H j o r l a n d   B ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 5 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 8 2 ;   H o d g e   G . ,   2 0 0 0 ,   S Y S T E M S   K N O W L E D G E   O R ;   H u l m e   E .   W . ,   1 9 1 1 ,   L I B   A S S   R E C O R D ,   V 1 3 ,   P 3 8 9 ;   H u l m e   E .   W y n d h a m ,   1 9 1 1 ,   L I B   A S S   R E C O R D ,   V 1 3 ,   P 4 4 4 ;   H u l m e   E d w a r d   W . ,   1 9 1 1 ,   L I B   A S S   R E C O R D ,   V 1 3 ,   P 3 5 4 ;   J a n s s e n s   F ,   2 0 0 7 ,   K D D - 2 0 0 7   P R O C E E D I N G S   O F   T H E   T H I R T E E N T H   A C M   S I G K D D   I N T E R N A T I O N A L   C O N F E R E N C E   O N   K N O W L E D G E   D I S C O V E R Y   A N D   D A T A   M I N I N G ,   P 3 6 0 ;   J a r n e v i n g   B ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 5 ,   P 2 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 7 0 - 7 ;   K E S S L E R   M M ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 9 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K l a v a n s   R ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 4 4 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 6 ;   M a r s h a k o v a   I .   V . ,   1 9 7 3 ,   S C I   T E C H N I C A L   I N F O R M ,   V 6 ,   P 3 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M c G a r r y   K ,   1 9 9 1 ,   K N O W L E D G E   C O M M U N I C A T ,   P 1 3 2 ;   M i k s a   F r a n c i s   L . ,   1 9 9 8 ,   D D C   U N I V E R S E   K N O W L E D ;   M o y a - A n e g o n   F ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 5 9 2 2 6 ;   N i   C Q ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 6 3 0 ;   O l e s o n   A l e x a n d r a ,   1 9 7 9 ,   O R G   K N O W L E D G E   M O D E R N ;   P A O   M L ,   1 9 9 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 9 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 3 ) 9 0 0 2 6 - A ;   P A O   M L ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 2 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 2 6 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 6 ;   R e e s - P o t t e r   L .   K ,   1 9 9 1 ,   P   1   I N T   I S K O   C   D A R M S ,   P 1 4 5 ;   R E E S P O T T E R   L K ,   1 9 8 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 5 ,   P 6 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 9 ) 9 0 1 0 1 - 5 ;   R o u s s e a u   R ,   2 0 0 8 ,   S O C I A L   I N F O R M   R E T R I E ,   P 2 5 2 ;   S A L T O N   G ,   1 9 7 1 ,   J   D O C ,   V 2 7 ,   P 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 1 1 ;   S A T I J A   M P ,   1 9 9 2 ,   I N T   C L A S S I F ,   V 1 9 ,   P 3 9 ;   S c h n e i d e r   J .   W . ,   2 0 0 4 ,   T H E S I S   R O Y A L   S C H   L I B ;   C a s t r o   e   S i l v a   M . ,   2 0 1 2 ,   E U R O P E A N   J   S C I   R E S ,   V 6 8 ,   P 6 1 6 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S m a l l   H . ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 5 6 ;   S m a l l   H ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 4 9 - 2 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S v e n o n i u s   E l a i n e ,   2 0 0 0 ,   I N T E L L E C T U A L   F D N   I N F ;   T h a g a r d   P ,   1 9 9 2 ,   C O N C E P T U A L   R E V O L U T I O ;   T I J S S E N   R J W ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 2 8 8 ;   T o u l m i n   S . ,   1 9 7 2 ,   H U M A N   U N D E R S T A N D I N G ;   V a r g a s - Q u e s a d a   B . ,   2 0 0 7 ,   V I S U A L I Z I N G   S T R U C T U R ;   W a l l e r s t e i n   I . ,   1 9 9 6 ,   O P E N   S O C I A L   S C I   R E P O ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 9 9 9 9 : 9 9 9 9 < : : A I D - A S I 1 5 4 2 > 3 . 3 . C O ; 2 - K ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W h i t l e y   R .   D . ,   2 0 0 0 ,   I N T E L L E C T U A L   S O C I A L ;   Y a n   E J ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 1 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 6 8 0 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 9 9 	 7 1 	 1 6 	 1 7 	 1 4 	 1 7 2 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 1 8 7 3 - 5 3 7 1 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 N O V 	 2 0 1 3 	 4 9 	 6 	 	 	 	 	 1 3 1 3 	 1 3 2 5 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 1 3 . 0 7 . 0 0 1 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 1 7 J A 	 W O S : 0 0 0 3 2 4 3 5 4 6 0 0 0 0 8 	 	 
 
 J 	 C o o m b e s ,   P H ;   N i c h o l s o n ,   J D 	 	 	 	 C o o m b e s ,   P h i l i p   H . ;   N i c h o l s o n ,   J o h n   D . 	 	 	 B u s i n e s s   m o d e l s   a n d   t h e i r   r e l a t i o n s h i p   w i t h   m a r k e t i n g :   A   s y s t e m a t i c   l i t e r a t u r e   r e v i e w 	 I N D U S T R I A L   M A R K E T I N G   M A N A G E M E N T 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 B i b l i o m e t r i c s ;   B u s i n e s s   m o d e l s ;   C i t a t i o n   a n a l y s i s ;   I n d u s t r i a l   m a r k e t i n g ;   V a l u e   c o - c r e a t i o n 	 V A L U E   C O - C R E A T I O N ;   C O C I T A T I O N   A N A L Y S I S ;   C I T A T I O N   A N A L Y S I S ;   I M P A C T   F A C T O R S ;   P E R S P E C T I V E ;   D E F I N I T I O N ;   N E T W O R K S ;   P O L I C Y ;   A S S O C I A T I O N S ;   P E R F O R M A N C E 	 T h e   p u r p o s e   o f   t h i s   p a p e r   i s   t o   i d e n t i f y   t h e   d e g r e e   t o   w h i c h   t h e   m a r k e t i n g   d i s c i p l i n e   h a s   h i t h e r t o   e n g a g e d   w i t h   b u s i n e s s   m o d e l   l i t e r a t u r e .   T h e   r e s u l t s   o f   a   s y s t e m a t i c   r e v i e w   o f   b u s i n e s s   m o d e l   l i t e r a t u r e   a r e   p r e s e n t e d   a n d   u t i l i s e   b o t h   t h e   c i t a t i o n   c o u n t s   a n d   t h e   h - i n d e x   t o   o b j e c t i v e l y   d e m o n s t r a t e   t h e   l i m i t e d   e n g a g e m e n t   t h a t   t h e   m a r k e t i n g   d i s c i p l i n e   h a s   h a d   w i t h   b u s i n e s s   m o d e l   l i t e r a t u r e ,   a n d   t h e   l i m i t e d   d e g r e e   t h a t   t h e   d i s c i p l i n e   h a s   i n f l u e n c e d   t h a t   l i t e r a t u r e .   T h e   k e y   f i n d i n g s   r e v e a l   a   g r o w i n g ,   b u t   f o r m a t i v e   b o d y   o f   l i t e r a t u r e   t h a t ,   h i t h e r t o ,   h a s   b e e n   d o m i n a t e d   b y   n o n - m a r k e t i n g   d i s c i p l i n e s   a n d   w h i c h   h a s   o n l y   j u s t   b e g u n   t o   b e   a d d r e s s e d   b y   p r e s e n t   d a y   m a r k e t i n g   s c h o l a r s .   U s i n g   t h e   m o s t   i n f l u e n t i a l   a r t i c l e s   i d e n t i f i e d   i n   t h e   a n a l y s i s ,   t h e   p a p e r   c o n c l u d e s   w i t h   a   c a s e   f o r   t h e   e m p i r i c a l   d e v e l o p m e n t   o f   t h e   b u s i n e s s   m o d e l   c o n c e p t   w i t h   i n d u s t r i a l   m a r k e t i n g   s c h o l a r s h i p .   S u c h   d e v e l o p m e n t   i s   a r g u e d   t o   b e   g r o u n d e d   i n   t h e   p o t e n t i a l   o f   o p e n   b u s i n e s s   m o d e l s ,   c o - c r e a t e d   w i t h   m u l t i p l e   s t a k e h o l d e r s   i n   a   s u p p l y   c h a i n   a n d   t h e   e n d   u s e r s   o f   a   v a l u e   p r o p o s i t i o n .   ( C )   2 0 1 3   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ C o o m b e s ,   P h i l i p   H . ;   N i c h o l s o n ,   J o h n   D . ]   U n i v   H u l l ,   H u l l   U n i v   B u s i n e s s   S c h ,   K i n g s t o n   U p o n   H u l l   H U 6   7 R X ,   N   H u m b e r s i d e ,   E n g l a n d 	 C o o m b e s ,   P H   ( r e p r i n t   a u t h o r ) ,   U n i v   H u l l ,   H u l l   U n i v   B u s i n e s s   S c h ,   C o t t i n g h a m   R d ,   K i n g s t o n   U p o n   H u l l   H U 6   7 R X ,   N   H u m b e r s i d e ,   E n g l a n d . 	 P . H . C o o m b e s @ 2 0 0 9 . h u l l . a c . u k ;   J . D . N i c h o l s o n @ h u l l . a c . u k 	 	 N i c h o l s o n ,   J o h n / 0 0 0 0 - 0 0 0 2 - 8 0 8 5 - 6 2 5 X 	 	 	 A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A f u a h   A . ,   2 0 0 3 ,   I N T E R N E T   B U S I N E S S   M O ;   A f u a h   A . ,   2 0 0 4 ,   B U S I N E S S   M O D E L S   S T R A ;   A m i t   R ,   2 0 0 1 ,   S T R A T E G I C   M A N A G E   J ,   V 2 2 ,   P 4 9 3 ,   D O I   1 0 . 1 0 0 2 / s m j . 1 8 7 ;   S a n c h e z   I . ,   2 0 1 0 ,   J   R E T A I L I N G   C O N S U M E R ,   V 1 7 ,   P 2 4 1 ,   D O I   D O I   1 0 . 1 0 1 6 / J . J R E T C O N S E R . 2 0 1 0 . 0 2 . 0 0 1 ;   A r i k k a - S t e n r o o s   L ,   2 0 1 2 ,   I N D   M A R K E T   M A N A G ,   V 4 1 ,   P 1 5 ;   A R N D T   J ,   1 9 8 0 ,   J   B U S   R E S ,   V 8 ,   P 3 8 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 8 - 2 9 6 3 ( 8 0 ) 9 0 0 4 4 - 2 ;   A s s o c i a t i o n   o f   B u s i n e s s   S c h o o l s ,   2 0 1 0 ,   A C A D   J   Q U A L   G U I D   V E R ;   B a c k h a u s   K ,   2 0 1 1 ,   I N D   M A R K E T   M A N A G ,   V 4 0 ,   P 9 4 0 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 1 . 0 6 . 0 2 4 ;   B a d e n - F u l l e r   C ,   2 0 1 0 ,   L O N G   R A N G E   P L A N N ,   V 4 3 ,   P 1 5 6 ,   D O I   1 0 . 1 0 1 6 / j . l r p . 2 0 1 0 . 0 2 . 0 0 5 ;   B a l l a n t y n e   D ,   2 0 1 1 ,   I N D   M A R K E T   M A N A G ,   V 4 0 ,   P 2 0 2 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 0 . 0 6 . 0 3 2 ;   B A R N E T T   J H ,   1 9 8 5 ,   J   B U S   E T H I C S ,   V 4 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 8 2 6 7 4 ;   B A R T E L S   R ,   1 9 7 4 ,   J   M A R K E T I N G ,   V 3 8 ,   P 7 3 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 0 3 9 6 ;   B o n a c c o r s i   A ,   2 0 0 6 ,   M A N A G E   S C I ,   V 5 2 ,   P 1 0 8 5 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 6 0 . 0 5 4 7 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B r o w n   T ,   2 0 1 1 ,   A M   J   O C C U P   T H E R ,   V 6 5 ,   P 3 4 6 ,   D O I   1 0 . 5 0 1 4 / a j o t . 2 0 1 1 . 0 0 1 3 9 6 ;   C a s a d e s u s - M a s a n e l l   R ,   2 0 1 1 ,   H A R V A R D   B U S   R E V ,   V 8 9 ,   P 1 0 0 ;   C a s a d e s u s - M a s a n e l l   R ,   2 0 1 0 ,   L O N G   R A N G E   P L A N N ,   V 4 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 1 6 / j . l r p . 2 0 1 0 . 0 1 . 0 0 4 ;   C a s p e r   S ,   2 0 0 0 ,   O R G A N   S T U D ,   V 2 1 ,   P 8 8 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 0 2 1 5 0 0 3 ;   C a t e r   B ,   2 0 0 9 ,   I N D   M A R K E T   M A N A G ,   V 3 8 ,   P 7 8 5 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 0 7 . 1 0 . 0 0 4 ;   C h e s b r o u g h   H ,   2 0 0 2 ,   I N D   C O R P   C H A N G E ,   V 1 1 ,   P 5 2 9 ,   D O I   1 0 . 1 0 9 3 / i c c / 1 1 . 3 . 5 2 9 ;   C h e s b r o u g h   H . ,   2 0 0 7 ,   S T R A T E G Y   L E A D E R S H I P ,   V 6 ,   P 1 2 ;   C h e s b r o u g h   H ,   2 0 1 0 ,   L O N G   R A N G E   P L A N N ,   V 4 3 ,   P 3 5 4 ,   D O I   1 0 . 1 0 1 6 / j . l r p . 2 0 0 9 . 0 7 . 0 1 0 ;   C h e s b r o u g h   H W ,   2 0 0 7 ,   M I T   S L O A N   M A N A G E   R E V ,   V 4 8 ,   P 2 2 ;   C r o n i n   B ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 4 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 3 ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   C U L N A N   M J ,   1 9 8 6 ,   M A N A G E   S C I ,   V 3 2 ,   P 1 5 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 3 2 . 2 . 1 5 6 ;   D a i   Q Z ,   2 0 0 2 ,   I N T   J   E L E C T R O N   C O M M ,   V 6 ,   P 4 1 ;   D e m i l   B . ,   2 0 0 9 ,   U N I V E R S I A   B U S I N E S S   R ,   V 2 3 ,   P 8 6 ;   D o g a n o v a   L ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 1 5 5 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 8 . 0 0 2 ;   E h r e t   M . ,   2 0 1 0 ,   S E R V I C E   S C I ,   V 2 ,   P 1 3 6 ;   F i s h e r   D ,   2 0 1 1 ,   M A R K E T I N G   T H E O R ,   V 1 1 ,   P 3 2 5 ,   D O I   1 0 . 1 1 7 7 / 1 4 7 0 5 9 3 1 1 1 4 0 8 1 7 9 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 2 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 1 - 2 ;   G a m b l e   J . ,   2 0 1 1 ,   M A R K E T I N G   R E V ,   V 1 1 ,   P 2 2 7 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   2 0 0 5 ,   I N T   C   P E E R   R E V   B I O M ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   G u n d l a c h   G T ,   2 0 1 0 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 2 9 ,   P 8 9 ;   G u n d l a c h   G T ,   2 0 0 9 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 2 8 ,   P 2 5 9 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a a k k o l a   E ,   2 0 1 3 ,   I N D   M A R K E T   M A N A G ,   V 4 2 ,   P 4 7 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 2 . 1 1 . 0 0 5 ;   J o h n s o n   M W ,   2 0 0 8 ,   H A R V A R D   B U S   R E V ,   V 8 6 ,   P 5 0 ;   J o h n s t o n e   M J ,   2 0 0 7 ,   I N T   N U R S   R E V ,   V 5 4 ,   P 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 5 2 7 . x ;   K e h   H T ,   2 0 0 9 ,   I N D   M A R K E T   M A N A G ,   V 3 8 ,   P 7 3 2 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 0 8 . 0 2 . 0 0 5 ;   K i n d   H J ,   2 0 0 9 ,   M A R K E T   S C I ,   V 2 8 ,   P 1 1 1 2 ,   D O I   1 0 . 1 2 8 7 / m k s c . 1 0 9 0 . 0 5 1 4 ;   L e c h n e r   U ,   2 0 0 2 ,   I N T   J   E L E C T R O N   C O M M ,   V 6 ,   P 4 1 ;   L u m p k i n   G T ,   2 0 0 4 ,   O R G A N   D Y N ,   V 3 3 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . o r g d y n . 2 0 0 4 . 0 1 . 0 0 4 ;   M a g r e t t a   J ,   2 0 0 2 ,   H A R V A R D   B U S   R E V ,   V 8 0 ,   P 8 6 ;   M a h a d e v a n   B ,   2 0 0 0 ,   C A L I F   M A N A G E   R E V ,   V 4 2 ,   P 5 5 ;   M a s o n   K ,   2 0 1 1 ,   I N D   M A R K E T   M A N A G ,   V 4 0 ,   P 1 0 3 2 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 1 . 0 6 . 0 3 2 ;   M e l e   C ,   2 0 1 1 ,   I N D   M A R K E T   M A N A G ,   V 4 0 ,   P 1 3 7 7 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 1 . 0 6 . 0 3 3 ;   M o r r i s   M ,   2 0 0 5 ,   J   B U S   R E S ,   V 5 8 ,   P 7 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j b u s r e s . 2 0 0 3 . 1 1 . 0 0 1 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   P i g n e u r   Y . ,   2 0 0 2 ,   E   R E A L   C O N S T R   E   E C   1 ;   O s t e r w a l d e r   A . ,   2 0 1 0 ,   B U S I N E S S   M O D E L   G E N E R ;   P a l o   T ,   2 0 1 1 ,   J   B U S   I N D   M A R K ,   V 2 6 ,   P 3 7 7 ,   D O I   1 0 . 1 1 0 8 / 0 8 8 5 8 6 2 1 1 1 1 1 4 4 4 3 3 ;   P a u w e l s   K ,   2 0 0 8 ,   J   M A R K E T I N G ,   V 7 2 ,   P 1 4 ,   D O I   1 0 . 1 5 0 9 / j m k g . 7 2 . 3 . 1 4 ;   P r a h a l a d   C K ,   2 0 0 4 ,   J   I N T E R A C T   M A R K ,   V 1 8 ,   P 5 ,   D O I   1 0 . 1 0 0 2 / d i r . 2 0 0 1 5 ;   P r a h a l a d   C K ,   2 0 0 0 ,   H A R V A R D   B U S   R E V ,   V 7 8 ,   P 7 9 ;   P r a h a l a d   C .   K . ,   2 0 0 4 ,   S T R A T E G Y   L E A D E R S H I P ,   V 3 2 ,   P 4 ,   D O I   D O I   1 0 . 1 1 0 8 / 1 0 8 7 8 5 7 0 4 1 0 6 9 9 2 4 9 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R i n g o l d   D J ,   2 0 0 7 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 2 6 ,   P 2 5 1 ,   D O I   1 0 . 1 5 0 9 / j p p m . 2 6 . 2 . 2 5 1 ;   S c h w e i z e r   L . ,   2 0 0 5 ,   J o u r n a l   o f   G e n e r a l   M a n a g e m e n t ,   V 3 1 ,   P 3 7 ;   S h a f e r   S .   M . ,   2 0 0 5 ,   B U S   H O R I Z O N S ,   V 4 8 ,   P 1 9 9 ,   D O I   D O I   1 0 . 1 0 1 6 / J . B U S H O R . 2 0 0 4 . 1 0 . 0 1 4 ;   S h e t h   J N ,   2 0 0 7 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 2 6 ,   P 3 0 2 ,   D O I   1 0 . 1 5 0 9 / j p p m . 2 6 . 2 . 3 0 2 ;   S h i n   J ,   2 0 0 9 ,   I N D   M A R K E T   M A N A G ,   V 3 8 ,   P 3 2 4 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 0 7 . 0 6 . 0 1 7 ;   S k a r m e a s   D ,   2 0 0 8 ,   I N D   M A R K E T   M A N A G ,   V 3 7 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 0 7 . 0 4 . 0 0 4 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S m i t h   N C ,   2 0 1 0 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 2 9 ,   P 4 ;   S o r e s c u   A ,   2 0 1 1 ,   J   R E T A I L I N G ,   V 8 7 ,   p S 3 ,   D O I   1 0 . 1 0 1 6 / j . j r e t a i . 2 0 1 1 . 0 4 . 0 0 5 ;   S T A N F O R D   R A ,   1 9 7 2 ,   J   E C O N   E D U C ,   V 4 ,   P 2 3 ,   D O I   1 0 . 2 3 0 7 / 1 1 8 2 5 6 8 ;   S t e w a r t   D W ,   2 0 0 0 ,   J   P U B L I C   P O L I C Y   M A R K ,   V 1 9 ,   P 2 8 7 ,   D O I   1 0 . 1 5 0 9 / j p p m . 1 9 . 2 . 2 8 7 . 1 7 1 2 5 ;   S t o r b a c k a   K ,   2 0 1 1 ,   I N D   M A R K E T   M A N A G ,   V 4 0 ,   P 6 9 9 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 1 . 0 5 . 0 0 3 ;   T e e c e   D J ,   2 0 1 0 ,   L O N G   R A N G E   P L A N N ,   V 4 3 ,   P 1 7 2 ,   D O I   1 0 . 1 0 1 6 / j . l r p . 2 0 0 9 . 0 7 . 0 0 3 ;   T r u o n g   Y ,   2 0 1 2 ,   I N D   M A R K E T   M A N A G ,   V 4 1 ,   P 1 9 7 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 1 . 1 1 . 0 0 7 ;   U S D I K E N   B ,   1 9 9 5 ,   O R G A N   S T U D ,   V 1 6 ,   P 5 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 5 0 1 6 0 0 3 0 6 ;   v a n R a a n   A F J ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 9 7 ;   V a r g o   S L ,   2 0 0 8 ,   I N D   M A R K E T   M A N A G ,   V 3 7 ,   P 2 5 4 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 0 7 . 0 7 . 0 0 4 ;   v o n   H i p p e l   E ,   2 0 1 1 ,   M I T   S L O A N   M A N A G E   R E V ,   V 5 3 ,   P 2 7 ;   W e i l l   P ,   2 0 0 2 ,   M I S   Q U A R T ,   V 1 ,   P 1 7 ;   W i r t z   J ,   2 0 1 3 ,   S E R V I N G   C U S T O M E R S   G L ,   P 2 8 ;   Y i p   G . ,   2 0 0 4 ,   B U S I N E S S   S T R A T E G Y   R E ,   V 1 5 ,   P 1 7 ,   D O I   1 0 . 1 1 1 1 / j . 0 9 5 5 - 6 4 1 9 . 2 0 0 4 . 0 0 3 0 8 . x ;   Z o t t   C ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 4 2 ;   Z o t t   C ,   2 0 0 7 ,   O R G A N   S C I ,   V 1 8 ,   P 1 8 1 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 0 6 0 . 0 2 3 2 ;   Z o t t   C ,   2 0 1 0 ,   L O N G   R A N G E   P L A N N ,   V 4 3 ,   P 2 1 6 ,   D O I   1 0 . 1 0 1 6 / j . l r p . 2 0 0 9 . 0 7 . 0 0 4 	 8 7 	 1 6 	 1 7 	 1 0 	 1 1 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 1 9 - 8 5 0 1 	 	 	 I N D   M A R K E T   M A N A G 	 I n d .   M a r k .   M a n a g e . 	 J U L 	 2 0 1 3 	 4 2 	 5 	 	 	 S I 	 	 6 5 6 	 6 6 4 	 	 1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 1 3 . 0 5 . 0 0 5 	 	 9 	 B u s i n e s s ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 2 2 9 A F 	 W O S : 0 0 0 3 2 5 2 3 3 5 0 0 0 0 3 	 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 T h e   i m p a c t   o f   u n p r o d u c t i v e   a n d   t o p   r e s e a r c h e r s   o n   o v e r a l l   u n i v e r s i t y   r e s e a r c h   p e r f o r m a n c e 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   B i b l i o m e t r i c s ;   R a n k i n g s ;   P r o d u c t i v i t y ;   T o p   r e s e a r c h e r s ;   U n i v e r s i t i e s 	 R E S E A R C H   P R O D U C T I V I T Y ;   S Y S T E M S ;   I N D E X 	 U n l i k e   c o m p e t i t i v e   h i g h e r   e d u c a t i o n   s y s t e m s ,   n o n - c o m p e t i t i v e   s y s t e m s   s h o w   r e l a t i v e l y   u n i f o r m   d i s t r i b u t i o n s   o f   t o p   r e s e a r c h e r s   a n d   l o w   p e r f o r m e r s   a m o n g   u n i v e r s i t i e s .   I n   t h i s   s t u d y ,   w e   e x a m i n e   t h e   i m p a c t   o f   u n p r o d u c t i v e   a n d   t o p   f a c u l t y   m e m b e r s   o n   o v e r a l l   r e s e a r c h   p e r f o r m a n c e   o f   t h e   u n i v e r s i t y   t h e y   b e l o n g   t o .   F u r t h e r m o r e ,   w e   a n a l y z e   t h e   p o t e n t i a l   r e l a t i o n s h i p   b e t w e e n   r e s e a r c h   p r o d u c t i v i t y   o f   a   u n i v e r s i t y   a n d   t h e   i n d e x e s   o f   c o n c e n t r a t i o n   o f   u n p r o d u c t i v e   a n d   t o p   r e s e a r c h e r s .   R e s e a r c h   p e r f o r m a n c e   i s   e v a l u a t e d   u s i n g   a   b i b l i o m e t r i c   a p p r o a c h ,   t h r o u g h   p u b l i c a t i o n s   i n d e x e d   o n   t h e   W e b   o f   S c i e n c e   b e t w e e n   2 0 0 4   a n d   2 0 0 8 .   T h e   s e t   a n a l y z e d   c o n s i s t s   o f   a l l   I t a l i a n   u n i v e r s i t i e s   a c t i v e   i n   t h e   h a r d   s c i e n c e s .   ( C )   2 0 1 2   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t ,   S c h   E n g n ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 2 ,   H I G H   E D U C ,   V 6 3 ,   P 7 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 1 1 - 9 4 7 1 - 6 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 7 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 9 1 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 2 6 - 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 6 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 5 - 4 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 3 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 9 7 - 2 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   H a l f f m a n   W ,   2 0 1 0 ,   M I N E R V A ,   V 4 8 ,   P 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 2 4 - 0 1 0 - 9 1 4 1 - 3 ;   H i c k s   D ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 9 . 0 0 7 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o r t a   H . ,   2 0 0 8 ,   S C I   P U B L   P O L I C Y ,   V 3 5 ,   P 1 4 6 ,   D O I   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 8 X 2 9 9 0 4 4 ;   L e y d e s d o r f f   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 3 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   O s t e r l o h   M . ,   2 0 0 8 ,   W O R K S H   P E E R   R E V   R E V ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   S J T U - S h a n g h a i   J i a o   T o n g   U n i v e r s i t y ,   2 0 1 1 ,   A C   R A N K   W O R L D   U ;   v a n   d e r   P l o e g   F ,   2 0 0 8 ,   C E S I F O   E C O N   S T U D ,   V 5 4 ,   P 9 9 ,   D O I   1 0 . 1 0 9 3 / c e s i f o / i f n 0 1 5 ;   [ A n o n y m o u s ] ,   2 0 1 2 ,   W O R L D   A C   R A N K   2 0 1 1   2 ;   [ A n o n y m o u s ] ,   Q S   Q U A C Q U A R E L L I   S Y M O 	 2 1 	 1 6 	 1 7 	 1 	 4 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 3 	 7 	 1 	 	 	 	 	 1 6 6 	 1 7 5 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 6 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 5 B G 	 W O S : 0 0 0 3 1 3 1 2 1 3 0 0 0 2 0 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   M u r g i a ,   G 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   M u r g i a ,   G i a n l u c a 	 	 	 G e n d e r   d i f f e r e n c e s   i n   r e s e a r c h   c o l l a b o r a t i o n 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   c o l l a b o r a t i o n ;   C o l l a b o r a t i o n   p a t t e r n s ;   G e n d e r ;   B i b l i o m e t r i c s ;   U n i v e r s i t y 	 S E X - D I F F E R E N C E S ;   S C I E N T I F I C   P R O D U C T I V I T Y ;   R E S E A R C H   P E R F O R M A N C E ;   G E O G R A P H I C - M O B I L I T Y ;   A C A D E M I C   M E D I C I N E ;   S C I E N C E ;   W O M E N ;   A U T H O R S H I P ;   P A T T E R N S ;   C O N S T R A I N T S 	 T h e   d e b a t e   o n   t h e   r o l e   o f   w o m e n   i n   t h e   a c a d e m i c   w o r l d   h a s   f o c u s e d   o n   v a r i o u s   p h e n o m e n a   t h a t   c o u l d   b e   a t   t h e   r o o t   o f   t h e   g e n d e r   g a p   s e e n   i n   m a n y   n a t i o n s .   H o w e v e r ,   i n   s p i t e   o f   t h e   e v e r   m o r e   c o l l a b o r a t i v e   c h a r a c t e r   o f   s c i e n t i f i c   r e s e a r c h ,   t h e   i s s u e   o f   g e n d e r   a s p e c t s   i n   r e s e a r c h   c o l l a b o r a t i o n s   h a s   b e e n   t r e a t e d   i n   a   m a r g i n a l   m a n n e r .   I n   t h i s   a r t i c l e   w e   a p p l y   a n   i n n o v a t i v e   b i b l i o m e t r i c   a p p r o a c h   b a s e d   o n   t h e   p r o p e n s i t y   f o r   c o l l a b o r a t i o n   b y   i n d i v i d u a l   a c a d e m i c s ,   w h i c h   p e r m i t s   m e a s u r e m e n t   o f   g e n d e r   d i f f e r e n c e s   i n   t h e   p r o p e n s i t y   t o   c o l l a b o r a t e   b y   f i e l d s ,   d i s c i p l i n e s   a n d   f o r m s   o f   c o l l a b o r a t i o n :   i n t r a m u r a l ,   e x t r a m u r a l   d o m e s t i c   a n d   i n t e r n a t i o n a l .   T h e   a n a l y s i s   o f   t h e   s c i e n t i f i c   p r o d u c t i o n   o f   I t a l i a n   a c a d e m i c s   s h o w s   t h a t   w o m e n   r e s e a r c h e r s   r e g i s t e r   a   g r e a t e r   c a p a c i t y   t o   c o l l a b o r a t e   i n   a l l   t h e   f o r m s   a n a l y z e d ,   w i t h   t h e   e x c e p t i o n   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n ,   w h e r e   t h e r e   i s   s t i l l   a   g a p   i n   c o m p a r i s o n   t o   m a l e   c o l l e a g u e s .   ( C )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ]   C N R ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   R o m e ,   I t a l y ;   [ D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   R o m e ,   I t a l y ;   [ M u r g i a ,   G i a n l u c a ]   U n i v   S i e n a ,   I - 5 3 1 0 0   S i e n a ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   I s t   A n a l   S i s t e m i   &   I n f o r m a t   I A S I   C N R ,   V i a l e   M a n z o n i   3 0 ,   I - 0 0 1 8 5   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t ;   m u r g i a @ d i i . u n i s i . i t 	 M u r g i a ,   G i a n l u c a / A - 8 5 3 8 - 2 0 1 3 ;   D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 M u r g i a ,   G i a n l u c a / 0 0 0 0 - 0 0 0 1 - 6 4 4 3 - 7 9 9 8 ;   D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 C a p r a s e c c a   A . ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V < I T > 7 9 < / I T > ,   P 5 1 7 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 4 4 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 1 . 0 0 9 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 6 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 6 ;   A b r a m o   G ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 3 1 - 7 ;   A b r a m o   G ,   2 0 0 9 ,   H I G H   E D U C ,   V 5 7 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 7 3 4 - 0 0 8 - 9 1 3 9 - z ;   A c k e r s   L ,   2 0 0 4 ,   W O M E N   S T U D   I N T   F O R U M ,   V 2 7 ,   P 1 8 9 ,   D O I   1 0 . 1 0 1 6 / j . w s i f . 2 0 0 4 . 0 3 . 0 0 1 ;   M o y a   A n e g o n   F ,   2 0 0 9 ,   I N D I C A D O R E S   B I B L I O M E ;   A r c h i b u g i   D ,   2 0 0 4 ,   T E C H N O V A T I O N ,   V 2 4 ,   P 5 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 0 3 ) 0 0 1 4 1 - X ;   B a d a r   K ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 7 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 6 4 - z ;   B o r n m a n n   L ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 2 2 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 3 . 0 0 1 ;   B o r r e g o   A . ,   2 0 0 8 ,   4   I N T   C   W E B   I N F   J   I N ;   B o s c h i n i   A ,   2 0 0 7 ,   J   L A B O R   E C O N ,   V 2 5 ,   P 3 2 5 ,   D O I   1 0 . 1 0 8 6 / 5 1 0 7 6 4 ;   B o z e m a n   B ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 5 9 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 1 . 0 0 8 ;   B o z e m a n   B ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 1 3 9 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 7 . 0 0 2 ;   B r e u n i n g   M ,   2 0 0 7 ,   P S - P O L I T   S C I   P O L I T ,   V 4 0 ,   P 3 4 7 ,   D O I   1 0 . 1 0 1 7 / S 1 0 4 9 0 9 6 5 0 7 0 7 0 5 6 4 ;   C a m p i o n   P ,   2 0 0 4 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 9 ,   P 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 0 4 2 6 5 8 9 5 ;   C o l e   J R ,   1 9 8 4 ,   A D V   M O T I V A T I O N   A C H I E ,   P 2 1 7 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   D i n g   W W ,   2 0 1 0 ,   M A N A G E   S C I ,   V 5 6 ,   P 1 4 3 9 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 1 0 0 . 1 1 9 5 ;   E t z k o w i t z   H . ,   2 0 0 0 ,   A T H E N A   U N B O U N D   A D V   W ;   F e l d m a n   S .   D . ,   1 9 7 4 ,   E S C A P E   D O L L S   H O U S E   W ;   F e r b e r   M .   A . ,   1 9 8 0 ,   E   E C O N   J ,   V 6 ,   P 1 8 9 ;   F o x   M .   F . ,   2 0 0 9 ,   W I R E S   2 0 0 9 ;   F o x   M F ,   1 9 9 1 ,   O U T E R   C I R C L E   W O M E N   S ,   P 1 8 8 ;   F r e h i l l   L .   M . ,   2 0 1 0 ,   T E C H N I C A L   R E P O R T ;   F u c h s   S ,   2 0 0 1 ,   M I N E R V A ,   V 3 9 ,   P 1 7 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 3 8 0 5 1 0 0 1 3 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G R A N T   L ,   1 9 9 1 ,   G E N D E R   S O C ,   V 5 ,   P 2 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 3 9 1 0 0 5 0 0 2 0 0 5 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K e a s h l y   L . ,   1 9 9 4 ,   G E N D E R   C O N F L I C T ;   K y v i k   S ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 5 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 1 0 3 ;   L a r i v i e r e   V ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 9 - y ;   L e a h e y   E ,   2 0 0 6 ,   G E N D E R   S O C ,   V 2 0 ,   P 7 5 4 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 1 2 4 3 2 0 6 2 9 3 0 3 0 ;   L e d i n   A ,   2 0 0 7 ,   E M B O   R E P ,   V 8 ,   P 9 8 2 ,   D O I   1 0 . 1 0 3 8 / s j . e m b o r . 7 4 0 1 1 0 9 ;   L i a n g   X .   F . ,   2 0 0 9 ,   A C   M A N   C   A U G   8   1 0   A N ;   L O N G   J S ,   1 9 9 2 ,   S O C   F O R C E S ,   V 7 1 ,   P 1 5 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 9 9 7 1 ;   L O N G   J S ,   1 9 9 0 ,   S O C   F O R C E S ,   V 6 8 ,   P 1 2 9 7 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 9 1 4 6 ;   M A N N   H B ,   1 9 4 7 ,   A N N   M A T H   S T A T ,   V 1 8 ,   P 5 0 ,   D O I   1 0 . 1 2 1 4 / a o m s / 1 1 7 7 7 3 0 4 9 1 ;   M a r k   S ,   2 0 0 1 ,   A C A D   M E D ,   V 7 6 ,   P 3 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 8 8 8 - 2 0 0 1 0 1 0 0 0 - 0 0 0 1 1 ;   M A R W E L L   G ,   1 9 7 9 ,   S C I E N C E ,   V 2 0 5 ,   P 1 2 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 4 7 2 7 3 9 ;   M c D o w e l l   J M ,   2 0 0 6 ,   E C O N   I N Q ,   V 4 4 ,   P 1 5 3 ,   D O I   1 0 . 1 0 9 3 / e i / c b i 0 6 5 ;   M C D O W E L L   J M ,   1 9 9 2 ,   E C O N   I N Q ,   V 3 0 ,   P 6 8 ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M e l k e r s   J ,   2 0 1 0 ,   R E V   P O L I C Y   R E S ,   V 2 7 ,   P 3 8 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 1 - 1 3 3 8 . 2 0 1 0 . 0 0 4 4 8 . x ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M i l l e r   B P ,   2 0 0 6 ,   S O C   S C I   Q U A R T ,   V 8 7 ,   P 6 7 9 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   N a l d i   F ,   2 0 0 2 ,   S C I   T E C H N O L O G I C A L   P E ;   N a t i o n a l   R e s e a r c h   C o u n c i l   ( N R C ) ,   2 0 0 9 ,   G E N D   D I F F   C R I T   T R A N S ;   O ' L e a r y   V .   E . ,   1 9 9 0 ,   W O M E N   A C A D   W O R L D ,   P 1 0 8 ;   O L S E N   D ,   1 9 9 5 ,   J   H I G H   E D U C ,   V 6 6 ,   P 2 6 7 ,   D O I   1 0 . 2 3 0 7 / 2 9 4 3 8 9 2 ;   P o o l e   M ,   1 9 9 7 ,   H I G H   E D U C ,   V 3 4 ,   P 3 7 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 3 0 7 5 9 0 7 1 2 6 ;   P r p i c   K ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 4 6 8 1 9 4 5 7 ;   R   D e v e l o p m e n t   C o r e   T e a m ,   2 0 1 2 ,   R   L A N G   E N V   S T A T   C O M P ;   R e e s   T . ,   2 0 0 2 ,   H E L S I N K I   G R O U P   W O M E N ;   R h o t e n   D ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 5 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 8 . 0 0 1 ;   R i v e l l i n i   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 0 7 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 5 ;   R O S E N F E L D   R A ,   1 9 8 7 ,   J   H I G H   E D U C ,   V 5 8 ,   P 4 9 3 ,   D O I   1 0 . 2 3 0 7 / 1 9 8 1 7 8 4 ;   R O S S I T E R   M W ,   1 9 9 3 ,   S O C   S T U D   S C I ,   V 2 3 ,   P 3 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 9 3 0 2 3 0 0 2 0 0 4 ;   S a m b u n j a k   D ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 6 ,   P 1 1 0 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 6 . 9 . 1 1 0 3 ;   S e a g r a m   B . ,   1 9 9 8 ,   R E S   H I G H   E D U C ,   V 3 9 ,   P 2 8 ;   S h a u m a n   K A ,   1 9 9 6 ,   D E M O G R A P H Y ,   V 3 3 ,   P 4 5 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 6 1 7 8 0 ;   S o n n e r t   G . ,   1 9 9 5 ,   G E N D E R   D I F F E R E N C E S   S ;   T a y l o r   S W ,   2 0 0 6 ,   S O U T H   E C O N   J ,   V 7 2 ,   P 8 4 6 ;   v a n   R i j n s o e v e r   F J ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 1 2 5 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 4 . 0 2 0 ;   W e n n e r a s   C ,   1 9 9 7 ,   N A T U R E ,   V 3 8 7 ,   P 3 4 1 ,   D O I   1 0 . 1 0 3 8 / 3 8 7 3 4 1 a 0 ;   Z i m m e r   A . ,   2 0 0 6 ,   B E I T R A G E   H O C H S C H U L F O ,   V 2 8 ,   P 3 0 ;   Z i p p e l   K . ,   2 0 1 1 ,   S O C I O L O G I C A ,   V 5 ,   P 1 	 6 8 	 1 6 	 1 7 	 3 	 4 1 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 	 2 0 1 3 	 7 	 4 	 	 	 	 	 8 1 1 	 8 2 2 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 7 . 0 0 2 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 6 4 Z V 	 W O S : 0 0 0 3 2 7 9 2 0 4 0 0 0 0 6 	 	 
 
 J 	 N a t a l e ,   F ;   F i o r e ,   G ;   H o f h e r r ,   J 	 	 	 	 N a t a l e ,   F a b r i z i o ;   F i o r e ,   G i a n l u c a ;   H o f h e r r ,   J o h a n n 	 	 	 M a p p i n g   t h e   r e s e a r c h   o n   a q u a c u l t u r e .   A   b i b l i o m e t r i c   a n a l y s i s   o f   a q u a c u l t u r e   l i t e r a t u r e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A q u a c u l t u r e ;   B i b l i o m e t r i c s ;   C o m p u t a t i o n a l   s e m a n t i c ;   T o p i c   m o d e l ;   L a t e n t   s e m a n t i c   a n a l y s i s ;   C o - c i t a t i o n   a n a l y s i s 	 	 R e s e a r c h   o n   a q u a c u l t u r e   i s   e x p a n d i n g   a l o n g   w i t h   t h e   e x c e p t i o n a l   g r o w t h   o f   t h e   s e c t o r   a n d   h a s   a n   i m p o r t a n t   r o l e   i n   s u p p o r t i n g   e v e n   f u r t h e r   t h e   f u t u r e   d e v e l o p m e n t s   o f   t h i s   r e l a t i v e l y   y o u n g   f o o d   p r o d u c t i o n   i n d u s t r y .   I n   t h i s   p a p e r   w e   e x a m i n e d   t h e   a q u a c u l t u r e   l i t e r a t u r e   u s i n g   b i b l i o m e t r i c s   a n d   c o m p u t a t i o n a l   s e m a n t i c s   m e t h o d s   ( l a t e n t   s e m a n t i c   a n a l y s i s ,   t o p i c   m o d e l   a n d   c o - c i t a t i o n   a n a l y s i s )   t o   i d e n t i f y   t h e   m a i n   t h e m e s   a n d   t r e n d s   i n   r e s e a r c h .   W e   a n a l y s e d   b i b l i o g r a p h i c   i n f o r m a t i o n   a n d   a b s t r a c t s   o f   1 4 , 3 0 8   s c i e n t i f i c   a r t i c l e s   o n   a q u a c u l t u r e   r e c o r d e d   i n   S c o p u s .   B o t h   t h e   l a t e n t   s e m a n t i c   a n a l y s i s   a n d   t h e   t o p i c   m o d e l   i n d i c a t e   t h a t   t h e   b r o a d   t h e m e s   o f   r e s e a r c h   o n   a q u a c u l t u r e   a r e   r e l a t e d   t o   g e n e t i c s   a n d   r e p r o d u c t i o n ,   g r o w t h   a n d   p h y s i o l o g y ,   f a r m i n g   s y s t e m s   a n d   e n v i r o n m e n t ,   n u t r i t i o n ,   w a t e r   q u a l i t y ,   a n d   h e a l t h .   T h e   t o p i c   m o d e l   g i v e s   a n   e s t i m a t e   o f   t h e   r e l e v a n c e   o f   t h e s e   r e s e a r c h   t h e m e s   b y   s i n g l e   a r t i c l e s ,   a u t h o r s ,   r e s e a r c h   i n s t i t u t i o n s ,   s p e c i e s   a n d   t i m e .   W i t h   t h e   c o - c i t a t i o n   a n a l y s i s   i t   w a s   p o s s i b l e   t o   i d e n t i f y   m o r e   s p e c i f i c   r e s e a r c h   f r o n t s ,   w h i c h   a r e   a t t r a c t i n g   h i g h   n u m b e r   o f   c o - c i t a t i o n s   b y   t h e   s c i e n t i f i c   c o m m u n i t y .   T h e   l a r g e s t   r e s e a r c h   f r o n t s   a r e   r e l a t e d   t o   p r o b i o t i c s ,   b e n t h i c   s e d i m e n t s ,   g e n o m i c s ,   i n t e g r a t e d   a q u a c u l t u r e   a n d   w a t e r   t r e a t m e n t .   I n   t e r m s   o f   t e m p o r a l   e v o l u t i o n ,   s o m e   r e s e a r c h   f r o n t s   s u c h   a s   p r o b i o t i c s ,   g e n o m i c s ,   s e a - l i c e ,   a n d   e n v i r o n m e n t a l   i m p a c t s   f r o m   c a g e   a q u a c u l t u r e ,   a r e   s t i l l   e x p a n d i n g   w h i l e   o t h e r s ,   s u c h   a s   m a n g r o v e s   a n d   s h r i m p   f a r m i n g ,   b e n t h i c   s e d i m e n t s ,   a r e   g r a d u a l l y   l o s i n g   w e i g h t .   W h i l e   b i b l i o m e t r i c   m e t h o d s   d o   n o t   n e c e s s a r i l y   p r o v i d e   a   m e a s u r e   o f   o u t p u t   o r   i m p a c t   o f   r e s e a r c h   a c t i v i t i e s ,   t h e y   p r o v e d   u s e f u l   f o r   m a p p i n g   a   r e s e a r c h   a r e a ,   i d e n t i f y i n g   t h e   r e l e v a n c e   o f   t h e m e s   i n   t h e   s c i e n t i f i c   l i t e r a t u r e   a n d   u n d e r s t a n d i n g   h o w   r e s e a r c h   f r o n t s   e v o l v e   a n d   i n t e r a c t .   B y   u s i n g   d i f f e r e n t   m e t h o d o l o g i c a l   a p p r o a c h e s   t h e   s t u d y   i s   t a k i n g   a d v a n t a g e   o f   t h e   s t r e n g t h s   o f   e a c h   m e t h o d   i n   m a p p i n g   t h e   r e s e a r c h   o n   a q u a c u l t u r e   a n d   s h o w i n g   i n   t h e   m e a n t i m e   p o s s i b l e   l i m i t a t i o n s   a n d   s o m e   d i r e c t i o n s   f o r   f u r t h e r   i m p r o v e m e n t s . 	 [ N a t a l e ,   F a b r i z i o ;   F i o r e ,   G i a n l u c a ;   H o f h e r r ,   J o h a n n ]   C o m m i s s   E u r o p e a n   C o m m u n i t i e s ,   J o i n t   R e s   C t r ,   I n s t   P r o t e c t   &   S e c u r   C i t i z e n ,   I - 2 1 0 2 7   I s p r a ,   V A ,   I t a l y 	 N a t a l e ,   F   ( r e p r i n t   a u t h o r ) ,   C o m m i s s   E u r o p e a n   C o m m u n i t i e s ,   J o i n t   R e s   C t r ,   I n s t   P r o t e c t   &   S e c u r   C i t i z e n ,   V i a   E   F e r m i   2 7 4 9 ,   I - 2 1 0 2 7   I s p r a ,   V A ,   I t a l y . 	 f a b r i z i o . n a t a l e @ j r c . e c . e u r o p a . e u 	 	 	 	 	 A s c h e   F ,   2 0 0 8 ,   M A R   R E S O U R   E C O N ,   V 2 3 ,   P 5 2 7 ;   B l e i   D M ,   2 0 0 3 ,   J   M A C H   L E A R N   R E S ,   V 3 ,   P 9 9 3 ,   D O I   1 0 . 1 1 6 2 / j m l r . 2 0 0 3 . 3 . 4 - 5 . 9 9 3 ;   C h a n g   J . ,   2 0 0 9 ,   N E U R A L   I N F O R M   P R O C E S ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   D e l a n g h e   H ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 3 8 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 0 8 - 3 ;   F A O ,   2 0 1 0 ,   S T A T   W O R L D   F I S H   A Q ;   F E U F A R ,   2 0 0 8 ,   F U T   E U R   F I S H   A Q   R E S ;   G r i f f i t h s   T L ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 2 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 7 5 2 1 0 1 ;   G r u e n   B e t t i n a ,   2 0 1 1 ,   J   S T A T   S O F T W ,   V 4 0 ,   P 1 ;   L a n d a u e r   T K ,   1 9 9 8 ,   D I S C O U R S E   P R O C E S S ,   V 2 5 ,   P 2 5 9 ;   L i   M . ,   2 0 0 8 ,   P A T T   R E C   2 0 0 8   I C P R   2 ,   P 1 ;   S c i 2   T e a m ,   2 0 0 9 ,   S C I   S C I   S C I 2   T O O L ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S m a l l   H ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 5 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 2 - y ;   S t e y v e r s   M ,   2 0 0 7 ,   L A T E N T   S E M A N T I C   A N A L ;   T h o m s o n ,   2 0 0 8 ,   R E S   F R O N T   M E T H ;   W i l d   F . ,   2 0 0 5 ,   L S A   L A T E N T   S E M A N T I C ;   W i l d   F . ,   2 0 0 5 ,   P   9   I N T   C O M P   A S S   A S S ,   P 4 8 5 	 1 8 	 1 6 	 1 6 	 5 	 7 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A R 	 2 0 1 2 	 9 0 	 3 	 	 	 	 	 9 8 3 	 9 9 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 6 2 - z 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 9 2 Z Z 	 W O S : 0 0 0 3 0 0 3 2 5 8 0 0 0 1 4 	 	 
 
 J 	 S a m i e e ,   S ;   C h a b o w s k i ,   B R 	 	 	 	 S a m i e e ,   S a e e d ;   C h a b o w s k i ,   B r i a n   R . 	 	 	 K n o w l e d g e   s t r u c t u r e   i n   i n t e r n a t i o n a l   m a r k e t i n g :   a   m u l t i - m e t h o d   b i b l i o m e t r i c   a n a l y s i s 	 J O U R N A L   O F   T H E   A C A D E M Y   O F   M A R K E T I N G   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I n t e r n a t i o n a l   m a r k e t i n g   l i t e r a t u r e ;   B i b l i o m e t r i c s ;   C o - c i t a t i o n   a n a l y s i s ;   K n o w l e d g e   s t r u c t u r e 	 B U Y E R - S E L L E R   R E L A T I O N S H I P S ;   A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   S T R A T E G I C   M A N A G E M E N T   R E S E A R C H ;   I N T E L L E C T U A L   S T R U C T U R E ;   C I T A T I O N   A N A L Y S I S ;   O R G A N I Z A T I O N A L   P E R F O R M A N C E ;   C O N S U M E R   E T H N O C E N T R I S M ;   E M P I R I C A L - E X A M I N A T I O N ;   P R O D U C T   P U R C H A S E ;   P S Y C H I C   D I S T A N C E 	 T h i s   s t u d y   e x a m i n e s   t h e   u n d e r l y i n g   f o r c e s   t h a t   s h a p e   t h e   i n t e r n a t i o n a l   m a r k e t i n g   ( I M )   f i e l d   u s i n g   t h r e e   b i b l i o m e t r i c   m e t h o d s :   e x p l o r a t o r y   f a c t o r   a n a l y s i s   ( E F A ) ,   h i e r a r c h i c a l   c l u s t e r   a n a l y s i s   ( H C A ) ,   a n d   m e t r i c   m u l t i d i m e n s i o n a l   s c a l i n g   ( M D S ) .   W e   a p p l y   t h e s e   t e c h n i q u e s   t o   e v a l u a t e   t h e   k n o w l e d g e   s t r u c t u r e   o f   I M   p u b l i c a t i o n s   f o r   t h e   1 9 9 9 - 2 0 0 8   p e r i o d   a n d   t o   c o n c u r r e n t l y   p r o v i d e   a   s u p p l e m e n t a l   e x a m i n a t i o n   o f   t h e   f i n d i n g s   f o r   t h e   2 0 0 9 - 2 0 1 0   p e r i o d .   O v e r a l l ,   o u r   d a t a b a s e   c o n t a i n s   2 2 8 , 9 2 9   c i t a t i o n s   u s e d   i n   3 , 6 3 2   I M   a r t i c l e s   f r o m   3 4   a c a d e m i c   j o u r n a l s   i n   w h i c h   m a r k e t i n g   p u b l i c a t i o n s   a p p e a r .   W e   i n i t i a l l y   t r a c e   t h e   u n d e r p i n n i n g   k n o w l e d g e   s t r u c t u r e   i n   t h e   l i t e r a t u r e   i n   f i v e - y e a r   i n c r e m e n t s   f o r   a l l   i n f l u e n t i a l   I M   p u b l i c a t i o n s .   W e   t h e n   r e f i n e   o u r   a n a l y s i s   a n d   e x a m i n e   m a r k e t i n g - c e n t e r e d   s c h o l a r l y   i n f l u e n c e s   o n   t h e   I M   l i t e r a t u r e   a n d   u n d e r t a k e   a n   e x a m i n a t i o n   o f   t h e   d e v e l o p m e n t s   i n   l a t e r   y e a r s .   T h e   r e s u l t s   i n d i c a t e   t h a t   t h e   I M   f i e l d   i s   e x p a n d i n g   a n d   i s   c o n s i d e r a b l y   m o r e   i n c l u s i v e ,   s o p h i s t i c a t e d ,   a n d   i n c r e a s i n g l y   m o r e   c o m p l e x   t h a n   i n   e a r l i e r   p e r i o d s .   O u r   f i n d i n g s   a l s o   d e m o n s t r a t e   t h a t   o t h e r   d i s c i p l i n e s   ( p r i n c i p a l l y   m a n a g e m e n t )   h a v e   h a d   a   p r o f o u n d   i n f l u e n c e   o n   t h e   d e v e l o p m e n t   o f   t h e   I M   l i t e r a t u r e   d u r i n g   t h e   1 2 - y e a r   p e r i o d   u n d e r   i n v e s t i g a t i o n .   U s i n g   t h e   b i b l i o m e t r i c   r e s u l t s   d e r i v e d   f r o m   o u r   d a t a ,   w e   p r o v i d e   g u i d e l i n e s   f o r   f u t u r e   r e s e a r c h   a n d   c o n t r a s t   t h e m   w i t h   t h o s e   f o r w a r d e d   i n   r e v i e w   s t u d i e s   o f   t h e   i n t e r n a t i o n a l   m a r k e t i n g   l i t e r a t u r e . 	 [ S a m i e e ,   S a e e d ;   C h a b o w s k i ,   B r i a n   R . ]   U n i v   T u l s a ,   C o l l i n s   C o l l   B u s i n e s s ,   T u l s a ,   O K   7 4 1 0 4   U S A 	 S a m i e e ,   S   ( r e p r i n t   a u t h o r ) ,   U n i v   T u l s a ,   C o l l i n s   C o l l   B u s i n e s s ,   8 0 0   S   T u c k e r   D r ,   T u l s a ,   O K   7 4 1 0 4   U S A . 	 s s a m i e e @ u t u l s a . e d u 	 	 	 	 	 A l b a   R .   D . ,   1 9 8 3 ,   R E S   S O C I O L O G Y   O R G ,   P 2 4 5 ;   A L B A U M   G ,   1 9 8 4 ,   J   I N T   B U S   S T U D ,   V 1 5 ,   P 1 6 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 4 7 9 ;   A N D E R S O N   E ,   1 9 8 7 ,   J   M A R K E T I N G ,   V 5 1 ,   P 7 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 1 4 5 ;   A N D E R S O N   J C ,   1 9 9 0 ,   J   M A R K E T I N G ,   V 5 4 ,   P 4 2 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 1 7 2 ;   A r c h a m b a u l t   E ,   2 0 0 4 ,   U S E   B I B L I O M E T R I C S   S O ;   K o t a b e   M . ,   1 9 9 3 ,   J   I N T   M A R K E T I N G ,   V 1 ,   P 5 ;   B A R N E Y   J ,   1 9 9 1 ,   J   M A N A G E ,   V 1 7 ,   P 9 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 9 1 0 1 7 0 0 1 0 8 ;   B a r t e l s   R ,   1 9 8 8 ,   H I S T   M A R K E T I N G   T H O U G ;   B a r t l e t t   C . A . ,   1 9 8 9 ,   M A N A G I N G   B O R D E R S   T R A ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B O D D E W Y N   J J ,   1 9 8 1 ,   J   I N T   B U S   S T U D ,   V 1 2 ,   P 6 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 5 7 1 ;   B u c k l e y   P . J . ,   1 9 7 6 ,   F U T U R E   M U L T I N A T I O N A L ;   C a v u s g i l   S .   T . ,   1 9 8 1 ,   A N N   R E V   M A R K E T I N G   1 ,   P 1 9 5 ;   C A V U S G I L   S T ,   1 9 9 4 ,   J   M A R K E T I N G ,   V 5 8 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 2 4 7 ;   C a v u s g i l   S T ,   1 9 9 8 ,   J   I N T   M A R K E T I N G ,   V 6 ,   P 1 0 3 ;   C a v u s g i l   S T ,   2 0 0 5 ,   J   I N T   M A R K E T I N G ,   V 1 3 ,   P 1 ,   D O I   1 0 . 1 5 0 9 / j i m k . 2 0 0 5 . 1 3 . 4 . 1 ;   C h a r v e t   F F ,   2 0 0 8 ,   J   B U S   L O G I S T ,   V 2 9 ,   P 4 7 ;   C O H E N   W M ,   1 9 9 0 ,   A D M I N   S C I   Q U A R T ,   V 3 5 ,   P 1 2 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 5 5 3 ;   C o r n e l i u s   B ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 5 . x ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   C z i n k o t a   M R ,   2 0 0 9 ,   M A N A G E   I N T   R E V ,   V 4 9 ,   P 2 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 5 7 5 - 0 0 8 - 0 1 3 8 - 1 ;   D a n t   R P ,   2 0 0 8 ,   J   B U S - B U S   M A R K ,   V 1 5 ,   P 1 9 2 ,   D O I   1 0 . 1 0 8 0 / 1 5 4 7 0 6 2 0 8 0 2 0 2 0 2 5 9 ;   D a v i s o n   M .   L . ,   1 9 8 3 ,   M U L T I D I M E N S I O N A L   S C A ;   D a y   G S ,   2 0 1 1 ,   J   M A R K E T I N G ,   V 7 5 ,   P 1 8 3 ;   D A Y   G S ,   1 9 9 4 ,   J   M A R K E T I N G ,   V 5 8 ,   P 3 7 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 9 1 5 ;   D E S H P A N D E   R ,   1 9 9 3 ,   J   M A R K E T I N G ,   V 5 7 ,   P 2 3 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 0 5 5 ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   D i x o n   R .   D . ,   1 9 9 6 ,   A C A D   M A N A G E M E N T   B E S T ,   P 1 6 ;   D o u g l a s   S .   P . ,   1 9 9 2 ,   C O M M U N I C A T I O N       1 0 1 2 ;   D o u g l a s   S .   P . ,   1 9 9 2 ,   I N T   J   R E S   M A R K ,   V 9 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 8 1 1 6 ( 9 2 ) 9 0 0 0 2 - 3 ;   D o w   D ,   2 0 0 6 ,   J   I N T   B U S   S T U D ,   V 3 7 ,   P 2 1 2 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 1 8 9 ;   D U N N I N G   J H ,   1 9 8 8 ,   J   I N T   B U S   S T U D ,   V 1 9 ,   P 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 3 7 2 ;   D W Y E R   F R ,   1 9 8 7 ,   J   M A R K E T I N G ,   V 5 1 ,   P 1 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 1 2 6 ;   E I S E N H A R D T   K M ,   1 9 8 9 ,   A C A D   M A N A G E   R E V ,   V 1 4 ,   P 5 7 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 8 9 . 4 2 7 9 0 0 3 ;   E l l i s   P ,   2 0 0 0 ,   J   I N T   B U S   S T U D ,   V 3 1 ,   P 4 4 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 9 1 6 ;   E l l i s   P D ,   2 0 0 8 ,   J   I N T   B U S   S T U D ,   V 3 9 ,   P 3 5 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 3 6 0 ;   E R R A M I L L I   M K ,   1 9 9 3 ,   J   M A R K E T I N G ,   V 5 7 ,   P 1 9 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 8 5 2 ;   E v a n s   J ,   2 0 0 2 ,   J   I N T   B U S   S T U D ,   V 3 3 ,   P 5 1 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 1 0 2 9 ;   G A N E S A N   S ,   1 9 9 4 ,   J   M A R K E T I N G ,   V 5 8 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 2 6 5 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   H a i r   J .   F . ,   1 9 9 8 ,   M U L T I V A R I A T E   D A T A   A N ;   H a n   J K ,   1 9 9 8 ,   J   M A R K E T I N G ,   V 6 2 ,   P 3 0 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 2 8 5 ;   H E I D E   J B ,   1 9 9 4 ,   J   M A R K E T I N G ,   V 5 8 ,   P 7 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 2 5 2 ;   H e s l o p   L A ,   2 0 0 8 ,   I N T   M A R K E T   R E V ,   V 2 5 ,   P 3 5 4 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 5 1 3 3 0 8 1 0 8 8 7 4 4 0 ;   H o f e r   K M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 8 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 1 6 - 6 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   H o f s t e d e   G ,   1 9 8 0 ,   C U L T U R E S   C O N S E Q U E N C E ;   H o f s t e d e   G . ,   1 9 9 1 ,   C U L T U R E S   O R G   S O F T W A R ;   H o f s t e d e   G . ,   2 0 0 1 ,   C U L T U R E S   C O N S E Q U E N C E ;   H u l t   G T M ,   2 0 0 2 ,   I N D   M A R K E T   M A N A G ,   V 3 1 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 8 5 0 1 ( 0 0 ) 0 0 1 0 1 - 2 ;   H u r l e y   R F ,   1 9 9 8 ,   J   M A R K E T I N G ,   V 6 2 ,   P 4 2 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 7 4 2 ;   J A I N   S C ,   1 9 8 9 ,   J   M A R K E T I N G ,   V 5 3 ,   P 7 0 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 5 2 5 ;   J A W O R S K I   B J ,   1 9 9 3 ,   J   M A R K E T I N G ,   V 5 7 ,   P 5 3 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 8 5 4 ;   V a h l n e   J . E . ,   1 9 7 7 ,   J   I N T   B U S   S T U D ,   V 8 ,   P 2 5 ;   J o h a n s o n   J a n ,   1 9 9 0 ,   I N T   M A R K E T   R E V ,   V 7 ,   P 1 1 ,   D O I   D O I   1 0 . 1 1 0 8 / 0 2 6 5 1 3 3 9 0 1 0 1 3 7 4 1 4 ;   K e t c h e n   D J ,   1 9 9 6 ,   S T R A T E G I C   M A N A G E   J ,   V 1 7 ,   P 4 4 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 1 9 9 6 0 6 ) 1 7 : 6 < 4 4 1 : : A I D - S M J 8 1 9 > 3 . 0 . C O ; 2 - G ;   K l e i n   J G ,   1 9 9 8 ,   J   M A R K E T I N G ,   V 6 2 ,   P 8 9 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 8 0 5 ;   K l e i n   J G ,   2 0 0 2 ,   J   I N T   B U S   S T U D ,   V 3 3 ,   P 3 4 5 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 1 0 2 0 ;   K n i g h t   G ,   2 0 0 4 ,   I N T   M A R K E T   R E V ,   V 2 1 ,   P 6 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 5 1 3 3 0 4 1 0 5 6 8 0 6 0 ;   K O G U T   B ,   1 9 8 8 ,   J   I N T   B U S   S T U D ,   V 1 9 ,   P 4 1 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 3 9 4 ;   K O G U T   B ,   1 9 9 2 ,   O R G A N   S C I ,   V 3 ,   P 3 8 3 ,   D O I   1 0 . 1 2 8 7 / o r s c . 3 . 3 . 3 8 3 ;   K O H L I   A K ,   1 9 9 0 ,   J   M A R K E T I N G ,   V 5 4 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 8 6 6 ;   K O T A B E   M ,   1 9 9 5 ,   S T R A T E G I C   M A N A G E   J ,   V 1 6 ,   P 6 2 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 1 6 0 8 0 4 ;   K U H N   T h o m a s ,   1 9 9 6 ,   S T R U C T U R E   S C I   R E V O L U ;   K w a k   H ,   2 0 0 6 ,   J   A C A D   M A R K E T   S C I ,   V 3 4 ,   P 3 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 2 0 7 0 3 0 4 2 7 0 1 4 0 ;   L e o n g   S M ,   2 0 0 8 ,   J   I N T   B U S   S T U D ,   V 3 9 ,   P 9 9 6 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 3 9 2 ;   L E O N G   S M ,   1 9 8 9 ,   J   C O N S U M   R E S ,   V 1 5 ,   P 4 9 2 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 1 8 8 ;   L e o n i d o u   L C ,   2 0 1 0 ,   I N T   M A R K E T   R E V ,   V 2 7 ,   P 4 9 1 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 5 1 3 3 1 0 1 1 0 7 6 5 6 3 ;   L E V I T T   T ,   1 9 8 3 ,   H A R V A R D   B U S   R E V ,   V 6 1 ,   P 9 2 ;   L i   T . ,   1 9 9 5 ,   I N T   B U S I N E S S   R E V ,   V 4 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / 0 9 6 9 - 5 9 3 1 ( 9 5 ) 0 0 0 0 9 - O ;   M a c I n n i s   D J ,   2 0 1 1 ,   J   M A R K E T I N G ,   V 7 5 ,   P 1 3 6 ;   M a l h o t r a   N K ,   2 0 0 5 ,   I N T   M A R K E T   R E V ,   V 2 2 ,   P 3 9 1 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 5 1 3 3 0 5 1 0 6 0 8 4 2 4 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M e d o f f   M H ,   2 0 0 3 ,   A P P L   E C O N   L E T T ,   V 1 0 ,   P 4 7 9 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 0 4 8 5 0 3 2 0 0 0 0 9 5 3 4 8 ;   M O R G A N   R M ,   1 9 9 4 ,   J   M A R K E T I N G ,   V 5 8 ,   P 2 0 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 3 0 8 ;   N a k a t a   C ,   2 0 0 5 ,   J   B U S   R E S ,   V 5 8 ,   P 6 1 1 ,   D O I   1 0 . 1 0 1 6 / j . j b u s r e s . 2 0 0 3 . 1 0 . 0 0 1 ;   N A R V E R   J C ,   1 9 9 0 ,   J   M A R K E T I N G ,   V 5 4 ,   P 2 0 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 7 5 7 ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   O u e l l e t   J F ,   2 0 0 7 ,   J   M A R K E T I N G ,   V 7 1 ,   P 1 1 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 7 1 . 1 . 1 1 3 ;   O z s o m e r   A ,   2 0 0 3 ,   J   I N T   M A R K E T I N G ,   V 1 1 ,   P 1 ,   D O I   1 0 . 1 5 0 9 / j i m k . 1 1 . 3 . 1 . 2 0 1 5 7 ;   P e n r o s e   E . ,   1 9 5 9 ,   T H E O R Y   G R O W T H   F I R M ;   P E R R Y   J L ,   1 9 8 6 ,   P U B L I C   A D M I N   R E V ,   V 4 6 ,   P 2 1 5 ,   D O I   1 0 . 2 3 0 7 / 3 1 1 0 4 3 6 ;   P f e f f e r   J . ,   1 9 7 8 ,   E X T E R N A L   C O N T R O L   O R G ;   P o r t e r   M . ,   1 9 9 0 ,   C O M P E T I T I V E   A D V   N A T I ;   P o r t e r   M . ,   1 9 8 0 ,   C O M P E T I T I V E   S T R A T E G Y ;   P o r t e r   M .   E . ,   1 9 8 5 ,   C O M P E T I T I V E   A D V   C R E A ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R e a d e r   D ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 4 1 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 7 . x ;   S a m i e e   S ,   2 0 0 5 ,   J   I N T   B U S   S T U D ,   V 3 6 ,   P 3 7 9 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 1 4 5 ;   S A M I E E   S ,   1 9 9 2 ,   J   M A R K E T I N G ,   V 5 6 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 2 0 3 8 ;   S a m u e l s   J .   A . ,   2 0 0 2 ,   J o u r n a l   o f   I n f o r m a t i o n   S y s t e m s ,   V 1 6 ,   D O I   1 0 . 2 3 0 8 / j i s . 2 0 0 2 . 1 6 . 2 . 9 7 ;   S c h i l d t   H A ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 3 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 2 6 . x ;   K o h l   A .   K . ,   1 9 9 0 ,   S C I E N C E ,   V 5 4 ,   P 1 ;   S H I M P   T A ,   1 9 8 7 ,   J   M A R K E T I N G   R E S ,   V 2 4 ,   P 2 8 0 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 1 6 3 8 ;   S i r c a r   S ,   2 0 0 1 ,   M I S   Q U A R T ,   V 2 5 ,   P 4 5 7 ,   D O I   1 0 . 2 3 0 7 / 3 2 5 0 9 9 1 ;   S k a r m e a s   D ,   2 0 0 2 ,   J   I N T   B U S   S T U D ,   V 3 3 ,   P 7 5 7 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 1 0 4 3 ;   S k a r m e a s   D ,   2 0 0 8 ,   I N D   M A R K E T   M A N A G ,   V 3 7 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / j . i n d m a r m a n . 2 0 0 7 . 0 4 . 0 0 4 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S P S S   I n c ,   2 0 0 9 ,   P A S W   S T A T   B A S   1 8 ;   S t y l e s   C ,   2 0 0 8 ,   J   I N T   B U S   S T U D ,   V 3 9 ,   P 8 8 0 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 3 8 5 ;   T h o m s o n   R e u t e r s ,   2 0 0 9 ,   W E B   S C I   8   0 ;   T s a i   W P ,   2 0 1 0 ,   A C A D   M A N A G E   J ,   V 5 3 ,   P 4 4 1 ;   T s a n g   E W K ,   2 0 0 7 ,   A C A D   M A N A G E   J ,   V 5 0 ,   P 1 1 5 6 ;   V E N K A T R A M A N   N ,   1 9 8 9 ,   A C A D   M A N A G E   R E V ,   V 1 4 ,   P 4 2 3 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 8 9 . 4 2 7 9 0 7 8 ;   V e r l e g h   P W J ,   2 0 0 7 ,   J   I N T   B U S   S T U D ,   V 3 8 ,   P 3 6 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 0 0 2 6 9 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   W E R N E R F E L T   B ,   1 9 8 4 ,   S T R A T E G I C   M A N A G E   J ,   V 5 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 2 5 0 0 5 0 2 0 7 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W I L L I A M S O N   O E ,   1 9 7 9 ,   J   L A W   E C O N ,   V 2 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 8 6 / 4 6 6 9 4 2 ;   W i l l i a m s o n   O .   E . ,   1 9 8 5 ,   E C   I   C A P I T A L I S M   F I R M ;   W i l l i a m s o n   O l i v e r   E . ,   1 9 7 5 ,   M A R K E T S   H I E R A R C H I E S ;   W u   F ,   2 0 0 7 ,   J   I N T   B U S   S T U D ,   V 3 8 ,   P 2 8 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e / j i b s . 8 4 0 0 2 6 3 ;   Y a d a v   M S ,   2 0 1 0 ,   J   M A R K E T I N G ,   V 7 4 ,   P 1 ;   Z o u   S M ,   2 0 0 2 ,   J   M A R K E T I N G ,   V 6 6 ,   P 4 0 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 6 . 4 . 4 0 . 1 8 5 1 9 	 1 1 8 	 1 6 	 1 7 	 7 	 6 6 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 0 9 2 - 0 7 0 3 	 	 	 J   A C A D   M A R K E T   S C I 	 J .   A c a d .   M a r k .   S c i . 	 M A R 	 2 0 1 2 	 4 0 	 2 	 	 	 	 	 3 6 4 	 3 8 6 	 	 1 0 . 1 0 0 7 / s 1 1 7 4 7 - 0 1 1 - 0 2 9 6 - 8 	 	 2 3 	 B u s i n e s s 	 B u s i n e s s   &   E c o n o m i c s 	 8 9 3 F P 	 W O S : 0 0 0 3 0 0 3 4 1 9 0 0 0 1 1 	 	 
 
 J 	 S m e y e r s ,   P ;   B u r b u l e s ,   N C 	 	 	 	 S m e y e r s ,   P a u l ;   B u r b u l e s ,   N i c h o l a s   C . 	 	 	 H o w   t o   I m p r o v e   y o u r   I m p a c t   F a c t o r :   Q u e s t i o n i n g   t h e   Q u a n t i f i c a t i o n   o f   A c a d e m i c   Q u a l i t y 	 J O U R N A L   O F   P H I L O S O P H Y   O F   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 A   b r o a d - s c a l e   q u a n t i f i c a t i o n   o f   t h e   m e a s u r e   o f   q u a l i t y   f o r   s c h o l a r s h i p   i s   u n d e r   w a y .   T h i s   t r e n d   h a s   f u n d a m e n t a l   i m p l i c a t i o n s   f o r   t h e   f u t u r e   o f   a c a d e m i c   p u b l i s h i n g   a n d   e m p l o y m e n t .   I n   t h i s   e s s a y   w e   w a n t   t o   r a i s e   q u e s t i o n s   a b o u t   t h e s e   b u r g e o n i n g   p r a c t i c e s ,   p a r t i c u l a r l y   h o w   t h e y   a f f e c t   p h i l o s o p h y   o f   e d u c a t i o n   a n d   s i m i l a r   s u b - d i s c i p l i n e s .   F i r s t ,   d e t a i l s   a r e   g i v e n   o f   h o w   a n   ' i m p a c t   f a c t o r '   i s   c a l c u l a t e d .   T h e   v a r i o u s   m e a n i n g s   t h a t   c a n   b e   a t t a c h e d   t o   i t   a r e   s c r u t i n i s e d .   S e c o n d ,   w e   e x a m i n e   h o w   i m p a c t   f a c t o r s   a r e   u s e d   t o   m a k e   v a r i o u s   ' h i g h   s t a k e s '   a c a d e m i c   d e c i s i o n s ,   s u c h   a s   h i r i n g   a n d   p r o m o t i o n ,   f u n d i n g   o f   r e s e a r c h   p r o j e c t s   a n d   h o w   m u c h   m o n e y   i s   t o   b e   a w a r d e d   t o   a   p a r t i c u l a r   a r e a .   B y   f o c u s i n g   o n   a   p a r t i c u l a r   p r a c t i c e ,   p r o b l e m s   w i t h   t h e   a p p l i c a t i o n   o f   t h e   m e t r i c   g e n e r a l l y   a r e   o u t l i n e d .   F i n a l l y ,   w e   o f f e r   s o m e   g e n e r a l   o b s e r v a t i o n s   a b o u t   t h e   u n i n t e n d e d   c o n s e q u e n c e s   a n d   o t h e r   p r o b l e m s   a r i s i n g   f r o m   t h e   w i d e s p r e a d   u s e   o f   t h i s   m e t r i c ,   i n c l u d i n g   a t t e m p t s   t o   ' g a m e   t h e   s y s t e m ' .   W e   a r g u e   t h a t   t h e   u s e   o f   i m p a c t   f a c t o r s   i n c r e a s i n g l y   s h a p e s   t h e   k i n d   o f   t o p i c s   a n d   i s s u e s   s c h o l a r s   w r i t e   o n ,   t h e i r   c h o i c e s   o f   m e t h o d o l o g y ,   a n d   t h e i r   c h o i c e   o f   p u b l i c a t i o n   v e n u e s   f o r   t h e i r   w o r k .   T e c h n i c a l   m e a s u r e s   a n d   m e c h a n i s m s   t e n d   t o   ' c o l o n i s e '   t h e   q u a l i t a t i v e   a n d   p r o f e s s i o n a l   j u d g m e n t s   t h a t   m u s t   a l s o   b e   p a r t   o f   t h e   p r o c e s s   o f   e v a l u a t i o n ,   a n d   f o r   w h i c h   b i b l i o m e t r i c s   a l o n e   c a n n o t   o f f e r   a   s u b s t i t u t e . 	 [ S m e y e r s ,   P a u l ]   U n i v   G h e n t ,   F a c   P s y c h o l   &   E d u c   S c i ,   B - 9 0 0 0   G h e n t ,   B e l g i u m 	 S m e y e r s ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   G h e n t ,   F a c   P s y c h o l   &   E d u c   S c i ,   D u n a n t l a a n   1 ,   B - 9 0 0 0   G h e n t ,   B e l g i u m . 	 p a u l @ s m e y e r s . p e d . k u l e u v e n . b e 	 	 	 	 	 A d l e r   R . ,   2 0 0 8 ,   C I T A T I O N   S T A T   R E P O R T ;   A g r a w a l   A A ,   2 0 0 5 ,   T R E N D S   E C O L   E V O L ,   V 2 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 5 . 0 2 . 0 0 2 ;   A R N O L D   D N ,   2 0 1 0 ,   N E F A R I O U S   N U M B   U N P U B ;   B a z e r m a n   C h a r l e s ,   1 9 8 7 ,   R H E T O R I C   H U M A N   S C I   L ,   P 1 2 5 ;   B E G L E Y   S ,   2 0 0 6 ,   W A L L   S T R E E T   J       0 6 0 5 ;   B e s l e y   T .   A .   C . ,   2 0 0 9 ,   A S S E S S I N G   Q U A L I T Y   E D ;   B I A L I K   C ,   2 0 0 8 ,   W A L L   S T R E E T   J       0 6 1 6 ;   B r i d g e s   D ,   2 0 0 9 ,   B R I T   E D U C   R E S   J ,   V 3 5 ,   P 4 9 7 ,   D O I   1 0 . 1 0 8 0 / 0 1 4 1 1 9 2 0 9 0 3 1 1 1 5 6 5 ;   C i t r o m e   L e s l i e ,   2 0 0 7 ,   P s y c h i a t r y   ( E d g m o n t ) ,   V 4 ,   P 5 4 ;   F L E I S C H M A N N   M ,   1 9 8 9 ,   J   E L E C T R O A N A L   C H E M ,   V 2 6 1 ,   P 3 0 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 0 7 2 8 ( 8 9 ) 8 0 0 0 6 - 3 ;   H i g h e r   E d u c a t i o n   F u n d i n g   C o u n c i l   f o r   E n g l a n d   ( H E F C E ) ,   2 0 0 9 ,   R E P   P I L   E X   D E V   B I B L ;   M A R S H A L L   M J ,   1 9 9 0 ,   A M   E D U C   R E S   J ,   V 2 7 ,   P 5 8 9 ,   D O I   1 0 . 3 1 0 2 / 0 0 0 2 8 3 1 2 0 2 7 0 0 4 5 8 9 ;   * M I T ,   M I T   I M P   F A C T ;   M o n a s t e r s k y   R i c h a r d ,   2 0 0 5 ,   C H R O N   H I G H E R   E D U C ,   V 5 8 ,   p A 1 2 ;   [ A n o n y m o u s ] ,   2 0 0 6 ,   P L O S   M E D ,   V 3 ,   p e 2 9 1 ,   D O I   [ D O I   1 0 . 1 3 7 1 / J O U R N A L . P M E D . 0 0 3 0 2 9 1 ,   1 0 . 1 3 7 1 / j o u r n a l . p m e d . 0 0 3 0 2 9 1 ] ;   R a m s d e n   J .   J . ,   2 0 0 9 ,   J o u r n a l   o f   B i o l o g i c a l   P h y s i c s   a n d   C h e m i s t r y ,   V 9 ,   P 1 3 9 ;   R o g e r s   L F ,   2 0 0 2 ,   A M   J   R O E N T G E N O L ,   V 1 7 8 ,   P 5 4 1 ;   R o s s n e r   M ,   2 0 0 7 ,   J   C E L L   B I O L ,   V 1 7 9 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 8 3 / j c b . 2 0 0 7 1 1 1 4 0 ;   * S T R A T   F O R   R E S   E D ,   2 0 0 8 ,   1   S F R E   M   H A R R ;   v a n   N i e r o p   E ,   2 0 0 9 ,   S T A T   N E E R L ,   V 6 3 ,   P 5 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 5 7 4 . 2 0 0 8 . 0 0 4 0 8 . x 	 2 0 	 1 6 	 1 6 	 2 	 1 5 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 0 3 0 9 - 8 2 4 9 	 	 	 J   P H I L O S   E D U C 	 J .   P h i l o s .   E d u c . 	 F E B 	 2 0 1 1 	 4 5 	 1 	 	 	 	 	 1 	 1 7 	 	 1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 7 5 2 . 2 0 1 1 . 0 0 7 8 7 . x 	 	 1 7 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h ;   H i s t o r y   O f   S o c i a l   S c i e n c e s 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h ;   S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 7 3 2 U X 	 W O S : 0 0 0 2 8 8 2 1 6 3 0 0 0 0 2 	 	 
 
 J 	 W a l l a c e ,   D P ;   V a n   F l e e t ,   C ;   D o w n s ,   L J 	 	 	 	 W a l l a c e ,   D a n n y   P . ;   V a n   F l e e t ,   C o n n i e ;   D o w n s ,   L a c e y   J . 	 	 	 T h e   r e s e a r c h   c o r e   o f   t h e   k n o w l e d g e   m a n a g e m e n t   l i t e r a t u r e 	 I N T E R N A T I O N A L   J O U R N A L   O F   I N F O R M A T I O N   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 K n o w l e d g e   m a n a g e m e n t ;   R e s e a r c h   m e t h o d s ;   P r o f e s s i o n a l   l i t e r a t u r e ;   B i b l i o m e t r i c s ;   C o n t e n t   a n a l y s i s 	 B R A D F O R D   L A W ;   D I S C I P L I N E ;   D I S C O U R S E S ;   S Y S T E M S 	 A   b i b l i o m e t r i c   a n a l y s i s   a n d   a   c o n t e n t   a n a l y s i s   w e r e   c o n d u c t e d   t o   e x p l o r e   t h e   n a t u r e   o f   t h e   k n o w l e d g e   m a n a g e m e n t   l i t e r a t u r e .   F o r   t h e   b i b l i o m e t r i c   a n a l y s i s ,   t h r e e   l e v e l s   o f   B r a d f o r d   a n a l y s i s   w e r e   u s e d   t o   e x a m i n e   t h e   s h a p e   o f   t h e   k n o w l e d g e   m a n a g e m e n t   l i t e r a t u r e   b a s e d   o n   2 1 , 5 9 6   r e f e r e n c e s   f r o m   2 7 7 1   s o u r c e   p u b l i c a t i o n s .   E a c h   o f   t h e   t h r e e   a n a l y s e s   c o n f o r m e d   t o   t h e   t y p i c a l   c u r v e   o f   t h e   B r a d f o r d   d i s t r i b u t i o n .   F o r   t h e   c o n t e n t   a n a l y s i s ,   t h e   t e x t s   o f   6 3 0   k n o w l e d g e   m a n a g e m e n t   a r t i c l e s   w e r e   a n a l y z e d   t o   a d d r e s s   t h e   q u e s t i o n   o f   w h a t   r e s e a r c h   m e t h o d o l o g i e s   a r e   u s e d   i n   t h e   k n o w l e d g e   m a n a g e m e n t   l i t e r a t u r e .   I t   w a s   f o u n d   t h a t   2 7 . 8   p e r c e n t   o f   k n o w l e d g e   m a n a g e m e n t - r e l a t e d   a r t i c l e s   i n   k n o w l e d g e   m a n a g e m e n t   j o u r n a l s   u s e d   n o   i d e n t i f i a b l e   r e s e a r c h   m e t h o d .   O f   t h e   r e m a i n i n g   4 5 5   r e f e r e e d   a r t i c l e s ,   6 0   p e r c e n t   e m p l o y e d   m a i n s t r e a m   s o c i a l   s c i e n c e s   r e s e a r c h   m e t h o d o l o g i e s .   T h e   r e m a i n i n g   4 0   p e r c e n t   o f   t h e   a r t i c l e s   u s i n g   a n   i d e n t i f i a b l e   m e t h o d o l o g y   w e r e   c h a r a c t e r i z e d   b y   t h e   u s e   o f   " p r o v i s i o n a l   m e t h o d s "   t h a t   a p p e a r e d   t o   s u b s t i t u t e   f o r   m o r e   f o r m a l l y   d e f i n e d   o r   s c i e n t i f i c a l l y   b a s e d   r e s e a r c h   m e t h o d o l o g i e s .   ( C )   2 0 1 0   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ W a l l a c e ,   D a n n y   P . ]   U n i v   A l a b a m a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   T u s c a l o o s a ,   A L   3 5 4 8 7   U S A ;   [ V a n   F l e e t ,   C o n n i e ]   U n i v   O k l a h o m a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   N o r m a n ,   O K   7 3 0 1 9   U S A ;   [ D o w n s ,   L a c e y   J . ]   O k l a h o m a   L i b   B l i n d   &   P h y s i c a l l y   H a n d i c a p p e d ,   O k l a h o m a   C i t y ,   O K   7 3 0 1 3   U S A 	 W a l l a c e ,   D P   ( r e p r i n t   a u t h o r ) ,   U n i v   A l a b a m a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   5 0 1   G o r g a s   L i b , B o x   8 7 0 2 5 2 ,   T u s c a l o o s a ,   A L   3 5 4 8 7   U S A . 	 d w a l l a c e @ s l i s . u a . e d u 	 	 	 	 	 A b b o t t   A . ,   1 9 8 8 ,   S Y S T E M   P R O F E S S I O N S ;   A l a v i   M ,   2 0 0 1 ,   M I S   Q U A R T ,   V 2 5 ,   P 1 0 7 ,   D O I   1 0 . 2 3 0 7 / 3 2 5 0 9 6 1 ;   B a s k e r v i l l e   R . ,   2 0 0 6 ,   K n o w l e d g e   M a n a g e m e n t   R e s e a r c h   &   P r a c t i c e ,   V 4 ,   P 8 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . k m r p . 8 5 0 0 0 9 0 ;   B j o r n s o n   F O ,   2 0 0 8 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 0 ,   P 1 0 5 5 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 8 . 0 3 . 0 0 6 ;   B R A D F O R D   S C ,   1 9 4 8 ,   E N G I N E E R I N G ,   V 2 6 ,   P 8 5 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 1 8 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 4 1 ;   C H E N   Y S ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 3 7 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 6 ) 4 6 : 5 < 3 7 0 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - J ;   D e s o u z a   K .   C . ,   2 0 0 4 ,   J   I N F O R M   S C I   T E C H N O L ,   V 1 ,   P 1 ;   D R O T T   M C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 4 1 ;   E a s t o n   G . ,   1 9 9 7 ,   B R I T   J   M A N A G E ,   V 8 ,   P 9 9 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 5 1 . 0 0 0 4 3 ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F l e x n e r   A . ,   1 9 1 5 ,   P   N A T   C   C H A R   C O R R ,   P 5 7 6 ;   G R O S S M A N   M ,   1 9 9 3 ,   J   A D V   N U R S ,   V 1 8 ,   P 8 6 6 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 1 9 9 3 . 1 8 0 6 0 8 6 6 . x ;   G u l a t i   R ,   2 0 0 7 ,   A C A D   M A N A G E   J ,   V 5 0 ,   P 7 7 5 ;   G u o   Z N ,   2 0 0 8 ,   D E C I S   S U P P O R T   S Y S T ,   V 4 4 ,   P 6 7 3 ,   D O I   1 0 . 1 0 1 6 / j . d s s . 2 0 0 7 . 0 9 . 0 0 6 ;   K a n e   H . ,   2 0 0 6 ,   E L E C T   J   K N O W L E D G E   M A ,   V 4 ,   P 1 4 1 ;   K a r a m i   A . ,   2 0 0 6 ,   I N T   J   M A N A G E M E N T ,   V 2 3 ,   P 4 3 ;   L E I M K U H L E R   F F ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 2 8 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 9 ;   L i n s t e a d   S . ,   1 9 9 7 ,   B R I T   J   M A N A G E ,   V 8 ,   P 8 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 5 1 . 0 0 0 4 2 ;   M i d d l e t o n   M ,   2 0 0 7 ,   I N T   J   I N F O R M   M A N A G E ,   V 2 7 ,   P 9 ,   D O I   1 0 . 1 0 1 6 / j . i j i n f o m g t . 2 0 0 6 . 0 8 . 0 0 4 ;   N i c o l a i s e n   J ,   2 0 0 7 ,   J   D O C ,   V 6 3 ,   P 3 5 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 7 1 0 7 4 3 2 9 8 ;   P a v a l k o   R . ,   1 9 8 8 ,   S O C I O L O G Y   O C C U P A T I O N ;   P O J A S E K   R B ,   2 0 0 1 ,   E N V   Q U A L I T Y   M A N A G E M E ,   V 1 1 ,   P 7 7 ,   D O I   1 0 . 1 0 0 2 / t q e m . 1 2 0 7 ;   S c a n d u r a   T A ,   2 0 0 0 ,   A C A D   M A N A G E   J ,   V 4 3 ,   P 1 2 4 8 ,   D O I   1 0 . 2 3 0 7 / 1 5 5 6 3 4 8 ;   S c h u l t z e   U ,   2 0 0 4 ,   J   M A N A G E   S T U D ,   V 4 1 ,   P 5 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 2 0 0 4 . 0 0 4 4 4 . x ;   S c h u l t z e   U ,   2 0 0 2 ,   M I S   Q U A R T ,   V 2 6 ,   P 2 1 3 ,   D O I   1 0 . 2 3 0 7 / 4 1 3 2 3 3 1 ;   S q u i r e s   G ,   2 0 0 1 ,   J   M A N A G E   S T U D ,   V 3 8 ,   P 4 7 3 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 6 4 8 6 . 0 0 2 4 5 ;   T e e c e   D J ,   1 9 9 8 ,   C A L I F   M A N A G E   R E V ,   V 4 0 ,   P 2 8 9 ;   W A L L A C E   D P ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 3 6 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - R ;   W a l l a c e   D P ,   2 0 0 7 ,   K N O W L E D G E   M A N A G E M E N T ;   W A L L A C E   D P ,   2 0 0 9 ,   P   A S I S T   A N N U   M E E T ,   P 7 3 	 3 2 	 1 6 	 1 7 	 1 	 1 7 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 2 6 8 - 4 0 1 2 	 	 	 I N T   J   I N F O R M   M A N A G E 	 I n t .   J .   I n f .   M a n a g e . 	 F E B 	 2 0 1 1 	 3 1 	 1 	 	 	 	 	 1 4 	 2 0 	 	 1 0 . 1 0 1 6 / j . i j i n f o m g t . 2 0 1 0 . 1 0 . 0 0 2 	 	 7 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 1 1 A C 	 W O S : 0 0 0 2 8 6 5 5 7 1 0 0 0 0 4 	 	 
 
 J 	 J e s i e k ,   B K ;   B o r r e g o ,   M ;   B e d d o e s ,   K ;   H u r t a d o ,   M ;   R a j e n d r a n ,   P ;   S a n g a m ,   D 	 	 	 	 J e s i e k ,   B .   K . ;   B o r r e g o ,   M . ;   B e d d o e s ,   K . ;   H u r t a d o ,   M . ;   R a j e n d r a n ,   P . ;   S a n g a m ,   D . 	 	 	 M a p p i n g   G l o b a l   T r e n d s   i n   E n g i n e e r i n g   E d u c a t i o n   R e s e a r c h ,   2 0 0 5 - 2 0 0 8 	 I N T E R N A T I O N A L   J O U R N A L   O F   E N G I N E E R I N G   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c o l l a b o r a t i v e   r e s e a r c h ;   e m p i r i c a l   r e s e a r c h ;   e n g i n e e r i n g   e d u c a t i o n   r e s e a r c h ;   g l o b a l ;   i n t e r n a t i o n a l ;   o n t o l o g y ;   s c i e n t o m e t r i c s 	 S P E C I A L - I S S U E ;   P A R T   I ;   D I S C I P L I N E ;   C O M M U N I T Y 	 E n g i n e e r i n g   e d u c a t i o n   r e s e a r c h   i n   m a n y   c o u n t r i e s   a n d   r e g i o n s   i s   g a i n i n g   m o m e n t u m   a n d   c o h e r e n c e   a s   a   f i e l d   o f   a c a d e m i c   a c t i v i t y .   Y e t   w h a t   q u a n t i t y   a n d   k i n d s   o f   r e s e a r c h   a r e   c u r r e n t l y   b e i n g   d o n e ,   b o t h   w o r l d w i d e   a n d   i n   s p e c i f i c   n a t i o n s   a n d   r e g i o n s ?   A d d i t i o n a l l y ,   w h a t   c o l l a b o r a t i v e   p a t t e r n s   a r e   n o w   e v i d e n t   i n   t h e   f i e l d ,   i n c l u d i n g   i n   t e r m s   o f   t h e   s i z e   a n d   m u l t i - n a t i o n a l   c o m p o s i t i o n   o f   r e s e a r c h   t e a m s ?   T o   a d d r e s s   t h e s e   r e s e a r c h   q u e s t i o n s ,   w e   f i r s t   r e v i e w   p r e v i o u s   a t t e m p t s   t o   q u a n t i f y   a n d   c h a r a c t e r i z e   r e s e a r c h   o n   e n g i n e e r i n g   e d u c a t i o n   a n d   r e l a t e d   f i e l d s .   W e   t h e n   u s e   t h e o r e t i c a l   a n d   m e t h o d o l o g i c a l   i n s i g h t s   f r o m   s o c i a l   s t u d i e s   o f   s c i e n c e ,   b i b l i o m e t r i c s ,   a n d   s c i e n t o m e t r i c s   t o   p e r f o r m   q u a n t i t a t i v e   a n d   q u a l i t a t i v e   a n a l y s i s   o f   2 , 1 7 3   j o u r n a l   a r t i c l e s   a n d   c o n f e r e n c e   p a p e r s   p u b l i s h e d   2 0 0 5   t o   2 0 0 8 .   O u r   f i n d i n g s   a r e   p r e s e n t e d   i n   f i v e   m a i n   p a r t s .   F i r s t ,   w e   d e s c r i b e   h o w   b a s i c   c r i t e r i a   w e r e   u s e d   t o   i d e n t i f y   8 8 5   e m p i r i c a l   r e s e a r c h   p a p e r s   a n d   t r a c k   c h a n g e s   i n   t h e   o r i e n t a t i o n   o f   t h e   m a j o r   p u b l i c a t i o n   o u t l e t s   i n   t h e   f i e l d .   S e c o n d ,   a n a l y s i s   o f   a u t h o r   a f f i l i a t i o n   i n f o r m a t i o n   a l l o w s   u s   t o   r e p o r t   o n   p u b l i c a t i o n   a c t i v i t y   b y   c o u n t r y   a n d   r e g i o n .   T h i r d ,   w e   d i s c u s s   e v i d e n c e   o f   c o l l a b o r a t i v e   p a t t e r n s ,   i n c l u d i n g   c o - a u t h o r s h i p   t r e n d s   a n d   p r e v a l e n c e   o f   m u l t i n a t i o n a l   r e s e a r c h   t e a m s .   F o u r t h ,   w e   e x a m i n e   k e y w o r d s   i n   a r t i c l e   m e t a d a t a   t o   r e p o r t   o n   t h e   p r e v a l e n c e   o f   3 8   c a t e g o r i e s   r e p r e s e n t i n g   d i f f e r e n t   r e s e a r c h   t o p i c s   a n d   c o n t e x t s .   F i f t h   a n d   f i n a l l y ,   w e   e x a m i n e   c o - o c c u r r e n c e   o f   a r t i c l e s   b y   c a t e g o r y .   T h e   p a p e r   c o n c l u d e s   w i t h   r e c o m m e n d a t i o n s   f o r   b u i l d i n g   g l o b a l   c a p a c i t y   i n   e n g i n e e r i n g   e d u c a t i o n   r e s e a r c h ,   i n c l u d i n g   s u g g e s t i o n s   f o r   e x p a n d i n g   c r o s s - n a t i o n a l   c o l l a b o r a t i o n   i n   t a r g e t e d   r e s e a r c h   a r e a s   a n d   i m p r o v i n g   a c c e s s   t o   t h e   f i e l d ' s   l i t e r a t u r e . 	 [ J e s i e k ,   B .   K . ]   P u r d u e   U n i v ,   S c h   E n g n   E d u c ,   W   L a f a y e t t e ,   I N   4 7 9 0 7   U S A ;   [ B o r r e g o ,   M . ]   V i r g i n i a   T e c h ,   D e p t   E n g n   E d u c   0 2 1 8 ,   B l a c k s b u r g ,   V A   2 4 0 6 1   U S A ;   [ H u r t a d o ,   M . ;   R a j e n d r a n ,   P . ;   S a n g a m ,   D . ]   P u r d u e   U n i v ,   S c h   E l e c t   &   C o m p   E n g n ,   W   L a f a y e t t e ,   I N   4 7 9 0 7   U S A 	 J e s i e k ,   B K   ( r e p r i n t   a u t h o r ) ,   P u r d u e   U n i v ,   S c h   E n g n   E d u c ,   7 0 1   W   S t a d i u m   A v e ,   W   L a f a y e t t e ,   I N   4 7 9 0 7   U S A . 	 b j e s i e k @ p u r d u e . e d u 	 	 B o r r e g o ,   M a u r a / 0 0 0 0 - 0 0 0 1 - 7 1 3 1 - 4 6 1 1 	 U S   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( N S F )   [ D U E - 0 8 1 0 9 9 0 ,   E E C - 0 9 3 5 1 0 9 ] 	 T h e   a u t h o r s   g r a t e f u l l y   a c k n o w l e d g e   t h e   U S   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( N S F )   f o r   s u p p o r t i n g   t h i s   p r o j e c t   t h r o u g h   D U E - 0 8 1 0 9 9 0 ,   E x p a n d i n g   G l o b a l   E n g i n e e r i n g   E d u c a t i o n   R e s e a r c h   C o l l a b o r a t i o n ,   a n d   E E C - 0 9 3 5 1 0 9 ,   C o l l a b o r a t i v e   R e s e a r c h :   I n t e r a c t i v e   K n o w l e d g e   N e t w o r k s   f o r   E n g i n e e r i n g   E d u c a t i o n   R e s e a r c h   ( i K N E E R ) .   W e   t h a n k   D r s .   K r i s h n a   M a d h a v a n   a n d   Y i   S h e n   f o r   h e l p f u l   d i s c u s s i o n s   a b o u t   m e a s u r i n g   i n t e r r a t e r   r e l i a b i l i t y . 	 [ A n o n y m o u s ] ,   1 9 9 7 ,   A S E E   P R I S M ;   B a i l l i e   C . ,   2 0 0 9 ,   E U R O P E A N   J   E N G   E D ,   V 3 4 ,   P 2 9 1 ;   B A R T K O   J J ,   1 9 7 6 ,   J   N E R V   M E N T   D I S ,   V 1 6 3 ,   P 3 0 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 5 0 5 3 - 1 9 7 6 1 1 0 0 0 - 0 0 0 0 3 ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   P   R E S   E N G   E D   S   R E E S ;   [ A n o n y m o u s ] ,   F O S T E R I N G   I   I N   P R E S S ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   P   A U S T R   A S S   E N G   E D   A ;   B o r r e g o   M ,   2 0 0 7 ,   J   E N G   E D U C ,   V 9 6 ,   P 5 ;   B o r r e g o   M ,   2 0 0 7 ,   J   E N G   E D U C ,   V 9 6 ,   P 2 8 1 ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   E U R O P E A N   J   E N G   E D ,   D O I   1 0 . 1 0 8 0 / 0 3 0 4 3 7 9 0 8 0 1 9 8 8 1 3 9 ;   D e   G r a a f f   E . ,   2 0 0 7 ,   M A N A G E M E N T   C H A N G E   I M ;   D E M E T R Y   J S ,   1 9 8 0 ,   E N G   E D U C ,   V 7 0 ,   P 4 0 4 ;   D u   X . ,   2 0 0 9 ,   R E S   P B L   P R A C T I C E   E N G ;   [ A n o n y m o u s ] ,   2 0 0 5 ,   P   1   I N T   C O M P   E D   R E S ;   [ A n o n y m o u s ] ,   2 0 0 7 ,   E U R O P E A N   J   E N G   E D ,   D O I   1 0 . 1 0 8 0 / 0 3 0 4 3 7 9 0 7 0 1 3 3 6 9 3 4 ;   F u j i g a k i   Y ,   1 9 9 8 ,   S O C   S C I   I N F O R M ,   V 3 7 ,   P 5 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 9 8 0 3 7 0 0 1 0 0 1 ;   G a b r i e l e   G A ,   2 0 0 5 ,   J   E N G   E D U C ,   V 9 4 ,   P 2 8 5 ;   G r a n d i n   J . ,   2 0 0 9 ,   O N L I N E   J   G L O B A L   E N G ,   V 4 ,   P 1 ;   [ A n o n y m o u s ] ,   G U E S S   G R A P H   E X P L   S Y S ;   H e i t m a n n   G . ,   2 0 0 5 ,   E u r o p e a n   J o u r n a l   o f   E n g i n e e r i n g   E d u c a t i o n ,   V 3 0 ,   P 4 4 7 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 4 3 7 9 0 5 0 0 2 1 3 1 3 6 ;   H e s s   D . ,   1 9 9 7 ,   S C I   S T U D I E S   A D V   I N T R ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   I N T   J   E N G   E D ;   [ A n o n y m o u s ] ,   I N S T R   S T R U C T   A B S T R ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   P   A M   S O C   E N G   E D   A S E E ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   P   S E F I   A N N   C   R O T T   N E ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   P   S E F I   A N N   C   A A L B   D E ;   J e s i e k   B K ,   2 0 1 0 ,   J   E N G   E D U C ,   V 9 9 ,   P 1 0 7 ;   J e s i e k   B K ,   2 0 0 9 ,   J   E N G   E D U C ,   V 9 8 ,   P 3 9 ;   [ A n o n y m o u s ] ,   2 0 0 4 ,   S H A R   D U B L   D E S C R   S H O R ;   L e g e n d r e   P ,   2 0 1 0 ,   E N C Y   R E S   D E S I G N ,   P 1 6 4 ;   L e m a i n e   G . ,   1 9 7 6 ,   P E R S P E C T I V E S   E M E R G E N ,   P 1 ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   P   A M   S O C   E N G   E D   A S E E ;   L o h m a n n   J R ,   2 0 0 8 ,   J   E N G   E D U C ,   V 9 7 ,   P 3 9 3 ;   L o h m a n n   J R ,   2 0 0 5 ,   J   E N G   E D U C ,   V 9 4 ,   P 1 ;   L u c e n a   J ,   2 0 0 8 ,   J   E N G   E D U C ,   V 9 7 ,   P 4 3 3 ;   [ A n o n y m o u s ] ,   2 0 0 7 ,   E N G   E D   J   H I G H E R   E D   A ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   P   A M   S O C   E N G   E D   A S E E ;   O s o r i o   N L ,   2 0 0 2 ,   S C I   T E C H   L I B R ,   V 2 3 ,   P 4 9 ,   D O I   1 0 . 1 3 0 0 / J 1 2 2 v 2 3 n 0 1 _ 0 5 ;   O s o r i o   N . L . ,   2 0 0 5 ,   P   A M   S O C   E N G   E D   A S E E ;   P r i n c e   M J ,   2 0 0 6 ,   J   E N G   E D U C ,   V 9 5 ,   P 1 2 3 ;   S h a v e l s o n   R J ,   2 0 0 2 ,   S C I   R E S   E D ;   [ A n o n y m o u s ] ,   2 0 0 7 ,   C O M P U T E R   S C I   E D ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   P   4   I N T   C O M P   E D   R E S ;   T h e   S t e e r i n g   C o m m i t t e e   o f   N a t i o n a l   E n g i n e e r i n g   E d u c a t i o n   R e s e a r c h   C o l l o q u i e s ,   2 0 0 6 ,   J   E N G   E D U C ,   V 9 5 ,   P 2 5 9 ;   W a l d   M ,   2 0 0 6 ,   I N T   J   E N G   E D U C ,   V 2 2 ,   P 4 1 9 ;   W a l d   M ,   2 0 0 6 ,   I N T   J   E N G   E D U C ,   V 2 2 ,   P 1 ;   W a l d   M ,   2 0 0 6 ,   I N T   J   E N G   E D U C ,   V 2 2 ,   P 1 1 2 1 ;   W a l d   M ,   2 0 0 7 ,   I N T   J   E N G   E D U C ,   V 2 3 ,   P 1 0 5 1 ;   W a l d   M ,   2 0 0 7 ,   I N T   J   E N G   E D U C ,   V 2 3 ,   P 6 2 9 ;   W a n k a t   P C ,   2 0 0 4 ,   J   E N G   E D U C ,   V 9 3 ,   P 1 3 ;   W a n k a t   P .   C . ,   1 9 9 9 ,   J   E N G   E D U C ,   V 8 8 ,   P 3 7 ,   D O I   D O I   1 0 . 1 0 0 2 / J . 2 1 6 8 - 9 8 3 0 . 1 9 9 9 . T B 0 0 4 0 9 . X ;   W e b s t e r   J ,   2 0 0 0 ,   I N T   J   E N G   E D U C ,   V 1 6 ,   P 1 4 6 ;   W h i t i n   K ,   2 0 0 4 ,   J   E N G   E D U C ,   V 9 3 ,   P 5 ;   [ A n o n y m o u s ] ,   2 0 0 8 ,   P   I N T   S   E N G   E D   D U B L ;   [ A n o n y m o u s ] ,   E U R O P E A N   J   E N G   E D   A I ;   [ A n o n y m o u s ] ,   R E S   E N G   E D   S   R E E S ;   [ A n o n y m o u s ] ,   N E T W O R K   W O R K B E N C H 	 5 6 	 1 6 	 1 6 	 2 	 1 9 	 T E M P U S   P U B L I C A T I O N S 	 D U R R U S ,   B A N T R Y 	 I J E E   ,   R O S S M O R E , ,   D U R R U S ,   B A N T R Y ,   C O U N T Y   C O R K   0 0 0 0 0 ,   I R E L A N D 	 0 9 4 9 - 1 4 9 X 	 	 	 I N T   J   E N G   E D U C 	 I n t .   J .   E n g .   E d u c 	 	 2 0 1 1 	 2 7 	 1 	 	 	 S I 	 	 7 7 	 9 0 	 	 	 	 1 4 	 E d u c a t i o n ,   S c i e n t i f i c   D i s c i p l i n e s ;   E n g i n e e r i n g ,   M u l t i d i s c i p l i n a r y 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h ;   E n g i n e e r i n g 	 7 3 5 F U 	 W O S : 0 0 0 2 8 8 3 9 9 6 0 0 0 1 1 	 	 
 
 J 	 S c h u e r m a n s ,   N ;   M e e u s ,   B ;   D e   M a e s s c h a l c k ,   F 	 	 	 	 S c h u e r m a n s ,   N i c k ;   M e e u s ,   B r u n o ;   D e   M a e s s c h a l c k ,   F i l i p 	 	 	 I s   t h e r e   a   w o r l d   b e y o n d   t h e   W e b   o f   S c i e n c e ?   P u b l i c a t i o n   p r a c t i c e s   o u t s i d e   t h e   h e a r t l a n d   o f   a c a d e m i c   g e o g r a p h y 	 A R E A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a c a d e m i c   p u b l i s h i n g ;   A n g l o - A m e r i c a n   h e g e m o n y ;   W e b   o f   S c i e n c e ;   j o u r n a l s ;   b i b l i o m e t r i c s ;   B e l g i u m 	 G L O B A L I Z A T I O N ;   L A N G U A G E ;   E N G L I S H ;   S P A C E S 	 B e c a u s e   r e s e a r c h   o n   t h e   p u b l i c a t i o n   p r a c t i c e s   o f   a c a d e m i c   g e o g r a p h e r s   h a s   b e e n   l i m i t e d   t o   t h e   q u a n t i f i c a t i o n   o f   j o u r n a l   a r t i c l e s   c i t e d   i n   e a s i l y   s e a r c h a b l e   d a t a b a s e s   s u c h   a s   T h o m s o n   R e u t e r s '   W e b   o f   S c i e n c e   o r   E l s e v i e r ' s   S c o p u s ,   t h e   q u e s t i o n   r e m a i n s   w h e t h e r   j o u r n a l s   t h a t   a r e   n o t   i n d e x e d   b y   t h e s e   d a t a b a s e s   f l o u r i s h   o r   p e r i s h   u n d e r   t h e   i n c r e a s i n g   p r e s s u r e   t o   p u b l i s h   i n   o u t l e t s   w i t h   t h e   h i g h e s t   i m p a c t   f a c t o r s .   T o   a n s w e r   t h i s   q u e s t i o n ,   w e   h a v e   c o m p i l e d   a   d a t a b a s e   w i t h   t h e   c o m p l e t e   b i b l i o g r a p h i e s   o f   a l l   B e l g i a n   p r o f e s s o r s   t h a t   h a v e   b e e n   w o r k i n g   i n   B e l g i u m   i n   t h e   f i e l d   o f   h u m a n   g e o g r a p h y   o v e r   t h e   l a s t   4 0   y e a r s .   B a s e d   o n   o u r   q u a n t i t a t i v e   a n a l y s i s   o f   8 1 0   a r t i c l e s   p u b l i s h e d   i n   3 0 4   d i f f e r e n t   j o u r n a l s ,   w e   c o m e   t o   t h e   c o n c l u s i o n   t h a t   h u m a n   g e o g r a p h e r s   f r o m   t h e   D u t c h - s p e a k i n g   n o r t h   o f   t h e   c o u n t r y   a r e   c u r r e n t l y   p u b l i s h i n g   m o r e   i n   E n g l i s h - l a n g u a g e   j o u r n a l s   a n d   i n   j o u r n a l s   i n d e x e d   b y   t h e   W e b   o f   S c i e n c e   t h a n   t h e i r   c o l l e a g u e s   i n   t h e   s e v e n t i e s   o r   t h e   e i g h t i e s ,   b u t   l e s s   i n   t h e   D u t c h   a n d   t h e   F r e n c h   l a n g u a g e s   a n d   i n   B e l g i a n   g e o g r a p h i c a l   j o u r n a l s .   I n   t h e   F r e n c h - s p e a k i n g   s o u t h   o f   t h e   c o u n t r y ,   t h i s   e v o l u t i o n   i s   l e s s   p r o n o u n c e d ,   b u t   s t i l l   p r e s e n t .   E v e n   t h o u g h   w e   a p p l a u d   t h e   t e n d e n c y   t o   p u b l i s h   i n   E n g l i s h   a n d   i n   W e b   o f   S c i e n c e   j o u r n a l s   b e c a u s e   i t   i n c r e a s e s   t h e   a c a d e m i c   r i g o u r   o f   s c h o l a r l y   r e s e a r c h ,   w e   a r e   a f r a i d   t h a t   i t   h a m p e r s   t h e   r o l e   o f   a c a d e m i c   g e o g r a p h y   i n   g e o g r a p h y   e d u c a t i o n   a n d   s o c i e t y   a s   a   w h o l e . 	 [ S c h u e r m a n s ,   N i c k ;   M e e u s ,   B r u n o ;   D e   M a e s s c h a l c k ,   F i l i p ]   K a t h o l i e k e   U n i v   L e u v e n ,   D e p t   E a r t h   &   E n v i r o n m   S c i ,   B - 3 0 0 1   H e v e r l e e ,   B e l g i u m 	 S c h u e r m a n s ,   N   ( r e p r i n t   a u t h o r ) ,   K a t h o l i e k e   U n i v   L e u v e n ,   D e p t   E a r t h   &   E n v i r o n m   S c i ,   B - 3 0 0 1   H e v e r l e e ,   B e l g i u m . 	 N i c k . S c h u e r m a n s @ e e s . k u l e u v e n . b e 	 	 	 	 	 A a l b e r s   M B ,   2 0 0 7 ,   S O C   C U L T   G E O G R ,   V 8 ,   P 2 8 3 ,   D O I   1 0 . 1 0 8 0 / 1 4 6 4 9 3 6 0 7 0 1 3 6 0 2 2 0 ;   A a l b e r s   M B ,   2 0 0 4 ,   A R E A ,   V 3 6 ,   P 3 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 0 0 0 4 - 0 8 9 4 . 2 0 0 4 . 0 0 2 2 9 . x ;   B e r g   L D ,   1 9 9 8 ,   E N V I R O N   P L A N N   D ,   V 1 6 ,   P 1 2 8 ;   B o n n e t t   A ,   2 0 0 3 ,   A R E A ,   V 3 5 ,   P 5 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 7 5 - 4 7 6 2 . 0 0 1 1 0 ;   B O S M A N   J ,   2 0 0 6 ,   V A N C H R I S T A L L E R   W A L L E ,   P 3 9 1 ;   D e b a c k e r e   K ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 2 5 3 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 3 2 . 7 0 1 4 6 . 0 2 ;   G a r c i a - R a m o n   M D ,   2 0 0 3 ,   P R O G   H U M   G E O G ,   V 2 7 ,   P 1 ,   D O I   1 0 . 1 1 9 1 / 0 3 0 9 1 3 2 5 0 3 p h 4 0 9 x x ;   H a r r i s   C D ,   2 0 0 1 ,   G E O G R   R E V ,   V 9 1 ,   P 6 7 5 ,   D O I   1 0 . 2 3 0 7 / 3 5 9 4 7 2 5 ;   H a s s i n k   R ,   2 0 0 7 ,   E N V I R O N   P L A N N   A ,   V 3 9 ,   P 1 2 8 2 ,   D O I   1 0 . 1 0 6 8 / a 3 9 2 8 2 ;   L O O P M A N S   M ,   H O U S I N G   S T U D I E S ;   L u w e l   M ,   1 9 9 9 ,   R & D   M A N A G E ,   V 2 9 ,   P 1 3 3 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 3 1 0 . 0 0 1 2 4 ;   M I N C A   C ,   2 0 0 0 ,   E N V I R O N   P L A N N   D ,   V 1 6 ,   P 2 5 3 ;   M u l l e r   M ,   2 0 0 7 ,   A R E A ,   V 3 9 ,   P 2 0 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 4 7 6 2 . 2 0 0 7 . 0 0 7 3 1 . x ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   N I C O L A I   H ,   2 0 0 4 ,   B E L G E O ,   V 1 ,   P 3 3 ;   P a a s i   A ,   2 0 0 5 ,   E N V I R O N   P L A N N   A ,   V 3 7 ,   P 7 6 9 ,   D O I   1 0 . 1 0 6 8 / a 3 7 6 9 ;   R o d r i g u e z - P o s e   A ,   2 0 0 6 ,   E N V I R O N   P L A N N   A ,   V 3 8 ,   P 6 0 3 ,   D O I   1 0 . 1 0 6 8 / a 3 8 2 8 0 ;   R o s s i   U ,   2 0 0 8 ,   A R E A ,   V 4 0 ,   P 4 0 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 4 7 6 2 . 2 0 0 8 . 0 0 8 1 6 . x ;   S C H M I T Z   S ,   2 0 0 3 ,   A N N   G E O G R ,   V 1 1 2 ,   P 4 0 2 ,   D O I   1 0 . 3 4 0 6 / g e o . 2 0 0 3 . 9 4 6 ;   S h o r t   J R ,   2 0 0 1 ,   P R O F   G E O G R ,   V 5 3 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / 0 0 3 3 - 0 1 2 4 . 0 0 2 6 5 ;   V a i o u   D ,   2 0 0 4 ,   G E O F O R U M ,   V 3 5 ,   P 5 2 9 ,   D O I   1 0 . 1 0 1 6 / j . g e o f o r u m . 2 0 0 4 . 0 1 . 0 0 9 ;   W A L G R A V E   S ,   2 0 0 8 ,   R E S   P U B L I C A ,   V 5 0 ,   P 1 7 9 ;   Y e u n g   H .   W . ,   2 0 0 1 ,   E N V I R O N   P L A N N   A ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 6 8 / a 3 3 0 1 e d 	 2 3 	 1 6 	 1 6 	 5 	 1 9 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 0 0 0 4 - 0 8 9 4 	 	 	 A R E A 	 A r e a 	 D E C 	 2 0 1 0 	 4 2 	 4 	 	 	 	 	 4 1 7 	 4 2 4 	 	 1 0 . 1 1 1 1 / j . 1 4 7 5 - 4 7 6 2 . 2 0 1 0 . 0 0 9 3 8 . x 	 	 8 	 G e o g r a p h y 	 G e o g r a p h y 	 6 7 4 I L 	 W O S : 0 0 0 2 8 3 7 3 3 1 0 0 0 0 4 	 	 
 
 J 	 S m i t h ,   D R 	 	 	 	 S m i t h ,   D e r e k   R . 	 	 	 A   l o n g i t u d i n a l   a n a l y s i s   o f   b i b l i o m e t r i c   a n d   i m p a c t   f a c t o r   t r e n d s   a m o n g   t h e   c o r e   i n t e r n a t i o n a l   j o u r n a l s   o f   n u r s i n g ,   1 9 7 7 - 2 0 0 8 	 I N T E R N A T I O N A L   J O U R N A L   O F   N U R S I N G   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 N u r s i n g ;   B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   I m p a c t   f a c t o r 	 C I T A T I O N   A N A L Y S I S ;   M E D I C A L   J O U R N A L S ;   O C C U P A T I O N A L - H E A L T H ;   E D I T O R I A L   N U R S E S ;   S C I E N C E ;   O P H T H A L M O L O G Y ;   P U B L I C A T I O N S ;   E V O L U T I O N ;   C A T E G O R Y ;   Q U A L I T Y 	 B a c k g r o u n d   A l t h o u g h   b i b l i o m e t r i c   a n a l y s i s   a f f o r d s   s i g n i f i c a n t   i n s i g h t   i n t o   t h e   p r o g r e s s i o n   a n d   d i s t r i b u t i o n   o f   i n f o r m a t i o n   w i t h i n   a   p a r t i c u l a r   r e s e a r c h   f i e l d   d e t a i l e d   l o n g i t u d i n a l   s t u d i e s   o f   t h i s   t y p e   a r e   r a r e   w i t h i n   t h e   f i e l d   o f   n u r s i n g   O b j e c t i v e s   T h i s   s t u d y   a i m e d   t o   i n v e s t i g a t e   f r o m   a   b i b l i o m e t r i c   p e r s p e c t i v e   t h e   p r o g r e s s i o n   a n d   t r e n d s   o f   c o r e   i n t e r n a t i o n a l   n u r s i n g   j o u r n a l s   o v e r   t h e   l o n g e s t   p o s s i b l e   t i m e   p e r i o d   M e t h o d s   A   d e t a i l e d   b i b l i o m e t r i c   a n a l y s i s   w a s   u n d e r t a k e n   a m o n g   7   c o r e   i n t e r n a t i o n a l   n u r s i n g   p e r i o d i c a l s   u s i n g   c u s t o m   h i s t o r i c a l   d a t a   s o u r c e d   f r o m   t h e   T h o m s o n   R e u t e r s   J o u r n a l   C i t a t i o n   R e p o r t s   ( R )   R e s u l t s   I n   t h e   3 2   y e a r s   b e t w e e n   1 9 7 7   a n d   2 0 0 8   t h e   n u m b e r   o f   c i t a t i o n s   r e c e i v e d   b y   t h e s e   7   j o u r n a l s   i n c r e a s e d   o v e r   7 0 0 %   A   s u s t a i n e d   a n d   s t a t i s t i c a l l y   s i g n i f i c a n t   ( p   <   0   0 0 1 )   3 - f o l d   i n c r e a s e   w a s   a l s o   o b s e r v e d   i n   t h e   a v e r a g e   i m p a c t   f a c t o r   s c o r e   d u r i n g   t h i s   p e r i o d   S t a t i s t i c a l   a n a l y s i s   r e v e a l e d   t h a t   a l l   p e r i o d i c a l s   e x p e r i e n c e d   s i g n i f i c a n t   ( p   <   0   0 0 1 )   i m p r o v e m e n t s   i n   t h e i r   I m p a c t   f a c t o r s   o v e r   t i m e   w i t h   g a i n s   r a n g i n g   f r o m   a p p r o x i m a t e l y   2 -   t o   7 8 - f o l d   C o n c l u s i o n s   O v e r a l l   t h i s   s t u d y   p r o v i d e s   o n e   o f   t h e   m o s t   c o m p r e h e n s i v e   l o n g i t u d i n a l   b i b l i o m e t r i c   a n a l y s e s   e v e r   c o n d u c t e d   i n   t h e   f i e l d   o f   n u r s i n g   I m p r e s s i v e   a n d   c o n t i n u a l   i m p a c t   f a c t o r   g a i n s   s u g g e s t   t h a t   p u b l i s h e d   n u r s i n g   r e s e a r c h   i s   b e i n g   i n c r e a s i n g l y   s e e n   h e a r d   a n d   c i t e d   i n   t h e   i n t e r n a t i o n a l   a c a d e m i c   c o m m u n i t y   ( C )   2 0 1 0   E l s e v i e r   L t d   A l l   r i g h t s   r e s e r v e d 	 U n i v   N e w c a s t l e ,   S c h   H l t h   S c i ,   F a c   H l t h ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a 	 S m i t h ,   D R   ( r e p r i n t   a u t h o r ) ,   U n i v   N e w c a s t l e ,   S c h   H l t h   S c i ,   F a c   H l t h ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a . 	 	 S m i t h ,   D e r e k / F - 4 8 4 4 - 2 0 1 0 ;   	 S m i t h ,   D e r e k / 0 0 0 0 - 0 0 0 2 - 8 2 0 2 - 2 5 2 3 	 	 	 A B E N T E   G L ,   2 0 0 5 ,   B M C   P U B L I C   H E A L T H ,   V 5 ,   P 2 4 ;   A l l e n   M a r g a r e t   P e g ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 4 3 ;   B e c k s t e a d   J W ,   2 0 0 9 ,   I N T   J   N U R S   S T U D ,   V 4 6 ,   P 1 1 6 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 9 . 0 4 . 0 0 8 ;   B o r b a s i   S ,   2 0 0 2 ,   J   A D V   N U R S ,   V 3 8 ,   P 4 8 9 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 2 . 0 2 2 1 0 . x ;   B r o w n   H ,   2 0 0 7 ,   B R I T   M E D   J ,   V 3 3 4 ,   P 5 6 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 9 1 4 2 . 4 5 4 0 8 6 . A D ;   C h a n   Z C Y ,   2 0 0 9 ,   J   C L I N   N U R S ,   V 1 8 ,   P 3 5 1 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 0 2 . 2 0 0 9 . 0 3 0 8 3 . x ;   C h e w   M ,   2 0 0 7 ,   J   R O Y   S O C   M E D ,   V 1 0 0 ,   P 1 4 2 ,   D O I   1 0 . 1 2 5 8 / j r s m . 1 0 0 . 3 . 1 4 2 ;   C R O O K E S   P A ,   2 0 0 9 ,   N U R S E   E D   T O   I N   P R E S S ;   D o u g h e r t y   M C ,   2 0 0 4 ,   J   N U R S   S C H O L A R S H I P ,   V 3 6 ,   P 1 7 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 7 - 5 0 6 9 . 2 0 0 4 . 0 4 0 3 1 . x ;   D o y l e   A ,   1 9 3 3 ,   A M   J   N U R S ,   V 3 3 ,   P 7 6 5 ,   D O I   1 0 . 2 3 0 7 / 3 4 1 1 7 5 8 ;   E s t a b r o o k s   C A ,   2 0 0 4 ,   N U R S   R E S ,   V 5 3 ,   P 2 9 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 4 0 9 0 0 0 - 0 0 0 0 3 ;   F a n   J C ,   2 0 0 8 ,   C L I N   E X P   O P H T H A L M O L ,   V 3 6 ,   P 5 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 9 0 7 1 . 2 0 0 8 . 0 1 6 7 4 . x ;   F o o   J Y A ,   2 0 0 9 ,   A C C O U N T   R E S ,   V 1 6 ,   P 1 2 7 ,   D O I   1 0 . 1 0 8 0 / 0 8 9 8 9 6 2 0 9 0 2 9 8 4 0 8 0 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 3 0 4 ;   G a r f i e l d   E . ,   1 9 8 4 ,   E S S A Y S   I N F O R M   S C I ,   V 7 ,   P 3 3 6 ;   G a r f i e l d   E ,   1 9 7 6 ,   E S S A Y S   I N F O R M   S C I ,   V 2 ,   P 5 5 6 ;   G a r f i e l d   E ,   2 0 0 7 ,   I N T   M I C R O B I O L ,   V 1 0 ,   P 6 5 ,   D O I   1 0 . 2 4 3 6 / 2 0 . 1 5 0 1 . 0 1 . 1 0 ;   H a l l b e r g   I R ,   2 0 0 9 ,   I N T   J   N U R S   S T U D ,   V 4 6 ,   P 4 0 7 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 9 . 0 2 . 0 0 5 ;   H u a n g   Y a - L i ,   2 0 0 6 ,   J   N u r s   R e s ,   V 1 4 ,   P 7 5 ;   I r o n s i d e   P M ,   2 0 0 7 ,   J   N U R S   E D U C ,   V 4 6 ,   P 9 9 ;   J a c k s o n   D ,   2 0 0 9 ,   J   C L I N   N U R S ,   V 1 8 ,   P 2 5 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 7 0 2 . 2 0 0 9 . 0 2 9 2 7 . x ;   J o h n s t o n e   M J ,   2 0 0 7 ,   I N T   N U R S   R E V ,   V 5 4 ,   P 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 6 - 7 6 5 7 . 2 0 0 7 . 0 0 5 2 7 . x ;   J o s e p h   K S ,   2 0 0 3 ,   B R I T   M E D   J ,   V 3 2 6 ,   P 2 8 3 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 6 . 7 3 8 3 . 2 8 3 ;   K e t e f i a n   S ,   2 0 0 9 ,   I N T   J   N U R S   S T U D ,   V 4 6 ,   P 7 5 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 8 . 0 8 . 0 0 9 ;   K i n g   T L ,   2 0 0 8 ,   J   M I D W I F E R Y   W O M   H E A L ,   V 5 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j m w h . 2 0 0 7 . 1 1 . 0 1 0 ;   K u r m i s   A P ,   2 0 0 3 ,   J   B O N E   J O I N T   S U R G   A M ,   V 8 5 A ,   P 2 4 4 9 ;   L e e   J E ,   2 0 0 5 ,   J   K O R E A N   P H Y S   S O C ,   V 4 7 ,   P 4 7 ;   M a n t z o u k a s   S ,   2 0 0 9 ,   I N T   J   N U R S   S T U D ,   V 4 6 ,   P 4 7 9 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 8 . 1 2 . 0 1 6 ;   M c C l o s k e y   J ,   1 9 8 2 ,   W e s t   J   N u r s   R e s ,   V 4 ,   P 2 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 9 4 5 9 8 2 0 0 4 0 0 3 0 1 ;   M c C l o s k e y   J   C ,   1 9 8 2 ,   I m a g e   ( I N ) ,   V 1 4 ,   P 5 0 ;   M c C l o s k e y   J   C ,   1 9 7 7 ,   N u r s e   E d u c ,   V 2 ,   P 4 ;   M c K i b b o n   K a t h l e e n   A n n ,   2 0 0 4 ,   B M C   M e d   I n f o r m   D e c i s   M a k ,   V 4 ,   P 1 1 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 2 - 6 9 4 7 - 4 - 1 1 ;   M c V e i g h   M E ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 1 0 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 1 ;   M e a d o w s   J ,   2 0 0 5 ,   I N T E R L E N D   D O C   S U P P L Y ,   V 3 3 ,   P 9 0 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 1 0 5 0 6 0 2 6 2 8 ;   M e l b y   C a r o l y n   S ,   2 0 0 5 ,   N u r s   H e a l t h   S c i ,   V 7 ,   P 2 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 5 . 0 0 2 5 0 . x ;   N i c h o l a s   D ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 4 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 4 ;   N o r r i s   M ,   2 0 0 3 ,   J   D O C ,   V 5 9 ,   P 7 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 3 1 0 6 9 8 7 3 4 ;   O e r m a n n   M H ,   2 0 0 8 ,   I N T   J   N U R S   S T U D ,   V 4 5 ,   P 5 8 0 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 6 . 1 0 . 0 0 5 ;   O g d e n   T L ,   2 0 0 8 ,   A N N   O C C U P   H Y G ,   V 5 2 ,   P 7 3 ,   D O I   1 0 . 1 0 9 3 / a n n h y g / m e n 0 0 2 ;   P a r d o   C ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 5 ,   P 9 3 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 9 3 1 . x ;   A n g o r d a n s   J P ,   2 0 0 9 ,   R E V   L A T - A M   E N F E R M ,   V 1 7 ,   P 3 8 7 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 4 - 1 1 6 9 2 0 0 9 0 0 0 3 0 0 0 1 7 ;   P L O H M A N   J ,   2 0 0 8 ,   I S I   J   I M P A C T   F A C T O R S ;   S c h l o m a n   B   F ,   1 9 9 9 ,   B u l l   M e d   L i b r   A s s o c ,   V 8 7 ,   P 2 7 5 ;   S C O T T   M V M ,   1 9 8 4 ,   C U R R   C O N T E N T S   C L I N   P ,   V 4 ,   P 3 6 4 ;   S C O T T   M V M ,   1 9 8 5 ,   C U R R   C O N T E N T S   S O C   B E ,   V 4 6 ,   P 2 0 ;   S C O T T   M V M ,   1 9 7 0 ,   N U R S   R E S ,   V 1 9 ,   P 3 1 2 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S h a h   M A ,   2 0 0 5 ,   J   M I D W I F E R Y   W O M   H E A L ,   V 5 0 ,   P 1 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j m w h . 2 0 0 4 . 1 1 . 0 0 1 ;   S i m s   J L ,   2 0 0 3 ,   C L I N   E X P   O P H T H A L M O L ,   V 3 1 ,   P 1 4 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 2 - 9 0 7 1 . 2 0 0 3 . 0 0 6 1 0 . x ;   S k i n n e r   K ,   1 9 8 9 ,   J   C o n t i n   E d u c   N u r s ,   V 2 0 ,   P 1 7 0 ;   S m i t h   D R ,   2 0 0 8 ,   N U R S   H E A L T H   S C I ,   V 1 0 ,   P 2 6 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 8 . 0 0 4 1 4 . x ;   S m i t h   D R ,   2 0 0 8 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 3 ,   P 1 1 4 ,   D O I   1 0 . 3 2 0 0 / A E O H . 6 3 . 3 . 1 1 4 - 1 2 2 ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 3 0 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 3 0 ;   S m i t h   D R ,   2 0 1 0 ,   H U M   F A C T O R   E R G O N   M A N ,   V 2 0 ,   P 8 7 ,   D O I   1 0 . 1 0 0 2 / h f m . 2 0 1 6 5 ;   S m i t h   D R ,   2 0 0 9 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 4 ,   P 4 3 ,   D O I   1 0 . 1 0 8 0 / 1 9 3 3 8 2 4 0 9 0 3 2 9 3 0 0 4 ;   S m i t h   D R ,   2 0 0 9 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 4 ,   P 3 2 ,   D O I   1 0 . 1 0 8 0 / 1 9 3 3 8 2 4 0 9 0 3 2 8 6 7 4 3 ;   S m i t h   D R ,   2 0 0 9 ,   C O N T A C T   D E R M A T I T I S ,   V 6 1 ,   P 1 9 4 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 5 3 6 . 2 0 0 9 . 0 1 6 0 9 . x ;   S m i t h   D R ,   2 0 0 9 ,   M A N U A L   T H E R ,   V 1 4 ,   P 4 5 6 ,   D O I   1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 1 1 . 0 0 4 ;   S m i t h   R ,   2 0 0 6 ,   I N T   J   E P I D E M I O L ,   V 3 5 ,   P 1 1 2 9 ,   D O I   1 0 . 1 0 9 3 / i j e / d y l 1 9 1 ;   S o m b a t s o m p o p   N ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 2 1 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 7 9 4 . 9 8 8 5 4 . f 6 ;   S W A N S O N   E ,   1 9 8 6 ,   N U R S   O U T L O O K ,   V 3 4 ,   P 2 2 7 ;   S w a n s o n   E   A ,   1 9 9 1 ,   I m a g e   J   N u r s   S c h ,   V 2 3 ,   P 3 3 ;   T e s t a   J ,   2 0 0 6 ,   I N T   M I C R O B I O L ,   V 9 ,   P 1 3 5 ;   * T H O M P S   R E U T ,   2 0 0 9 ,   G L O S S   T H O M S   S C I   T E R M ;   T r a y n o r   M ,   2 0 0 1 ,   J   A D V   N U R S ,   V 3 4 ,   P 2 1 2 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 7 4 7 . x ;   U r q u h a r t   C ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 5 . 1 0 . 0 0 2 ;   W i l k e s   L e s l e y ,   2 0 0 2 ,   A u s t   J   A d v   N u r s ,   V 1 9 ,   P 1 5 ;   Z w a h l e n   M ,   2 0 0 4 ,   S O Z   P R A V E N T I V   M E D ,   V 4 9 ,   P 1 9 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 3 8 - 0 0 3 - 0 0 3 3 - 2 ;   [ A n o n y m o u s ] ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 7 5 	 7 2 	 1 6 	 1 7 	 1 	 1 7 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 0 2 0 - 7 4 8 9 	 	 	 I N T   J   N U R S   S T U D 	 I n t .   J .   N u r s .   S t u d . 	 D E C 	 2 0 1 0 	 4 7 	 1 2 	 	 	 	 	 1 4 9 1 	 1 4 9 9 	 	 1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 1 0 . 0 5 . 0 0 6 	 	 9 	 N u r s i n g 	 N u r s i n g 	 6 8 7 X Q 	 W O S : 0 0 0 2 8 4 8 1 2 2 0 0 0 0 5 	 2 0 6 2 7 2 9 2 	 
 
 J 	 H o l s a p p l e ,   C W ;   L e e - P o s t ,   A 	 	 	 	 H o l s a p p l e ,   C l y d e   W . ;   L e e - P o s t ,   A n i t a 	 	 	 B e h a v i o r - b a s e d   a n a l y s i s   o f   k n o w l e d g e   d i s s e m i n a t i o n   c h a n n e l s   i n   o p e r a t i o n s   m a n a g e m e n t 	 O M E G A - I N T E R N A T I O N A L   J O U R N A L   O F   M A N A G E M E N T   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   K n o w l e d g e   d i s s e m i n a t i o n ;   O p e r a t i o n s   m a n a g e m e n t   j o u r n a l s ;   O p e r a t i o n s   m a n a g e m e n t   r e s e a r c h e r s 	 J O U R N A L   E V A L U A T I O N ;   B U S I N E S S   S C H O O L S ;   R E S E A R C H   Q U A L I T Y ;   S U P P L Y   C H A I N ;   C I T A T I O N ;   S Y S T E M ;   D I S C I P L I N E ;   P R O F E S S O R S ;   M O D E L ;   F I E L D 	 O n e   e s s e n t i a l   r e q u i r e m e n t   f o r   t h e   d e v e l o p m e n t   a n d   v i t a l i t y   o f   a   d i s c i p l i n e   i s   a   n e t w o r k   o f   c h a n n e l s   f o r   k n o w l e d g e   d i s s e m i n a t i o n .   T h e s e   c h a n n e l s ,   s u c h   a s   s c h o l a r l y   j o u r n a l s ,   f u r n i s h   n o t   o n l y   a   m e a n s   f o r   k n o w l e d g e   s h a r i n g ,   b u t   a l s o   f o r   k n o w l e d g e   g e n e r a t i o n   b y   t h e   d i s c i p l i n e ' s   c o m m u n i t y   o f   r e s e a r c h e r s .   I n   t h e   F i e l d   o f   o p e r a t i o n s   m a n a g e m e n t   ( O M ) ,   t h e r e   h a v e   b e e n   s e v e r a l   s t u d i e s   t h a t   h a v e   s o u g h t   t o   r a n k   j o u r n a l s   r e l e v a n t   t o   O M   r e s e a r c h ,   u s i n g   o p i n i o n   s u r v e y s ,   c i t a t i o n   a n a l y s e s ,   a n d   a u t h o r   a f f i l i a t i o n s .   H o w e v e r ,   e a c h   o f   t h e s e   m e t h o d s   h a s   s o m e   l i m i t a t i o n s .   T h i s   p a p e r   a d o p t s   a   n e w   a p p r o a c h   f o r   d i s c e r n i n g   j o u r n a l   p u b l i c a t i o n   p a t t e r n s   i n   t h e   O M   f i e l d .   I t   i s   b a s e d   o n   a n   e x a m i n a t i o n   o f   t h e   a c t u a l   p u b l i s h i n g   b e h a v i o r s   o f   a l l   f u l l - t i m e ,   t e n u r e d   O M   r e s e a r c h e r s   a t   a   s i z a b l e   s e t   o f   l e a d i n g   r e s e a r c h   u n i v e r s i t i e s   i n   t h e   U S .   T h i s   b e h a v i o r - b a s e d   m e t h o d o l o g y   p r o v i d e s   t h r e e   m e t r i c s   t h a t   i n d i v i d u a l l y ,   a n d   i n   t a n d e m ,   g i v e   a   b a s i s   f o r   r a t i n g   p u b l i c a t i o n   o u t l e t s   f o r   O M   r e s e a r c h   i n   t e r m s   o f   t h e i r   r e l a t i v e   i m p o r t a n c e .   T h e   r a t i n g s   c a n   b e   u s e d   b y   s c h o l a r s   a n d   a d m i n i s t r a t o r s   t o   a s s i s t   i n   m o n i t o r i n g ,   d i s s e m i n a t i n g ,   a n d   e v a l u a t i n g   O M   r e s e a r c h   o u t l e t s .   ( C )   2 0 0 9   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ H o l s a p p l e ,   C l y d e   W . ;   L e e - P o s t ,   A n i t a ]   U n i v   K e n t u c k y ,   S c h   M a n a g e m e n t ,   G a t t o n   C o l l   B u s i n e s s   &   E c o n ,   L e x i n g t o n ,   K Y   4 0 5 0 6   U S A 	 H o l s a p p l e ,   C W   ( r e p r i n t   a u t h o r ) ,   U n i v   K e n t u c k y ,   S c h   M a n a g e m e n t ,   G a t t o n   C o l l   B u s i n e s s   &   E c o n ,   L e x i n g t o n ,   K Y   4 0 5 0 6   U S A . 	 c w h o l s @ u k y . e d u 	 h o l s a p p l e ,   c / A - 6 3 4 2 - 2 0 1 3 	 h o l s a p p l e ,   c / 0 0 0 0 - 0 0 0 2 - 4 9 3 4 - 1 7 5 X 	 	 	 A k i n c   U ,   2 0 0 9 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 7 ,   P 3 0 0 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 7 . 0 1 . 0 0 5 ;   A m i n   M . ,   2 0 0 0 ,   P E R S P E C T I V E S   P U B L I S H ,   V 1 ,   P 1 ;   A r s h a m   H ,   2 0 0 9 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 7 ,   P 8 7 6 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 8 . 0 6 . 0 0 1 ;   B a r m a n   S ,   2 0 0 1 ,   J   O P E R   M A N A G ,   V 1 9 ,   P 3 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 0 0 ) 0 0 0 6 0 - 7 ;   B a r m a n   S . ,   1 9 9 1 ,   J   O P E R A T I O N S   M A N A G E M ,   V 1 0 ,   P 1 9 4 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 2 7 2 - 6 9 6 3 ( 9 1 ) 9 0 0 2 2 - P ;   B i e h l   M ,   2 0 0 6 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 4 ,   P 3 5 9 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 4 . 1 2 . 0 0 2 ;   B r i n n   T ,   2 0 0 0 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 8 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 9 ) 0 0 0 4 8 - 1 ;   B u f f a   E . S . ,   1 9 8 0 ,   J   O P E R A T I O N S   M A N A G E M ,   V 1 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 2 7 2 - 6 9 6 3 ( 8 0 ) 9 0 0 0 5 - 4 ;   C h o i   B ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 6 . 0 6 . 0 0 7 ;   C h o p r a   S ,   2 0 0 4 ,   M A N A G E   S C I ,   V 5 0 ,   P 8 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 3 0 . 0 1 8 9 ;   D i n g   D ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 8 6 5 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 6 . 0 4 . 0 0 4 ;   D o n o h u e   J M ,   2 0 0 0 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 8 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 9 ) 0 0 0 2 4 - 9 ;   D o y l e   J R ,   1 9 9 6 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 4 ,   P 6 0 3 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 6 ) 0 0 0 3 7 - 0 ;   D O Y L E   J R ,   1 9 9 5 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 3 ,   P 2 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 5 ) 0 0 0 1 3 - E ;   F o r g i o n n e   G A ,   2 0 0 2 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 0 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 0 2 ) 0 0 0 2 5 - 7 ;   G o h   C .   H . ,   1 9 9 7 ,   J   O P E R A T I O N S   M A N A G E M ,   V 1 5 ,   P 1 2 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 9 6 ) 0 0 1 0 2 - 7 ;   G o h   C H ,   1 9 9 6 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 4 ,   P 3 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 5 ) 0 0 0 6 4 - X ;   G o r m a n   M .   F . ,   2 0 0 5 ,   M A N U F A C T U R I N G   S E R V I C ,   V 7 ,   P 3 ,   D O I   1 0 . 1 2 8 7 / m s o m . 1 0 4 0 . 0 0 6 2 ;   G o r m a n   M F ,   2 0 0 7 ,   M & S O M - M A N U F   S E R V   O P ,   V 9 ,   P 5 1 ,   D O I   1 0 . 1 2 8 7 / m s o m . 1 0 6 0 . 0 1 2 5 ;   H a r l e s s   D . ,   1 9 9 8 ,   R E V I S I O N   J   L I S   U N P U B ;   H o l s a p p l e   C W ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 6 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 9 ;   H o l s a p p l e   C W ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 3 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 8 6 ;   H o l s a p p l e   C W ,   2 0 0 9 ,   C O M M U N   A C M ,   V 5 2 ,   P 1 1 7 ,   D O I   1 0 . 1 1 4 5 / 1 4 6 7 2 4 7 . 1 4 6 7 2 7 6 ;   H o l s a p p l e   C W ,   2 0 0 1 ,   E X P E R T   S Y S T   A P P L ,   V 2 0 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 7 - 4 1 7 4 ( 0 0 ) 0 0 0 5 0 - 6 ;   H O L S A P P L E   C W ,   1 9 9 4 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 2 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 4 ) 9 0 0 0 8 - 6 ;   H o l s a p p l e   C . ,   2 0 0 4 ,   K N O W L E D G E   P R O C E S S   M A ,   V 1 1 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 2 / k p m . 2 0 0 ;   H o p p   W J ,   2 0 0 4 ,   M A N A G E   S C I ,   V 5 0 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 3 0 . 0 1 8 1 ;   J o n e s   M J ,   1 9 9 9 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 7 ,   P 3 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 8 ) 0 0 0 6 6 - 8 ;   J o n e s   M J ,   1 9 9 6 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 4 ,   P 6 0 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 5 - 0 4 8 3 ( 9 6 ) 0 0 0 3 8 - 2 ;   K a o   C ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 9 5 8 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 8 . 0 1 . 0 0 2 ;   K i n g   W R ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 5 . 1 0 . 0 0 6 ;   M i r c h a n d a n i   D A ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 7 8 9 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 6 . 0 4 . 0 0 1 ;   O l s o n   J E ,   2 0 0 5 ,   I N T E R F A C E S ,   V 3 5 ,   P 3 2 3 ,   D O I   1 0 . 1 2 8 7 / i n t e . 1 0 5 0 . 0 1 4 9 ;   O r m e r o d   R J ,   1 9 9 7 ,   O M E G A - I N T   J   M A N A G E   S ,   V 2 5 ,   P 5 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 9 7 ) 0 0 0 3 0 - 3 ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   P r e m k u m a r   G ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 6 4 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 5 . 1 2 . 0 0 2 ;   S a l a d i n   B . ,   1 9 8 5 ,   O P E R A T I O N S   M A N A G E M E N ,   V 3 ,   P 3 ;   S m i t h   S D ,   2 0 0 4 ,   F I N A N C   M A N A G E ,   V 3 3 ,   P 1 3 3 ;   S o t e r i o u   A C ,   1 9 9 9 ,   J   O P E R   M A N A G ,   V 1 7 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 9 8 ) 0 0 0 4 0 - 0 ;   S p r a g u e   L G ,   2 0 0 7 ,   J   O P E R   M A N A G ,   V 2 5 ,   P 2 1 9 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 7 . 0 1 . 0 0 1 ;   T a n g   L X ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 9 9 2 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 7 . 1 1 . 0 0 3 ;   T h e o h a r a k i s   V ,   2 0 0 7 ,   J   O P E R   M A N A G ,   V 2 5 ,   P 9 3 2 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 6 . 0 9 . 0 0 2 ;   V a s t a g   G ,   2 0 0 2 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 0 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 5 - 0 4 8 3 ( 0 1 ) 0 0 0 6 1 - 5 ;   V o k u r k a   R .   J . ,   1 9 9 6 ,   J   O P E R A T I O N S   M A N A G E M ,   V 1 4 ,   P 3 4 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 2 7 2 - 6 9 6 3 ( 9 6 ) 0 0 0 9 2 - 7 ;   Y a o   D Q ,   2 0 0 8 ,   O M E G A - I N T   J   M A N A G E   S ,   V 3 6 ,   P 8 3 8 ,   D O I   1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 6 . 0 4 . 0 0 3 	 4 5 	 1 6 	 1 6 	 1 	 2 8 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 5 - 0 4 8 3 	 	 	 O M E G A - I N T   J   M A N A G E   S 	 O m e g a - I n t .   J .   M a n a g e .   S c i . 	 J U N - A U G 	 2 0 1 0 	 3 8 	 3 - 4 	 	 	 	 	 1 6 7 	 1 7 8 	 	 1 0 . 1 0 1 6 / j . o m e g a . 2 0 0 9 . 0 8 . 0 0 2 	 	 1 2 	 M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 5 3 9 G H 	 W O S : 0 0 0 2 7 3 2 4 1 4 0 0 0 0 6 	 	 
 
 J 	 F r a n c e s c h i n i ,   F ;   M a i s a n o ,   D A 	 	 	 	 F r a n c e s c h i n i ,   F i o r e n z o ;   M a i s a n o ,   D o m e n i c o   A . 	 	 	 T h e   H i r s c h   I n d e x   i n   M a n u f a c t u r i n g   a n d   Q u a l i t y   E n g i n e e r i n g 	 Q U A L I T Y   A N D   R E L I A B I L I T Y   E N G I N E E R I N G   I N T E R N A T I O N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 H i r s c h   i n d e x ;   s y n t h e s i s   i n d i c a t o r ;   p e r f o r m a n c e   e v a l u a t i o n ;   m a n u f a c t u r i n g ;   Q u a l i t y   e n g i n e e r i n g 	 H - I N D E X 	 T h e   H i r s c h   i n d e x   ( h )   i s   a   r e c e n t   b i b l i o m e t r i c   i n d i c a t o r   f o r   a s s e s s i n g   t h e   r e s e a r c h   o u t p u t   o f   s c i e n t i s t s .   I t s   m o s t   r e m a r k a b l e   c h a r a c t e r i s t i c s   a r e   i m m e d i a t e   i n t u i t i v e ,   m e a n i n g ,   e f f e c t i v e   s y n t h e s i s   a n d   e a s y   c a l c u l a t i o n .   W i t h   f e w   m o d i f i c a t i o n s ,   t h e   u s e   o f   t h i s   i n d i c a t o r   c a n   b e   p r o f i t a b l y   e x t e n d e d   t o   o t h e r   f i e l d s   b e y o n d   b i b l i o m e t r i c s .   T h e   m a i n   n o v e l t y   o f   t h e   p a p e r   i s   t o   s u g g e s t   s o m e   p o t e n t i a l   a p p l i c a t i o n s   i n   m a n u f a c t u r i n g   a n d   Q u a l i t y   e n g i n e e r i n g ,   f o c u s s i n g   t h e   a t t e n t i o n   o n   t h e   I t   c a p a c i t y   t o   a g g r e g a t e   a n d   s y n t h e s i z e   t h e   m o s t   c o m m o n l y   u s e d   m e t r i c s   i n   t h e s e   a r e a s .   C o p y r i g h t   ( C )   2 0 0 9   J o h n   W i l e y   &   S o n s ,   L t d . 	 [ F r a n c e s c h i n i ,   F i o r e n z o ;   M a i s a n o ,   D o m e n i c o   A . ]   P o l i t e c n   T o r i n o ,   D I S P E A ,   I - 1 0 1 2 9   T u r i n ,   I t a l y 	 F r a n c e s c h i n i ,   F   ( r e p r i n t   a u t h o r ) ,   P o l i t e c n   T o r i n o ,   D I S P E A ,   C o r s o   D u c a   A b r u z z i   2 4 ,   I - 1 0 1 2 9   T u r i n ,   I t a l y . 	 	 M A I S A N O ,   D o m e n i c o / B - 4 3 0 1 - 2 0 1 0 	 M A I S A N O ,   D o m e n i c o / 0 0 0 0 - 0 0 0 2 - 8 1 5 4 - 4 4 6 9 	 	 	 D O R I N G   C ,   2 0 0 6 ,   I E E E   I N T   C   F U Z Z   S Y S T ;   E g g h e   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 4 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 7 3 ;   F r a n c e s c h i n i   F . ,   2 0 0 7 ,   M A N A G E M E N T   M E A S U R E M E ;   F R A N C E S C H I N I   F ,   2 0 0 8 ,   A N A L   H I R S C H   I N   U N P U B ;   G l a n z e l   W . ,   2 0 0 6 ,   S C I   F O C U S ,   V 1 ,   P 1 0 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J o i n t   C o m m i t t e e   o n   Q u a n t i t a t i v e   A s s e s s m e n t   o f   R e s e a r c h ,   2 0 0 8 ,   C I T   S T A T ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   M o n t g o m e r y   D .   C . ,   2 0 0 5 ,   I N T R O   S T A T   Q U A L I T Y   C ;   S u s c a   L ,   2 0 0 0 ,   A I   E D A M ,   V 1 4 ,   P 2 3 5 ,   D O I   1 0 . 1 0 1 7 / S 0 8 9 0 0 6 0 4 0 0 1 4 3 0 5 7 	 1 1 	 1 6 	 1 6 	 0 	 4 	 J O H N   W I L E Y   &   S O N S   L T D 	 C H I C H E S T E R 	 T H E   A T R I U M ,   S O U T H E R N   G A T E ,   C H I C H E S T E R   P O 1 9   8 S Q ,   W   S U S S E X ,   E N G L A N D 	 0 7 4 8 - 8 0 1 7 	 	 	 Q U A L   R E L I A B   E N G   I N T 	 Q u a l .   R e l i a b .   E n g .   I n t . 	 D E C 	 2 0 0 9 	 2 5 	 8 	 	 	 	 	 9 8 7 	 9 9 5 	 	 1 0 . 1 0 0 2 / q r e . 1 0 1 6 	 	 9 	 E n g i n e e r i n g ,   M u l t i d i s c i p l i n a r y ;   E n g i n e e r i n g ,   I n d u s t r i a l ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 5 3 2 P N 	 W O S : 0 0 0 2 7 2 7 6 2 0 0 0 0 0 9 	 	 
 
 J 	 S m i t h ,   D R ;   R i v e t t ,   D A 	 	 	 	 S m i t h ,   D e r e k   R . ;   R i v e t t ,   D a r r e n   A . 	 	 	 B i b l i o m e t r i c s ,   i m p a c t   f a c t o r s   a n d   m a n u a l   t h e r a p y :   B a l a n c i n g   t h e   s c i e n c e   a n d   t h e   a r t 	 M A N U A L   T H E R A P Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I m p a c t   f a c t o r s ;   P u b l i s h i n g ;   M a n u a l   t h e r a p y ;   P h y s i o t h e r a p y ;   B i b l i o m e t r i c s ;   R e h a b i l i t a t i o n 	 P H Y S I C A L - T H E R A P Y ;   M E D I C A L   J O U R N A L S ;   O C C U P A T I O N A L - M E D I C I N E ;   C I T A T I O N   A N A L Y S I S ;   C O R E   J O U R N A L S ;   R E H A B I L I T A T I O N ;   A S S O C I A T I O N ;   D E R M A T O L O G Y ;   M I L L E N N I U M ;   R E L E V A N C E 	 	 [ S m i t h ,   D e r e k   R . ]   U n i v   N e w c a s t l e ,   W o r k C o v e r   N e w   S   W a l e s   R e s   C t r   E x c e l l e n c e ,   S c h   H l t h   S c i ,   F a c   H l t h ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a 	 S m i t h ,   D R   ( r e p r i n t   a u t h o r ) ,   U n i v   N e w c a s t l e ,   W o r k C o v e r   N e w   S   W a l e s   R e s   C t r   E x c e l l e n c e ,   S c h   H l t h   S c i ,   F a c   H l t h ,   O u r i m b a h ,   N S W   2 2 5 8 ,   A u s t r a l i a . 	 d e r e k . s m i t h @ n e w c a s t l e . e d u . a u 	 S m i t h ,   D e r e k / F - 4 8 4 4 - 2 0 1 0 ;   	 S m i t h ,   D e r e k / 0 0 0 0 - 0 0 0 2 - 8 2 0 2 - 2 5 2 3 	 	 	 A d a i r   W .   C . ,   1 9 5 5 ,   A M   D O C ,   V 6 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 0 6 0 1 0 5 ;   B a l o n   R ,   2 0 0 5 ,   P S Y C H O T H E R   P S Y C H O S O M ,   V 7 4 ,   P 3 ,   D O I   1 0 . 1 1 5 9 / 0 0 0 0 8 2 0 2 0 ;   B e e t o n   K ,   2 0 0 8 ,   M A N U A L   T H E R ,   V 1 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 0 7 . 0 0 4 ;   B O H A N N O N   R   W ,   1 9 9 0 ,   P h y s i o t h e r a p y   T h e o r y   a n d   P r a c t i c e ,   V 6 ,   P 2 1 5 ,   D O I   1 0 . 3 1 0 9 / 0 9 5 9 3 9 8 9 0 0 9 0 4 8 2 9 7 ;   B o h a n n o n   R   W ,   1 9 9 1 ,   I n t   J   R e h a b i l   R e s ,   V 1 4 ,   P 3 3 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 4 3 5 6 - 1 9 9 1 1 2 0 0 0 - 0 0 0 0 6 ;   B O H A N N O N   R W ,   1 9 8 6 ,   P H Y S   T H E R ,   V 6 6 ,   P 5 4 0 ;   B O H A N N O N   R W ,   1 9 8 6 ,   P H Y S   T H E R ,   V 6 6 ,   P 1 2 7 5 ;   B o h a n n o n   R W ,   1 9 9 9 ,   P H Y S I O T H E R A P Y ,   V 8 5 ,   P 3 1 7 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 0 3 1 - 9 4 0 6 ( 0 5 ) 6 7 1 3 5 - 0 ;   B o h a n n o n   R W ,   1 9 8 7 ,   P H Y S I O T H E R A P Y   P R A C T I ,   V 3 ,   P 1 2 6 ,   D O I   1 0 . 3 1 0 9 / 0 9 5 9 3 9 8 8 7 0 9 0 4 4 1 7 4 ;   B o l d t   J ,   2 0 0 0 ,   A C T A   A N A E S T H   S C A N D ,   V 4 4 ,   P 8 4 2 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 0 . 4 4 0 7 1 0 . x ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r o d m a n   E ,   1 9 4 4 ,   B u l l   M e d   L i b r   A s s o c ,   V 3 2 ,   P 4 7 9 ;   C h e w   M ,   2 0 0 7 ,   J   R O Y   S O C   M E D ,   V 1 0 0 ,   P 1 4 2 ,   D O I   1 0 . 1 2 5 8 / j r s m . 1 0 0 . 3 . 1 4 2 ;   D ' A u r i a   D ,   1 9 9 9 ,   O C C U P   M E D - O X F O R D ,   V 4 9 ,   P 2 7 7 ,   D O I   1 0 . 1 0 9 3 / o c c m e d / 4 9 . 5 . 2 7 7 ;   D E A N   E ,   1 9 8 6 ,   P H Y S   T H E R ,   V 6 6 ,   P 9 6 1 ;   E b r a h i m   S ,   2 0 0 6 ,   I N T   J   E P I D E M I O L ,   V 3 5 ,   P 1 1 1 7 ,   D O I   1 0 . 1 0 9 3 / i j e / d y l 2 0 1 ;   F a v a l o r o   E J ,   2 0 0 8 ,   S E M I N   T H R O M B   H E M O S T ,   V 3 4 ,   P 7 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 8 - 1 0 6 6 0 3 0 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G a r f i e l d   E ,   1 9 7 2 ,   E S S A Y S   I N F O R M   S C I ,   V 1 ,   P 3 1 7 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   H a r m s   M ,   2 0 0 6 ,   P H Y S I O T H E R A P Y ,   V 9 2 ,   P 7 3 ,   D O I   1 0 . 1 0 1 6 / j . p h y s i o . 2 0 0 6 . 0 3 . 0 0 1 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 1 ;   J o s e p h   K S ,   2 0 0 3 ,   B R I T   M E D   J ,   V 3 2 6 ,   P 2 8 3 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 6 . 7 3 8 3 . 2 8 3 ;   K U H L E M E I E R   K V ,   1 9 9 2 ,   A R C H   P H Y S   M E D   R E H A B ,   V 7 3 ,   P 1 2 6 ;   L a n k h o r s t   G J ,   2 0 0 1 ,   C L I N   R E H A B I L ,   V 1 5 ,   P 1 1 5 ;   L y n c h   J ,   2 0 0 6 ,   I N T   J   E P I D E M I O L ,   V 3 5 ,   P 1 1 1 9 ,   D O I   1 0 . 1 0 9 3 / i j e / d y l 2 0 0 ;   M a r k s   R ,   1 9 9 9 ,   I N T   J   D E R M A T O L ,   V 3 8 ,   P 3 4 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 4 3 6 2 . 1 9 9 9 . 0 0 6 8 5 . x ;   M I C H E L S   E ,   1 9 8 2 ,   P H Y S   T H E R ,   V 6 2 ,   P 8 2 8 ;   R a s c h e t t i   R ,   2 0 0 5 ,   J   A L T E R N   C O M P L E M   M E D ,   V 1 1 ,   P 2 0 9 ,   D O I   1 0 . 1 0 8 9 / a c m . 2 0 0 5 . 1 1 . 2 0 9 ;   R O B E R T S   D ,   1 9 9 2 ,   S C A N D   J   R E H A B I L   M E D ,   V 2 4 ,   P 1 6 7 ;   R O B E R T S   D ,   1 9 9 2 ,   P H Y S I O T H E R A P Y ,   V 7 8 ,   P 2 9 ;   S m i t h   D R ,   2 0 0 8 ,   N U R S   H E A L T H   S C I ,   V 1 0 ,   P 2 6 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 2 - 2 0 1 8 . 2 0 0 8 . 0 0 4 1 4 . x ;   S m i t h   D R ,   2 0 0 8 ,   A R C H   E N V I R O N   O C C U P   H ,   V 6 3 ,   P 1 1 4 ,   D O I   1 0 . 3 2 0 0 / A E O H . 6 3 . 3 . 1 1 4 - 1 2 2 ;   S m i t h   D R ,   2 0 0 8 ,   M E M   I   O S W A L D O   C R U Z ,   V 1 0 3 ,   P 3 1 0 ,   D O I   1 0 . 1 5 9 0 / S 0 0 7 4 - 0 2 7 6 2 0 0 8 0 0 5 0 0 0 0 1 4 ;   S m i t h   D R ,   2 0 0 8 ,   C O N T A C T   D E R M A T I T I S ,   V 5 9 ,   P 1 3 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 6 0 0 - 0 5 3 6 . 2 0 0 8 . 0 1 4 0 5 . x ;   S m i t h   D R ,   2 0 0 7 ,   I N D   H E A L T H ,   V 4 5 ,   P 7 3 0 ,   D O I   1 0 . 2 4 8 6 / i n d h e a l t h . 4 5 . 7 3 0 ;   S m i t h   R ,   2 0 0 6 ,   I N T   J   E P I D E M I O L ,   V 3 5 ,   P 1 1 2 9 ,   D O I   1 0 . 1 0 9 3 / i j e / d y l 1 9 1 ;   T E S I O   L ,   1 9 9 5 ,   I T A L   J   N E U R O L   S C I ,   V 1 6 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 2 9 3 2 5 ;   T s e   H ,   2 0 0 8 ,   N A T U R E ,   V 4 5 4 ,   P 9 3 8 ,   D O I   1 0 . 1 0 3 8 / 4 5 4 9 3 8 c ;   W a k i j i   E M ,   1 9 9 7 ,   B   M E D   L I B R   A S S O C ,   V 8 5 ,   P 2 8 4 	 4 1 	 1 6 	 1 6 	 0 	 1 1 	 C H U R C H I L L   L I V I N G S T O N E 	 E D I N B U R G H 	 J O U R N A L   P R O D U C T I O N   D E P T ,   R O B E R T   S T E V E N S O N   H O U S E ,   1 - 3   B A X T E R S   P L A C E ,   L E I T H   W A L K ,   E D I N B U R G H   E H 1   3 A F ,   M I D L O T H I A N ,   S C O T L A N D 	 1 3 5 6 - 6 8 9 X 	 	 	 M A N U A L   T H E R 	 M a n .   T h e r . 	 A U G 	 2 0 0 9 	 1 4 	 4 	 	 	 	 	 4 5 6 	 4 5 9 	 	 1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 1 1 . 0 0 4 	 	 4 	 R e h a b i l i t a t i o n 	 R e h a b i l i t a t i o n 	 4 7 0 G I 	 W O S : 0 0 0 2 6 7 9 6 2 8 0 0 0 2 0 	 1 9 2 1 3 5 9 0 	 
 
 J 	 H e ,   T W ;   Z h a n g ,   J L ;   T e n g ,   L R 	 	 	 	 H e ,   T W ;   Z h a n g ,   J L ;   T e n g ,   L R 	 	 	 B a s i c   r e s e a r c h   i n   b i o c h e m i s t r y   a n d   m o l e c u l a r   b i o l o g y   i n   C h i n a :   A   b i b l i o m e t r i c   a n a l y s i s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 R E S E A R C H   P E R F O R M A N C E ;   S C I E N C E   F I E L D S ;   I N D I C A T O R S 	 U s i n g   t h e   m e t h o d   o f   b i b l i o m e t r i c s ,   a   1 9 9 9 - 2 0 0 2   b i o c h e m i s t r y   a n d   m o l e c u l a r   b i o l o g y   d a t a b a s e   w a s   c o n s t r u c t e d   f o r   C h i n a   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   E x p a n d e d   ( S C I - E x p a n d e d ) .   B a s e d   o n   t h i s   d a t a b a s e ,   t h e   a u t h o r   q u a n t i t a t i v e l y   a n a l y z e d   t h e   c u r r e n t   r e s e a r c h   a c t i v i t y   i n   b i o c h e m i s t r y   a n d   m o l e c u l a r   b i o l o g y   i n   C h i n a .   R e s u l t s   s h o w   t h a t   a l m o s t   h a l f   t h e   p u b l i c a t i o n s   w e r e   p u b l i s h e d   i n   C h i n e s e   j o u r n a l s .   T h e   p e r c e n t a g e   o f   a r t i c l e s   p u b l i s h e d   b y   C h i n e s e   a u t h o r s   i n   t h e   t o t a l   a r t i c l e s   f r o m   t h e   w o r l d   i s   i n c r e a s i n g .   T h e   n u m b e r   o f   a r t i c l e s   p u b l i s h e d   i n   h i g h   i n f l u e n c e   j o u r n a l s   i s   c o n t i n u o u s l y   i n c r e a s i n g .   T h e   r e s e a r c h   o u t p u t s   a r e   m a i n l y   l o c a t e d   i n   B e i j i n g ,   S h a n g h a i   a n d   H o n g   K o n g .   T h e   s i t e s   o f   t h e   C h i n a   S c i e n c e   A c a d e m y   a n d   N a t i o n a l   U n i v e r s i t i e s   a r e   t h e   i m p o r t a n t   l o c a t i o n s   f o r   t h e s e   s t u d i e s .   T h e   c o l l a b o r a t i o n   r a t e   o f   C h i n e s e   o u t p u t   i s   l o w   a s   c o m p a r e d   t o   r e s u l t s   f r o m   o t h e r   c o u n t r i e s .   U S A   a n d   J a p a n   a r e   t h e   m a i n   i n t e r n a t i o n a l   c o l l a b o r a t i n g   c o u n t r i e s . 	 J i l i n   U n i v ,   C o l l   L i f e   S c i ,   C h a n g c h u n   1 3 0 0 2 1 ,   P e o p l e s   R   C h i n a ;   J i l i n   U n i v ,   C o l l   E l e c t   S c i   &   E n g n ,   C h a n g c h u n   1 3 0 0 2 1 ,   P e o p l e s   R   C h i n a 	 T e n g ,   L R   ( r e p r i n t   a u t h o r ) ,   J i l i n   U n i v ,   C o l l   L i f e   S c i ,   1 2 3   J i e f a n g   R d ,   C h a n g c h u n   1 3 0 0 2 1 ,   P e o p l e s   R   C h i n a . 	 t e n g l i r o n g @ m a i l . j l u . e d u . c n 	 L u o ,   G u i m i n / K - 8 4 4 1 - 2 0 1 2 	 	 	 	 B E R G H E   H V D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 5 9 ;   B R A U N   T ,   1 9 8 9 ,   S C I E N T O M E T R I C   I N D I C A ;   G l a n z e l   W ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 1 2 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 4 0 6 0 4 2 6 7 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 4 0 6 6 2 7 9 4 4 ;   G U O   Y ,   2 0 0 2 ,   C H I N E S E   J   M E D   L I B   I N ,   V 1 1 ,   P 5 3 ;   H e r b e r t z   H ,   1 9 9 5 ,   R E S   P O L I C Y ,   V 2 4 ,   P 9 5 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 0 0 8 1 4 - 0 ;   * I S T I C ,   1 9 8 9 ,   A N N   R E S   R E P   C H I N   S C I ;   J I N   B ,   1 9 9 8 ,   S C I   R E S   M A N A G E M E N T ,   V 1 9 ,   P 7 3 ;   J i n   B H ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 4 0 ;   J i n   B H ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 1 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 6 4 4 8 2 3 6 9 0 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   L e e   C K ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 0 2 7 2 4 7 3 4 ;   L i a n g   L M ,   2 0 0 1 ,   R E S   E V A L U A T ,   V 1 0 ,   P 1 0 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 1 7 8 1 7 7 7 0 4 2 ;   C H A N G   Q . ,   2 0 0 1 ,   J   M A N A G E M E N T   S C I   C H I ,   V 4 ,   P 6 4 ;   M a t t h i e s s e n   C W ,   1 9 9 9 ,   U R B A N   S T U D ,   V 3 6 ,   P 4 5 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 9 9 3 4 7 5 ;   M a y   R M ,   1 9 9 7 ,   S C I E N C E ,   V 2 7 5 ,   P 7 9 3 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 7 5 . 5 3 0 1 . 7 9 3 ;   M o e d   H F ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 8 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 1 2 8 1 0 6 0 2 ;   * N A T   S C I   B O A R D ,   S C I   E N G   I N D   2 0 0 I ;   S C H U B E R T   A ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 6 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 2 3 4 ;   T S O U   C ,   1 9 9 6 ,   P R O G R   P H Y S L   S C I ,   V 2 7 ,   P 5 ;   T S O U   C L ,   1 9 9 5 ,   T R E N D S   B I O C H E M   S C I ,   V 2 0 ,   P 2 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 9 6 8 - 0 0 0 4 ( 0 0 ) 8 9 0 4 7 - 7 ;   X u   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 3 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 0 6 0 8 1 9 4 9 5 ;   Z h a n g   H Q ,   1 9 9 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 3 ,   P 8 1 ;   Z H A N G   H Q ,   1 9 9 5 ,   J   C H I N A   S O C   S C I   T E C H ,   V 1 4 ,   P 2 3 4 ;   [  _sNS  Z h a n g   Y u h u a ] ,   2 0 0 2 ,   [ NLuybxvzNSU\,   W o r l d   S c i - T e c h   R   a n d   D ] ,   V 2 4 ,   P 4 9 	 2 5 	 1 6 	 1 7 	 2 	 1 7 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 0 5 	 6 2 	 2 	 	 	 	 	 2 4 9 	 2 5 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 1 8 - 4 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 9 8 I F 	 W O S : 0 0 0 2 2 7 0 6 9 8 0 0 0 0 6 	 	 
 
 J 	 K i r b y ,   J A ;   H o a d l e y ,   C M ;   C a r r - C h e l l m a n ,   A A 	 	 	 	 K i r b y ,   J A ;   H o a d l e y ,   C M ;   C a r r - C h e l l m a n ,   A A 	 	 	 I n s t r u c t i o n a l   s y s t e m s   d e s i g n   a n d   t h e   l e a r n i n g   s c i e n c e s :   A   c i t a t i o n   a n a l y s i s 	 E T R & D - E D U C A T I O N A L   T E C H N O L O G Y   R E S E A R C H   A N D   D E V E L O P M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 S C I E N T I F I C   C O M M U N I C A T I O N ;   P A R T   I I ;   T E C H N O L O G Y ;   B I B L I O M E T R I C S ;   F R E Q U E N C Y ;   J O U R N A L S ;   H I S T O R Y 	 L e a r n i n g   s c i e n c e s   ( L S )   a n d   i n s t r u c t i o n a l   s y s t e m s   d e s i g n   ( I S D )   a r e   t w o   r e l a t e d   f i e l d s   t h a t   h a v e   s h a r e d   i n t e r e s t s   i n   t h e   a p p l i c a t i o n   o f   t e c h n o l o g y   f o r   a d v a n c i n g   h u m a n   l e a r n i n g .   W h i l e   t h e   t w o   f i e l d s   m a y   h a v e   d i f f e r e n t   v a l u e s ,   b o u n d a r i e s ,   a n d   i n   s o m e   c a s e s   m e t h o d s ,   t h e y   a l s o   s h a r e   s i g n i f i c a n t   o v e r l a p   o f   c o n t e n t   a n d   p u r p o s e .   W e   e x a m i n e   t h e   r e l a t i o n s h i p   b e t w e e n   t h e   t w o   f i e l d s   t h r o u g h   a   c i t a t i o n   a n a l y s i s   o f   t h r e e   j o u r n a l s   i n   e a c h   o f   t h e   r e s p e c t i v e   f i e l d s .   T h e   f i n d i n g s   o f   t h e   s t u d y   i n d i c a t e   t h a t   t h e   a m o u n t   o f   c r o s s - f i e l d   p u b l i c a t i o n   i s   l o w ,   b u t   t h e r e   e x i s t s   a   t r e n d   f o r   i n c r e a s e d   c r o s s - f i e l d   c i t a t i o n .   A s   c r o s s - f i e l d   p u b l i c a t i o n   i n c r e a s e s ,   w e   s u g g e s t   t h a t   t h e   e x i s t e n c e   o f   i n v i s i b l e   c o l l e g e s   t h a t   l i n k   t h e   f i e l d s   w i l l   b e c o m e   m o r e   s a l i e n t . 	 P e n n   S t a t e   U n i v ,   C o l l   E d u c ,   L e a r i n g   &   P e r f o r m a n c e   S y s t   D e p t ,   I n s t r u c t   S y s t   P r o g r a m ,   U n i v e r s i t y   P k ,   P A   1 6 8 0 2   U S A ;   P e n n   S t a t e   U n i v ,   S c h   I n f o r m a t   S c i   &   T e c h n o l ,   U n i v e r s i t y   P k ,   P A   1 6 8 0 2   U S A 	 H o a d l e y ,   C M   ( r e p r i n t   a u t h o r ) ,   P e n n   S t a t e   U n i v ,   C o l l   E d u c ,   L e a r i n g   &   P e r f o r m a n c e   S y s t   D e p t ,   I n s t r u c t   S y s t   P r o g r a m ,   3 1 4 D   K e l l e r   B l d g ,   U n i v e r s i t y   P k ,   P A   1 6 8 0 2   U S A . 	 E T R D a r t i c l e @ t o p h e . n e t 	 H o a d l e y ,   C h r i s t o p h e r / M - 2 6 5 9 - 2 0 1 6 ;   	 H o a d l e y ,   C h r i s t o p h e r / 0 0 0 0 - 0 0 0 3 - 4 1 6 1 - 1 8 2 0 ;   C a r r - C h e l l m a n ,   A l i s o n / 0 0 0 0 - 0 0 0 3 - 1 4 8 4 - 8 7 2 6 	 	 	 C a r r - C h e l l m a n   A .   A . ,   2 0 0 4 ,   E d u c a t i o n a l   T e c h n o l o g y ,   V 4 4 ;   C A R R C H E L L M A N   A A ,   2 0 0 4 ,   E D U C   T E C H N O L ,   P 4 4 ;   C a r r - C h e l l m a n   A . A . ,   2 0 0 4 ,   E D U C   T E C H N O L ,   V 4 4 ,   P 5 7 ;   C H U B I N   D E ,   1 9 8 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 5 ,   P 3 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 5 0 6 0 8 ;   C O T T O N   M C ,   1 9 7 3 ,   J   C O U N S   P S Y C H O L ,   V 2 0 ,   P 2 7 2 ,   D O I   1 0 . 1 0 3 7 / h 0 0 3 4 5 0 6 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   D e s i g n - B a s e d   R e s e a r c h   C o l l e c t i v e ,   2 0 0 3 ,   E D   R E S ,   V 3 2 ,   P 5 ,   D O I   D O I   1 0 . 3 1 0 2 / 0 0 1 3 1 8 9 X 0 3 2 0 0 1 0 0 5 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   H o a d l e y   C . ,   2 0 0 2 ,   C O M P U T E R   S U P P O R T   C O L ,   P 4 5 3 ;   H o a d l e y   C .   M . ,   2 0 0 4 ,   E d u c a t i o n a l   T e c h n o l o g y ,   V 4 4 ,   P 6 ;   H o l c o m b   T .   L . ,   2 0 0 3 ,   E D U C   T E C H N O L ,   V 4 3 ,   P 5 3 ;   K I R B Y   J ,   2 0 0 3 ,   I N T E R S E C T I O N   I N S T R U C ;   K o l o d n e r   J .   L . ,   2 0 0 4 ,   E d u c a t i o n a l   T e c h n o l o g y ,   V 4 4 ,   P 3 4 ;   K o l o d n e r   J .   L . ,   1 9 9 1 ,   J   L E A R N   S C I ,   V 1 ,   P 1 ,   D O I   1 0 . 1 2 0 7 / s 1 5 3 2 7 8 0 9 j l s 0 1 0 1 _ 1 ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   M E N Z E L   H ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 9 9 9 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 4 0 5 6 ;   M Y E R S   R A ,   1 9 6 6 ,   J   C O U N S   P S Y C H O L ,   V 1 3 ,   P 2 4 5 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 3 3 0 5 ;   P A I S L E Y   W ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 7 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 1 0 ;   D e   S o l l a   P r i c e   D .   J . ,   1 9 8 6 ,   L I T T L E   S C I   B I G   S C I ;   R e i g e l u t h   C .   M . ,   1 9 9 9 ,   I N S T R U C T I O N A L   D E S I G N ,   V I I ,   P 5 ;   R e i s e r   R A ,   2 0 0 1 ,   E T R & D - E D U C   T E C H   R E S ,   V 4 9 ,   P 5 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 4 5 0 6 ;   R e i s e r   R A ,   2 0 0 1 ,   E T R & D - E D U C   T E C H   R E S ,   V 4 9 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 0 4 9 2 8 ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   R o s s   S M ,   1 9 9 9 ,   E T R & D - E D U C   T E C H   R E S ,   V 4 7 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 2 9 9 4 6 1 ;   S A C H S   S G ,   1 9 8 4 ,   J   I N S T R U C T I O N A L   D E V ,   V 7 ,   P 8 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 9 0 6 2 3 5 ;   S A E T T L E R   L P ,   1 9 6 7 ,   H I S T   I N S T R U C T I O N A L   T ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 	 2 7 	 1 6 	 1 6 	 2 	 8 	 A S S O C   E D U C   C O M M U N I C A T I O N S   &   T E C H N O L O G Y 	 B L O O M I N G T O N 	 1 8 0 0   N   S T O N E L A K E   D R ,   S U I T E   2 ,   B L O O M I N G T O N ,   I N   4 7 4 0 4   U S A 	 1 0 4 2 - 1 6 2 9 	 	 	 E T R & D - E D U C   T E C H   R E S 	 E T R & D - E d u c .   T e c h .   R e s .   D e v . 	 	 2 0 0 5 	 5 3 	 1 	 	 	 	 	 3 7 	 4 8 	 	 1 0 . 1 0 0 7 / B F 0 2 5 0 4 8 5 6 	 	 1 2 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 9 1 0 N C 	 W O S : 0 0 0 2 2 7 9 3 7 2 0 0 0 0 3 	 	 
 
 J 	 S c h o o n b a e r t ,   D 	 	 	 	 S c h o o n b a e r t ,   D 	 	 	 C i t a t i o n   p a t t e r n s   i n   t r o p i c a l   m e d i c i n e   j o u r n a l s 	 T R O P I C A L   M E D I C I N E   &   I N T E R N A T I O N A L   H E A L T H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 t r o p i c a l   m e d i c i n e ;   b i o m e d i c a l   l i t e r a t u r e ;   j o u r n a l s ;   b i b l i o m e t r i c s ;   c i t a t i o n   a n a l y s i s ;   J o u r n a l   C i t a t i o n   R e p o r t s 	 	 S e l e c t i o n s   o f   m o s t   i m p o r t a n t   j o u r n a l s   i n   t h e   f i e l d   o f   t r o p i c a l   m e d i c i n e   h a v e   p r e v i o u s l y   b e e n   i d e n t i f i e d   w i t h   t h e   h e l p   o f   r e s o u r c e s   s u c h   a s   b i b l i o g r a p h i c a l   a n d   c i t a t i o n   d a t a b a s e s .   T h i s   a r t i c l e   u s e s   I S I ' s   J o u r n a l   C i t a t i o n   R e p o r t s   ( J S R )   f o r   2 0 0 2   t o   a n a l y s e   t h e   c i t a t i o n   c h a r a c t e r i s t i c s   o f   t h e   T r o p i c a l   M e d i c i n e   c a t e g o r y .   A c c o r d i n g   t o   t h e s e   d a t a ,   t h i s   s m a l l   b u t   d i v e r s e   g r o u p   o f   1 2   j o u r n a l s   b e s t o w s   s o m e   4 0 %   m o r e   c i t a t i o n s   t h a n   i t   r e c e i v e s .   I t s   s i x   t y p i c a l   c o r e   j o u r n a l s   t e n d   t o   c i t e   o n e   a n o t h e r   h e a v i l y ,   b u t   t h e y   a l s o   r e f e r   a   l o t   t o   m u l t i d i s c i p l i n a r y   s c i e n c e   a n d   g e n e r a l   m e d i c i n e   j o u r n a l s ,   a n d   t o   i n f e c t i o u s   d i s e a s e s   a n d   p a r a s i t o l o g y   j o u r n a l s .   L o o k i n g   a t   t h e   s o u r c e s   f r o m   w h i c h   J C R ' s   t r o p i c a l   m e d i c i n e   j o u r n a l s   d e r i v e   t h e i r   c i t a t i o n s ,   i t   i s   c l e a r   t h a t   i n   t h i s   r e v e r s e   d i r e c t i o n ,   t h e   s p e c i a l t y ' s   l i t e r a t u r e   i s   s t i l l   m o r e   c o n c e n t r a t e d .   A p a r t   f r o m   t h e   t y p i c a l   c o r e ,   t h i s   J C R   c a t e g o r y   a l s o   c o n t a i n s   a   n u m b e r   o f   j o u r n a l s   w i t h   m o r e   i d i o s y n c r a t i c   c i t i n g   p a t t e r n s ,   f o c u s e d   o n   s p e c i a l t i e s   s u c h   a s   p a e d i a t r i c s ,   a   s i n g l e   d i s e a s e   ( l e p r o s y )   a n d   a   r e p r e s e n t a t i v e   o f   L a t i n   A m e r i c a n   a n d   F r a n c o p h o n e   b i o m e d i c a l   s c i e n c e   e a c h .   I m p l i c a t i o n s   o f   c o n c e n t r a t e d   c i t e d n e s s   a n d   l a n g u a g e   b i a s e s   a r e   d i s c u s s e d   b r i e f l y .   T h i s   p a p e r   f e a t u r e s   a   s e l e c t i o n   o f   b i b l i o m e t r i c   p a r a m e t e r s   r e l a t i n g   t o   t h e   t r o p i c a l   m e d i c i n e   j o u r n a l s   a n d   l i s t s   o f   t h e   8 0   j o u r n a l s   m o s t   c i t i n g   a n d   c i t e d   b y   t h e m . 	 I n s t   T r o p   M e d ,   B - 2 0 0 0   A n t w e r p ,   B e l g i u m 	 S c h o o n b a e r t ,   D   ( r e p r i n t   a u t h o r ) ,   I n s t   T r o p   M e d ,   N a t l   S t r   1 5 5 ,   B - 2 0 0 0   A n t w e r p ,   B e l g i u m . 	 b i b @ i t g . b e 	 	 	 	 	 A P T E D   F I C ,   1 9 7 7 ,   U S E   M E D   L I T ,   P 1 9 2 ;   B r a d f o r d   S C ,   1 9 4 8 ,   D O C U M E N T A T I O N ;   B R E N N E N   P W ,   1 9 7 8 ,   B   M E D   L I B R   A S S O C ,   V 6 6 ,   P 2 4 ;   D I A Z   I G ,   1 9 8 0 ,   R E V   C U B A N A   M E D   T R O P I ,   V 3 2 ,   P 1 0 1 ;   G i b b s   W .   W . ,   1 9 9 5 ,   S C I   A M ,   V 2 7 3 ,   P 7 6 ;   H o r t o n   R ,   2 0 0 3 ,   L A N C E T ,   V 3 6 1 ,   P 7 1 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 2 6 6 5 - 7 ;   * I S I ,   2 0 0 3 ,   J   C I T   R E P   2 0 0 2   S C I   E ;   M a i s o n n e u v e   H ,   2 0 0 3 ,   L A N C E T ,   V 3 6 1 ,   P 1 3 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 3 0 5 6 - 5 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   O b u a y a   C C ,   2 0 0 3 ,   L A N C E T ,   V 3 6 1 ,   P 1 3 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 3 ) 1 3 0 5 4 - 1 ;   R O E L A N T S   G ,   1 9 8 7 ,   A N N   S O C   B E L G   M E D   T R ,   V 6 7 ,   P 3 1 5 ;   S c h o o n b a e r t   D ,   1 9 9 6 ,   T R O P   M E D   I N T   H E A L T H ,   V 1 ,   P 7 3 9 	 1 2 	 1 6 	 1 6 	 0 	 6 	 B L A C K W E L L   P U B L I S H I N G   L T D 	 O X F O R D 	 9 6 0 0   G A R S I N G T O N   R D ,   O X F O R D   O X 4   2 D G ,   O X O N ,   E N G L A N D 	 1 3 6 0 - 2 2 7 6 	 	 	 T R O P   M E D   I N T   H E A L T H 	 T r o p .   M e d .   I n t .   H e a l t h 	 N O V 	 2 0 0 4 	 9 	 1 1 	 	 	 	 	 1 1 4 2 	 1 1 5 0 	 	 1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 5 6 . 2 0 0 4 . 0 1 3 2 7 . x 	 	 9 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h ;   T r o p i c a l   M e d i c i n e 	 P u b l i c ,   E n v i r o n m e n t a l   &   O c c u p a t i o n a l   H e a l t h ;   T r o p i c a l   M e d i c i n e 	 8 7 2 D R 	 W O S : 0 0 0 2 2 5 1 8 8 1 0 0 0 0 2 	 1 5 5 4 8 3 0 9 	 
 
 J 	 K o s t o f f ,   R N ;   S h l e s i n g e r ,   M F ;   T s h i t e y a ,   R 	 	 	 	 K o s t o f f ,   R N ;   S h l e s i n g e r ,   M F ;   T s h i t e y a ,   R 	 	 	 N o n l i n e a r   d y n a m i c s   t e x t   m i n i n g   u s i n g   b i b l i o m e t r i c s   a n d   D a t a b a s e   T o m o g r a p h y 	 I N T E R N A T I O N A L   J O U R N A L   O F   B I F U R C A T I O N   A N D   C H A O S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 n o n l i n e a r   d y n a m i c s ;   b i f u r c a t i o n ;   c h a o s ;   l i m i t   c y c l e ;   P o i n c a r e   m a p ;   p e r i o d - d o u b l i n g ;   p e r i o d i c   o r b i t s ;   H e n o n   m a p ;   d y n a m i c a l   s y s t e m s ;   c h a o t i c   a t t r a c t o r s ;   s t r a n g e   a t t r a c t o r s ;   t e x t   m i n i n g ;   i n f o r m a t i o n   r e t r i e v a l ;   b i b l i o m e t r i c s 	 T E C H N I C A L   I N T E L L I G E N C E ;   C I T A T I O N ;   S C I E N C E ;   R O A D M A P S 	 D a t a b a s e   T o m o g r a p h y   ( D T )   i s   a   t e x t u a l   d a t a b a s e   a n a l y s i s   s y s t e m   c o n s i s t i n g   o f   t w o   m a j o r   c o m p o n e n t s :   ( 1 )   a l g o r i t h m s   f o r   e x t r a c t i n g   m u l t i w o r d   p h r a s e   f r e q u e n c i e s   a n d   p h r a s e   p r o x i m i t i e s   ( p h y s i c a l   c l o s e n e s s   o f   t h e   m u l t i w o r d   t e c h n i c a l   p h r a s e s )   f r o m   a n y   t y p e   o f   l a r g e   t e x t u a l   d a t a b a s e ,   t o   a u g m e n t   ( 2 )   i n t e r p r e t a t i v e   c a p a b i l i t i e s   o f   t h e   e x p e r t   h u m a n   a n a l y s t .   D T   w a s   u s e d   t o   d e r i v e   t e c h n i c a l   i n t e l l i g e n c e   f r o m   a   N o n l i n e a r   D y n a m i c s   d a t a b a s e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S C I ) .   P h r a s e   f r e q u e n c y   a n a l y s i s   b y   t h e   t e c h n i c a l   d o m a i n   e x p e r t s   p r o v i d e d   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s   o f   t h e   N o n l i n e a r   D y n a m i c s   d a t a b a s e ,   a n d   t h e   p h r a s e   p r o x i m i t y   a n a l y s i s   p r o v i d e d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   p e r v a s i v e   t e c h n i c a l   t h e m e s .   B i b l i o m e t r i c   a n a l y s i s   o f   t h e   N o n l i n e a r   D y n a m i c s   l i t e r a t u r e   s u p p l e m e n t e d   t h e   D T   r e s u l t s   w i t h   a u t h o r / j o u r n a l / i n s t i t u t i o n   p u b l i c a t i o n   a n d   c i t a t i o n   d a t a . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   D D L   O m n i   E n g n   L L C ,   M c l e a n ,   V A   2 2 1 0 2   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 B O C A L E T T I   S ,   2 0 0 2 ,   A M   I   P H Y S   C   P ,   V 6 2 2 ;   D I N G   M ,   2 0 0 1 ,   P   5   E X P   C H A O S   C ;   D I N G   M ,   1 9 9 8 ,   P   4   E X P   C H A O S   C ;   D I T T O   W ,   1 9 9 5 ,   P   2   E X P   C H A O S   C ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   H A R R I S O N   R ,   1 9 9 6 ,   P   3   E X P   C H A O S   C ;   * I   S C I   I N F ,   2 0 0 2 ,   S C I   S C I   C I T   I N D ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 8 ,   P 2 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 3 3 - 0 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   2 0 0 0 ,   S C I E N T I S T ,   V 1 4 ,   P 6 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 5 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 9 ) 0 0 0 8 4 - X ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K o s t o f f   R N ,   1 9 9 3 ,   C O M P E T   I N T E L L   R E V ,   V 4 ,   P 3 8 ,   D O I   1 0 . 1 0 0 2 / c i r . 3 8 8 0 0 4 0 1 0 9 ;   K o s t o f f   R .   N ,   1 9 9 4 ,   C O M P E T I T I V E   I N T E L L I G ,   V 5 ,   P 4 8 ,   D O I   1 0 . 1 0 0 2 / c i r . 3 8 8 0 0 5 0 1 0 9 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   V o h r a   S . ,   1 9 9 2 ,   P   1   E X P   C H A O S   C ;   K O S T O F F   R N ,   1 9 9 5 ,   P a t e n t   N o .   5 4 4 0 4 8 1 	 2 3 	 1 6 	 1 6 	 1 	 1 1 	 W O R L D   S C I E N T I F I C   P U B L   C O   P T E   L T D 	 S I N G A P O R E 	 J O U R N A L   D E P T   P O   B O X   1 2 8   F A R R E R   R O A D ,   S I N G A P O R E   9 1 2 8 0 5 ,   S I N G A P O R E 	 0 2 1 8 - 1 2 7 4 	 	 	 I N T   J   B I F U R C A T   C H A O S 	 I n t .   J .   B i f u r c a t i o n   C h a o s 	 J A N 	 2 0 0 4 	 1 4 	 1 	 	 	 	 	 6 1 	 9 2 	 	 1 0 . 1 1 4 2 / S 0 2 1 8 1 2 7 4 0 4 0 0 9 0 8 9 	 	 3 2 	 M a t h e m a t i c s ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   M u l t i d i s c i p l i n a r y   S c i e n c e s 	 M a t h e m a t i c s ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 8 0 8 P K 	 W O S : 0 0 0 2 2 0 5 8 0 8 0 0 0 0 3 	 	 
 
 J 	 H a r t e m i n k ,   A E ;   M c B r a t n e y ,   A B ;   C a t t l e ,   J A 	 	 	 	 H a r t e m i n k ,   A E ;   M c B r a t n e y ,   A B ;   C a t t l e ,   J A 	 	 	 D e v e l o p m e n t s   a n d   t r e n d s   i n   s o i l   s c i e n c e :   1 0 0   v o l u m e s   o f   G e o d e r m a   ( 1 9 6 7 - 2 0 0 1 ) 	 G E O D E R M A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s o i l   s c i e n c e ;   s o i l   s c i e n c e   i m p a c t ;   b i b l i o m e t r i c s ;   h i s t o r y   o f   s o i l   s c i e n c e ;   t r e n d s   i n   s o i l   s c i e n c e 	 J O U R N A L   P O C H V O V E D E N I E ;   W O R L D 	 B e t w e e n   S e p t e m b e r   1 9 6 7   a n d   M a r c h   2 0 0 1 ,   G e o d e r m a   p u b l i s h e d   1 0 0   v o l u m e s   c o n t a i n i n g   2 0 7 9   p a p e r s   c o v e r i n g   3 1 , 6 3 7   p a g e s   a n d   f i l l i n g   1 9 1   c m   o f   s h e l f   s p a c e .   N o   d o u b t   t h a t   i s   a   l o t   o f   p a p e r ,   b u t   w h a t   i s   i n   i t ?   T h i s   p a p e r   s t a r t s   w i t h   a   b r i e f   h i s t o r y   o f   t h e   j o u r n a l   a n d   a n   o v e r v i e w   o f   e d i t o r s   a n d   a   g e o g r a p h i c   b r e a k d o w n   o f   t h e   e d i t o r i a l   b o a r d .   T h e   c o n t e n t s   o f   t h e   1 0 0   v o l u m e s   i s   p r e s e n t e d   i n c l u d i n g   a n   o v e r v i e w   o f   t h e   g e o g r a p h i c   o r i g i n   o f   t h e   r e s e a r c h   a n d   a u t h o r s ,   a n d   a n   a n a l y s i s   o f   s o i l   s c i e n c e   s u b j e c t s   o v e r   t i m e .   F u r t h e r m o r e ,   t h e   i m p a c t   f a c t o r   a n d   t h e   m o s t   f r e q u e n t l y   p a p e r s   a r e   d i s c u s s e d .   T h e   a v e r a g e   l e n g t h   o f   t h e   p a p e r s   i n c r e a s e d   f r o m   1 2 . 9   p a g e s   i n   t h e   1 9 7 0 s   t o   1 6 . 4   p a g e s   i n   t h e   1 9 9 0 s .   N u m b e r   o f   a u t h o r s   p e r   p a p e r   i n c r e a s e d   f a s t e r   s o   t h e   p a g e s   p e r   a u t h o r   h a v e   d e c r e a s e d   o v e r   t i m e .   E u r o p e a n   a u t h o r s   a c c o u n t   f o r   a b o u t   h a l f   o f   t h e   p a p e r s   b u t   l e s s   t h a n   4 0 %   o f   t h e   r e s e a r c h   w a s   c o n d u c t e d   i n   E u r o p e .   T h e   n u m b e r   o f   a u t h o r s   f r o m   N o r t h   A m e r i c a   h a s   i n c r e a s e d   o v e r   t h e   y e a r s   a n d   a b o u t   o n e - f i f t h   o f   t h e   p a p e r s   i s   f r o m   r e s e a r c h   i n   N o r t h   A m e r i c a .   M o r e   t h a n   h a l f   o f   t h e   r e s e a r c h   r e p o r t e d   i n   G e o d e r m a   w a s   c o n d u c t e d   i n   t h e   t e m p e r a t e   r e g i o n s ,   w h e r e a s   t h e   t r o p i c s   a n d   s u b t r o p i c s   a c c o u n t   f o r   a b o u t   3 0 %   o f   t h e   p a p e r s .   I n   t h e   1 9 8 0 s ,   5 3 %   o f   t h e   p a p e r s   w e r e   d e s c r i p t i v e   b u t   i t   d e c r e a s e d   t o   3 1 %   i n   t h e   1 9 9 0 s   w i t h   a   h i g h e r   p e r c e n t a g e   o f   p a p e r s   f o c u s s i n g   o n   m e t h o d o l o g y .   O n e   o f   t h e   i n t r i g u i n g   t r e n d s   i s   t h a t   2 9 %   o f   t h e   p a p e r s   i n   t h e   1 9 7 0 s   w e r e   b a s e d   o n   f i e l d   s t u d i e s   w h e r e a s   o n l y   1 8 %   o f   t h e   p a p e r s   i n   t h e   1 9 9 0 s   w e r e   f i e l d   b a s e d .   L a b o r a t o r y   s t u d i e s   d e c r e a s e d   f r o m   6 0 %   i n   t h e   1 9 7 0 s   t o   4 9 %   i n   t h e   1 9 9 0 s .   O v e r   t h e   s a m e   p e r i o d ,   d e s k   s t u d i e s   i n c r e a s e d   f r o m   1 1 %   t o   3 3 %   o f   t h e   p u b l i s h e d   p a p e r s .   T h e   m a j o r i t y   o f   t h e   p a p e r s   i n   G e o d e r m a   h a s   h a d   n o   s t r o n g   f o c u s   a n d   o n l y   i n   r e c e n t   y e a r s   p a p e r s   h a d   a n   i n c r e a s e d   f o c u s   ( i . e .   a g r i c u l t u r e ,   e n v i r o n m e n t   e t c . ) .   T h e r e   h a s   b e e n   a   s t r o n g   i n c r e a s e   i n   s o i l   p h y s i c s   p a p e r s   w h e r e a s   t h e   s h a r e   o f   s o i l   c h e m i s t r y   s t e a d i l y   d e c l i n e d   o v e r   t i m e .   T y p i c a l   p e d o l o g i c a l   p a p e r s   c o v e r   a b o u t   3 0 %   o f   t h e   j o u r n a l   a n d   l i t t l e   c h a n g e   w a s   f o u n d   w i t h   t i m e ,   e x c e p t   f o r   t h e   a d v e n t   o f   p a p e r s   i n   p e d o m e t r i c s .   P a p e r s   o n   s o i l   m i n e r a l o g y   h a v e   s h a r p l y   d e c l i n e d   f r o m   2 5 %   i n   t h e   1 9 8 0 s   t o   l e s s   t h a n   1 0 %   i n   t h e   1 9 9 0 s .   O v e r   t h e   s a m e   p e r i o d ,   a   d o u b l i n g   i n   t h e   n u m b e r   o f   p a p e r s   o n   s o i l   a n d   e n v i r o n m e n t   o c c u r r e d .   P a p e r s   c o n t a i n i n g   i n f o r m a t i o n   o n   s o i l   c l a s s i f i c a t i o n   i n c r e a s e d   f r o m   3 0 %   i n   t h e   e a r l y   1 9 7 0 s   t o   a r o u n d   5 0 %   i n   t h e   l a t e   1 9 9 0 s .   A l f i s o l s   h a d   r e c e i v e d   m o s t   a t t e n t i o n   f o l l o w e d   b y   I n c e p t i s o l s .   P a p e r s   a r e   b a s e d   o n   a   l a r g e r   a m o u n t   o f   s o i l   s a m p l e s   a n d   i n   r e c e n t   y e a r s   a n   i n c r e a s i n g   n u m b e r   o f   p a p e r s   a r e   b a s e d   o n   e x i s t i n g   d a t a .   T h e   i m p a c t   f a c t o r   o f   G e o d e r m a   h a s   s t e a d i l y   i n c r e a s e d   s i n c e   t h e   m i d   1 9 7 0 s   a n d   i n   p a r t i c u l a r   i n   t h e   l a t e   1 9 9 0 s .   T h i s   r e v i e w   h a s   s h o w n   i m p o r t a n t   t r e n d s   i n   G e o d e r m a   p a p e r s   t h a t   l i k e l y   r e f l e c t   s o m e   o f   t h e   m a j o r   c h a n g e s   t h a t   h a v e   o c c u r r e d   i n   s o i l   s c i e n c e   a s   a   w h o l e .   ( C )   2 0 0 1   E l s e v i e r   S c i e n c e   B . V .   A l l   r i g h t s   r e s e r v e d . 	 I S R I C ,   N L - 6 7 0 0   A J   W a g e n i n g e n ,   N e t h e r l a n d s ;   U n i v   S y d n e y ,   D e p t   A g r   C h e m   &   S o i l   S c i ,   S y d n e y ,   N S W   2 0 0 6 ,   A u s t r a l i a 	 H a r t e m i n k ,   A E   ( r e p r i n t   a u t h o r ) ,   I S R I C ,   P O B   3 5 3 ,   N L - 6 7 0 0   A J   W a g e n i n g e n ,   N e t h e r l a n d s . 	 	 M c B r a t n e y ,   A l e x / C - 2 1 9 9 - 2 0 1 1 ;   H a r t e m i n k ,   A l f r e d / G - 1 1 4 9 - 2 0 1 1 	 H a r t e m i n k ,   A l f r e d / 0 0 0 0 - 0 0 0 2 - 5 7 9 7 - 6 7 9 8 	 	 	 B r u s   D J ,   1 9 9 7 ,   G E O D E R M A ,   V 8 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 6 - 7 0 6 1 ( 9 7 ) 0 0 0 7 2 - 4 ;   C h a d w i c k   O A ,   2 0 0 1 ,   G E O D E R M A ,   V 1 0 0 ,   P 3 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 6 - 7 0 6 1 ( 0 1 ) 0 0 0 2 7 - 1 ;   D A V I D   M B ,   1 9 8 4 ,   G E O D E R M A ,   V 3 3 ,   P 2 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 0 6 1 ( 8 4 ) 9 0 0 3 1 - 4 ;   D o b r o v o l ' s k i i   G V ,   1 9 9 9 ,   E U R A S I A N   S O I L   S C I + ,   V 3 2 ,   P 1 0 6 9 ;   D R E E S   L R ,   1 9 9 3 ,   G E O D E R M A ,   V 5 9 ,   P 2 1 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 0 6 1 ( 9 3 ) 9 0 0 7 0 - 2 ;   G e r s t e i n   M ,   1 9 9 9 ,   N A T U R E ,   V 3 9 8 ,   P 2 0 ,   D O I   1 0 . 1 0 3 8 / 1 7 9 0 7 ;   G r e e n l a n d   D J ,   1 9 9 7 ,   S O I L   U S E   M A N A G E ,   V 1 3 ,   P 1 6 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 5 - 2 7 4 3 . 1 9 9 7 . t b 0 0 5 8 1 . x ;   H A R D E N   J W ,   1 9 8 2 ,   G E O D E R M A ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 0 6 1 ( 8 2 ) 9 0 0 3 7 - 4 ;   H A R T E M I N K   A E ,   2 0 0 0 ,   B   I N T   U N I O N   S O I L   S C I ,   V 9 8 ,   P 5 6 ;   H E U V E L I N K   G B M ,   2 0 0 1 ,   G E O D E R M A ,   V 1 0 0 ,   P 2 7 1 ;   I N S A M   H ,   2 0 0 1 ,   G E O D E R M A ,   V 1 0 0 ,   P 3 1 9 ;   I s b e l l   R . F . ,   1 9 9 6 ,   A U S T R   S O I L   C L A S S I F I C ,   P 3 0 6 6 ;   M c B r a t n e y   A B ,   2 0 0 0 ,   G E O D E R M A ,   V 9 7 ,   P 2 9 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 6 - 7 0 6 1 ( 0 0 ) 0 0 0 4 3 - 4 ;   M c D o n a l d   P . ,   1 9 9 4 ,   L I T   S O I L   S C I ;   P H I L I P   J R ,   1 9 9 1 ,   S O I L   S C I ,   V 1 5 1 ,   P 9 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 1 0 6 9 4 - 1 9 9 1 0 1 0 0 0 - 0 0 0 1 1 ;   R a a t s   P A C ,   2 0 0 1 ,   G E O D E R M A ,   V 1 0 0 ,   P 3 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 6 - 7 0 6 1 ( 0 1 ) 0 0 0 2 8 - 3 ;   S a n c h e z   P A . ,   1 9 7 6 ,   P R O P E R T I E S   M A N A G E M E N ;   S C H E L L I N G   J ,   1 9 6 8 ,   R E V   G E O D E R M A   N E T H E R L ,   V 1 6 ,   P 1 5 4 ;   S C H W A R T Z   D ,   1 9 8 6 ,   G E O D E R M A ,   V 3 9 ,   P 9 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 0 6 1 ( 8 6 ) 9 0 0 6 9 - 8 ;   S I L V E R M A N   B W ,   1 9 8 5 ,   J   R   S T A T   S O C   B ,   V 4 7 ,   P 1 ;   S p a r k s   D L ,   2 0 0 1 ,   G E O D E R M A ,   V 1 0 0 ,   P 3 0 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 6 - 7 0 6 1 ( 0 1 ) 0 0 0 2 6 - X ;   T I N K E R   P B ,   1 9 8 5 ,   J   S O I L   S C I ,   V 3 6 ,   P 1 ;   V A L E N T I N   C ,   1 9 9 2 ,   G E O D E R M A ,   V 5 5 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 0 6 1 ( 9 2 ) 9 0 0 8 5 - L ;   V A N B A R E N   F A ,   1 9 6 7 ,   G E O D E R M A ,   V 1 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 6 - 7 0 6 1 ( 6 7 ) 9 0 0 0 8 - 0 ;   V A N B A R E N   J H V ,   2 0 0 0 ,   G E O D E R M A ,   V 9 6 ,   P 1 ;   Y O U N G   A ,   1 9 9 1 ,   A G R O F O R E S T   S Y S T ,   V 1 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 0 5 3 5 7 8 ;   Z e i l i n g e r   A ,   2 0 0 0 ,   N A T U R E ,   V 4 0 8 ,   P 6 3 9 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 4 7 1 7 7 ;   Z o n n   S V ,   1 9 9 9 ,   E U R A S I A N   S O I L   S C I + ,   V 3 2 ,   P 1 0 	 2 8 	 1 6 	 1 9 	 1 	 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 0 1 6 - 7 0 6 1 	 	 	 G E O D E R M A 	 G e o d e r m a 	 M A Y 	 2 0 0 1 	 1 0 0 	 3 - 4 	 	 	 S I 	 	 2 1 7 	 2 6 8 	 	 1 0 . 1 0 1 6 / S 0 0 1 6 - 7 0 6 1 ( 0 1 ) 0 0 0 2 4 - 6 	 	 5 2 	 S o i l   S c i e n c e 	 A g r i c u l t u r e 	 4 4 0 E B 	 W O S : 0 0 0 1 6 9 1 6 2 0 0 0 0 0 2 	 	 
 
 J 	 S c h a r n h o r s t ,   A 	 	 	 	 S c h a r n h o r s t ,   A 	 	 	 C i t a t i o n   -   N e t w o r k s ,   s c i e n c e   l a n d s c a p e s   a n d   e v o l u t i o n a r y   s t r a t e g i e s   -   C o m m e n t s   o n   t h e o r i e s   o f   c i t a t i o n ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C O C I T A T I O N   A N A L Y S I S ;   B I B L I O M E T R I C S ;   M O D E L S 	 T h e   c o n s t r u c t i o n   o f   v i r t u a l   s c i e n c e   l a n d s c a p e s   b a s e d   o n   c i t a t i o n   n e t w o r k s   a n d   t h e   s t r a t e g i c   u s e   o f   t h e   i n f o r m a t i o n   t h e r e i n   s h e d   n e w   l i g h t   o n   t h e   i s s u e s   o f   t h e   e v o l u t i o n   o f   t h e   s c i e n c e   s y s t e m   a n d   p o s s i b i l i t i e s   f o r   c o n t r o l .   C i t a t i o n s   s e e m   t o   h a v e   a   k e y   p o s i t i o n   i n   t h e   r e t r i e v a l   a n d   v a l u a t i o n   o f   i n f o r m a t i o n   f r o m   s c i e n t i f i c   c o m m u n i c a t i o n   n e t w o r k s .   L e y d e s d o r f f ' s   a p p r o a c h   t o   c i t a t i o n   t h e o r y   t a k e s   i n t o   a c c o u n t   t h e   d u a l - l a y e r e d   c h a r a c t e r   o f   c o m m u n i c a t i o n   n e t w o r k s   a n d   t h e   s e c o n d - o r d e r   n a t u r e   o f   t h e   s c i e n c e   s y s t e m .   T h i s   p e r s p e c t i v e   m a y   h e l p   t o   s h a r p e n   t h e   a w a r e n e s s   o f   s c i e n t i s t s   a n d   s c i e n c e   p o l i c y   m a k e r s   f o r   p o s s i b l e   f e e d b a c k   l o o p s   w i t h i n   a c t i o n s   a n d   a c t i v i t i e s   i n   t h e   s c i e n c e   s y s t e m ,   a n d   p r o b a b l y   n o n l i n e a r   p h e n o m e n a   r e s u l t i n g   t h e r e f r o m .   I n   t h i s   p a p e r   a n   a d d i t i o n a l   l i n k   t o   g e o m e t r i c a l l y   o r i e n t e d   e v o l u t i o n a r y   t h e o r i e s   i s   s k e t c h e d   a n d   a   s p e c i f i c   l a n d s c a p e   c o n c e p t   i s   u s e d   a s   a   f r a m e w o r k   f o r   s o m e   c o m m e n t s . 	 W i s s e n s c h   Z e n t r u m   B e r l i n   S o z i a l f o r s c h ,   D - 1 0 7 8 5   B e r l i n ,   G e r m a n y 	 S c h a r n h o r s t ,   A   ( r e p r i n t   a u t h o r ) ,   W i s s e n s c h   Z e n t r u m   B e r l i n   S o z i a l f o r s c h ,   R e i c h p i e t s c h u f e r   5 0 ,   D - 1 0 7 8 5   B e r l i n ,   G e r m a n y . 	 	 S c h a r n h o r s t ,   A n d r e a / A - 7 8 0 2 - 2 0 1 0 ;   	 S c h a r n h o r s t ,   A n d r e a / 0 0 0 0 - 0 0 0 1 - 8 8 7 9 - 8 7 9 8 	 	 	 A N D E R S O N   P W ,   1 9 7 8 ,   R E V   M O D   P H Y S ,   V 5 0 ,   P 1 9 1 ,   D O I   1 0 . 1 1 0 3 / R e v M o d P h y s . 5 0 . 1 9 1 ;   B O H M E   G ,   1 9 7 3 ,   Z   S O Z I O L ,   V 2 ,   P 1 2 8 ;   B r a u n   T ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 1 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 1 1 3 0 ;   B R U C K N E R   E ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 8 ,   P 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 1 6 0 ;   B r u c k n e r   E ,   1 9 9 6 ,   J   E V O L   E C O N ,   V 6 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 2 0 2 3 7 0 ;   B R U C K N E R   E ,   1 9 9 1 ,   U N P U B   E V O L U T I O N S S T R A ;   B u s h   V . ,   1 9 4 5 ,   A T L A N T I C   M O N T H L Y ,   V 1 7 6 ,   P 1 0 1 ;   C a l l o n   M . ,   1 9 8 6 ,   M A P P I N G   D Y N A M I C S   S C I ;   E B E L I N G   W ,   1 9 9 8 ,   I N   P R E S S   E C O N O P H Y S I C ;   E B E L I N G   W ,   1 9 9 8 ,   U N P U B   E V O L U T I O N S   I N N ;   F E I S T E L   R ,   1 9 8 2 ,   B I O S Y S T E M S ,   V 1 5 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 3 - 2 6 4 7 ( 8 2 ) 9 0 0 4 4 - 2 ;   F E I S T E L   R ,   1 9 9 0 ,   E V O L U T I O N   C O M P L E X   S Y ;   F O N T A N A   W ,   1 9 9 3 ,   P H Y S   R E V   E ,   V 4 7 ,   P 2 0 8 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 4 7 . 2 0 8 3 ;   G A R F I E L D   E ,   1 9 7 7 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G I L B E R T   G N ,   1 9 9 7 ,   S O C I O L O G I C A L   R E S   O N L ,   P 2 ;   J O E R G E S   B ,   1 9 9 9 ,   I N   P R E S S   I N S T R U M E N T A ;   K r o h n   W . ,   1 9 8 9 ,   S E L B S T O R G A N I S A T I O N   W ;   M a c i l w a i n   C ,   1 9 9 6 ,   N A T U R E ,   V 3 8 3 ,   P 6 5 9 ;   M a i n z e r   K ,   1 9 9 7 ,   T H I N K I N G   C O M P L E X I T Y ;   M A R S H A K O V A   I V ,   1 9 8 8 ,   S I S T E M A   T S I T I R O V A N I Y ;   N o y o n s   E C M ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 7 ;   N O Y O N S   E C M ,   1 9 9 7 ,   A F L E I D I N G ,   V 1 ,   P 5 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 2 1 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 4 . 2 1 7 ;   R e c h e n b e r g   I . ,   1 9 9 4 ,   E V O L U T I O N S S T R A T E G I E ;   R O S E   H ,   1 9 9 8 ,   T H E S I S   H U M B O L D T   U   B E ;   S c h w e f e l   H .   P . ,   1 9 9 5 ,   E V O L U T I O N   O P T I M U M   S E ;   S E N   S K ,   1 9 9 6 ,   I N T   J   S C I E N T O M E T R I C S ,   V 2 ,   P 1 5 9 ;   S m a l l   H ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 7 3 ;   S m a l l   H ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 2 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 1 4 ;   S M A L L   H ,   1 9 7 4 ,   S C I   S T U D ,   V 4 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 4 0 0 4 0 0 1 0 2 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 ;   U M S T A T T E R   W ,   1 9 9 2 ,   F O R T S C H R I T T E   W I S S E N S ,   V 2 ,   P 1 ;   V O I G T   H M ,   1 9 9 6 ,   P A R A L L E L   P R O B L E M   S O L ;   V O N I T Z   M ,   1 9 9 0 ,   I N T   F O R U M   I N F O R M A T I O ,   V 1 5 ,   P 9 ;   W E I N G A R T   P ,   1 9 9 0 ,   I N D I K A T O R E N   W I S S E N S C ,   P 2 2 4 ;   W r i g h t   S ,   1 9 3 2 ,   P   I N T   C   G E N E T ,   V 1 ,   P 3 5 6 	 3 8 	 1 6 	 1 6 	 1 	 8 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 1 9 9 8 	 4 3 	 1 	 	 	 	 	 9 5 	 1 0 6 	 	 1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 9 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 1 9 C L 	 W O S : 0 0 0 0 7 5 8 7 7 7 0 0 0 1 0 	 	 
 
 J 	 L e w i s o n ,   G 	 	 	 	 L e w i s o n ,   G 	 	 	 N e w   b i b l i o m e t r i c   t e c h n i q u e s   f o r   t h e   e v a l u a t i o n   o f   m e d i c a l   s c h o o l s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 6 t h   C o n f e r e n c e   o f   t h e   I n t e r n a t i o n a l - S o c i e t y - f o r - S c i e n t o m e t r i c s - a n d - I n f o r m e t r i c s 	 J U N   1 6 - 1 9 ,   1 9 9 7 	 J E R U S A L E M ,   I S R A E L 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r 	 	 	 P E R F O R M A N C E 	 B i b l i o m e t r i c s   h a v e   b e e n   u s e d   i n   n o v e l   w a y s   t o   a s s i s t   w i t h   t h e   e v a l u a t i o n   o f   t w o   m e d i c a l   s c h o o l s ,   o n e   i n   E n g l a n d   a n d   o n e   i n   S w e d e n .   T h e   f i r s t   e v a l u a t i o n   w a s   i n t e n d e d   t o   a l l o w   t h e   r e l a t i v e   s t r e n g t h s   i n   2 6   s u b f i e l d s   o f   f i v e   c o m p o n e n t   c a m p u s e s   t o   b e   e s t i m a t e d .   S e l e c t i v e   f i l t e r s   f o r   e a c h   s u b f i e l d   w e r e   d e f i n e d ,   m a n y   o f   t h e m   w i t h   t h e   h e l p   o f   t h e   s c h o o l ' s   r e s e a r c h   s t a f f ,   s o   t h a t   r e l e v a n t   p a p e r s   c o u l d   b e   r e t r i e v e d   f r o m   a   d a t a b a s e   o n   t h e   b a s i s   o f   t h e i r   t i t l e   k e y w o r d s   a n d   s p e c i a l i s t   j o u r n a l s .   T h e   c a m p u s   o u t p u t s   w e r e   t h e n   a n a l y s e d   b y   t h e   r e s e a r c h   l e v e l   o f   t h e   j o u r n a l s   ( c l i n i c a l / b a s i c )   a n d   t h e i r   i n f l u e n c e .   I n   t h e   s e c o n d   e v a l u a t i o n ,   n i n e   d i f f e r e n t   i n d i c a t o r s   o f   r e s e a r c h   o u t p u t   w e r e   p r o d u c e d   s o   t h a t   t h e   s c h o o l   c o u l d   b e   c o m p a r e d   w i t h   f o u r   o t h e r s   i n   S c a n d i n a v i a .   T h e   i n d i c a t o r s   i n c l u d e d   m e a s u r e s   o f   o u t p u t ,   c o - a u t h o r s h i p ,   j o u r n a l   e s t e e m   a n d   c i t a t i o n s   b y   p a p e r s   a n d   b y   p a t e n t s . 	 W e l l c o m e   T r u s t ,   U n i t   P o l i c y   R e s   S c i   &   M e d ,   L o n d o n   N W 1   2 B E ,   E n g l a n d 	 L e w i s o n ,   G   ( r e p r i n t   a u t h o r ) ,   W e l l c o m e   T r u s t ,   U n i t   P o l i c y   R e s   S c i   &   M e d ,   2 1 0   E u s t o n   R d ,   L o n d o n   N W 1   2 B E ,   E n g l a n d . 	 	 	 	 	 	 A n d e r s o n   J ,   1 9 9 6 ,   T E C H N O L   A N A L   S T R A T E G ,   V 8 ,   P 1 3 5 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 9 6 0 8 5 2 4 2 4 0 ;   A N D E R S O N   J ,   1 9 8 9 ,   E V A L U A T I O N   S C I   R E S ,   P 9 3 ;   B I E N E N S T O C K   J ,   1 9 9 6 ,   E V A L U A T I O N   G O T E B O R G ;   C O L L I N S   P M D ,   1 9 9 1 ,   S E P S U   P O L I C Y   S T U D Y ,   V 5 ;   D A N I E L   H D ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 6 9 8 ;   J e s c h i n   D . ,   1 9 9 5 ,   P   5   I N T   C   I N T   S O C   S C ,   P 2 3 5 ;   L E W I S O N   G ,   1 9 9 5 ,   R E S   E V A L U A T ,   V 5 ,   P 2 2 5 ;   L e w i s o n   G ,   1 9 9 6 ,   R E S   E V A L U A T ,   V 6 ,   P 2 5 ;   M a r t i n   B R ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 9 ;   N A R I N   F ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 5 ;   N a r i n   F ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 2 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 5 9 6 ;   V a n   R a a n   A . F . J . ,   1 9 9 3 ,   R E S   E V A L U A T ,   V 3 ,   P 1 5 1 	 1 2 	 1 6 	 1 6 	 1 	 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N - F E B 	 1 9 9 8 	 4 1 	 1 - 2 	 	 	 	 	 5 	 1 6 	 	 1 0 . 1 0 0 7 / B F 0 2 4 5 7 9 6 2 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 Y U 9 2 2 	 W O S : 0 0 0 0 7 1 7 7 0 1 0 0 0 0 1 	 	 
 
 J 	 B A U I N ,   S ;   M I C H E L E T ,   B ;   S C H W E I G H O F F E R ,   M G ;   V E R M E U L I N ,   P 	 	 	 	 B A U I N ,   S ;   M I C H E L E T ,   B ;   S C H W E I G H O F F E R ,   M G ;   V E R M E U L I N ,   P 	 	 	 U S I N G   B I B L I O M E T R I C S   I N   S T R A T E G I C   A N A L Y S I S   -   U N D E R S T A N D I N G   C H E M I C A L - R E A C T I O N S   A T   T H E   C N R S 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C O - W O R D   A N A L Y S I S ;   C I T A T I O N ;   S C I E N C E 	 T h i s   a r t i c l e   p r e s e n t s   t h e   r e s u l t s   o f   a   s t u d y   c a r r i e d   o u t   f o r   C N R S   p o l i c y   m a k e r s .   T h e   g o a l   o f   t h e   s t u d y   w a s   t w o - f o l d ;   f i r s t ,   i t   w a s   a i m e d   a t   e v a l u a t i n g   t h e   r e s e a r c h   e f f o r t   d e v o t e d   t o   " u n d e r s t a n d i n g   c h e m i c a l   r e a c t i o n s "   b o t h   i n   F r a n c e   a n d   t h r o u g h o u t   t h e   w o r l d ;   s e c o n d ,   i t   w a s   d e s i g n e d   t o   t e s t   t h e   u s e f u l n e s s   o f   b i b l i o m e t r i c   t e c h n i q u e s   f o r   s t r a t e g i c   a n a l y s i s .   O n e   f e a t u r e   o f   t h i s   a r t i c l e   m e r i t s   s p e c i a l   a t t e n t i o n .   I t   i s   c o - s i g n e d   b y   t h e   r e s e a r c h e r s   w h o   c a r r i e d   o u t   t h e   s t u d y   a n d   b y   t h e   p o l i c y   m a k e r s   f o r   w h o m   i t   w a s   i n t e n d e d .   1 	 I N I S T , D E P T   R E C H   &   P R O D   N O U V E A U X , C N R S , F - 7 5 9 7 1   P A R I S   2 0 , F R A N C E ;   E C O L E   S U P E R   P H Y S   &   C H I M   I N D , S E R V   A N A L   G R P , C N R S , F - 7 5 0 0 7   P A R I S , F R A N C E 	 B A U I N ,   S   ( r e p r i n t   a u t h o r ) ,   D P P B , U N I T E   I N D I C A T E U R S   P O L I T   S C I , C N R S , 1 5   Q U A I   A N A T O L E   F R A N C E , F - 7 5 7 0 0   P A R I S , F R A N C E . 	 	 	 	 	 	 A R V A N I T I S   R ,   1 9 8 6 ,   D O C U M E N T A T I O N   F R A N C A ,   P 8 9 ;   B A U I N   S ,   1 9 8 7 ,   C O M P R E N D R E   R E A C T I O N ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C A L L O N   M ,   1 9 8 6 ,   M A P P I N G   D I N A M I C S   S C I ;   C A L L O N   M ,   1 9 8 7 ,   R E C H E R C H E ,   V 1 8 1 ,   P 4 1 2 ;   C A R P E N T E R   M P ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 2 1 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 7 6 ;   C H A R T R O N   G ,   1 9 8 9 ,   J   I N F O R M A T I O N   S C I ,   V 1 5 ;   * C N R S ,   1 9 8 6 ,   S C H   D I R   P O L   G E N   1 9 8 6 ,   P 1 9 6 ;   L A T O U R   B ,   1 9 7 9 ,   L A B O R A T O R Y   L I F E   S O C I ;   L A W   J ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 0 7 8 ;   P i m e n t e l   G .   C . ,   1 9 8 5 ,   O P P O R T U N I T I E S   C H E M ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 7 ;   S M A L L   H ,   1 9 8 5 ,   J   I N F O R M   S C I ,   V 1 1 ,   P 1 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 5 0 1 1 0 0 4 0 2 	 1 5 	 1 6 	 2 0 	 0 	 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 1 9 9 1 	 2 2 	 1 	 	 	 	 	 1 1 3 	 1 3 7 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 7 8 	 	 2 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 G E 8 2 3 	 W O S : A 1 9 9 1 G E 8 2 3 0 0 0 0 7 	 	 
 
 J 	 P A I S L E Y ,   W 	 	 	 	 P A I S L E Y ,   W 	 	 	 B I B L I O M E T R I C S ,   S C H O L A R L Y   C O M M U N I C A T I O N ,   A N D   C O M M U N I C A T I O N - R E S E A R C H 	 C O M M U N I C A T I O N   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 P A I S L E Y ,   W   ( r e p r i n t   a u t h o r ) ,   K N O W L E D G E   A C C E S S   I N T , M T   V I E W , C A ,   U S A . 	 	 	 	 	 	 A s i m o v   I . ,   1 9 6 3 ,   G E N E T I C   C O D E ;   B e r e l s o n   B e r n a r d ,   1 9 5 2 ,   C O N T E N T   A N A L   C O M M U N I ;   B O N N S T E T T E R   C M ,   1 9 8 6 ,   J O U R N A L I S M   Q U A R T ,   V 6 3 ,   P 6 2 3 ;   C O H E N   W ,   1 9 6 8 ,   S O C I A L   R E P O R T ;   C O M P T O N   B ,   1 9 7 3 ,   H D B   C O M M U N I C A T I O N ;   C R A N E   D ,   1 9 6 7 ,   A M   S O C I O L ,   V 2 ,   P 1 9 5 ;   C u t l i p   S M ,   1 9 5 4 ,   J O U R N A L I S M   Q U A R T ,   V 3 1 ,   P 4 3 4 ;   D A H L I N G   R L ,   1 9 6 2 ,   S T U D I E S   I N N O V A T I O N   C ,   P 1 1 8 ;   * F R A N C E   N A T   R E S   C O ,   1 9 8 9 ,   D E S C   P A S C   D A T   P R O V   A ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G A R V E Y   W D ,   1 9 6 8 ,   F R O N T   L I B R A R I A N S H - S Y ,   P 1 2 9 ;   G A R V E Y   W D ,   1 9 6 5 ,   A M   P S Y C H O L ,   V 2 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 1 7 1 1 ;   G E R B N E R   G ,   1 9 7 6 ,   J   C O M M U N ,   V 2 6 ,   P 1 7 3 ;   J A N O W I T Z   M ,   1 9 7 6 ,   J   C O M M U N ,   V 2 6 ,   P 1 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 0 - 2 4 6 6 . 1 9 7 6 . t b 0 1 9 3 0 . x ;   K u h n   T h o m a s ,   1 9 7 0 ,   S T R U C T U R E   S C I   R E V O L U ;   L I P P M A N N   W ,   1 9 2 0 ,   N E W   R E P U B L I C   S     0 8 0 4 ;   M C C O R M A C K   T ,   1 9 8 2 ,   S T U D I E S   C O M M U N I C A T I O ,   P 1 5 7 ;   M E R T O N   R O B E R T   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I ;   M e r t o n   R o b e r t   K . ,   1 9 4 6 ,   M A S S   P E R S U A S I O N   S O C I ;   M I L L E R   T ,   1 9 8 8 ,   G A N N E T T   C T R   J ,   V 2 ,   P 2 4 ;   P a i s l e y   W . ,   1 9 8 9 ,   P U B L I C   C O M M U N I C A T I O N ,   P 1 5 ;   P a i s l e y   W .   J . ,   1 9 8 4 ,   P R O G R   C O M M U N I C A T I O N ,   V 5 ,   P 1 ;   P A R K E R   E B ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 6 1 ,   D O I   1 0 . 1 0 3 7 / h 0 0 2 4 0 5 7 ;   P A R K E R   E B ,   1 9 6 7 ,   B I B L I O   C I T A T I O N S   U N O ;   P A T T E R S O N   O ,   1 9 8 4 ,   J   B R O A D C A S T I N G ,   V 2 8 ,   P 3 9 7 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R E E V E S   B ,   1 9 8 3 ,   H U M   C O M M U N   R E S ,   V 1 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 3 . t b 0 0 0 0 7 . x ;   R i c e   R . ,   1 9 8 4 ,   N E W   M E D I A   C O M M U N I C A T ;   R I C E   R E ,   1 9 8 8 ,   H U M   C O M M U N   R E S ,   V 1 5 ,   P 2 5 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 9 5 8 . 1 9 8 8 . t b 0 0 1 8 4 . x ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S P A R K E S   V M ,   1 9 7 8 ,   J O U R N A L I S M   Q U A R T ,   V 5 5 ,   P 2 6 0 ;   W a t s o n   J .   D . ,   1 9 6 8 ,   D O U B L E   H E L I X ;   W e i n b e r g   S . ,   1 9 7 7 ,   1   3   M I N U T E S ;   W h i t e   D M ,   1 9 5 0 ,   J O U R N A L I S M   Q U A R T ,   V 2 7 ,   P 3 8 3 ;   W I T T   W ,   1 9 7 2 ,   J O U R N A L I S M   Q U A R T ,   V 4 9 ,   P 9 1 	 3 5 	 1 6 	 1 6 	 1 	 8 	 S A G E   S C I E N C E   P R E S S 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0 	 0 0 9 3 - 6 5 0 2 	 	 	 C O M M U N   R E S 	 C o m m u n .   R e s . 	 O C T 	 1 9 8 9 	 1 6 	 5 	 	 	 	 	 7 0 1 	 7 1 7 	 	 1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 1 0 	 	 1 7 	 C o m m u n i c a t i o n 	 C o m m u n i c a t i o n 	 A U 9 7 8 	 W O S : A 1 9 8 9 A U 9 7 8 0 0 0 1 0 	 	 
 
 J 	 P E R S S O N ,   O 	 	 	 	 P E R S S O N ,   O 	 	 	 O N L I N E   B I B L I O M E T R I C S   -   A   R E S E A R C H   T O O L   F O R   E V E R Y   M A N 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 P E R S S O N ,   O   ( r e p r i n t   a u t h o r ) ,   U M E A   U N I V , I N F O R S K   D E P T   S O C I O L , S - 9 0 1 8 7   U M E A , S W E D E N . 	 	 P e r s s o n ,   O l l e / A - 8 7 0 8 - 2 0 1 1 ;   L u n d g r e n ,   M a r i t h a / A - 8 8 4 6 - 2 0 1 1 	 	 	 	 B A K K E R   C J ,   1 9 7 7 ,   S C I   P U B L   P O L           D E C ,   P 5 6 3 ;   H A W K I N S   D T ,   1 9 7 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 8 ,   P 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 8 0 1 0 3 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   T O D O R O V   R ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 9 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 4 6 ;   V L A C H Y   J ,   1 9 7 9 ,   C Z E C H   J   P H Y S ,   V 2 9 ,   P 8 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 7 9 7 6 4 7 	 5 	 1 6 	 1 6 	 0 	 3 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J U L 	 1 9 8 6 	 1 0 	 1 - 2 	 	 	 	 	 6 9 	 7 5 	 	 1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 6 1 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 D 2 6 6 7 	 W O S : A 1 9 8 6 D 2 6 6 7 0 0 0 0 6 	 	 
 
 J 	 M a r x ,   W ;   B o r n m a n n ,   L 	 	 	 	 M a r x ,   W e r n e r ;   B o r n m a n n ,   L u t z 	 	 	 O n   t h e   c a u s e s   o f   s u b j e c t - s p e c i f i c   c i t a t i o n   r a t e s   i n   W e b   o f   S c i e n c e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 W e b   o f   S c i e n c e ;   C i t a t i o n   a n a l y s i s ;   S u b j e c t - s p e c i f i c   c i t a t i o n   r a t e s ;   D a t a b a s e   c o v e r a g e ;   F r a c t i o n   o f   l i n k e d   r e f e r e n c e s ;   H u m a n i t i e s 	 I M P A C T   F A C T O R 	 I t   i s   w e l l   k n o w n   i n   b i b l i o m e t r i c s   t h a t   t h e   a v e r a g e   n u m b e r   o f   c i t a t i o n s   p e r   p a p e r   d i f f e r s   g r e a t l y   b e t w e e n   t h e   v a r i o u s   d i s c i p l i n e s .   T h e   d i f f e r i n g   c i t a t i o n   c u l t u r e   ( i n   p a r t i c u l a r   t h e   d i f f e r e n t   a v e r a g e   n u m b e r   o f   r e f e r e n c e s   p e r   p a p e r   a n d   t h e r e b y   t h e   d i f f e r e n t   p r o b a b i l i t y   o f   b e i n g   c i t e d )   i s   w i d e l y   s e e n   a s   t h e   c a u s e   o f   t h i s   v a r i a t i o n .   B a s e d   o n   a l l   W e b   o f   S c i e n c e   ( W o S )   r e c o r d s   p u b l i s h e d   i n   1 9 9 0 ,   1 9 9 5 ,   2 0 0 0 ,   2 0 0 5 ,   a n d   2 0 1 0   w e   d e m o n s t r a t e   t h a t   a l m o s t   a l l   d i s c i p l i n e s   s h o w   s i m i l a r   n u m b e r s   o f   r e f e r e n c e s   i n   t h e   a p p e n d i c e s   o f   t h e i r   p a p e r s .   O u r   r e s u l t s   s u g g e s t   t h a t   t h e   a v e r a g e   c i t a t i o n   r a t e   i s   f a r   m o r e   i n f l u e n c e d   b y   t h e   e x t e n t   t o   w h i c h   t h e   p a p e r s   ( c i t e d   a s   r e f e r e n c e s )   a r e   i n c l u d e d   i n   W o S   a s   l i n k e d   d a t a b a s e   r e c o r d s .   F o r   e x a m p l e ,   t h e   c o m p a r a t i v e l y   l o w   c i t a t i o n   r a t e s   i n   t h e   h u m a n i t i e s   a r e   n o t   a t   a l l   t h e   r e s u l t   o f   a   l o w e r   a v e r a g e   n u m b e r   o f   r e f e r e n c e s   p e r   p a p e r   b u t   a r e   c a u s e d   b y   t h e   l o w   f r a c t i o n   o f   l i n k e d   r e f e r e n c e s   w h i c h   r e f e r   t o   p a p e r s   p u b l i s h e d   i n   t h e   c o r e   j o u r n a l s   c o v e r e d   b y   W o S . 	 [ M a r x ,   W e r n e r ]   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y ;   [ B o r n m a n n ,   L u t z ]   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y 	 M a r x ,   W   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   H e i s e n b e r g s t r   1 ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y . 	 w . m a r x @ f k f . m p g . d e ;   b o r n m a n n @ g v . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 	 	 	 A l t h o u s e   B M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 3 6 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   L a n c h o - B a r r a n t e s   B S ,   2 0 1 0 ,   J   I N F   S C I ,   V 3 6 ,   P 3 7 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 1 0 3 6 6 0 7 7 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   N e u h a u s   C ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 7 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 6 0 	 6 	 1 5 	 1 5 	 1 1 	 4 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 5 	 1 0 2 	 2 	 	 	 	 	 1 8 2 3 	 1 8 2 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 4 - 1 4 9 9 - 9 	 	 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A Z 6 I S 	 W O S : 0 0 0 3 4 8 3 2 4 0 0 0 0 4 0 	 	 
 
 J 	 G a r o u s i ,   V ;   M e s b a h ,   A ;   B e t i n - C a n ,   A ;   M i r s h o k r a i e ,   S 	 	 	 	 G a r o u s i ,   V a h i d ;   M e s b a h ,   A l i ;   B e t i n - C a n ,   A y s u ;   M i r s h o k r a i e ,   S h a b n a m 	 	 	 A   s y s t e m a t i c   m a p p i n g   s t u d y   o f   w e b   a p p l i c a t i o n   t e s t i n g 	 I N F O R M A T I O N   A N D   S O F T W A R E   T E C H N O L O G Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 S y s t e m a t i c   m a p p i n g ;   W e b   a p p l i c a t i o n ;   T e s t i n g ;   P a p e r   r e p o s i t o r y ;   B i b l i o m e t r i c s 	 S O F T W A R E   E N G I N E E R I N G   S C H O L A R S ;   U S E R - S E S S I O N   D A T A ;   P O R T A L   A P P L I C A T I O N S ;   I N P U T - V A L I D A T I O N ;   I N S T I T U T I O N S ;   F R A M E W O R K ;   A U T O M A T E 	 C o n t e x t :   T h e   W e b   h a s   h a d   a   s i g n i f i c a n t   i m p a c t   o n   a l l   a s p e c t s   o f   o u r   s o c i e t y .   A s   o u r   s o c i e t y   r e l i e s   m o r e   a n d   m o r e   o n   t h e   W e b ,   t h e   d e p e n d a b i l i t y   o f   w e b   a p p l i c a t i o n s   h a s   b e c o m e   i n c r e a s i n g l y   i m p o r t a n t .   T o   m a k e   t h e s e   a p p l i c a t i o n s   m o r e   d e p e n d a b l e ,   f o r   t h e   p a s t   d e c a d e   r e s e a r c h e r s   h a v e   p r o p o s e d   v a r i o u s   t e c h n i q u e s   f o r   t e s t i n g   w e b - b a s e d   s o f t w a r e   a p p l i c a t i o n s .   O u r   l i t e r a t u r e   s e a r c h   f o r   r e l a t e d   s t u d i e s   r e t r i e v e d   1 4 7   p a p e r s   i n   t h e   a r e a   o f   w e b   a p p l i c a t i o n   t e s t i n g ,   w h i c h   h a v e   a p p e a r e d   b e t w e e n   2 0 0 0   a n d   2 0 1 1 .   O b j e c t i v e :   A s   t h i s   r e s e a r c h   a r e a   m a t u r e s   a n d   t h e   n u m b e r   o f   r e l a t e d   p a p e r s   i n c r e a s e s ,   i t   i s   i m p o r t a n t   t o   s y s t e m a t i c a l l y   i d e n t i f y ,   a n a l y z e ,   a n d   c l a s s i f y   t h e   p u b l i c a t i o n s   a n d   p r o v i d e   a n   o v e r v i e w   o f   t h e   t r e n d s   i n   t h i s   s p e c i a l i z e d   f i e l d .   M e t h o d :   W e   r e v i e w   a n d   s t r u c t u r e   t h e   b o d y   o f   k n o w l e d g e   r e l a t e d   t o   w e b   a p p l i c a t i o n   t e s t i n g   t h r o u g h   a   s y s t e m a t i c   m a p p i n g   ( S M )   s t u d y .   A s   p a r t   o f   t h i s   s t u d y ,   w e   p o s e   t w o   s e t s   o f   r e s e a r c h   q u e s t i o n s ,   d e f i n e   s e l e c t i o n   a n d   e x c l u s i o n   c r i t e r i a ,   a n d   s y s t e m a t i c a l l y   d e v e l o p   a n d   r e f i n e   a   c l a s s i f i c a t i o n   s c h e m a .   I n   a d d i t i o n ,   w e   c o n d u c t   a   b i b l i o m e t r i c s   a n a l y s i s   o f   t h e   p a p e r s   i n c l u d e d   i n   o u r   s t u d y .   R e s u l t s :   O u r   s t u d y   i n c l u d e s   a   s e t   o f   7 9   p a p e r s   ( f r o m   t h e   1 4 7   r e t r i e v e d   p a p e r s )   p u b l i s h e d   i n   t h e   a r e a   o f   w e b   a p p l i c a t i o n   t e s t i n g   b e t w e e n   2 0 0 0   a n d   2 0 1 1 .   W e   p r e s e n t   t h e   r e s u l t s   o f   o u r   s y s t e m a t i c   m a p p i n g   s t u d y .   O u r   m a p p i n g   d a t a   i s   a v a i l a b l e   t h r o u g h   a   p u b l i c l y - a c c e s s i b l e   r e p o s i t o r y .   W e   d e r i v e   t h e   o b s e r v e d   t r e n d s ,   f o r   i n s t a n c e ,   i n   t e r m s   o f   t y p e s   o f   p a p e r s ,   s o u r c e s   o f   i n f o r m a t i o n   t o   d e r i v e   t e s t   c a s e s ,   a n d   t y p e s   o f   e v a l u a t i o n s   u s e d   i n   p a p e r s .   W e   a l s o   r e p o r t   t h e   d e m o g r a p h i c s   a n d   b i b l i o m e t r i c s   t r e n d s   i n   t h i s   d o m a i n ,   i n c l u d i n g   t o p - c i t e d   p a p e r s ,   a c t i v e   c o u n t r i e s   a n d   r e s e a r c h e r s ,   a n d   t o p   v e n u e s   i n   t h i s   r e s e a r c h   a r e a .   C o n c l u s i o n :   W e   d i s c u s s   t h e   e m e r g i n g   t r e n d s   i n   w e b   a p p l i c a t i o n   t e s t i n g ,   a n d   d i s c u s s   t h e   i m p l i c a t i o n s   f o r   r e s e a r c h e r s   a n d   p r a c t i t i o n e r s   i n   t h i s   a r e a .   T h e   r e s u l t s   o f   o u r   s y s t e m a t i c   m a p p i n g   c a n   h e l p   r e s e a r c h e r s   t o   o b t a i n   a n   o v e r v i e w   o f   e x i s t i n g   w e b   a p p l i c a t i o n   t e s t i n g   a p p r o a c h e s   a n d   i n d e n t i f y   a r e a s   i n   t h e   f i e l d   t h a t   r e q u i r e   m o r e   a t t e n t i o n   f r o m   t h e   r e s e a r c h   c o m m u n i t y .   ( C )   2 0 1 3   E l s e v i e r   B . V .   A l l   r i g h t s   r e s e r v e d . 	 [ G a r o u s i ,   V a h i d ]   U n i v   C a l g a r y ,   C a l g a r y ,   A B ,   C a n a d a ;   [ M e s b a h ,   A l i ;   M i r s h o k r a i e ,   S h a b n a m ]   U n i v   B r i t i s h   C o l u m b i a ,   V a n c o u v e r ,   B C   V 5 Z   1 M 9 ,   C a n a d a ;   [ G a r o u s i ,   V a h i d ;   B e t i n - C a n ,   A y s u ]   M i d d l e   E   T e c h   U n i v ,   I n s t   I n f o r m a t ,   T R - 0 6 5 3 1   A n k a r a ,   T u r k e y 	 G a r o u s i ,   V   ( r e p r i n t   a u t h o r ) ,   U n i v   C a l g a r y ,   C a l g a r y ,   A B ,   C a n a d a . 	 v g a r o u s i @ u c a l g a r y . c a ;   a m e s b a h @ e c e . u b c . c a ;   b e t i n c a n @ m e t u . e d u . t r ;   s h a b n a m m @ e c e . u b c . c a 	 B e t i n   C a n ,   A y s u / C - 2 0 3 5 - 2 0 1 3 ;   	 B e t i n   C a n ,   A y s u / 0 0 0 0 - 0 0 0 2 - 4 8 2 8 - 0 1 9 0 ;   G a r o u s i ,   V a h i d / 0 0 0 0 - 0 0 0 1 - 6 5 9 0 - 7 5 7 6 	 N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   R e s e a r c h   C o u n c i l   o f   C a n a d a   ( N S E R C )   [ 3 4 1 5 1 1 - 0 7 ] ;   S c i e n t i f i c   a n d   T e c h n o l o g i c a l   R e s e a r c h   C o u n c i l   o f   T u r k e y   ( T U B I T A K )   [ 2 2 2 1 ] ;   N S E R C 	 V a h i d   G a r o u s i   w a s   s u p p o r t e d   b y   t h e   D i s c o v e r y   G r a n t   # 3 4 1 5 1 1 - 0 7   f r o m   t h e   N a t u r a l   S c i e n c e s   a n d   E n g i n e e r i n g   R e s e a r c h   C o u n c i l   o f   C a n a d a   ( N S E R C ) ,   a n d   a l s o   b y   t h e   V i s i t i n g   S c i e n t i s t   F e l l o w s h i p   P r o g r a m   ( # 2 2 2 1 )   o f   t h e   S c i e n t i f i c   a n d   T e c h n o l o g i c a l   R e s e a r c h   C o u n c i l   o f   T u r k e y   ( T U B I T A K ) .   A l i   M e s b a h   w a s   s u p p o r t e d   b y   N S E R C   t h r o u g h   i t s   D i s c o v e r y   a n d   S t r a t e g i c   P r o j e c t   G r a n t s   p r o g r a m m e s . 	 A f z a l   W . ,   2 0 0 8 ,   2 0   I N T   C   S O F T W   E N G   K ;   A f z a l   W ,   2 0 0 9 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 1 ,   P 9 5 7 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 8 . 1 2 . 0 0 5 ;   A l a l f i   M   H ,   2 0 1 0 ,   P r o c e e d i n g s   o f   t h e   1 4 t h   E u r o p e a n   C o n f e r e n c e   o n   S o f t w a r e   M a i n t e n a n c e   a n d   R e e n g i n e e r i n g   ( C S M R   2 0 1 0 ) ,   D O I   1 0 . 1 1 0 9 / C S M R . 2 0 1 0 . 2 1 ;   A l a l f i   M H ,   2 0 0 9 ,   S O F T W   T E S T   V E R I F   R E L ,   V 1 9 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / s t v r . 4 0 1 ;   A l i   S ,   2 0 1 0 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 6 ,   P 7 4 2 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 0 9 . 5 2 ;   A l s h a h w a n   N ,   2 0 0 9 ,   P r o c e e d i n g s   o f   t h e   2 0 0 9   1 1 t h   I E E E   I n t e r n a t i o n a l   S y m p o s i u m   o n   W e b   S y s t e m s   E v o l u t i o n   ( W S E   2 0 0 9 ) ,   D O I   1 0 . 1 1 0 9 / W S E . 2 0 0 9 . 5 6 3 0 3 9 3 ;   A l s h a w a n   N . ,   2 0 0 8 ,   P   I N T   C   S O F T W   T E S T   V ,   P 2 9 8 ;   A m a l f i t a n o   D ,   2 0 1 0 ,   P r o c e e d i n g s   o f   t h e   1 2 t h   I E E E   I n t e r n a t i o n a l   S y m p o s i u m   o n   W e b   S y s t e m s   E v o l u t i o n   ( W S E   2 0 1 0 ) ,   P 6 3 ,   D O I   1 0 . 1 1 0 9 / W S E . 2 0 1 0 . 5 6 2 3 5 6 9 ;   A m a l f i t a n o   D o m e n i c o ,   2 0 1 0 ,   P r o c e e d i n g s   o f   t h e   I E E E   T h i r d   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S o f t w a r e   T e s t i n g   V e r i f i c a t i o n   a n d   V a l i d a t i o n   -   W o r k s h o p s   ( I C S T W   2 0 1 0 ) ,   P 2 7 4 ,   D O I   1 0 . 1 1 0 9 / I C S T W . 2 0 1 0 . 3 4 ;   A m m a n n   P . ,   2 0 0 8 ,   I N T R O   S O F T W A R E   T E S T I ;   A m y o t   D ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 5 3 0 ,   P 2 4 7 ;   A n d r e w s   A ,   2 0 0 5 ,   S O F T W A R E   S Y S T E M S   M O D ,   V 4 ,   P 3 2 6 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 0 2 7 0 - 0 0 4 - 0 0 7 7 - 7 ;   A n d r e w s   A A ,   2 0 1 0 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 2 ,   P 5 2 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 9 . 0 6 . 0 0 2 ;   A r c h a m b a u l t   E . ,   3 0   Y E A R S   S C I   S E C U L A R ;   A r t z i   S . ,   2 0 1 0 ,   P   I N T   C   S O F T W   E N G   I C ,   P 2 6 5 ;   A r t z i   S . ,   2 0 0 8 ,   P   I N T   S   S O F T W   T E S T   A ,   P 2 6 1 ,   D O I   1 0 . 1 1 4 5 / 1 3 9 0 6 3 0 . 1 3 9 0 6 6 2 ;   A r t z i   S ,   2 0 1 1 ,   2 0 1 1   3 3 R D   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   E N G I N E E R I N G   ( I C S E ) ,   P 5 7 1 ,   D O I   1 0 . 1 1 4 5 / 1 9 8 5 7 9 3 . 1 9 8 5 8 7 1 ;   B a j w a   H ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 5 7 9 ,   P 6 0 3 ;   B a n e r j e e   I . ,   G R A P H I C A L   U S E R   I N T E R ;   B a r m i   Z A ,   2 0 1 1 ,   P   2 0 1 1   I E E E   4   I N T   C ,   P 4 7 6 ;   B e l l e t t i n i   C . ,   2 0 0 5 ,   P   2 0 0 5   A C M   S   A P P L   C O ,   P 1 6 9 4 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 6 6 7 7 . 1 0 6 7 0 6 0 ;   B e n e d i k t   M . ,   2 0 0 2 ,   P   1 1   I N T   W O R L D   W I D   W ;   B i n d e r   R . V . ,   1 9 9 7 ,   P   T O O L S   2 3   T E C H N   O B J ,   P 3 7 4 ;   B o r d b a r   B ,   2 0 0 6 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 8 8 8 ,   P 4 4 ;   B o z k u r t   M . ,   2 0 1 0 ,   T R 1 0 0 1   K I N G S   C O L L   L O ;   B r o w n   C .   T . ,   2 0 0 7 ,   I N T R O   T E S T I N G   W E B   A P ;   B u d g e n   D a v i d ,   2 0 0 8 ,   P   P P I G   2 0 0 8   L A N C   U ,   P 1 9 5 ;   C a n f o r a   G . ,   2 0 0 8 ,   I S S S E ,   P 7 8 ;   C o r n e l i s s e n   B ,   2 0 0 9 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 5 ,   P 6 8 4 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 0 9 . 2 8 ;   N e t o   P A D S ,   2 0 1 1 ,   I E E E   S O F T W A R E ,   V 2 8 ,   P 1 6 ,   D O I   1 0 . 1 1 0 9 / M S . 2 0 1 1 . 9 0 ;   d e   M a t o s   E r n e s t o   C i d   B r a s i l ,   2 0 1 0 ,   I n n o v a t i o n s   i n   S y s t e m s   a n d   S o f t w a r e   E n g i n e e r i n g ,   V 6 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 3 3 4 - 0 0 9 - 0 1 1 2 - 5 ;   L u c c a   G A ,   2 0 0 6 ,   I E E E   I N T L   S Y M P O S   W E B ,   P 7 ;   D i   L u c c a   G A ,   2 0 0 6 ,   I N F O R M   S O F T W A R E   T E C H ,   V 4 8 ,   P 1 1 7 2 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 6 . 0 6 . 0 0 6 ;   D o b o l y i   K i n g a ,   2 0 1 1 ,   I n t e r n a t i o n a l   J o u r n a l   o n   S o f t w a r e   T o o l s   f o r   T e c h n o l o g y   T r a n s f e r ,   V 1 3 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 9 - 0 1 0 - 0 1 7 0 - x ;   D o b o l y i   K . ,   2 0 1 0 ,   P   1 9   I N T   S   S O F T W   T E S ,   P 9 7 ,   D O I   1 0 . 1 1 4 5 / 1 8 3 1 7 0 8 . 1 8 3 1 7 2 0 ;   E l b a u m   S ,   2 0 0 5 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 1 ,   P 1 8 7 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 0 5 . 3 6 ;   E l b e r z h a g e r   F ,   2 0 1 2 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 4 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 1 . 0 6 . 0 0 3 ;   E n d o   A . ,   2 0 1 0 ,   B R A Z   W O R K S H   S Y S T   A U T ;   E n g s t r o m   E ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 2 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 0 5 . 0 1 1 ;   E n g s t r o m   E ,   2 0 1 0 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 2 ,   P 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 9 . 0 7 . 0 0 1 ;   E r n i t s   J ,   2 0 0 9 ,   L E C T   N O T E S   C O M P U T   S C ,   V 5 8 2 6 ,   P 2 1 1 ;   E t t e m a   T . ,   2 0 1 0 ,   P   I E E E   A C M   I N T   C   A U T ,   P 2 3 5 ;   G a r o u s i   V . ,   S Y S T E M A T I C   M A P P I N G   W ;   G a r o u s i   V . ,   2 0 1 0 ,   C A N A D I A N   J   C O M P U T E R ,   V 3 ,   P 1 9 ;   G a r r e t t   J . J . ,   2 0 0 5 ,   A J A X   N E W   A P P R O A C H   W E ;   G e r l i t s   Y . ,   2 0 1 0 ,   P   4   S P R I N G   S U M M   Y O U N ,   P 5 0 ;   G l a s s   R L ,   2 0 0 5 ,   J   S Y S T   S O F T W A R E ,   V 7 6 ,   P 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j s s . 2 0 0 4 . 0 8 . 0 1 8 ;   G l a s s   R L ,   2 0 0 3 ,   J   S Y S T   S O F T W A R E ,   V 6 8 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 4 - 1 2 1 2 ( 0 3 ) 0 0 2 3 2 - 2 ;   G r i n d a l   M ,   2 0 0 5 ,   S O F T W   T E S T   V E R I F   R E L ,   V 1 5 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 2 / s t v r . 3 1 9 ;   H a l f o n d   W . G . ,   2 0 0 8 ,   P   1 6   I N T   S   F D N   S O F T W ,   P 1 8 1 ,   D O I   1 0 . 1 1 4 5 / 1 4 5 3 1 0 1 . 1 4 5 3 1 2 6 ;   H a l f o n d   W .   G .   J . ,   2 0 0 7 ,   P   J O I N T   M   E U R   S O F T W ,   P 1 4 5 ,   D O I   1 0 . 1 1 4 5 / 1 2 8 7 6 2 4 . 1 2 8 7 6 4 6 ;   H a l f o n d   W G J ,   2 0 0 9 ,   I S S T A   2 0 0 9 :   I N T E R N A T I O N A L   S Y M P O S I U M   O N   S O F T W A R E   T E S T I N G   A N D   A N A L Y S I S ,   P 2 8 5 ;   H a o   J . ,   2 0 0 6 ,   P   6   I N T   C   W E B   E N G   I C ,   P 1 7 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 5 5 8 1 . 1 1 4 5 5 8 5 ;   H e l l m a n n   T . D . ,   2 0 1 0 ,   A G I L E   I N T E R A C T I O N   D E ,   V 9 ;   J e n s e n   S .   H . ,   2 0 1 1 ,   P   A C M   S I G S O F T   S   E U R ,   P 5 9 ;   J i a   Y . ,   M U T A T I O N   T E S T I N G   R E P ;   J i a   Y ,   2 0 1 1 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 7 ,   P 6 4 9 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 1 0 . 6 2 ;   J u r i s t o   N ,   2 0 0 4 ,   E M P I R   S O F T W   E N G ,   V 9 ,   P 7 ,   D O I   1 0 . 1 0 2 3 / B : E M S E . 0 0 0 0 0 1 3 5 1 3 . 4 8 9 6 3 . 1 b ;   K a l l e p a l l i   C ,   2 0 0 1 ,   I E E E   T   S O F T W A R E   E N G ,   V 2 7 ,   P 1 0 2 3 ,   D O I   1 0 . 1 1 0 9 / 3 2 . 9 6 5 3 4 2 ;   K i t c h e n h a m   B . ,   2 0 0 7 ,   2 0 0 7 0 0 1   E B S E   K E E L   U ;   K i t c h e n h a m   B . ,   2 0 1 0 ,   P   E V   A S S   S O F T W   E N G ;   K i t c h e n h a m   B A ,   2 0 0 4 ,   P R O C   I N T   C O N F   S O F T W ,   P 2 7 3 ,   D O I   1 0 . 1 1 0 9 / I C S E . 2 0 0 4 . 1 3 1 7 4 4 9 ;   K i t c h e n h a m   B A ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 6 3 8 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 1 2 . 0 1 1 ;   K o o p m a n   P ,   2 0 0 8 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 9 0 2 ,   P 2 9 9 ;   L i   N ,   2 0 1 0 ,   J   S Y S T   S O F T W A R E ,   V 8 3 ,   P 2 2 6 3 ,   D O I   1 0 . 1 0 1 6 / j . j s s . 2 0 1 0 . 0 7 . 0 0 7 ;   L i c a t a   D R ,   2 0 0 4 ,   1 9 T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   A U T O M A T E D   S O F T W A R E   E N G I N E E R I N G ,   P R O C E E D I N G S ,   P 1 6 4 ,   D O I   1 0 . 1 1 0 9 / A S E . 2 0 0 4 . 1 3 4 2 7 3 4 ;   L i u   C H ,   2 0 0 6 ,   I N F O R M   S O F T W A R E   T E C H ,   V 4 8 ,   P 1 1 3 7 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 6 . 0 6 . 0 0 3 ;   L i u   H ,   2 0 0 8 ,   J   S Y S T   S O F T W A R E ,   V 8 1 ,   P 2 2 2 ,   D O I   1 0 . 1 0 1 6 / j . j s s . 2 0 0 7 . 0 5 . 0 0 7 ;   L u c c a   G . D . ,   2 0 0 2 ,   P   I N T   C   S O F T W   M A I N T ,   P 3 1 0 ;   L u o   X M ,   2 0 0 9 ,   S E C O N D   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   T E S T I N G ,   V E R I F I C A T I O N ,   A N D   V A L I D A T I O N ,   P R O C E E D I N G S ,   P 3 3 6 ,   D O I   1 0 . 1 1 0 9 / I C S T . 2 0 0 9 . 5 1 ;   M a n s o u r   N ,   2 0 0 6 ,   I N F O R M   S O F T W A R E   T E C H ,   V 4 8 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 5 . 0 2 . 0 0 7 ;   M a r c h e t t o   A l e s s a n d r o ,   2 0 1 1 ,   I n t e r n a t i o n a l   J o u r n a l   o n   S o f t w a r e   T o o l s   f o r   T e c h n o l o g y   T r a n s f e r ,   V 1 3 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 9 - 0 1 0 - 0 1 7 7 - 3 ;   M a r c h e t t o   A l e s s a n d r o ,   2 0 0 8 ,   I n t e r n a t i o n a l   J o u r n a l   o n   S o f t w a r e   T o o l s   f o r   T e c h n o l o g y   T r a n s f e r ,   V 1 0 ,   P 4 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 9 - 0 0 8 - 0 0 8 6 - x ;   M a r c h e t t o   A . ,   2 0 0 8 ,   P   I N T   C   S O F T W   T E S T   V ,   P 1 2 1 ,   D O I   D O I   1 0 . 1 1 0 9 / I C S T . 2 0 0 8 . 2 2 ;   M a r c h e t t o   A ,   2 0 0 8 ,   S E R A   2 0 0 8 :   6 T H   A C I S   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   E N G I N E E R I N G   R E S E A R C H ,   M A N A G E M E N T   A N D   A P P L I C A T I O N S ,   P R O C E E D I N G S ,   P 1 6 1 ,   D O I   1 0 . 1 1 0 9 / S E R A . 2 0 0 8 . 1 8 ;   M a r c h e t t o   A ,   2 0 0 7 ,   W S E   2 0 0 7 :   N I N T H   I E E E   I N T E R N A T I O N A L   S Y M P O S I U M   O N   W E B   S I T E   E V O L U T I O N ,   P R O C E E D I N G S ,   P 3 1 ;   M a r c h e t t o   A ,   2 0 1 1 ,   E M P I R   S O F T W   E N G ,   V 1 6 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 6 4 - 0 1 0 - 9 1 4 9 - 1 ;   M a r i c   B . ,   2 0 1 1 ,   P   5   I N T   C   R E S   C H A L L ,   P 1 ;   M c M i n n   P ,   2 0 0 4 ,   S O F T W   T E S T   V E R I F   R E L ,   V 1 4 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 2 / s t v r . 2 9 4 ;   M c M i n n   P h i l ,   2 0 0 4 ,   S O F T W A R E   T E S T I N G   V E R ,   V 1 4 ;   M e m o n   A M ,   2 0 1 0 ,   A D V   C O M P U T ,   V 8 0 ,   P 1 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 6 5 - 2 4 5 8 ( 1 0 ) 8 0 0 0 3 - 8 ;   M e s b a h   A ,   2 0 1 1 ,   2 0 1 1   3 3 R D   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   E N G I N E E R I N G   ( I C S E ) ,   P 5 6 1 ,   D O I   1 0 . 1 1 4 5 / 1 9 8 5 7 9 3 . 1 9 8 5 8 7 0 ;   M e s b a h   A ,   2 0 0 9 ,   P R O C   I N T   C O N F   S O F T W ,   P 2 1 0 ,   D O I   1 0 . 1 1 0 9 / I C S E . 2 0 0 9 . 5 0 7 0 5 2 2 ;   M i n a m i d e   Y . ,   2 0 0 5 ,   P   1 4   I N T   C   W O R L D   W I D ,   P 4 3 2 ,   D O I   1 0 . 1 1 4 5 / 1 0 6 0 7 4 5 . 1 0 6 0 8 0 9 ;   N e t o   C . R . L . ,   2 0 1 2 ,   P   I N T   C   S O F T W   E N G   K N ;   d a   M o t a   S i l v e i r a   N e t o a   P . A . ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ;   O f f u t t   J . ,   2 0 0 4 ,   P   1 5   I N T   S   S O F T W   R E L ,   P 1 8 7 ;   O f f u t t   J ,   2 0 1 0 ,   S O F T W   S Y S T   M O D E L ,   V 9 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 2 7 0 - 0 0 9 - 0 1 2 5 - 4 ;   O z k i n a c i   M E ,   2 0 1 1 ,   I C S O F T   2 0 1 1 :   P R O C E E D I N G S   O F   T H E   6 T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   S O F T W A R E   A N D   D A T A B A S E   T E C H N O L O G I E S ,   V O L   2 ,   P 1 7 2 ;   P a l a c i o s   M ,   2 0 1 1 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 0 . 1 1 . 0 1 4 ;   P a s a r e a n u   C o r i n a   S . ,   2 0 0 9 ,   I n t e r n a t i o n a l   J o u r n a l   o n   S o f t w a r e   T o o l s   f o r   T e c h n o l o g y   T r a n s f e r ,   V 1 1 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 9 - 0 0 9 - 0 1 1 8 - 1 ;   P a t t a b i r a m a n   K . ,   2 0 1 0 ,   P   T H E L   I N T   S   S O F T W   R ;   P e t e r s e n   K . ,   2 0 0 8 ,   1 2   I N T   C   E V   A S S   S O F T ,   P 7 1 ;   P r a p h a m o n t r i p o n g   U p s o r n ,   2 0 1 0 ,   P r o c e e d i n g s   o f   t h e   I E E E   T h i r d   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S o f t w a r e   T e s t i n g   V e r i f i c a t i o n   a n d   V a l i d a t i o n   -   W o r k s h o p s   ( I C S T W   2 0 1 0 ) ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / I C S T W . 2 0 1 0 . 3 8 ;   Q i   Y ,   2 0 0 6 ,   I N F O R M   S O F T W A R E   T E C H ,   V 4 8 ,   P 1 1 5 9 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 6 . 0 6 . 0 0 5 ;   R a f f e l t   H . ,   2 0 0 8 ,   P   2 0 0 8   W O R K S H   T E S T   A ,   P 1 ,   D O I   1 0 . 1 1 4 5 / 1 3 9 0 8 3 2 . 1 3 9 0 8 3 3 ;   R a n   L H ,   2 0 0 9 ,   I N F O R M   S O F T W A R E   T E C H ,   V 5 1 ,   P 4 6 0 ,   D O I   1 0 . 1 0 1 6 / j . i n f s o f . 2 0 0 8 . 0 5 . 0 1 6 ;   R e n   J ,   2 0 0 7 ,   C O M M U N   A C M ,   V 5 0 ,   P 8 1 ,   D O I   1 0 . 1 1 4 5 / 1 2 4 7 0 0 1 . 1 2 4 7 0 1 0 ;   R i c c a   F ,   2 0 0 2 ,   A N N   S O F T W   E N G ,   V 1 4 ,   P 9 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 0 5 4 9 5 0 7 4 1 8 ;   R i c c a   F ,   2 0 0 2 ,   S C A M   2 0 0 2 :   S E C O N D   I E E E   I N T E R N A T I O N A L   W O R K S H O P   O N   S O U R C E   C O D E   A N A L Y S I S   M A N I P U L A T I O N ,   P R O C E E D I N G S ,   P 1 2 3 ,   D O I   1 0 . 1 1 0 9 / S C A M . 2 0 0 2 . 1 1 3 4 1 1 2 ;   R i c c a   F ,   2 0 0 1 ,   P R O C   I N T   C O N F   S O F T W ,   P 2 5 ,   D O I   1 0 . 1 1 0 9 / I C S E . 2 0 0 1 . 9 1 9 0 7 8 ;   R o e s t   D . ,   2 0 1 0 ,   P   3   I N T   C   S O F T W   T E S T ,   P 1 2 8 ;   S a m p a t h   S ,   2 0 0 4 ,   P R O C   I E E E   I N T   C O N F   S ,   P 1 0 4 ,   D O I   1 0 . 1 1 0 9 / I C S M . 2 0 0 4 . 1 3 5 7 7 9 5 ;   S a m p a t h   S ,   2 0 0 4 ,   1 9 T H   I N T E R N A T I O N A L   C O N F E R E N C E   O N   A U T O M A T E D   S O F T W A R E   E N G I N E E R I N G ,   P R O C E E D I N G S ,   P 1 3 2 ,   D O I   1 0 . 1 1 0 9 / A S E . 2 0 0 4 . 1 3 4 2 7 3 1 ;   S a m p a t h   S . ,   2 0 0 6 ,   P   1 7   I N T   S   S O F T W   R E L ,   P 2 6 6 ;   S a m p a t h   S . ,   2 0 0 6 ,   P   W O R K S H   T E S T   A N   V E R ,   P 2 3 ,   D O I   1 0 . 1 1 4 5 / 1 1 4 5 7 1 8 . 1 1 4 5 7 2 2 ;   S a m p a t h   S . ,   2 0 0 8 ,   P   1   I N T   C   S O F T W   T E S T ,   P 1 4 1 ;   S a m p a t h   S ,   2 0 0 7 ,   I E E E   T   S O F T W A R E   E N G ,   V 3 3 ,   P 6 4 3 ,   D O I   1 0 . 1 1 0 9 / T S E . 2 0 0 7 . 7 0 7 2 3 ;   S a x e n a   P ,   2 0 1 0 ,   P   I E E E   S   S E C U R   P R I V ,   P 5 1 3 ,   D O I   1 0 . 1 1 0 9 / S P . 2 0 1 0 . 3 8 ;   S c i a s c i o   E .   D . ,   2 0 0 5 ,   P   5   I N T   C   W E B   E N G   I C ,   P 6 9 ;   S p r e n k l e   S ,   2 0 0 5 ,   P R O C   I E E E   I N T   C O N F   S ,   P 5 8 7 ;   S p r e n k l e   S ,   2 0 1 1 ,   P r o c e e d i n g s   2 0 1 1   I E E E   F o u r t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S o f t w a r e   T e s t i n g ,   V e r i f i c a t i o n   a n d   V a l i d a t i o n   ( I C S T   2 0 1 1 ) ,   P 2 3 0 ,   D O I   1 0 . 1 1 0 9 / I C S T . 2 0 1 1 . 3 4 ;   S p r e n k l e   S . ,   2 0 0 7 ,   P   1 8   I E E E   I N T   S   S W   R ,   P 1 1 7 ;   S p r e n k l e   S ,   2 0 0 8 ,   T A C I   P A R T   2 0 0 8 : T E S T I N G :   A C A D E M I C   A N D   I N D U S T R I A L   C O N F E R E N C E   P R A C T I C E   A N D   R E S E A R C H   T E C H N I Q U E S ,   P R O C E E D I N G S ,   P 8 9 ,   D O I   [ 1 0 . 1 1 0 9 / T A I C - P A R T . 2 0 0 8 . 1 9 ,   1 0 . 1 1 0 9 / T A I C . P A R T . 2 0 0 8 . 1 9 ] ;   S t e p i e n   B e r n a r d ,   2 0 0 8 ,   I n t e r n a t i o n a l   J o u r n a l   o n   S o f t w a r e   T o o l s   f o r   T e c h n o l o g y   T r a n s f e r ,   V 1 0 ,   P 3 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 0 0 9 - 0 0 8 - 0 0 8 2 - 1 ;   T a p p e n d e n   A F ,   2 0 0 9 ,   A C M   T   W E B ,   V 3 ,   D O I   1 0 . 1 1 4 5 / 1 5 4 1 8 2 2 . 1 5 4 1 8 2 4 ;   T i a n   J ,   2 0 0 6 ,   A D V   C O M P U T ,   V 6 7 ,   P 1 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 6 5 - 2 4 5 8 ( 0 5 ) 6 7 0 0 4 - 0 ;   T o n e l l a   P ,   2 0 0 4 ,   W S E   2 0 0 4 :   S I X T H   I E E E   I N T E R N A T I O N A L   W O R K S H O P   O N   W E B   S I T E   E V O L U T I O N ,   P R O C E E D I N G S ,   P 1 1 ,   D O I   1 0 . 1 1 0 9 / W S E . 2 0 0 4 . 1 0 0 1 2 ;   T o n e l l a   P ,   2 0 0 4 ,   J   S O F T W   M A I N T   E V O L - R ,   V 1 6 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 2 / s m r . 2 8 4 ;   T o n e l l a   P . ,   2 0 0 5 ,   A u t o m a t e d   S o f t w a r e   E n g i n e e r i n g ,   V 1 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 1 5 - 0 0 5 - 6 2 0 8 - 8 ;   v a n   D e u r s e n   A ,   2 0 1 0 ,   L E C T   N O T E S   C O M P U T   S C ,   V 5 9 0 1 ,   P 1 6 ;   W a s s e r m a n n   G . ,   2 0 0 8 ,   P   2 0 0 8   I N T   S   S O F T W   T ,   P 2 4 9 ,   D O I   1 0 . 1 1 4 5 / 1 3 9 0 6 3 0 . 1 3 9 0 6 6 1 ;   W h i t t a k e r   J . A ,   2 0 0 9 ,   E X P L O R A T O R Y   S O F T W A R E ;   X i o n g   W L ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 5 7 9 ,   P 8 7 ;   Y a n g   J T ,   2 0 0 2 ,   J   I N F   S C I   E N G ,   V 1 8 ,   P 5 9 ;   Z a k a r i a   Z . ,   2 0 0 9 ,   P   A S   P A C   S O F T W   E N G   C ;   Z h a n g   Y ,   2 0 1 2 ,   R E P O S I T O R Y   P U B L I C A T I ;   Z h e n g   Y .   H . ,   2 0 1 1 ,   P   I N T   C   W O R L D   W I D   W E ,   P 8 0 5 	 1 2 8 	 1 5 	 1 6 	 0 	 1 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 0 9 5 0 - 5 8 4 9 	 1 8 7 3 - 6 0 2 5 	 	 I N F O R M   S O F T W A R E   T E C H 	 I n f .   S o f t w .   T e c h n o l . 	 A U G 	 2 0 1 3 	 5 5 	 8 	 	 	 	 	 1 3 7 4 	 1 3 9 6 	 	 1 0 . 1 0 1 6 / j . i n f s o f . 2 0 1 3 . 0 2 . 0 0 6 	 	 2 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   C o m p u t e r   S c i e n c e ,   S o f t w a r e   E n g i n e e r i n g 	 C o m p u t e r   S c i e n c e 	 1 6 8 D F 	 W O S : 0 0 0 3 2 0 6 8 5 2 0 0 0 0 2 	 	 
 
 J 	 W a n g ,   H J ;   L i u ,   M Y ;   H o n g ,   S ;   Z h u a n g ,   Y H 	 	 	 	 W a n g ,   H a i j u n ;   L i u ,   M i n y a n ;   H o n g ,   S o n g ;   Z h u a n g ,   Y a n h u a 	 	 	 A   h i s t o r i c a l   r e v i e w   a n d   b i b l i o m e t r i c   a n a l y s i s   o f   G P S   r e s e a r c h   f r o m   1 9 9 1 - 2 0 1 0 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   G P S ;   R e s e a r c h   t r e n d s ;   S c i e n t i f i c   o u t p u t s 	 C I T A T I O N   A N A L Y S I S ;   J O U R N A L S ;   W E B 	 W e   p e r f o r m e d   a   b i b l i o m e t r i c   a n a l y s i s   o f   p u b l i s h e d   r e s e a r c h   o n   G l o b a l   P o s i t i o n i n g   S y s t e m   ( G P S )   f o r   t h e   p e r i o d   o f   1 9 9 1 - 2 0 1 0 ,   b a s e d   o n   t h e   S c i e n c e   C i t a t i o n   I n d e x   a n d   S o c i a l   S c i e n c e s   C i t a t i o n   I n d e x   d a t a b a s e s .   O u r   s e a r c h   i d e n t i f i e d   a   t o t a l   o f   1 5 , 7 5 9   G P S - r e l a t e d   p u b l i c a t i o n s   i n   t h e   p e r i o d .   W e   a n a l y z e d   t h e   p a t t e r n s   o f   p u b l i c a t i o n   o u t p u t s ,   s u b j e c t   c a t e g o r i e s   a n d   m a j o r   j o u r n a l s ,   i n t e r n a t i o n a l   p r o d u c t i v i t y   a n d   c o l l a b o r a t i o n ,   g e o g r a p h i c   d i s t r i b u t i o n   o f   a u t h o r s ,   a n d   a u t h o r   k e y w o r d s .   T h e   a n n u a l   n u m b e r   o f   p u b l i c a t i o n s   i n   G P S   r e s e a r c h   i n c r e a s e d   f r o m   9 8   i n   1 9 9 1   t o   1 9 3 4   i n   2 0 1 0 .   " G e o c h e m i s t r y   &   G e o p h y s i c s " ,   " G e o s c i e n c e s ,   M u l t i d i s c i p l i n a r y " ,   a n d   " E n g i n e e r i n g ,   E l e c t r i c a l   &   E l e c t r o n i c "   w e r e   t h e   t o p   3   m o s t   p o p u l a r   s u b j e c t   c a t e g o r i e s .   A s   t h e   f l a g s h i p   j o u r n a l   i n   t h e   f i e l d ,   G e o p h y s i c a l   R e s e a r c h   L e t t e r s   h a d   t h e   h i g h e s t   p u b l i c a t i o n   c o u n t .   T h e   U S A ,   t h e   U K   a n d   G e r m a n y   w e r e   t h e   t o p   3   m o s t   p r o d u c t i v e   c o u n t r i e s .   T h e   m o s t   p r o d u c t i v e   i n s t i t u t i o n   w a s   t h e   C a l i f o r n i a   I n s t i t u t e   o f   T e c h n o l o g y   ( C a l t e c h ) ,   f o l l o w e d   b y   t h e   C h i n e s e   A c a d e m y   o f   S c i e n c e s   a n d   t h e   U n i v e r s i t y   o f   C o l o r a d o .   T h e   U S A   w a s   t h e   m o s t   f r e q u e n t   p a r t n e r   i n   i n t e r n a t i o n a l   c o l l a b o r a t i o n s .   C a l t e c h   t o o k   t h e   c e n t r a l   p o s i t i o n   i n   t h e   c o l l a b o r a t i o n   n e t w o r k .   T h e   m a j o r   s p a t i a l   c l u s t e r s   o f   a u t h o r s   w e r e   i n   t h e   U S A ,   t h e   E u r o p e   U n i o n ,   a n d   E a s t   A s i a   ( i n c l u d i n g   C h i n a ,   J a p a n   a n d   S o u t h   K o r e a ) .   " I o n o s p h e r e " ,   " R e m o t e   S e n s i n g "   a n d   " M o n i t o r i n g "   a r e   g r o w i n g   r e s e a r c h   s u b j e c t s   i n   t h e   f i e l d   o f   G P S ,   w h i l e   " D e f o r m a t i o n " ,   " G e o i d "   a n d   " T e c t o n i c s "   a r e   b e c o m i n g   g r a d u a l l y   l e s s   s i g n i f i c a n t .   O u r   s t u d y   r e v e a l e d   u n d e r l y i n g   p a t t e r n s   i n   s c i e n t i f i c   o u t p u t s   a n d   a c a d e m i c   c o l l a b o r a t i o n s   a n d   m a y   s e r v e   a s   a n   a l t e r n a t i v e   a n d   i n n o v a t i v e   w a y   o f   r e v e a l i n g   g l o b a l   r e s e a r c h   t r e n d s   i n   G P S . 	 [ W a n g ,   H a i j u n ;   L i u ,   M i n y a n ;   H o n g ,   S o n g ;   Z h u a n g ,   Y a n h u a ]   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a ;   [ L i u ,   M i n y a n ]   S h a n g h a i   G e o l   S u r v e y   T e c h n o l   I n s t ,   S h a n g h a i ,   P e o p l e s   R   C h i n a 	 H o n g ,   S   ( r e p r i n t   a u t h o r ) ,   W u h a n   U n i v ,   S c h   R e s o u r c e   &   E n v i r o n m   S c i ,   W u h a n   4 3 0 0 7 2 ,   P e o p l e s   R   C h i n a . 	 s o n g h o n g p k u @ 1 2 6 . c o m 	 	 	 	 	 A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   B e n a v e n t   R A ,   2 0 0 4 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 3 ,   P 6 9 7 ;   B r i c k a   S ,   2 0 0 9 ,   T R A N S P   R E S   R E C O R D ,   P 5 1 ,   D O I   1 0 . 3 1 4 1 / 2 1 0 5 - 0 7 ;   C h i u   W T ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 1 5 2 3 - 1 ;   C r o n i n   B ,   2 0 0 1 ,   J   I N F O R M   S C I ,   V 2 7 ,   P 1 ;   F i s h e r   G ,   2 0 1 1 ,   S P A C E   W E A T H E R ,   V 9 ,   D O I   1 0 . 1 0 2 9 / 2 0 1 1 S W 0 0 0 7 1 8 ;   G i s v o l d   S E ,   1 9 9 9 ,   A C T A   A N A E S T H   S C A N D ,   V 4 3 ,   P 9 7 1 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 1 9 9 9 . 4 3 1 0 0 1 . x ;   J i   S Y ,   2 0 1 1 ,   J   G E O P H Y S   R E S - S P A C E ,   V 1 1 6 ,   D O I   1 0 . 1 0 2 9 / 2 0 1 0 J A 0 1 5 9 9 3 ;   K a w a n o   I . ,   2 0 0 4 ,   P   I O N   G N S S   1 7   I N T   T E ,   P 1 7 5 ;   L i   J F ,   2 0 0 9 ,   C R O A T   C H E M   A C T A ,   V 8 2 ,   P 6 9 5 ;   L i u   X J ,   2 0 1 1 ,   B I O D I V E R S   C O N S E R V ,   V 2 0 ,   P 8 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 3 1 - 0 1 0 - 9 9 8 1 - z ;   M a c G o u g a n   G ,   2 0 1 0 ,   G P S   S O L U T ,   V 1 4 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 2 9 1 - 0 0 9 - 0 1 5 8 - 8 ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   P a l m e r   A L ,   2 0 0 5 ,   A N N   T O U R I S M   R E S ,   V 3 2 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . a n n a l s . 2 0 0 4 . 0 6 . 0 0 3 ;   S a n t a n a - F e r n a n d e z   J ,   2 0 1 0 ,   S E N S O R S - B A S E L ,   V 1 0 ,   P 1 0 4 3 5 ,   D O I   1 0 . 3 3 9 0 / s 1 0 1 1 1 0 4 3 5 ;   S u n   D ,   2 0 1 0 ,   G P S   S O L U T ,   V 1 4 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 2 9 1 - 0 0 9 - 0 1 5 9 - 7 ;   Z h a n g   W W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 3 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 6 3 - 0 ;   Z h o n g   P ,   2 0 0 8 ,   G P S   S O L U T ,   V 1 2 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 2 9 1 - 0 0 7 - 0 0 7 1 - y 	 1 8 	 1 5 	 1 6 	 4 	 1 4 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 1 3 	 9 5 	 1 	 	 	 	 	 3 5 	 4 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 5 3 - z 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 0 5 D O 	 W O S : 0 0 0 3 1 6 0 4 6 0 0 0 0 0 4 	 	 
 
 J 	 N i ,   C Q ;   S u g i m o t o ,   C R ;   C r o n i n ,   B 	 	 	 	 N i ,   C h a o q u n ;   S u g i m o t o ,   C a s s i d y   R . ;   C r o n i n ,   B l a i s e 	 	 	 V i s u a l i z i n g   a n d   c o m p a r i n g   f o u r   f a c e t s   o f   s c h o l a r l y   c o m m u n i c a t i o n :   p r o d u c e r s ,   a r t i f a c t s ,   c o n c e p t s ,   a n d   g a t e k e e p e r s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P r o d u c e r s ;   A r t i f a c t s ;   C o n c e p t s ;   G a t e k e e p e r s ;   S c h o l a r l y   c o m m u n i c a t i o n ;   B i b l i o m e t r i c s 	 S C I E N T I F I C   C O - A U T H O R S H I P ;   C O C I T A T I O N   A N A L Y S I S ;   J O U R N A L   L I T E R A T U R E ;   C O L L A B O R A T I O N ;   S C I E N C E ;   P A T T E R N S ;   L I B R A R Y ;   F I E L D ;   S C I E N T O M E T R I C S ;   B I B L I O M E T R I C S 	 T h i s   p a p e r   e x t e n d s   B o r g m a n ' s   ( C o m m u n i c a t i o n   R e s e a r c h   1 6 :   5 8 3 ,   1 9 8 9 )   t h r e e - f a c e t   f r a m e w o r k   ( a r t i f a c t s ,   p r o d u c e r s ,   c o n c e p t s )   f o r   b i b l i o m e t r i c   a n a l y s e s   o f   s c h o l a r l y   c o m m u n i c a t i o n   b y   a d d i n g   a   f o u r t h   g a t e k e e p e r s .   T h e   f o u r - f a c e t   f r a m e w o r k   w a s   a p p l i e d   t o   t h e   f i e l d   o f   L i b r a r y   a n d   I n f o r m a t i o n   S c i e n c e   t o   t e s t   f o r   v a r i a t i o n s   i n   t h e   n e t w o r k s   p r o d u c e d   u s i n g   o p e r a t i o n a l i z a t i o n s   o f   e a c h   o f   t h e s e   f o u r   f a c e t s   i n d e p e n d e n t l y .   F i f t y - e i g h t   j o u r n a l s   f r o m   t h e   I n f o r m a t i o n   S c i e n c e   a n d   L i b r a r y   S c i e n c e   c a t e g o r y   i n   t h e   2 0 0 8   J o u r n a l   C i t a t i o n   R e p o r t   w e r e   s t u d i e d   a n d   t h e   n e t w o r k   p r o x i m i t y   o f   t h e s e   j o u r n a l s   b a s e d   o n   V e n u e - A u t h o r - C o u p l i n g   ( p r o d u c e r ) ,   j o u r n a l   c o - c i t a t i o n   a n a l y s i s   ( a r t i f a c t ) ,   t o p i c   a n a l y s i s   ( c o n c e p t )   a n d   i n t e r l o c k i n g   e d i t o r i a l   b o a r d   m e m b e r s h i p   ( g a t e k e e p e r )   w a s   m e a s u r e d .   T h e   r e s u l t i n g   n e t w o r k s   w e r e   e x a m i n e d   f o r   p o t e n t i a l   c o r r e l a t i o n   u s i n g   t h e   Q u a d r a t i c   A s s i g n m e n t   P r o c e d u r e .   T h e   r e s u l t s   i n d i c a t e   s o m e   c o n s e n s u s   r e g a r d i n g   c o r e   j o u r n a l s ,   b u t   s i g n i f i c a n t   d i f f e r e n c e s   a m o n g   s o m e   n e t w o r k s .   H o l i s t i c   m e a s u r e s   o f   s c h o l a r l y   c o m m u n i c a t i o n   t h a t   t a k e   m u l t i p l e   f a c e t s   i n t o   a c c o u n t   a r e   p r o p o s e d .   T h i s   w o r k   i s   r e l e v a n t   i n   a n   a s s e s s m e n t - c o n s c i o u s   a n d   m e t r i c s - d r i v e n   a g e . 	 [ N i ,   C h a o q u n ;   S u g i m o t o ,   C a s s i d y   R . ;   C r o n i n ,   B l a i s e ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 1   U S A 	 N i ,   C Q   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   1 3 2 0   E   1 0 t h   S t ,   B l o o m i n g t o n ,   I N   4 7 4 0 1   U S A . 	 c h n i @ i n d i a n a . e d u ;   s u g i m o t o @ i n d i a n a . e d u ;   b c r o n i n @ i n d i a n a . e d u 	 	 N i ,   C h a o q u n / 0 0 0 0 - 0 0 0 2 - 4 1 3 0 - 7 6 0 2 	 	 	 B a c c i n i   A ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 8 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 1 . 0 1 2 ;   B A K K E R   P ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 3 7 ;   B a r z i l a i - N a h o n   K . ,   2 0 0 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / a r i s . 2 0 0 9 . 1 4 4 0 4 3 0 1 1 7 ;   B e a v e r   D .   d e B . ,   1 9 7 8 ,   S c i e n t o m e t r i c s ,   V 1 ,   P 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 4 0 ;   B E A V E R   D D ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 2 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 0 8 ;   B E A V E R   D D ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 6 6 ;   B e d e i a n   A G ,   2 0 0 9 ,   O R G A N   R E S   M E T H O D S ,   V 1 2 ,   P 2 1 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 9 4 4 2 8 1 0 7 3 0 9 3 1 2 ;   B l e i   D M ,   2 0 0 3 ,   J   M A C H   L E A R N   R E S ,   V 3 ,   P 9 9 3 ,   D O I   1 0 . 1 1 6 2 / j m l r . 2 0 0 3 . 3 . 4 - 5 . 9 9 3 ;   B O R G M A N   C L ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 5 8 3 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 2 ;   B R A U N   T ,   1 9 8 3 ,   T A L A N T A ,   V 3 0 ,   P 1 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 3 9 - 9 1 4 0 ( 8 3 ) 8 0 0 4 3 - 5 ;   B r a u n   T . ,   2 0 0 5 ,   H D B   Q U A N T I T A T I V E   S C I ,   P 9 5 ,   D O I   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 2 7 5 5 - 9 _ 5 ;   B r a u n   T ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 5 2 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 4 ;   B u d d   J M ,   2 0 0 0 ,   L I B R   Q U A R T ,   V 7 0 ,   P 2 3 0 ;   C A L L O N   M ,   1 9 8 3 ,   S O C   S C I   I N F O R M ,   V 2 2 ,   P 1 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 5 3 9 0 1 8 8 3 0 2 2 0 0 2 0 0 3 ;   C o l e   F .   J . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 8 7 ;   C r o n i n   B ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 3 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 1 3 ;   D i n g   Y ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 4 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 7 ;   E g g h e   L . ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S ;   F o x   M F ,   2 0 0 8 ,   R E S   S O C   P R O B L   P U B L I C ,   V 1 6 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 6 - 1 1 5 2 ( 0 8 ) 1 6 0 0 1 - X ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G L O G O F F   S ,   1 9 8 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 9 ,   P 4 0 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 8 1 1 ) 3 9 : 6 < 4 0 0 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   G r o s s   P .   L .   K . ,   1 9 2 7 ,   S C I E N C E ,   V 6 6 ,   P 3 8 6 ;   H e   T W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 5 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 4 3 - y ;   J a r n e v i n g   B ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 3 3 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 8 . 0 0 1 ;   K E S S L E R   M M ,   1 9 6 3 ,   I N F O R M   S T O R A G E   R E T ,   V 1 ,   P 1 6 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 2 7 1 ( 6 3 ) 9 0 0 1 6 - 0 ;   K E S S L E R   M M ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 9 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   L A W L E R   E L ,   1 9 6 3 ,   M A N A G E   S C I ,   V 9 ,   P 5 8 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 9 . 4 . 5 8 6 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 4 1 8 ;   L i u   X M ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 4 6 2 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 2 ;   L U U K K O N E N   T ,   1 9 9 2 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 7 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 2 0 1 7 0 0 1 0 6 ;   M C C A I N   K W ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 9 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 9 0 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 9 ;   M i l o j e v i c   S ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 2 ;   N i   C . ,   J   A M   S O C   I N   I N   P R E S S ;   N i   C ,   2 0 1 0 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 1 ,   D O I   1 0 . 1 0 0 2 / m e e t . 1 4 5 0 4 7 0 1 2 0 2 ;   N i   C . ,   2 0 1 1 ,   N E W   O R L   P   A N N   M   A M   S ;   P a i s l e y   W i l l i a m   J . ,   1 9 9 0 ,   S C H O L A R L Y   C O M M U N I C A T ,   P 2 8 1 ;   R I P   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 5 8 2 7 ;   S E N G U P T A   I N ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S M A L L   H G ,   1 9 7 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 3 ,   P 2 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 7 ) 9 0 0 1 7 - 6 ;   S u g i m o t o   C R ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 4 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 6 3 ;   S u g i m o t o   C .   R . ,   2 0 1 1 ,   J   A M   S O C   I N F O R M   S C I ;   T a n g   J ,   2 0 0 8 ,   I E E E   D A T A   M I N I N G ,   P 1 0 5 5 ,   D O I   1 0 . 1 1 0 9 / I C D M . 2 0 0 8 . 7 1 ;   T e i c h e r t   T . ,   2 0 1 1 ,   A F F E C T I V E   C O M P U T I N G ,   P 1 1 5 ;   T h i j s   B ,   2 0 1 0 ,   R E S   E V A L U A T ,   V 1 9 ,   P 5 5 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 1 0 X 4 9 2 4 8 6 ;   v a n   R i j n s o e v e r   F J ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 1 2 5 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 4 . 0 2 0 ;   W a g n e r   C S ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 1 - 0 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   Y a n   E . ,   2 0 1 2 ,   J   A M   S O C   I N F O R M   S C I ;   Y a n   E ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 4 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 0 . 0 0 1 ;   Z h a o   D . ,   2 0 0 8 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 1 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 0 ;   Z S I N D E L Y   S ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 8 0 0 6 	 5 4 	 1 5 	 1 6 	 5 	 1 0 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 M A R 	 2 0 1 3 	 9 4 	 3 	 	 	 	 	 1 1 6 1 	 1 1 7 3 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 4 9 - 8 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 8 7 H Z 	 W O S : 0 0 0 3 1 4 7 5 3 5 0 0 0 2 2 	 	 
 
 J 	 E v a n s ,   T S ;   H o p k i n s ,   N ;   K a u b e ,   B S 	 	 	 	 E v a n s ,   T .   S . ;   H o p k i n s ,   N . ;   K a u b e ,   B .   S . 	 	 	 U n i v e r s a l i t y   o f   p e r f o r m a n c e   i n d i c a t o r s   b a s e d   o n   c i t a t i o n   a n d   r e f e r e n c e   c o u n t s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   C r o w n   i n d i c a t o r ;   U n i v e r s a l i t y 	 I M P A C T ;   D I S T R I B U T I O N S ;   N E T W O R K S ;   U N I V E R S I T Y ;   S C I E N C E ;   O U T P U T ;   I N D E X 	 W e   f i n d   e v i d e n c e   f o r   t h e   u n i v e r s a l i t y   o f   t w o   r e l a t i v e   b i b l i o m e t r i c   i n d i c a t o r s   o f   t h e   q u a l i t y   o f   i n d i v i d u a l   s c i e n t i f i c   p u b l i c a t i o n s   t a k e n   f r o m   d i f f e r e n t   d a t a   s e t s .   O n e   o f   t h e s e   i s   a   n e w   i n d e x   t h a t   c o n s i d e r s   b o t h   c i t a t i o n   a n d   r e f e r e n c e   c o u n t s .   W e   d e m o n s t r a t e   t h i s   u n i v e r s a l i t y   f o r   r e l a t i v e l y   w e l l   c i t e d   p u b l i c a t i o n s   f r o m   a   s i n g l e   i n s t i t u t e ,   g r o u p e d   b y   y e a r   o f   p u b l i c a t i o n   a n d   b y   f a c u l t y   o r   b y   d e p a r t m e n t .   W e   s h o w   s i m i l a r   b e h a v i o u r   i n   p u b l i c a t i o n s   s u b m i t t e d   t o   t h e   a r X i v   e - p r i n t   a r c h i v e ,   g r o u p e d   b y   y e a r   o f   s u b m i s s i o n   a n d   b y   s u b - a r c h i v e .   W e   a l s o   f i n d   t h a t   f o r   r e a s o n a b l y   w e l l   c i t e d   p a p e r s   t h i s   d i s t r i b u t i o n   i s   w e l l   f i t t e d   b y   a   l o g n o r m a l   w i t h   a   v a r i a n c e   o f   a r o u n d   s i g m a ( 2 )   =   1 . 3   w h i c h   i s   c o n s i s t e n t   w i t h   t h e   r e s u l t s   o f   R a d i c c h i   e t   a l .   ( P r o c   N a t l   A c a d   S c i   U S A   1 0 5 : 1 7 2 6 8 - 1 7 2 7 2 ,   2 0 0 8 ) .   O u r   w o r k   d e m o n s t r a t e s   t h a t   c o m p a r i s o n s   c a n   b e   m a d e   b e t w e e n   p u b l i c a t i o n s   f r o m   d i f f e r e n t   d i s c i p l i n e s   a n d   p u b l i c a t i o n   d a t e s ,   r e g a r d l e s s   o f   t h e i r   c i t a t i o n   c o u n t   a n d   w i t h o u t   e x p e n s i v e   a c c e s s   t o   t h e   w h o l e   w o r l d - w i d e   c i t a t i o n   g r a p h .   F u r t h e r ,   i t   s h o w s   t h a t   a v e r a g e s   o f   t h e   l o g a r i t h m   o f   s u c h   r e l a t i v e   b i b l i o m e t r i c   i n d i c e s   d e a l   w i t h   t h e   i s s u e   o f   l o n g   t a i l s   a n d   a v o i d   t h e   n e e d   f o r   s t a t i s t i c s   b a s e d   o n   l e n g t h y   r a n k i n g   p r o c e d u r e s . 	 [ E v a n s ,   T .   S . ;   H o p k i n s ,   N . ;   K a u b e ,   B .   S . ]   U n i v   L o n d o n   I m p e r i a l   C o l l   S c i   T e c h n o l   &   M e d ,   D e p t   P h y s ,   L o n d o n   S W 7   2 A Z ,   E n g l a n d 	 E v a n s ,   T S   ( r e p r i n t   a u t h o r ) ,   U n i v   L o n d o n   I m p e r i a l   C o l l   S c i   T e c h n o l   &   M e d ,   D e p t   P h y s ,   L o n d o n   S W 7   2 A Z ,   E n g l a n d . 	 T . E v a n s @ i c . a c . u k 	 E v a n s ,   T i m / C - 5 4 7 9 - 2 0 1 0 	 E v a n s ,   T i m / 0 0 0 0 - 0 0 0 3 - 3 5 0 1 - 6 4 8 6 	 N u f f i e l d   F o u n d a t i o n ;   I m p e r i a l   C o l l e g e   L o n d o n   U R O P   s c h e m e 	 W e   w o u l d   l i k e   t o   t h a n k   L .   W a l t m a n ,   N .   J .   v a n   E c k   a n d   A .   F .   J .   v a n   R a a n   f o r   u s e f u l   c o m m e n t s .   N H   w o u l d   l i k e   t o   t h a n k   t h e   N u f f i e l d   F o u n d a t i o n   f o r   a   S u m m e r   S t u d e n t   b u r s a r y .   B S K   w o u l d   l i k e   t o   t h a n k   t h e   I m p e r i a l   C o l l e g e   L o n d o n   U R O P   s c h e m e   f o r   a   b u r s a r y .   W e   t h a n k   O .   K i b a r o g l u   a n d   D .   H o o k   f o r   h e l p   i n   o b t a i n i n g   a n d   i n t e r p r e t i n g   t h e   r a w   d a t a ,   T h o m s o n   R e u t e r s   f o r   a l l o w i n g   u s   t o   u s e   t h e   c i t a t i o n   a n d   r e f e r e n c e   c o u n t s   f o r   t h e   d a t a   f o r   t h e   I n s t i t u t e ,   a n d   P .   G i n s p a r g   f o r   p r o v i d i n g   t h e   d a t a   f r o m   a r X i v . 	 A d a m s   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 3 2 - 7 ;   A h n   Y Y ,   2 0 1 0 ,   N A T U R E ,   V 4 6 6 ,   P 7 6 1 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 9 1 8 2 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   A l b a r r a n   P ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 3 8 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 0 7 - 9 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 9 ;   B o r n m a n n   L ,   2 0 0 8 ,   P L O S   O N E ,   V 3 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 3 4 8 0 ;   B O U R N E   C P ,   1 9 7 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 7 7 ) 9 0 0 2 6 - 7 ;   D a n i e l   H . ,   2 0 0 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 1 6 6 4 ;   D a n i e l   H .   D . ,   1 9 9 3 ,   G U A R D I A N S   S C I   F A I R N E ;   D o r o g o v t s e v   S N ,   2 0 0 0 ,   P H Y S   R E V   L E T T ,   V 8 5 ,   P 4 6 3 3 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 8 5 . 4 6 3 3 ;   E o m   Y H ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 2 4 9 2 6 ;   E v a n s   T S ,   2 0 1 0 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 1 0 / 1 2 / P 1 2 0 3 7 ;   E v a n s   T S ,   2 0 1 0 ,   E U R   P H Y S   J   B ,   V 7 7 ,   P 2 6 5 ,   D O I   1 0 . 1 1 4 0 / e p j b / e 2 0 1 0 - 0 0 2 6 1 - 8 ;   E v a n s   T S ,   2 0 0 9 ,   P H Y S   R E V   E ,   V 8 0 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 8 0 . 0 1 6 1 0 5 ;   F o r t u n a t o   S ,   2 0 1 0 ,   P H Y S   R E P ,   V 4 8 6 ,   P 7 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s r e p . 2 0 0 9 . 1 1 . 0 0 2 ;   G o l d s t o n e   R .   L . ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 6 6 ;   G r e g o r y   S ,   2 0 1 1 ,   J   S T A T   M E C H - T H E O R Y   E ,   D O I   1 0 . 1 0 8 8 / 1 7 4 2 - 5 4 6 8 / 2 0 1 1 / 0 2 / P 0 2 0 1 7 ;   H A G S T R O M   W O ,   1 9 7 1 ,   S O C I O L   E D U C ,   V 4 4 ,   P 3 7 5 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 2 0 2 9 ;   H E F C E   S F C   H E F C W   D E L N I ,   2 0 1 2 ,   A S S   F R A M   G U I D   S U B M ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L a r i v i e r e   V ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 4 2 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 3 2 ;   L e y d e s d o r f f   L . ,   2 0 0 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 0 ,   P 1 ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 4 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 6 7 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 3 4 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 0 . 0 0 3 ;   L i l l q u i s t   E ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 7 4 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 6 2 - 3 ;   L i m p e r t   E ,   2 0 0 1 ,   B I O S C I E N C E ,   V 5 1 ,   P 3 4 1 ,   D O I   1 0 . 1 6 4 1 / 0 0 0 6 - 3 5 6 8 ( 2 0 0 1 ) 0 5 1 [ 0 3 4 1 : L N D A T S ] 2 . 0 . C O ; 2 ;   L u n d b e r g   J ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 7 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M O E D   H F ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 3 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 3 3 8 ;   N i c o l a i s e n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 2 . 0 0 1 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   R a d i c c h i   F . ,   2 0 1 1 ,   P H Y S   R E V   E ,   V 8 3 ,   P 4 6 ;   R a d i c c h i   F . ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 8 5 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   T h o m s o n   R e u t e r s ,   2 0 0 9 ,   W E B   S C I ;   V a n   R a a n   A ,   2 0 0 7 ,   S C O P I N G   S T U D Y   U S E   B I ;   V I N K L E R   P ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 3 9 ;   V i n k l e r   P ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 6 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 7 1 ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 ;   W a n g   M Y ,   2 0 0 9 ,   P H Y S I C A   A ,   V 3 8 8 ,   P 4 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 9 . 0 5 . 0 0 8 ;   Y A N O V S K Y   V I ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 0 1 6 6 7 	 4 5 	 1 5 	 1 5 	 4 	 4 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 N O V 	 2 0 1 2 	 9 3 	 2 	 	 	 	 	 4 7 3 	 4 9 5 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 6 9 4 - 9 	 	 2 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 2 5 X L 	 W O S : 0 0 0 3 1 0 2 3 0 4 0 0 0 1 5 	 	 
 
 J 	 C h a i ,   K H ;   X i a o ,   X 	 	 	 	 C h a i ,   K a h - H i n ;   X i a o ,   X i n 	 	 	 U n d e r s t a n d i n g   d e s i g n   r e s e a r c h :   A   b i b l i o m e t r i c   a n a l y s i s   o f   D e s i g n   S t u d i e s   ( 1 9 9 6 - 2 0 1 0 ) 	 D E S I G N   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c   s t u d y ;   d e s i g n   r e s e a r c h ;   s c i e n c e   o f   d e s i g n 	 I N T E L L E C T U A L   S T R U C T U R E ;   M A N A G E M E N T   R E S E A R C H ;   C O C I T A T I O N   A N A L Y S I S ;   E N G I N E E R I N G   D E S I G N ;   T H E M E S ;   I N F O R M A T I O N ;   S C I E N C E 	 T h e   p u r p o s e   o f   t h i s   p a p e r   i s   t o   i n v e s t i g a t e   t h e   c o r e   t h e m e s   o f   d e s i g n   r e s e a r c h   b y   a n a l y s i n g   c i t a t i o n s   o f   p a p e r s   i n   t h e   j o u r n a l   D e s i g n   S t u d i e s .   I t   a l s o   a i m s   t o   f i n d   o u t   t h e   e v o l u t i o n   a n d   f u t u r e   t r e n d s   o f   d e s i g n   r e s e a r c h .   E m p l o y i n g   a   b i b l i o m e t r i c s   a n d   n e t w o r k   a n a l y s i s ,   t h e   p a p e r   a n a l y s e s   c i t a t i o n s   a n d   c o - c i t a t i o n s   f r o m   D e s i g n   S t u d i e s .   I n s t e a d   o f   u s i n g   t h e   s t a n d a r d   a n a l y s i s   m e t h o d   o f   a g g r e g a t i n g   a u t h o r   c o - c i t a t i o n s ,   t h i s   s t u d y   c o n d u c t s   t h e   a n a l y s i s   a t   t h e   i n d i v i d u a l   p u b l i c a t i o n   l e v e l .   D u e   t o   t h e   l i m i t a t i o n   o f   t h e   S c o p u s   d a t a b a s e ,   t h i s   s t u d y   o n l y   m a n a g e d   t o   e x t r a c t   a r t i c l e s   w i t h   f u l l   c i t a t i o n s   i n   D e s i g n   S t u d i e s   f r o m   1 9 9 6   t o   2 0 1 0 .   F u r t h e r   s t u d i e s   c o u l d   a l s o   i n c l u d e   a r t i c l e s   f r o m   1 9 7 9   t o   1 9 9 5   b y   e i t h e r   u s i n g   s o m e   c h a r a c t e r   r e c o g n i t i o n   s o f t w a r e   o r   m a n u a l l y   e x t r a c t i n g   t h e m .   T h e   s t u d y   i d e n t i f i e s   t h e   c o r e   t h e m e s   c e n t e r e d   o n   d e s i g n   p r o c e s s   a n d   d e s i g n   c o g n i t i o n .   I n   a d d i t i o n ,   i t   a l s o   r e v e a l s   t h a t   t h e   r e s e a r c h   m e t h o d   p r o t o c o l   a n a l y s i s   h a s   b e c o m e   m o r e   p o p u l a r   i n   r e c e n t   y e a r s   a m o n g   r e s e a r c h e r s .   T h e   m a i n   c o n t r i b u t i o n   o f   t h i s   p a p e r   i s   t h e   u s e   o f   a   n e t w o r k   a n a l y s i s   t e c h n i q u e   t o   a n a l y s e   1 2   1 0 7   c i t a t i o n s   i n   t h e   4 5 9   a r t i c l e s   p u b l i s h e d   i n   D e s i g n   S t u d i e s   b e t w e e n   1 9 9 6   a n d   2 0 1 0 .   U n l i k e   p r e v i o u s   r e v i e w   p a p e r s   w h i c h   r e l i e d   h e a v i l y   o n   t h e   q u a l i t a t i v e   o b s e r v a t i o n s   a n d   r e f l e c t i o n s   o f   t h e   a u t h o r s ,   t h i s   p a p e r   i s   t h e   f i r s t   c o m p r e h e n s i v e   q u a n t i t a t i v e   a n a l y s i s   i n   t h i s   f i e l d .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ C h a i ,   K a h - H i n ;   X i a o ,   X i n ]   N a t l   U n i v   S i n g a p o r e ,   D e p t   I n d   &   S y s t   E n g n ,   S i n g a p o r e   1 1 9 2 6 0 ,   S i n g a p o r e 	 C h a i ,   K H   ( r e p r i n t   a u t h o r ) ,   N a t l   U n i v   S i n g a p o r e ,   D e p t   I n d   &   S y s t   E n g n ,   S i n g a p o r e   1 1 9 2 6 0 ,   S i n g a p o r e . 	 i s e c k h @ n u s . e d u . s g 	 	 	 	 	 A K I N   O ,   1 9 9 3 ,   E N V I R O N   P L A N N   B ,   V 2 0 ,   P 2 7 3 ,   D O I   1 0 . 1 0 6 8 / b 2 0 0 2 7 3 ;   A k i n   O . ,   1 9 8 6 ,   P S Y C H O L   A R C H I T E C T U R A ;   A k i n   O . ,   1 9 9 5 ,   D E S I G N   S T U D I E S ,   V 1 6 ,   P 2 1 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 4 ) 0 0 0 1 0 - B ;   A l e x a n d e r   C ,   1 9 6 4 ,   N O T E S   S Y N T H E S I S   F O R M ;   A r c h e r   B ,   1 9 7 9 ,   D E S I G N   S T U D I E S ,   V 1 ,   P 1 7 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 7 9 ) 9 0 0 2 3 - 1 ;   A t m a n   C .   J . ,   1 9 9 9 ,   D E S I G N   S T U D I E S ,   V 2 0 ,   P 1 3 1 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 3 1 - 3 ;   B a l l   L J ,   2 0 0 4 ,   D E S I G N   S T U D ,   V 2 5 ,   P 4 9 5 ,   D O I   1 0 . 1 0 1 6 / j . d e s t u d . 2 0 0 4 . 0 5 . 0 0 4 ;   B l e s s i n g   L .   T .   M . ,   1 9 9 4 ,   T H E S I S   U   T W E N T E ;   B O R G A T T I   S P ,   1 9 9 8 ,   S O C I A L   N E T W O R K   A N A L ;   B u c c i a r e l l i   L .   L . ,   1 9 9 4 ,   D E S I G N I N G   E N G ;   B u c c i a r e l l i   L .   L . ,   1 9 8 8 ,   D E S I G N   S T U D I E S ,   V 9 ,   P 1 5 9 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 8 8 ) 9 0 0 4 5 - 2 ;   C a s a k i n   H . ,   1 9 9 9 ,   D E S I G N   S T U D I E S ,   V 2 0 ,   P 1 5 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 3 2 - 5 ;   C o y n e   R . ,   1 9 9 1 ,   D E S I G N   S T U D I E S ,   V 1 2 ,   P 1 2 4 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 1 ) 9 0 0 2 0 - W ;   C r o s s   N ,   2 0 0 4 ,   D E S I G N   S T U D ,   V 2 5 ,   P 4 2 7 ,   D O I   1 0 . 1 0 1 6 / j . d e s t u d . 2 0 0 4 . 0 6 . 0 0 2 ;   C r o s s   N ,   2 0 0 1 ,   D E S   I S S U E S ,   V 1 7 ,   P 4 9 ,   D O I   1 0 . 1 1 6 2 / 0 7 4 7 9 3 6 0 1 7 5 0 3 5 7 1 9 6 ;   C r o s s   N . ,   1 9 9 9 ,   D e s i g n   S t u d i e s ,   V 2 0 ,   P 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 2 6 - X ;   C r o s s   N . ,   1 9 8 2 ,   D E S I G N   S T U D I E S ,   V 3 ,   P 2 2 1 ,   D O I   [ 1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 8 2 ) 9 0 0 4 0 - 0 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 8 2 ) 9 0 0 4 0 - 0 ] ;   C r o s s   N . ,   1 9 9 6 ,   A N A L   D E S I G N   A C T I V I T Y ;   C r o s s   N . ,   1 9 8 4 ,   D E V   D E S I G N   M E T H O D O L O ;   C r o s s   N . ,   1 9 9 5 ,   D E S I G N   S T U D I E S ,   V 1 6 ,   P 1 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 4 ) 0 0 0 0 7 - Z ;   C R O S S   N ,   2 0 0 0 ,   D E S I G N   S T U D I E S ,   V 2 1 ,   P 1 ;   C r o s s   N . ,   1 9 9 4 ,   E N G   D E S I G N   M E T H O D S   S ;   C R O S S   N ,   1 9 9 9 ,   D E S I G N   S T U D I E S ,   V 2 0 ,   P 1 ;   C r o s s   N ,   2 0 1 0 ,   D E S I G N   S T U D ,   V 3 1 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . d e s t u d . 2 0 0 9 . 1 0 . 0 0 5 ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   D a r k e   J . ,   1 9 7 9 ,   D E S I G N   S T U D I E S ,   V 1 ,   P 3 6 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 7 9 ) 9 0 0 2 7 - 9 ;   D o   E .   Y . - L . ,   2 0 0 0 ,   D E S I G N   S T U D I E S ,   V 2 1 ,   P 4 8 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 0 ) 0 0 0 2 0 - X ;   D o n d i s   D .   A . ,   1 9 7 3 ,   P R I M E R   V I S U A L   L I T E R A ;   D o r s t   K . ,   2 0 0 1 ,   D E S I G N   S T U D I E S ,   V 2 2 ,   P 4 2 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 1 ) 0 0 0 0 9 - 6 ;   D o r s t   K . ,   1 9 9 5 ,   D E S I G N   S T U D I E S ,   V 1 6 ,   P 2 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 4 ) 0 0 0 1 2 - 3 ;   E a s t m a n   C .   M . ,   1 9 7 0 ,   E M E R G I N G   M E T H O D S   E N V ;   E c k e r t   C ,   2 0 0 0 ,   D E S I G N   S T U D I E S ,   V 2 1 ,   P 5 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 0 ) 0 0 0 2 2 - 3 ;   E r i c s s o n   K .   A . ,   1 9 9 3 ,   P R O T O C O L   A N A L ;   F e r g u s o n   E .   S . ,   1 9 9 4 ,   E N G   M I N D S   E Y E ;   F I S H   J ,   1 9 9 0 ,   L E O N A R D O ,   V 2 3 ,   P 1 1 7 ,   D O I   1 0 . 2 3 0 7 / 1 5 7 8 4 7 5 ;   F L U K E   R ,   1 9 9 2 ,   C R E A T I V E   C O G N I T I O N   T ;   F r i e d m a n   K . ,   2 0 0 3 ,   D E S I G N   S T U D I E S ,   V 2 4 ,   P 5 0 7 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 3 ) 0 0 0 3 9 - 5 ;   G e r o   J .   S . ,   1 9 9 8 ,   D e s i g n   S t u d i e s ,   V 1 9 ,   P 2 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 7 ) 0 0 0 1 5 - X ;   G E R O   J S ,   1 9 9 0 ,   A I   M A G ,   V 1 1 ,   P 2 6 ;   G L A N Z E L ,   2 0 0 3 ,   B I B L I O M E T R I C S   R E S   F I ;   G O E L   V ,   1 9 9 2 ,   C O G N I T I V E   S C I ,   V 1 6 ,   P 3 9 5 ,   D O I   1 0 . 1 2 0 7 / s 1 5 5 1 6 7 0 9 c o g 1 6 0 3 _ 3 ;   G o e l   V . ,   1 9 9 5 ,   S K E T C H E S   T H O U G H T ;   G o l d s c h m i d t   G . ,   1 9 9 1 ,   C R E A T I V I T Y   R E S   J ,   V 4 ,   P 1 2 3 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 0 0 4 1 9 1 0 9 5 3 4 3 8 1 ;   G o l d s c h m i d t   G . ,   1 9 9 4 ,   D E S I G N   S T U D I E S ,   V 1 5 ,   P 1 5 8 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 4 ) 9 0 0 2 2 - 1 ;   G r o s s   M .   D . ,   1 9 9 6 ,   D e s i g n   S t u d i e s ,   V 1 7 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 5 ) 0 0 0 0 6 - D ;   J a n s s o n   D . ,   1 9 9 1 ,   D E S I G N   S T U D I E S ,   V 1 2 ,   P 3 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 1 ) 9 0 0 0 3 - F ;   K a v a k l i   M . ,   1 9 9 8 ,   D e s i g n   S t u d i e s ,   V 1 9 ,   P 4 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 1 2 - X ;   K a v a k l i   M . ,   2 0 0 1 ,   D E S I G N   S T U D I E S ,   V 2 2 ,   P 3 4 7 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 1 ) 0 0 0 0 2 - 3 ;   K o k o t o v i c h   V ,   2 0 0 0 ,   D E S I G N   S T U D I E S ,   V 2 1 ,   P 4 3 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 0 ) 0 0 0 1 7 - X ;   K o l o d n e r   J . ,   1 9 9 3 ,   C A S E   B A S E D   R E A S O N I N G ;   K o s s l y n   S .   M . ,   1 9 9 4 ,   I M A G E   B R A I N ;   L A R K I N   J H ,   1 9 8 7 ,   C O G N I T I V E   S C I ,   V 1 1 ,   P 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 4 - 0 2 1 3 ( 8 7 ) 8 0 0 2 6 - 5 ;   L a w s o n   B . ,   1 9 8 0 ,   D E S I G N E R S   T H I N K ;   L a w s o n   B . ,   1 9 9 4 ,   D E S I G N   M I N D ;   L e v i - S t r a u s s   C l a u d e ,   1 9 6 2 ,   P E N S E E   S A U V A G E ;   L e y d e s d o r f f   L ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 3 5 ;   L i u   S F ,   2 0 0 9 ,   J   E N G   D E S I G N ,   V 2 0 ,   P 7 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 4 4 8 2 0 8 0 2 6 7 0 9 1 4 ;   L i u   Y . - C . ,   2 0 0 3 ,   D e s i g n   S t u d i e s ,   V 2 4 ,   P 3 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 3 ) 0 0 0 0 3 - 6 ;   L i u   Y . ,   1 9 9 5 ,   D E S I G N   S T U D I E S ,   V 1 6 ,   P 3 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 4 ) 0 0 0 0 1 - T ;   L l o y d   P . ,   1 9 9 4 ,   D E S I G N   S T U D I E S ,   V 1 5 ,   P 1 2 5 ,   D O I   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 4 ) 9 0 0 2 0 - 5 ;   M c G o w n   A . ,   1 9 9 8 ,   D E S I G N   S T U D I E S ,   V 1 9 ,   P 4 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 1 3 - 1 ;   M I L L E R   G A ,   1 9 5 6 ,   P S Y C H O L   R E V ,   V 6 3 ,   P 8 1 ,   D O I   1 0 . 1 0 3 7 / / 0 0 3 3 - 2 9 5 X . 1 0 1 . 2 . 3 4 3 ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   N e w e l l   A ,   1 9 7 2 ,   H U M A N   P R O B L E M   S O L V I N ;   N o r m a n   D A ,   1 9 8 8 ,   P S Y C H O L   E V E R Y D A Y   T H I ;   P a h l   G . ,   1 9 8 4 ,   E N G   D E S I G N ;   P a h l   G . ,   1 9 8 8 ,   E N G   D E S I G N   S Y S T E M A T I ;   P a h l   G . ,   1 9 9 6 ,   E N G   D E S I G N   S Y S T E M A T I ;   P e a r s o n   D G ,   1 9 9 9 ,   E U R   J   C O G N   P S Y C H O L ,   V 1 1 ,   P 2 9 5 ,   D O I   1 0 . 1 0 8 0 / 7 1 3 7 5 2 3 1 7 ;   P i l k i n g t o n   A ,   2 0 0 6 ,   T E C H N O V A T I O N ,   V 2 6 ,   P 2 8 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 5 . 0 1 . 0 0 9 ;   P i l k i n g t o n   A ,   2 0 0 8 ,   I N T   J   S E R V   I N D   M A N A G ,   V 1 9 ,   P 8 3 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 6 4 2 3 0 8 1 0 8 5 5 7 2 5 ;   P i l k i n g t o n   A ,   2 0 0 6 ,   I N T   J   O P E R   P R O D   M A N ,   V 2 6 ,   P 1 2 5 5 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 0 6 1 0 7 0 5 8 5 4 ;   P i l k i n g t o n   A ,   2 0 0 9 ,   J   O P E R   M A N A G ,   V 2 7 ,   P 1 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j o m . 2 0 0 8 . 0 8 . 0 0 1 ;   P u g h   S . ,   1 9 9 1 ,   T O T A L   D E S I G N   I N T E G R A ;   P u r c e l l   A . ,   1 9 9 8 ,   D E S I G N   S T U D I E S ,   V 1 9 ,   P 3 8 9 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 1 5 - 5 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R I T T E L   H W J ,   1 9 7 3 ,   P O L I C Y   S C I ,   V 4 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 4 0 5 7 3 0 ;   R o b b i n s   E . ,   1 9 9 4 ,   W H Y   A R C H I T E C T S   D R A W ;   R o d g e r s   P .   A . ,   2 0 0 0 ,   D E S I G N   S T U D I E S ,   V 2 1 ,   P 4 5 1 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 0 ) 0 0 0 1 8 - 1 ;   R o o z e n b u r g   N .   F .   M . ,   1 9 9 5 ,   P R O D U C T   D E S I G N   F U N D A ;   R o w e   P .   G . ,   1 9 8 7 ,   D E S I G N   T H I N K I N G ;   S c h o n   D . ,   1 9 8 3 ,   R E F L E C T I V E   P R A C T I T I O ;   S c h o n   D . A . ,   1 9 9 2 ,   D E S I G N   S T U D I E S ,   V 1 3 ,   P 1 3 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 2 - 6 9 4 X ( 9 2 ) 9 0 2 6 8 - F ;   S H A R P L I N   A D ,   1 9 8 5 ,   H U M   R E L A T ,   V 3 8 ,   P 1 3 9 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 8 7 2 6 7 8 5 0 3 8 0 0 2 0 4 ;   S I M O N   H A ,   1 9 7 3 ,   A R T I F   I N T E L L ,   V 4 ,   P 1 8 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 4 - 3 7 0 2 ( 7 3 ) 9 0 0 1 1 - 8 ;   S t e m p f l e   J . ,   2 0 0 2 ,   D E S I G N   S T U D I E S ,   V 2 3 ,   P 4 7 3 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 0 2 ) 0 0 0 0 4 - 2 ;   S T E N N I N G   K ,   1 9 9 5 ,   C O G N I T I V E   S C I ,   V 1 9 ,   P 9 7 ,   D O I   1 0 . 1 2 0 7 / s 1 5 5 1 6 7 0 9 c o g 1 9 0 1 _ 3 ;   S T I N Y   G ,   1 9 8 0 ,   E N V I R O N   P L A N N   B ,   V 7 ,   P 3 4 3 ,   D O I   1 0 . 1 0 6 8 / b 0 7 0 3 4 3 ;   S u h   N . P . ,   1 9 9 0 ,   P R I N C I P L E S   D E S I G N ,   V 2 2 6 ;   S u w a   M . ,   2 0 0 0 ,   D E S I G N   S T U D I E S ,   V 2 1 ,   P 5 3 9 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 9 ) 0 0 0 3 4 - 4 ;   S u w a   M . ,   1 9 9 7 ,   D E S I G N   S T U D I E S ,   V 1 8 ,   P 3 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 7 ) 0 0 0 0 8 - 2 ;   S u w a   M . ,   1 9 9 8 ,   D E S I G N   S T U D I E S ,   V 1 9 ,   P 4 5 5 ,   D O I   D O I   1 0 . 1 0 1 6 / J . D E S T U D . 2 0 0 7 . 1 2 . 0 0 1 ;   T o m e s   A . ,   1 9 9 8 ,   D E S I G N   S T U D I E S ,   V 1 9 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 7 ) 0 0 0 2 7 - 6 ;   T o v e y   M . ,   1 9 9 7 ,   D E S I G N   S T U D I E S ,   V 1 8 ,   P 5 ,   D O I   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 6 ) 0 0 0 0 6 - 3 ;   U l r i c h   K . ,   1 9 9 5 ,   P R O D U C T   D E S I G N   D E V ;   B A R N A R D   Y .   F . ,   1 9 9 4 ,   T H I N K   A L O U D   M E T H O D   P ;   V e r s t i j n e n   I .   M . ,   1 9 9 8 ,   D e s i g n   S t u d i e s ,   V 1 9 ,   P 5 1 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 2 - 6 9 4 X ( 9 8 ) 0 0 0 1 7 - 9 ;   V e r s t i j n e n   I .   M . ,   1 9 9 8 ,   D E S I G N   S T U D I E S ,   V 1 9 ,   P 5 1 9 ;   V i s s e r   W . ,   2 0 0 6 ,   C O G N I T I V E   A R T I F A C T S 	 9 9 	 1 5 	 1 5 	 3 	 2 2 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 1 4 2 - 6 9 4 X 	 	 	 D E S I G N   S T U D 	 D e s i g n   S t u d . 	 J A N 	 2 0 1 2 	 3 3 	 1 	 	 	 	 	 2 4 	 4 3 	 	 1 0 . 1 0 1 6 / j . d e s t u d . 2 0 1 1 . 0 6 . 0 0 4 	 	 2 0 	 E n g i n e e r i n g ,   M u l t i d i s c i p l i n a r y ;   E n g i n e e r i n g ,   M a n u f a c t u r i n g 	 E n g i n e e r i n g 	 8 7 2 R D 	 W O S : 0 0 0 2 9 8 8 2 6 1 0 0 0 0 3 	 	 
 
 J 	 L a c a s s e ,   J R ;   H o d g e ,   D R ;   B e a n ,   K F 	 	 	 	 L a c a s s e ,   J e f f r e y   R . ;   H o d g e ,   D a v i d   R . ;   B e a n ,   K r i s t e n   F . 	 	 	 E v a l u a t i n g   t h e   P r o d u c t i v i t y   o f   S o c i a l   W o r k   S c h o l a r s   U s i n g   t h e   h - I n d e x 	 R E S E A R C H   O N   S O C I A L   W O R K   P R A C T I C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e v i d e n c e - b a s e d   p r a c t i c e ;   b i b l i o m e t r i c s ;   q u a n t i t a t i v e 	 G O O G L E   S C H O L A R ;   H I R S C H - I N D E X ;   B I B L I O M E T R I C   I N D I C A T O R S ;   C I T A T I O N   A N A L Y S I S ;   J O U R N A L S ;   S C I E N C E ;   I M P A C T ;   P U B L I C A T I O N ;   I N F O R M A T I O N ;   S C I E N T I S T S 	 O b j e c t i v e s :   T h i s   a r t i c l e   r e p o r t s   t h e   f i r s t   e s t i m a t e d   h - i n d e x   v a l u e s   f o r   s o c i a l   w o r k   f a c u l t y .   M e t h o d s :   M u l t i p l e   r a t e r s   b l i n d l y   a s s e s s e d   t w o   s a m p l e s   o f   f a c u l t y   ( 1 )   t e n u r e - t r a c k   f a c u l t y   a t   i n s t i t u t i o n s   l i s t e d   i n   t h e   U . S .   N e w s   a n d   W o r l d   R e p o r t   t o p   1 0   ( n   =   3 3 7 )   a n d   ( 2 )   t e n u r e - t r a c k   e d i t o r i a l   b o a r d   m e m b e r s   o f   5   h i g h l y   r a n k e d   s o c i a l   w o r k   j o u r n a l s   ( n   =   2 1 5 ) .   R e s u l t s :   I n t r a c l a s s   c o r r e l a t i o n   c o e f f i c i e n t s   f o r   h - i n d e x   v a l u e s   a m o n g   t h e   m u l t i p l e   r a t e r s   r a n g e d   f r o m   . 8 3   t o   . 9 2 ,   i n d i c a t i n g   g o o d   r e l i a b i l i t y .   F o r   f a c u l t y   a t   t o p   1 0   i n s t i t u t i o n s ,   m e a n   e s t i m a t e d   h - i n d e x   v a l u e s   w e r e   3 . 9 7   ( S D   =   2 . 8 7 )   f o r   a s s i s t a n t   p r o f e s s o r s ;   8 . 5 9   ( S D   =   3 . 7 2 )   f o r   a s s o c i a t e   p r o f e s s o r s ;   a n d   1 6 . 1 4   ( S D   =   8 . 3 5 )   f o r   f u l l   p r o f e s s o r s .   V a l u e s   f o r   e d i t o r i a l   b o a r d   m e m b e r s   w e r e   g e n e r a l l y   s i m i l a r .   C o n c l u s i o n s :   T h e s e   a r e   t h e   f i r s t   s u c h   p u b l i s h e d   d a t a ;   f u r t h e r   r e s e a r c h   i s   n e e d e d . 	 [ L a c a s s e ,   J e f f r e y   R . ;   H o d g e ,   D a v i d   R . ;   B e a n ,   K r i s t e n   F . ]   A r i z o n a   S t a t e   U n i v ,   S c h   S o c i a l   W o r k ,   C o l l   P u b l   P r o g r a m s ,   P h o e n i x ,   A Z   8 5 0 0 4   U S A 	 L a c a s s e ,   J R   ( r e p r i n t   a u t h o r ) ,   A r i z o n a   S t a t e   U n i v ,   S c h   S o c i a l   W o r k ,   C o l l   P u b l   P r o g r a m s ,   4 1 1   N   C e n t   A v e , S u i t e   8 0 0 ,   P h o e n i x ,   A Z   8 5 0 0 4   U S A . 	 j e f f r e y . l a c a s s e @ a s u . e d u 	 	 	 	 	 A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B a l l   P ,   2 0 0 5 ,   N A T U R E ,   V 4 3 6 ,   P 9 0 0 ,   D O I   1 0 . 1 0 3 8 / 4 3 6 9 0 0 a ;   B a n k s   M G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 6 - 5 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B e r k   R i c h a r d   A . ,   2 0 0 4 ,   R E G R E S S I O N   A N A L   C O N S ;   B o r n m a n n   L ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 8 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 6 ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B o r n m a n n   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 4 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 2 1 - 1 ;   C o s t a s   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 2 . 0 0 1 ;   C r o n i n   B ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 2 7 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 5 4 ;   E g g h e   L . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 8 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   E n g q v i s t   L ,   2 0 0 8 ,   T R E N D S   E C O L   E V O L ,   V 2 3 ,   P 2 5 0 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 8 . 0 1 . 0 0 9 ;   G a r c i a - P e r e z   M A ,   2 0 0 9 ,   S P A N   J   P S Y C H O L ,   V 1 2 ,   P 8 3 3 ;   G r e e n   R G ,   2 0 0 2 ,   J   S O C   W O R K   E D U C ,   V 3 8 ,   P 1 3 5 ;   G R O T H K O P F   U ,   2 0 0 6 ,   A S P   C   S E R I E S ,   V 3 7 7 ;   H a r z i n g   A W ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 5 3 ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H a r z i n g   A .   W . ,   2 0 0 7 ,   R E F L E C T I O N S   H   I N D E X ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o d g e   D R ,   2 0 1 1 ,   R E S   S O C I A L   W O R K   P R A C ,   V 2 1 ,   P 2 2 2 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 1 0 3 6 9 1 4 1 ;   H o d g e   D .   R . ,   J   S O C I A L   W O   I N   P R E S S ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 1 ;   H o l d e n   G ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 6 7 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 3 ;   H o l d e n   G a r y ,   2 0 0 6 ,   B I B L I O M E T R I C S   S O C I A L ;   H o l d e n   G ,   2 0 0 6 ,   R E S   S O C I A L   W O R K   P R A C ,   V 1 6 ,   P 6 1 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 0 6 2 9 2 5 7 0 ;   I g l e s i a s   J E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 3 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 0 5 - x ;   J a c s o   P ,   2 0 0 9 ,   O N L I N E   I N F O R M   R E V ,   V 3 3 ,   P 1 1 8 9 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 9 1 1 0 1 1 0 7 0 ;   J e n s e n   P ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 4 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 1 4 - 3 ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   K i r k   S A ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 0 9 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 6 ;   K I R K   S A ,   1 9 7 7 ,   J   S O C I A L   W E L F A R E   W I N ,   P 9 0 ;   K l e i n   W C ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 1 7 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 7 ;   K o u s h a   K ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 7 - x ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   L E H M A N N   S ,   2 0 0 5 ,   M E A S U R E S   M I S M E A S U R E S ;   L e i m u   R ,   2 0 0 5 ,   T R E N D S   E C O L   E V O L ,   V 2 0 ,   P 2 8 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 4 . 1 0 . 0 1 0 ;   L i g o n   J ,   2 0 0 5 ,   S O C   W O R K   H E A L T H   C A R E ,   V 4 1 ,   P 1 2 3 ,   D O I   1 0 . 1 3 0 0 / J 0 1 0 v 4 1 n 0 3 _ 0 8 ;   L I N D S E Y   D ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 9 8 ;   M E H O   L I ,   2 0 0 6 ,   N E W   E R A   C I T A T I   U N P U B ;   O a k e s   M . ,   1 9 8 6 ,   S T A T   I N F E R E N C E   C O M M E ;   P a r d e c k   J T ,   2 0 0 2 ,   P S Y C H O L   R E P ,   V 9 0 ,   P 1 0 5 1 ,   D O I   1 0 . 2 4 6 6 / P R 0 . 9 0 . 3 . 1 0 5 1 - 1 0 5 4 ;   R O U S S E A U   R ,   2 0 0 8 ,   4   I N T   C   W E B   I N F   S C I E ;   S c h r e i b e r   M ,   2 0 0 7 ,   A N N   P H Y S - B E R L I N ,   V 1 6 ,   P 6 4 0 ,   D O I   1 0 . 1 0 0 2 / a n d p . 2 0 0 7 1 0 2 5 2 ;   S e i p e l   M M O ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 7 9 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   T h y e r   B A ,   2 0 0 3 ,   J   S O C   W O R K   E D U C ,   V 3 9 ,   P 1 2 5 ;   T H Y E R   B A ,   1 9 8 6 ,   J   S O C   W O R K   E D U C ,   V 2 2 ,   P 6 7 ;   T h y e r   B .   A . ,   1 9 9 7 ,   J   A P P L   S O C I A L   S C I ,   V 2 1 ,   P 1 0 5 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 . 8 2 4 4 1 . f 1 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   V a u g h a n   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 3 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 2 0 - 2 ;   W a l t e r s   W H ,   2 0 0 7 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 3 ,   P 1 1 2 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 8 . 0 0 6 ;   W o n g   B B M ,   2 0 0 5 ,   T R E N D S   E C O L   E V O L ,   V 2 0 ,   P 4 7 5 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 5 . 0 7 . 0 0 3 ;   Y o u n g   N S ,   2 0 0 8 ,   P L O S   M E D ,   V 5 ,   P 1 4 1 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p m e d . 0 0 5 0 2 0 1 ;   [ A n o n y m o u s ] ,   2 0 0 6 ,   P L O S   M E D ,   V 3 ;   2 0 0 8 ,   U S   N E W S 	 5 9 	 1 5 	 1 6 	 0 	 1 0 	 S A G E   P U B L I C A T I O N S   I N C 	 T H O U S A N D   O A K S 	 2 4 5 5   T E L L E R   R D ,   T H O U S A N D   O A K S ,   C A   9 1 3 2 0   U S A 	 1 0 4 9 - 7 3 1 5 	 	 	 R E S   S O C I A L   W O R K   P R A C 	 R e s .   S o c .   W o r k .   P r a c t . 	 S E P 	 2 0 1 1 	 2 1 	 5 	 	 	 	 	 5 9 9 	 6 0 7 	 	 1 0 . 1 1 7 7 / 1 0 4 9 7 3 1 5 1 1 4 0 5 0 6 9 	 	 9 	 S o c i a l   W o r k 	 S o c i a l   W o r k 	 8 0 3 H I 	 W O S : 0 0 0 2 9 3 5 7 2 0 0 0 0 0 9 	 	 
 
 J 	 M o p p e t t ,   I K ;   H a r d m a n ,   J G 	 	 	 	 M o p p e t t ,   I .   K . ;   H a r d m a n ,   J .   G . 	 	 	 B i b l i o m e t r i c s   o f   a n a e s t h e s i a   r e s e a r c h e r s   i n   t h e   U K 	 B R I T I S H   J O U R N A L   O F   A N A E S T H E S I A 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 a c h i e v e m e n t ;   a n a e s t h e s i a ;   b i b l i o m e t r i c s ;   p u b l i c a t i o n s 	 H - I N D E X ;   G O O G L E - S C H O L A R ;   U N I T E D - K I N G D O M ;   I N S T I T U T I O N S ;   J O U R N A L S ;   S C I E N C E ;   S C O P U S ;   I M P A C T ;   W E B 	 B a c k g r o u n d .   B i b l i o m e t r i c s   p r o v i d e   s u r r o g a t e   m e a s u r e s   o f   t h e   q u a l i t y   a n d   q u a n t i t y   o f   r e s e a r c h   u n d e r t a k e n   b y   d e p a r t m e n t s   a n d   i n d i v i d u a l s .   P r e v i o u s   r e p o r t s   h a v e   s u g g e s t e d   t h a t   a c a d e m i c   a n a e s t h e s i a   r e s e a r c h   i n   t h e   U K   i s   i n   d e c l i n e .   W e   w i s h e d   t o   p r o v i d e   a   c o m p r e h e n s i v e   d e s c r i p t i o n   o f   c u r r e n t   a n d   h i s t o r i c a l   p u b l i s h e d   o u t p u t   o f   U K   a n a e s t h e s i a   r e s e a r c h e r s .   M e t h o d s .   B i b l i o m e t r i c   i n d i c e s   ( W e b   o f   S c i e n c e   ( R ) )   w e r e   c a l c u l a t e d   f o r   a n a e s t h e s i a   r e s e a r c h e r s   i n   t h e   U K   f o r   t h e   w h o l e   p e r i o d   c o v e r e d   b y   t h e   d a t a b a s e ,   a n d   f o r   2 0 0 4 - 8 .   A   p a r a l l e l   s e a r c h   w a s   m a d e   u s i n g   t h e   S c h o l a r o m e t e r   ( T M )   t o o l ,   w h i c h   p a r s e s   o u t p u t   f r o m   G o o g l e   S c h o l a r   ( T M ) .   C a l c u l a t e d   i n d i c e s   i n c l u d e d   t o t a l   n u m b e r   o f   p u b l i c a t i o n s ;   t o t a l   n u m b e r   o f   c i t a t i o n s ;   c i t a t i o n s   p e r   p a p e r ;   h - i n d e x ;   g - i n d e x ;   a n d   m o d i f i e d   i m p a c t   i n d e x .   R e s u l t s .   O n e   h u n d r e d   a n d   f o u r   i n d i v i d u a l s   a n d   2 3   a c a d e m i c   d e p a r t m e n t s   w e r e   i d e n t i f i e d .   M e d i a n   v a l u e s   ( i n t e r - q u a r t i l e   r a n g e )   f o r   t h e   i n d i c e s   w e r e :   t o t a l   p a p e r s   5 7   ( 2 4 - 9 5 )   ( i n d i v i d u a l s   f o r   t h e   w h o l e   p e r i o d ) ,   1 1   ( 6 - 2 0 )   ( i n d i v i d u a l s   2 0 0 4 - 8 ) ,   5 0   ( 3 0 - 7 0 )   ( d e p a r t m e n t s   2 0 0 4 - 8 ) ;   t o t a l   n u m b e r   o f   c i t a t i o n s   5 7 1   ( 1 7 5 - 1 3 2 8 ) ,   9 3   ( 3 8 - 2 0 7 ) ,   3 8 3   ( 2 3 9 - 8 4 5 ) ;   h - i n d e x   1 3   ( 8 - 2 0 ) ,   6   ( 3 - 8 ) ,   1 1   ( 9 - 1 4 ) .   F o u r   d e p a r t m e n t s   w e r e   r a n k e d   i n   t h e   t o p   5   f o r   a l l   i n d i c e s .   C o n c l u s i o n s .   T h e   g e n e r a l   d i s t r i b u t i o n   o f   b i b l i o m e t r i c   d a t a   i s   s i m i l a r   t o   t h a t   s e e n   i n   o t h e r   s p e c i a l i t i e s   i n   E u r o p e   a n d   N o r t h   A m e r i c a .   F o u r   d e p a r t m e n t s   c o n t r i b u t e   t o   m o r e   t h a n   5 0 %   o f   p u b l i s h e d   a n a e s t h e s i a   r e s e a r c h   o u t p u t   i n   t h i s   d a t a   s e t .   T h e s e   d a t a   p r o v i d e   u s e f u l   c o m p a r a t i v e   t o o l s   f o r   i n d i v i d u a l s ,   d e p a r t m e n t s ,   a n d   n a t i o n a l   b o d i e s . 	 [ M o p p e t t ,   I .   K . ;   H a r d m a n ,   J .   G . ]   U n i v   N o t t i n g h a m ,   D i v   A n a e s t h e s i a   &   I n t e n s   C a r e ,   N o t t i n g h a m   U n i v   H o s p   N H S   T r u s t ,   N o t t i n g h a m   N G 7   2 U H ,   E n g l a n d 	 M o p p e t t ,   I K   ( r e p r i n t   a u t h o r ) ,   U n i v   N o t t i n g h a m ,   D i v   A n a e s t h e s i a   &   I n t e n s   C a r e ,   N o t t i n g h a m   U n i v   H o s p   N H S   T r u s t ,   Q u e e n s   M e d   C t r   C a m p u s ,   N o t t i n g h a m   N G 7   2 U H ,   E n g l a n d . 	 i a i n . m o p p e t t @ n o t t i n g h a m . a c . u k 	 M o p p e t t ,   I a i n / B - 1 7 5 6 - 2 0 0 8 ;   H a r d m a n ,   J o n a t h a n / B - 4 5 0 5 - 2 0 0 8 	 M o p p e t t ,   I a i n / 0 0 0 0 - 0 0 0 3 - 3 7 5 0 - 6 0 6 7 ;   H a r d m a n ,   J o n a t h a n / 0 0 0 0 - 0 0 0 2 - 8 9 5 9 - 8 0 5 8 	 	 	 A d l e r   N J ,   2 0 0 9 ,   A C A D   M A N A G   L E A R N   E D U ,   V 8 ,   P 7 2 ;   A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B e n w a y   B M ,   2 0 0 9 ,   U R O L O G Y ,   V 7 4 ,   P 3 0 ,   D O I   1 0 . 1 0 1 6 / j . u r o l o g y . 2 0 0 8 . 1 0 . 0 4 5 ;   B o u l d   M D ,   2 0 1 1 ,   B R I T   J   A N A E S T H ,   V 1 0 6 ,   P 3 2 5 ,   D O I   1 0 . 1 0 9 3 / b j a / a e q 4 0 3 ;   C h o i   M ,   2 0 0 9 ,   I N T   J   R A D I A T   O N C O L ,   V 7 4 ,   P 1 7 2 ,   D O I   1 0 . 1 0 1 6 / j . i j r o b p . 2 0 0 8 . 0 7 . 0 3 0 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F e n e c k   R O ,   2 0 0 8 ,   A N A E S T H E S I A ,   V 6 3 ,   P 2 7 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 0 8 . 0 5 4 7 5 . x ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   J a c s o   P ,   2 0 0 6 ,   O N L I N E   I N F O R M   R E V ,   V 3 0 ,   P 2 9 7 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 6 1 0 6 7 5 8 1 6 ;   K o t o v   N A ,   2 0 1 0 ,   A C S   N A N O ,   V 4 ,   P 5 8 5 ,   D O I   1 0 . 1 0 2 1 / n n 1 0 0 1 8 2 y ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M o l i n a r i   J F ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 3 - 2 ;   O ' L e a r y   J D ,   2 0 1 0 ,   C A N   J   A N A E S T H ,   V 5 7 ,   P 5 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 2 6 3 0 - 0 1 0 - 9 2 9 2 - 6 ;   P a n d i t   J J ,   2 0 0 8 ,   A N A E S T H E S I A ,   V 6 3 ,   P 2 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 0 4 4 . 2 0 0 8 . 0 5 4 7 3 . x ;   P a n d i t   J J ,   2 0 0 5 ,   N A T L   S T R A T E G Y   A C A D   A ;   P o d l u b n y   I ,   2 0 0 6 ,   R E S   E V A L U A T ,   V 1 5 ,   P 1 5 4 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 6 7 8 1 7 7 5 8 8 7 ;   S y p s a   V ,   2 0 0 9 ,   B M C   M E D   R E S   M E T H O D O L ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 2 8 8 - 9 - 3 3 ;   W i l l i a m s o n   J R ,   2 0 0 9 ,   A C S   C H E M   B I O L ,   V 4 ,   P 3 1 1 ,   D O I   1 0 . 1 0 2 1 / c b 9 0 0 1 0 1 4 	 2 0 	 1 5 	 1 5 	 0 	 8 	 O X F O R D   U N I V   P R E S S 	 O X F O R D 	 G R E A T   C L A R E N D O N   S T ,   O X F O R D   O X 2   6 D P ,   E N G L A N D 	 0 0 0 7 - 0 9 1 2 	 	 	 B R I T   J   A N A E S T H 	 B r .   J .   A n a e s t h . 	 S E P 	 2 0 1 1 	 1 0 7 	 3 	 	 	 	 	 3 5 1 	 3 5 6 	 	 1 0 . 1 0 9 3 / b j a / a e r 1 2 4 	 	 6 	 A n e s t h e s i o l o g y 	 A n e s t h e s i o l o g y 	 8 0 7 O W 	 W O S : 0 0 0 2 9 3 9 1 0 4 0 0 0 0 9 	 2 1 6 2 2 6 6 6 	 
 
 J 	 W i l l i s ,   D L ;   B a h l e r ,   C D ;   N e u b e r g e r ,   M M ;   D a h m ,   P 	 	 	 	 W i l l i s ,   D a n i e l   L . ;   B a h l e r ,   C l i n t   D . ;   N e u b e r g e r ,   M o l l y   M . ;   D a h m ,   P h i l i p p 	 	 	 P r e d i c t o r s   o f   c i t a t i o n s   i n   t h e   u r o l o g i c a l   l i t e r a t u r e 	 B J U   I N T E R N A T I O N A L 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   c i t a t i o n ;   s e l f - c i t a t i o n ;   j o u r n a l   i m p a c t   f a c t o r ;   u r o l o g y ;   b i b l i o m e t r i c s 	 I M P A C T   F A C T O R S ;   J O U R N A L S ;   Q U A L I T Y ;   A R T I C L E S ;   R A T E S 	 T o   a s s e s s   t h e   f a c t o r s   a s s o c i a t e d   w i t h   i n c r e a s e d   c i t a t i o n   r a t e s   i n   t h e   u r o l o g i c a l   l i t e r a t u r e   b y   r e v i e w i n g   a r t i c l e s   p u b l i s h e d   i n   t h e   f o u r   m a j o r   u r o l o g i c a l   j o u r n a l s   t o   h e l p   a u t h o r s   i m p r o v e   t h e   i m p a c t   o f   t h e i r   w o r k .   A   r a n d o m   s a m p l e   o f   2 0 0   o r i g i n a l   r e s e a r c h   a r t i c l e s   p u b l i s h e d   b e t w e e n   J a n u a r y   a n d   J u n e   2 0 0 4   w a s   a n a l y s e d   f r o m   T h e   J o u r n a l   o f   U r o l o g y ,   U r o l o g y ,   E u r o p e a n   U r o l o g y   a n d   B J U   I n t e r n a t i o n a l .   S t u d y   i n f o r m a t i o n   w a s   a b s t r a c t e d   b y   t w o   i n d e p e n d e n t   r e v i e w e r s   a n d   c i t a t i o n   c o u n t s   w i t h i n   4   y e a r s   o f   p u b l i c a t i o n   w e r e   c o l l e c t e d   u s i n g   W e b   o f   S c i e n c e T M .   S t u d y   c h a r a c t e r i s t i c s   a n d   c i t a t i o n   r a t e s   w e r e   a n a l y s e d   u s i n g   m e d i a n   a n d   i n t e r q u a r t i l e   r a n g e s   ( I Q R s ) ,   a n d   l o g i s t i c   r e g r e s s i o n   a n a l y s i s   w a s   u s e d   t o   e v a l u a t e   w h i c h   f a c t o r s   p r e d i c t e d   g r e a t e r   c i t a t i o n   r a t e s .   T h e   o v e r a l l   m e d i a n   n u m b e r   o f   c i t a t i o n s   p e r   p u b l i s h e d   a r t i c l e   w a s   6 . 0   ( I Q R   3 - 1 2 ) .   A f t e r   u n i v a r i a t e   a n a l y s i s ,   w e   f o u n d   t h a t   s t u d y   d e s i g n ,   s t u d y   t o p i c ,   c o n t i n e n t   o f   o r i g i n   a n d   s a m p l e   s i z e   w e r e   a s s o c i a t e d   w i t h   g r e a t e r   m e d i a n   c i t a t i o n   r a t e s .   I n   a   m u l t i v a r i a t e   l i n e a r   r e g r e s s i o n   m o d e l ,   s t u d y   d e s i g n   a n d   s t u d y   t o p i c   ( o n c o l o g y )   p r e d i c t e d   i n c r e a s e d   c i t a t i o n   r a t e s .   R a n d o m i z e d   c o n t r o l l e d   t r i a l s   w e r e   c i t e d   a   m e d i a n   o f   1 3 . 5   t i m e s   a n d   w e r e   t h e   s t r o n g e s t   p r e d i c t o r   o f   c i t a t i o n   r a t e s   w i t h   a n   o d d s   r a t i o   o f   1 1 5 . 5   ( 9 5 %   c o n f i d e n c e   i n t e r v a l   9 . 4 - 1 4 1 9 . 6 ) .   C i t a t i o n   r a t e s   a r e   a s s o c i a t e d   w i t h   s t u d y   d e s i g n   a n d   s t u d y   t o p i c   i n   t h e   u r o l o g i c a l   l i t e r a t u r e .   A u t h o r s   m a y   i m p r o v e   t h e   i m p a c t   o f   t h e i r   w o r k   b y   d e s i g n i n g   c l i n i c a l   s t u d i e s   w i t h   g r e a t e r   m e t h o d o l o g i c a l   s a f e g u a r d s   a g a i n s t   b i a s . 	 [ D a h m ,   P h i l i p p ]   U n i v   F l o r i d a ,   C o l l   M e d ,   H l t h   S c i   C t r ,   D e p t   U r o l ,   G a i n e s v i l l e ,   F L   3 2 6 1 0   U S A ;   [ B a h l e r ,   C l i n t   D . ]   I n d i a n a   U n i v ,   S c h   M e d ,   D e p t   N e u r o l ,   I n d i a n a p o l i s ,   I N   4 6 2 0 2   U S A 	 D a h m ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   F l o r i d a ,   C o l l   M e d ,   H l t h   S c i   C t r ,   D e p t   U r o l ,   B o x   1 0 0 2 4 7 , R o o m   N - 2 0 3 ,   G a i n e s v i l l e ,   F L   3 2 6 1 0   U S A . 	 p . d a h m @ u r o l o g y . u f l . e d u 	 	 B a h l e r ,   C l i n t o n / 0 0 0 0 - 0 0 0 3 - 0 4 8 4 - 8 0 1 X 	 U n i v e r s i t y   o f   F l o r i d a   D e p a r t m e n t   o f   U r o l o g y 	 F u n d i n g   w a s   p r o v i d e d   b y   t h e   U n i v e r s i t y   o f   F l o r i d a   D e p a r t m e n t   o f   U r o l o g y .   T h e   f u n d e r   h a d   n o   i n v o l v e m e n t   i n   s t u d y   d e s i g n ,   d a t a   c o l l e c t i o n ,   d a t a   a n a l y s i s ,   m a n u s c r i p t   p r e p a r a t i o n   o r   p u b l i c a t i o n   d e c i s i o n s . 	 B h a n d a r i   M ,   2 0 0 7 ,   C A N   J   S U R G ,   V 5 0 ,   P 1 1 9 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   F a l a g a s   M E ,   2 0 0 8 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 6 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 8 - 0 0 2 4 - 5 ;   F a v a l o r o   E J ,   2 0 0 8 ,   S E M I N   T H R O M B   H E M O S T ,   V 3 4 ,   P 7 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 8 - 1 0 6 6 0 3 0 ;   F i g g   W D ,   2 0 0 6 ,   P H A R M A C O T H E R A P Y ,   V 2 6 ,   P 7 5 9 ,   D O I   1 0 . 1 5 9 2 / p h c o . 2 6 . 6 . 7 5 9 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   K u l k a r n i   A V ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 4 0 3 ;   M a c D o n a l d   S L ,   2 0 1 0 ,   J   U R O L O G Y ,   V 1 8 4 ,   P 6 4 8 ,   D O I   1 0 . 1 0 1 6 / j . j u r o . 2 0 1 0 . 0 3 . 1 2 7 ;   P a t s o p o u l o s   N A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 3 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 3 . 1 9 . 2 3 6 2 ;   P L o S   M e d i c i n e   E d i t o r s ,   2 0 0 6 ,   P L O S   M E D ,   V 3 ,   p e 2 9 1 ;   P o s t m a   E ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 9 9 9 ;   R O T Z   W ,   2 0 0 4 ,   A S A   S E C T I O N   B U S I N E S S ,   P 1 3 1 6 ;   S c a l e s   C D ,   2 0 0 7 ,   J   U R O L O G Y ,   V 1 7 7 ,   P 1 0 9 0 ,   D O I   1 0 . 1 0 1 6 / j . j u r o . 2 0 0 6 . 1 0 . 0 2 7 ;   S c h u l z   K F ,   2 0 1 0 ,   O P E N   M E D ,   V 4 ,   P 6 0 ;   S i m e r a   I ,   2 0 1 0 ,   B M C   M E D ,   V 8 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 1 - 7 0 1 5 - 8 - 2 4 ;   T s e n g   T Y ,   2 0 0 9 ,   B J U   I N T ,   V 1 0 3 ,   P 1 0 2 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 4 - 4 1 0 X . 2 0 0 8 . 0 8 1 5 5 . x 	 1 6 	 1 5 	 1 5 	 0 	 3 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 4 6 4 - 4 0 9 6 	 	 	 B J U   I N T 	 B J U   I n t . 	 J U N 	 2 0 1 1 	 1 0 7 	 1 2 	 	 	 	 	 1 8 7 6 	 1 8 8 0 	 	 1 0 . 1 1 1 1 / j . 1 4 6 4 - 4 1 0 X . 2 0 1 0 . 1 0 0 2 8 . x 	 	 5 	 U r o l o g y   &   N e p h r o l o g y 	 U r o l o g y   &   N e p h r o l o g y 	 7 6 9 U E 	 W O S : 0 0 0 2 9 1 0 4 3 0 0 0 0 0 3 	 2 1 3 3 2 6 2 9 	 
 
 J 	 I v a n o v i c ,   D ;   S u r l a ,   D ;   R a c k o v i c ,   M 	 	 	 	 I v a n o v i c ,   D r a g a n ;   S u r l a ,   D u s a n ;   R a c k o v i c ,   M i l o s 	 	 	 A   C E R I F   d a t a   m o d e l   e x t e n s i o n   f o r   e v a l u a t i o n   a n d   q u a n t i t a t i v e   e x p r e s s i o n   o f   s c i e n t i f i c   r e s e a r c h   r e s u l t s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C E R I F ;   D a t a   m o d e l   e x t e n s i o n ;   E v a l u a t i o n   o f   s c i e n t i f i c   r e s e a r c h   r e s u l t s 	 L I B R A R Y   C I R C U L A T I O N   S Y S T E M ;   M A R C   2 1 ;   B I B L I O G R A P H I C   R E C O R D S ;   X M L   E D I T O R ;   B I B L I O M E T R I C S ;   I N F O R M E T R I C S ;   S C I E N C E ;   S C I E N T O M E T R I C S ;   C O N S E Q U E N C E S ;   U N I M A R C 	 T h i s   p a p e r   p r e s e n t s   a   p r o p o s a l   o f   C E R I F   d a t a   m o d e l   e x t e n s i o n   f o r   e v a l u a t i o n   o f   s c i e n t i f i c   r e s e a r c h   r e s u l t s .   T h e   d a t a   m o d e l   e x t e n s i o n   i s   b a s e d   o n   t h e   C E R I F   s e m a n t i c   l a y e r   w h i c h   e n a b l e s   c l a s s i f i c a t i o n   o f   e n t i t i e s   a n d   r e l a t i o n s   b e t w e e n   e n t i t i e s   a c c o r d i n g   t o   s o m e   c l a s s i f i c a t i o n   s c h e m e .   T h e   p r o p o s e d   d a t a   m o d e l   w a s   c r e a t e d   u s i n g   P o w e r D e s i g n e r   C A S E   t o o l .   T h e   m o d e l   i s   r e p r e s e n t e d   u s i n g   a   p h y s i c a l   d a t a   m o d e l   i n   t h e   c o n c e p t u a l   n o t a t i o n   t h a t   i s   a d o p t e d   i n   l i t e r a t u r e   f o r   r e p r e s e n t i n g   t h e   C E R I F   d a t a   m o d e l .   T h i s   m o d e l   i s   v e r i f i e d   u s i n g   t h e   r u l e   b o o k   f o r   e v a l u a t i o n   a n d   q u a n t i t a t i v e   e x p r e s s i o n   o f   s c i e n t i f i c   r e s e a r c h   r e s u l t s   o f   r e s e a r c h e r s   e m p l o y e d   a t   U n i v e r s i t y   o f   N o v i   S a d . 	 [ I v a n o v i c ,   D r a g a n ]   U n i v   N o v i   S a d ,   F a c   T e c h   S c i ,   N o v i   S a d   2 1 0 0 0 ,   S e r b i a ;   [ S u r l a ,   D u s a n ;   R a c k o v i c ,   M i l o s ]   U n i v   N o v i   S a d ,   F a c   S c i ,   N o v i   S a d   2 1 0 0 0 ,   S e r b i a 	 I v a n o v i c ,   D   ( r e p r i n t   a u t h o r ) ,   U n i v   N o v i   S a d ,   F a c   T e c h   S c i ,   N o v i   S a d   2 1 0 0 0 ,   S e r b i a . 	 c h e n e j a c @ u n s . a c . r s 	 I v a n o v i c ,   D r a g a n / J - 4 0 7 4 - 2 0 1 2 	 I v a n o v i c ,   D r a g a n / 0 0 0 0 - 0 0 0 2 - 9 9 4 2 - 5 5 2 1 	 	 	 A s s e r s o n   A . ,   2 0 0 2 ,   P   6   I N T   C   C U R R   R E S   I ,   P 3 3 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B o b e r i c   D ,   2 0 0 9 ,   E L E C T R O N   L I B R ,   V 2 7 ,   P 4 7 4 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 0 9 1 0 9 6 6 9 1 6 ;   D i m i c   B ,   2 0 1 0 ,   E L E C T R O N   L I B R ,   V 2 8 ,   P 2 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 1 0 1 1 0 3 3 6 1 1 ;   D i m i c   B ,   2 0 0 9 ,   E L E C T R O N   L I B R ,   V 2 7 ,   P 5 0 9 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 0 9 1 0 9 6 6 9 3 4 ;   E g g h e   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 1 ;   F e r l e z   J . ,   2 0 0 5 ,   P U B L I C   I S T   W O R L D   D E L ,   P 1 2 ;   G l a n z e l   W ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 3 5 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 3 7 8 8 0 4 0 8 7 ;   G o d i n   B ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 8 6 - 0 ;   H o l m e s   A . ,   2 0 0 1 ,   I N F O R M   R E S ,   V 6 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   I V A N O V I C   D ,   2 0 1 0 ,   E L E C T   L I B   I N   P R E S S ;   J e f f e r y   K G ,   2 0 0 0 ,   I N T   J   G R E Y   L I T ,   V 1 ,   P 6 4 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 6 6 1 8 0 0 1 0 3 2 7 4 2 9 ;   J e f f e r y   K . ,   2 0 0 2 ,   P   6   I N T   C   C U R R   R E S   I ,   P 7 7 ;   J E F F E R Y   K ,   2 0 0 0 ,   P   C R I S   2 0 0 0   H E L S ,   P 2 2 ;   J o r g   B . ,   2 0 0 5 ,   P U B L I C   I S T   W O R L D   D E L ,   P 1 8 ;   J o r g   B . ,   2 0 0 9 ,   C E R I F   2 0 0 8   1   0   X M L   D ,   P 3 3 ;   J o r g   B . ,   2 0 0 6 ,   8   I N T   C   C U R R   R E S   I N F ,   P 1 0 ;   J o r g   B . ,   2 0 0 9 ,   C E R I F   2 0 0 8   1   0   F U L L ,   P 4 3 ;   K i r y a k o v   A . ,   2 0 0 5 ,   P U B L I C   I S T   W O R L D   D E L ,   P 2 3 ;   K l i t k o u   A ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 5 0 - x ;   * L I B   C ,   M A R C   F O R M   O V   N E T W   D E ;   G o m e z - S a n c h o   J M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 3 7 - 1 ;   * M A T H   N E T ,   M A T H   N E T   I N T   I N F   C O M ;   M I L O S A V L J E V I C   B ,   2 0 1 0 ,   E L E C T   L I B   I N   P R E S S ,   V 2 8 ;   M i l o s a v l j e v i c   B ,   2 0 1 0 ,   E L E C T R O N   L I B R ,   V 2 8 ,   P 2 8 6 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 1 0 1 1 0 3 3 6 4 8 ;   M o l a t u d i   M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 4 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 4 8 - 6 ;   Q i u   H ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 6 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 2 0 7 - 4 ;   R a d j e n o v i c   J ,   2 0 0 9 ,   P R O G R A M - E L E C T R O N   L I B ,   V 4 3 ,   P 6 2 ,   D O I   1 0 . 1 1 0 8 / 0 0 3 3 0 3 3 0 9 1 0 9 3 4 1 1 0 ;   R u d i c   G ,   2 0 0 9 ,   E L E C T R O N   L I B R ,   V 2 7 ,   P 9 5 0 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 0 9 1 1 0 0 4 0 5 7 ;   S c h u b e r t   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 8 6 2 0 2 4 2 5 ;   S e l j a k   T . ,   2 0 0 6 ,   I n f o r m a t i o n   S e r v i c e s   &   U s e ,   V 2 6 ;   T e s e n d i c   D ,   2 0 0 9 ,   E L E C T R O N   L I B R ,   V 2 7 ,   P 1 6 2 ,   D O I   1 0 . 1 1 0 8 / 0 2 6 4 0 4 7 0 9 1 0 9 3 4 6 6 9 ;   V i d a k o v i c   M ,   2 0 0 9 ,   C O M P U T   S C I   I N F   S Y S T ,   V 6 ,   P 1 ,   D O I   1 0 . 2 2 9 8 / c s i s 0 9 0 2 0 0 1 V ;   W a r n e r   J ,   2 0 0 0 ,   J   I N F O R M   S C I ,   V 2 6 ,   P 4 5 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 0 4 2 3 3 4 5 6 ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 ;   Y i   C G ,   2 0 0 0 ,   R E S   E V A L U A T ,   V 9 ,   P 1 5 8 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 0 7 8 1 7 7 7 2 3 2 ;   Z i m m e r m a n   E . ,   2 0 0 2 ,   P   6   I N T   C   C U R R   R E S   I ,   P 1 1 ;   F R I D A ;   H U N C R I S ;   P O W E R D E S I G N E R 	 4 1 	 1 5 	 1 5 	 3 	 2 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 J A N 	 2 0 1 1 	 8 6 	 1 	 	 	 	 	 1 5 5 	 1 7 2 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 2 8 - 2 	 	 1 8 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 8 8 X C 	 W O S : 0 0 0 2 8 4 8 8 8 6 0 0 0 1 2 	 	 
 
 J 	 K e t c h u m ,   A M ;   S a l e h ,   A A ;   J e o n g ,   K 	 	 	 	 K e t c h u m ,   A n d r e a   M . ;   S a l e h ,   A h l a m   A . ;   J e o n g ,   K w o n h o 	 	 	 T y p e   o f   E v i d e n c e   B e h i n d   P o i n t - o f - C a r e   C l i n i c a l   I n f o r m a t i o n   P r o d u c t s :   A   B i b l i o m e t r i c   A n a l y s i s 	 J O U R N A L   O F   M E D I C A L   I N T E R N E T   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 D a t a b a s e s ;   F a c t u a l ;   B i b l i o m e t r i c s ;   M e d i c a l   I n f o r m a t i c s ;   E v i d e n c e - b a s e d   M e d i c i n e 	 E V I D E N C E - B A S E D   M E D I C I N E ;   S E E K I N G   B E H A V I O R S ;   C I T A T I O N   A N A L Y S I S ;   Q U E S T I O N S ;   P H Y S I C I A N S ;   R E S O U R C E S ;   U P T O D A T E ;   P E D I A T R I C I A N S ;   D E C I S I O N S ;   K N O W L E D G E 	 B a c k g r o u n d :   P o i n t - o f - c a r e   ( P O C )   p r o d u c t s   a r e   w i d e l y   u s e d   a s   i n f o r m a t i o n   r e f e r e n c e   t o o l s   i n   t h e   c l i n i c a l   s e t t i n g .   A l t h o u g h   u s a b i l i t y ,   s c o p e   o f   c o v e r a g e ,   a b i l i t y   t o   a n s w e r   c l i n i c a l   q u e s t i o n s ,   a n d   i m p a c t   o n   h e a l t h   o u t c o m e s   h a v e   b e e n   s t u d i e d ,   n o   c o m p a r a t i v e   a n a l y s i s   o f   t h e   c h a r a c t e r i s t i c s   o f   t h e   r e f e r e n c e s ,   t h e   e v i d e n c e   f o r   t h e   c o n t e n t ,   i n   P O C   p r o d u c t s   i s   a v a i l a b l e .   O b j e c t i v e :   T h e   o b j e c t i v e   o f   t h i s   s t u d y   w a s   t o   c o m p a r e   t h e   t y p e   o f   e v i d e n c e   b e h i n d   f i v e   P O C   c l i n i c a l   i n f o r m a t i o n   p r o d u c t s .   M e t h o d s :   T h i s   s t u d y   i s   a   c o m p a r a t i v e   b i b l i o m e t r i c   a n a l y s i s   o f   r e f e r e n c e s   c i t e d   i n   m o n o g r a p h s   i n   P O C   p r o d u c t s .   F i v e   c o m m o n l y   u s e d   p r o d u c t s   s e r v e d   a s   s u b j e c t s   f o r   t h e   s t u d y :   A C P   P I E R ,   C l i n i c a l   E v i d e n c e ,   D y n a M e d ,   F i r s t C O N S U L T ,   a n d   U p T o D a t e .   T h e   f o u r   c l i n i c a l   t o p i c s   e x a m i n e d   t o   i d e n t i f y   c o n t e n t   i n   t h e   p r o d u c t s   w e r e   a s t h m a ,   h y p e r t e n s i o n ,   h y p e r l i p i d e m i a ,   a n d   c a r b o n   m o n o x i d e   p o i s o n i n g .   F o u r   i n d i c a t o r s   w e r e   m e a s u r e d :   d i s t r i b u t i o n   o f   c i t a t i o n s ,   t y p e   o f   e v i d e n c e ,   p r o d u c t   c u r r e n c y ,   a n d   c i t a t i o n   o v e r l a p .   T h e   t y p e   o f   e v i d e n c e   w a s   d e t e r m i n e d   b a s e d   p r i m a r i l y   o n   t h e   p u b l i c a t i o n   t y p e   f o u n d   i n   t h e   M E D L I N E   b i b l i o g r a p h i c   r e c o r d ,   a s   w e l l   a s   t h e   M e d i c a l   S u b j e c t   H e a d i n g s   ( M e S H ) ,   b o t h   a s s i g n e d   b y   t h e   U S   N a t i o n a l   L i b r a r y   o f   M e d i c i n e .   M e S H   i s   t h e   c o n t r o l l e d   v o c a b u l a r y   u s e d   f o r   i n d e x i n g   a r t i c l e s   i n   M E D L I N E / P u b M e d .   R e s u l t s :   F i r s t C O N S U L T   h a d   t h e   g r e a t e s t   p r o p o r t i o n   o f   r e f e r e n c e s   w i t h   h i g h e r   l e v e l s   o f   e v i d e n c e   p u b l i c a t i o n   t y p e s   s u c h   a s   s y s t e m a t i c   r e v i e w   a n d   r a n d o m i z e d   c o n t r o l l e d   t r i a l   ( 1 3 7 / 1 5 3 ,   8 9 . 5 % ) ,   a l t h o u g h   i t   c o n t a i n e d   t h e   l o w e s t   t o t a l   n u m b e r   o f   r e f e r e n c e s   ( 1 5 3 / 2 3 3 0 ,   6 . 6 % ) .   D y n a M e d   h a d   t h e   l a r g e s t   t o t a l   n u m b e r   o f   r e f e r e n c e s   ( 1 1 3 1 / 2 3 3 0 ,   4 8 . 5 % )   a n d   t h e   l a r g e s t   p r o p o r t i o n   o f   c u r r e n t   ( 2 0 0 7 - 2 0 0 9 )   r e f e r e n c e s   ( 1 7 0 / 1 1 3 1 ,   1 5 % ) .   T h e   d i s t r i b u t i o n   o f   r e f e r e n c e s   c i t e d   f o r   e a c h   t o p i c   v a r i e d   b e t w e e n   p r o d u c t s .   F o r   e x a m p l e ,   a s t h m a   h a d   t h e   m o s t   r e f e r e n c e s   l i s t e d   i n   D y n a M e d ,   C l i n i c a l   E v i d e n c e ,   a n d   F i r s t C O N S U L T ,   w h i l e   h y p e r t e n s i o n   h a d   t h e   m o s t   r e f e r e n c e s   i n   U p T o D a t e   a n d   A C P   P I E R .   A n   u n e x p e c t e d   f i n d i n g   w a s   t h a t   t h e   r a t e   o f   c i t a t i o n   o v e r l a p   w a s   l e s s   t h a n   1 %   f o r   e a c h   t o p i c   a c r o s s   a l l   f i v e   p r o d u c t s .   C o n c l u s i o n s :   D i f f e r e n c e s   b e t w e e n   P O C   p r o d u c t s   a r e   r e v e a l e d   b y   e x a m i n i n g   t h e   r e f e r e n c e s   c i t e d   i n   t h e   m o n o g r a p h s   t h e m s e l v e s .   C i t a t i o n   a n a l y s i s   e x t e n d e d   t o   i n c l u d e   k e y   c o n t e n t   i n d i c a t o r s   c a n   b e   u s e d   t o   c o m p a r e   t h e   e v i d e n c e   l e v e l s   o f   t h e   l i t e r a t u r e   s u p p o r t i n g   t h e   c o n t e n t   f o u n d   i n   P O C   p r o d u c t s . 	 [ K e t c h u m ,   A n d r e a   M . ;   S a l e h ,   A h l a m   A . ]   U n i v   P i t t s b u r g h ,   H l t h   S c i   L i b   S y s t ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A ;   [ J e o n g ,   K w o n h o ]   U n i v   P i t t s b u r g h ,   G r a d   S c h   P u b l   H l t h ,   D e p t   B i o s t a t ,   P i t t s b u r g h ,   P A   1 5 2 6 1   U S A 	 K e t c h u m ,   A M   ( r e p r i n t   a u t h o r ) ,   U n i v   P i t t s b u r g h ,   H l t h   S c i   L i b   S y s t ,   P i t t s b u r g h ,   P A   1 5 2 6 0   U S A . 	 k e t c h u m @ p i t t . e d u 	 S a l e h ,   A h l a m / G - 3 7 6 6 - 2 0 1 3 ;   K e t c h u m ,   A n d r e a / A - 3 5 8 1 - 2 0 1 2 	 S a l e h ,   A h l a m / 0 0 0 0 - 0 0 0 2 - 3 4 9 2 - 3 1 4 0 ;   K e t c h u m ,   A n d r e a / 0 0 0 0 - 0 0 0 2 - 4 3 8 4 - 1 2 9 4 	 N a t i o n a l   C e n t e r   f o r   R e s e a r c h   R e s o u r c e s   ( N C R R )   [ U L 1   R R 0 2 4 1 5 3 ] ;   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N I H ) ;   N I H   R o a d m a p   f o r   M e d i c a l   R e s e a r c h 	 P a r t   o f   t h i s   s t u d y   w a s   f u n d e d   b y   G r a n t   N u m b e r   U L 1   R R 0 2 4 1 5 3   f r o m   t h e   N a t i o n a l   C e n t e r   f o r   R e s e a r c h   R e s o u r c e s   ( N C R R ) ,   a   c o m p o n e n t   o f   t h e   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N I H ) ,   a n d   N I H   R o a d m a p   f o r   M e d i c a l   R e s e a r c h .   T h e   a u t h o r s   w o u l d   l i k e   t o   t h a n k   N a n c y   H r i n y a   T a n n e r y ,   H e a l t h   S c i e n c e s   L i b r a r y   S y s t e m ,   U n i v e r s i t y   o f   P i t t s b u r g h ,   f o r   r e v i e w i n g   t h e   m a n u s c r i p t . 	 A b e r n e t h y   A P ,   2 0 0 9 ,   A N N   I N T E R N   M E D ,   V 1 5 0 ,   P 3 3 6 ;   A l p e r   B S ,   2 0 0 5 ,   A N N   F A M   M E D ,   V 3 ,   P 5 0 7 ,   D O I   1 0 . 1 3 7 0 / a f m . 3 7 0 ;   A l p e r   B S ,   2 0 0 1 ,   J   F A M   P R A C T I C E ,   V 5 0 ,   P 9 6 0 ;   A n d r e w s   J E ,   2 0 0 5 ,   J   M E D   L I B R   A S S O C ,   V 9 3 ,   P 2 0 6 ;   B a n z i   R ,   2 0 1 0 ,   J   M E D   I N T E R N E T   R E S ,   V 1 2 ,   D O I   1 0 . 2 1 9 6 / j m i r . 1 2 8 8 ;   B e n n e t t   N a n c y   L ,   2 0 0 4 ,   J   C o n t i n   E d u c   H e a l t h   P r o f ,   V 2 4 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / c h p . 1 3 4 0 2 4 0 1 0 6 ;   B o n i s   P A ,   2 0 0 8 ,   I N T   J   M E D   I N F O R M ,   V 7 7 ,   P 7 4 5 ,   D O I   1 0 . 1 0 1 6 / j . i j m e d i n f . 2 0 0 8 . 0 4 . 0 0 2 ;   B R O A D U S   R N ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 ;   C a m p b e l l   R ,   2 0 0 6 ,   J   M E D   L I B R   A S S O C ,   V 9 4 ,   P 4 3 5 ;   C H U B I N   D E ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 4 0 3 ;   C o o k   D J ,   1 9 9 7 ,   A N N   I N T E R N   M E D ,   V 1 2 6 ,   P 3 7 6 ;   D ' A l e s s a n d r o   D M ,   2 0 0 4 ,   P E D I A T R I C S ,   V 1 1 3 ,   P 6 4 ,   D O I   1 0 . 1 5 4 2 / p e d s . 1 1 3 . 1 . 6 4 ;   D a r t m o u t h   B i o m e d i c a l   L i b r a r i e s .   D a r m o u t h   C o l l e g e   L i b r a r y ,   2 0 0 8 ,   E V   B A S   M E D   E B M   R E S ;   D a v i e s   K ,   2 0 0 7 ,   H E A L T H   I N F O   L I B R   J ,   V 2 4 ,   P 7 8 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 1 - 1 8 4 2 . 2 0 0 7 . 0 0 7 1 3 . x ;   D i C e n s o   A ,   2 0 0 9 ,   A N N   I N T E R N   M E D ,   V 1 5 1 ;   F a r r e l l   A . ,   2 0 0 8 ,   E V I D E N C E   B A S E D   L I B   I ;   F e n t o n   S H ,   2 0 0 7 ,   J   M E D   L I B R   A S S O C ,   V 9 5 ,   P 2 5 5 ,   D O I   1 0 . 3 1 6 3 / 1 5 3 6 - 5 0 5 0 . 9 5 . 3 . 2 5 5 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G o o d y e a r - S m i t h   F ,   2 0 0 8 ,   A U S T   F A M   P H Y S I C I A N ,   V 3 7 ,   P 8 7 8 ;   G r a b e r   M A ,   2 0 0 8 ,   A M   J   E M E R G   M E D ,   V 2 6 ,   P 1 4 4 ,   D O I   1 0 . 1 0 1 6 / j . a j e m . 2 0 0 7 . 0 3 . 0 3 1 ;   G u y a t t   G o r d o n ,   2 0 0 8 ,   U S E R S   G U I D E S   M E D   L I T ;   H a a h r   M ,   R A N D O M   I N T E G E R   G E N E R ;   H a y n e s   R   B r i a n ,   2 0 0 6 ,   E v i d   B a s e d   M e d ,   V 1 1 ,   P 1 6 2 ;   H o o g e n d a m   A ,   2 0 0 8 ,   J   M E D   I N T E R N E T   R E S ,   V 1 0 ,   D O I   1 0 . 2 1 9 6 / j m i r . 1 0 1 2 ;   K A P L A N   N ,   1 9 6 5 ,   A M   D O C ,   V 1 6 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 6 0 3 0 5 ;   K o o n c e   T Y ,   2 0 0 4 ,   J   M E D   L I B R   A S S O C ,   V 9 2 ,   P 4 0 7 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M c C o r d   G ,   2 0 0 7 ,   A C A D   M E D ,   V 8 2 ,   P 2 9 8 ,   D O I   1 0 . 1 0 9 7 / A C M . 0 b 0 1 3 e 3 1 8 0 3 0 7 f e d ;   M c K i b b o n   K A ,   2 0 0 6 ,   J   A M   M E D   I N F O R M   A S S N ,   V 1 3 ,   P 6 5 3 ,   D O I   1 0 . 1 1 9 7 / j a m i a . M 2 0 8 7 ;   M o e d   H F . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ,   P 1 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   N a t i o n a l   C e n t e r   f o r   H e a l t h   S t a t i s t i c s ,   2 0 0 7 ,   H L T H   U S   C H A R T B   T R E N D ;   U S   N a t i o n a l   L i b r a r y   o f   M e d i c i n e .   N a t i o n a l   L i b r a r y   o f   M e d i c i n e ,   2 0 0 8 ,   C L I N   Q U E S T   C O L L ;   P r e n d i v i l l e   T W ,   2 0 0 9 ,   A R C H   D I S   C H I L D ,   V 9 4 ,   P 6 3 3 ,   D O I   1 0 . 1 1 3 6 / a d c . 2 0 0 8 . 1 4 9 2 7 8 ;   S a c k e t t   D L ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 2 ,   P 7 1 ;   S c o t t   I ,   2 0 0 0 ,   A U S T   N Z   J   M E D ,   V 3 0 ,   P 3 1 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 4 5 - 5 9 9 4 . 2 0 0 0 . t b 0 0 8 3 2 . x ;   S t r a u s   S ,   2 0 0 9 ,   C A N   M E D   A S S O C   J ,   V 1 8 0 ,   P 9 4 2 ,   D O I   1 0 . 1 5 0 3 / c m a j . 0 8 1 6 9 7 ;   S t r a u s s   S E ,   2 0 0 5 ,   E V I D E N C E   B A S E D   M E D   P ;   T r u m b l e   J ,   2 0 0 6 ,   T E X   H L T H   S C I   L I B   C O N ;   v a n   D i j k   N ,   2 0 1 0 ,   A C A D   M E D ,   V 8 5 ,   P 1 1 6 3 ,   D O I   1 0 . 1 0 9 7 / A C M . 0 b 0 1 3 e 3 1 8 1 d 4 1 5 2 f ;   W e s t b r o o k   J I ,   2 0 0 5 ,   J   A M   M E D   I N F O R M   A S S N ,   V 1 2 ,   P 3 1 5 ,   D O I   1 0 . 1 1 9 7 / j a m i a . M 1 7 1 7 	 4 2 	 1 5 	 1 5 	 1 	 1 4 	 J M I R   P U B L I C A T I O N S ,   I N C 	 T O R O N T O 	 5 9   W I N N E R S   C I R C L E ,   T O R O N T O ,   O N   M 4 L   3 Y 7 ,   C A N A D A 	 1 4 3 8 - 8 8 7 1 	 	 	 J   M E D   I N T E R N E T   R E S 	 J .   M e d .   I n t e r n e t   R e s . 	 J A N - M A R 	 2 0 1 1 	 1 3 	 1 	 	 	 	 	 	 	 e 2 1 	 1 0 . 2 1 9 6 / j m i r . 1 5 3 9 	 	 1 1 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 9 3 7 P Q 	 W O S : 0 0 0 3 0 3 6 7 0 8 0 0 0 0 2 	 2 1 3 3 5 3 1 9 	 
 
 J 	 T o r r e s - S a l i n a s ,   D ;   B o r d o n s ,   M ;   G i m e n e z - T o l e d o ,   E ;   D e l g a d o - L o p e z - C o z a r ,   E ;   J i m e n e z - C o n t r e r a s ,   E ;   S a n z - C a s a d o ,   E 	 	 	 	 T o r r e s - S a l i n a s ,   D a n i e l ;   B o r d o n s ,   M a r i a ;   G i m e n e z - T o l e d o ,   E l e a ;   D e l g a d o - L o p e z - C o z a r ,   E m i l i o ;   J i m e n e z - C o n t r e r a s ,   E v a r i s t o ;   S a n z - C a s a d o ,   E l i a s 	 	 	 I n t e g r a t e d   s c i e n t i f i c   j o u r n a l s   c l a s s i f i c a t i o n   ( C I R C ) :   A   p r o p o s a l   f o r   c a t e g o r i z a t i o n   o f   j o u r n a l s   i n   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s 	 P R O F E S I O N A L   D E   L A   I N F O R M A C I O N 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 S c i e n t i f i c   j o u r n a l s ;   B i b l i o m e t r i c   i n d i c a t o r s ;   S o c i a l   s c i e n c e s ;   H u m a n   s c i e n c e s ;   J o u r n a l   c l a s s i f i c a t i o n s ;   R a n k i n g s ;   A n e c a ;   C n e a i ;   R e s e a r c h   e v a l u a t i o n 	 R E S E A R C H   P E R F O R M A N C E ;   I N D I C A T O R S 	 A   p r o p o s a l   f o r   a   q u a l i t a t i v e   c l a s s i f i c a t i o n   o f   s c i e n t i f i c   j o u r n a l s   s p e c i a l i z e d   i n   s o c i a l   s c i e n c e s   a n d   h u m a n i t i e s   i s   p r e s e n t e d .   T h e   m a i n   o b j e c t i v e   o f   C I R C   ( i n   S p a n i s h ,   " C l a s i f i c a c i o n   i n t e g r a d a   d e   r e v i s t a s   c i e n t i f i c a s " )   i s   t o   b e c o m e   a   t o o l   t o   o b t a i n   b i b l i o m e t r i c s   i n d i c a t o r s   f o r   d i f f e r e n t   l e v e l s   o f   a g g r e g a t i o n   b a s e d   o n   t h e   q u a l i t y   o f   p u b l i c a t i o n s .   T h e   r a n k i n g   i s   t h e   r e s u l t   o f   c o n s e n s u s   o f   e x p e r t s   i n   t h e   f i e l d   o f   b i b l i o m e t r i c s   a n d   r e s e a r c h   e v a l u a t i o n .   T h e   r e s u l t i n g   c l a s s i f i c a t i o n   c o n s i s t s   o f   f o u r   g r o u p s   o f   j o u r n a l s   ( g A ,   g B ,   g C ,   g D )   c o n f i g u r e d   a c c o r d i n g   t o   t h e   v i s i b i l i t y   o f   t h e   j o u r n a l s ;   a   f i f t h   g r o u p   o f   e x c e l l e n c e   w a s   c r e a t e d   w i t h   t h e   m o s t   r e l e v a n t   j o u r n a l s   ( g E x ) .   T o   c r e a t e   g r o u p s   a n d   d e t e r m i n e   q u a l i t y   o f   t h e   j o u r n a l s ,   v a r i o u s   l i s t s   a n d   d a t a b a s e s   r e f e r e n c e d   i n   C n e a i   a n d   A n e c a   s t a n d a r d s   w e r e   u s e d .   F i n a l l y ,   w e   i l l u s t r a t e   t h e   u s e   o f   C I R C   a p p l y i n g   i t   t o   t h e   s c i e n t i f i c   p r o d u c t i o n   o f   t h e   d e p a r t m e n t s   o f   S o c i a l   S c i e n c e s   a t   t h e   U n i v e r s i t y   o f   G r a n a d a . 	 [ T o r r e s - S a l i n a s ,   D a n i e l ]   U n i v   G r a n a d a ,   P a m p l o n a   3 1 0 0 8 ,   S p a i n ;   [ T o r r e s - S a l i n a s ,   D a n i e l ]   U n i v   N a v a r r a ,   C t r   I n v e s t   M e d   A p l i c a d a ,   P a m p l o n a   3 1 0 0 8 ,   S p a i n ;   [ B o r d o n s ,   M a r i a ;   G i m e n e z - T o l e d o ,   E l e a ]   C S I C ,   I e d c y t ,   C C H S ,   M a d r i d   2 8 0 3 7 ,   S p a i n ;   [ B o r d o n s ,   M a r i a ;   G i m e n e z - T o l e d o ,   E l e a ;   S a n z - C a s a d o ,   E l i a s ]   U n i v   C a r l o s   I I I   M a d r i d ,   U n i d a d   A s o c i a d a   I e d c y t   L E M I ,   E - 2 8 9 0 3   G e t a f e ,   M a d r i d ,   S p a i n ;   [ D e l g a d o - L o p e z - C o z a r ,   E m i l i o ;   J i m e n e z - C o n t r e r a s ,   E v a r i s t o ]   U n i v   G r a n a d a ,   D e p t   B i b l i o t e c o n   &   D o c u m e n t a c ,   G r a n a d a   1 8 0 1 1 ,   S p a i n ;   [ S a n z - C a s a d o ,   E l i a s ]   U n i v   C a r l o s   I I I   M a d r i d ,   D e p t   B i b l i o t e c o n   &   D o c u m e n t a c ,   E - 2 8 9 0 3   G e t a f e ,   M a d r i d ,   S p a i n 	 T o r r e s - S a l i n a s ,   D   ( r e p r i n t   a u t h o r ) ,   U n i v   G r a n a d a ,   A v d a   P i o   X I I   5 5 ,   P a m p l o n a   3 1 0 0 8 ,   S p a i n . 	 t o r r e s s a l i n a s @ g m a i l . c o m ;   m a r i a . b o r d o n s @ c c h s . c s i c . e s ;   e l e a . g i m e n e z @ c c h s . c s i c . e s ;   e d e l g a d o @ u g r . e s ;   e v a r i s t o @ u g r . e s ;   e l i a s @ b i b . u c 3 m . e s 	 D e l g a d o   L o p e z - C o z a r ,   E m i l i o / I - 8 4 0 6 - 2 0 1 2 ;   S a n z - C a s a d o ,   E l i a s / E - 6 5 8 7 - 2 0 1 0 ;   T o r r e s - S a l i n a s ,   D a n i e l / D - 5 0 8 0 - 2 0 1 6 ;   T o r r e s - S a l i n a s ,   D a n i e l / A - 3 9 6 8 - 2 0 1 0 	 S a n z - C a s a d o ,   E l i a s / 0 0 0 0 - 0 0 0 2 - 0 1 8 8 - 7 4 8 9 ;   T o r r e s - S a l i n a s ,   D a n i e l / 0 0 0 0 - 0 0 0 2 - 5 6 4 8 - 2 5 0 X ;   T o r r e s - S a l i n a s ,   D a n i e l / 0 0 0 0 - 0 0 0 1 - 8 7 9 0 - 3 3 1 4 	 	 	 P a r t e a r r o y o   M D A ,   2 0 0 8 ,   R E V   E S P   D O C   C I E N T ,   V 3 1 ,   P 8 5 ;   A l e i x a n d r e - B e n a v e n t   R ,   2 0 0 7 ,   P R O F   I N F O R M ,   V 1 6 ,   P 4 ,   D O I   1 0 . 3 1 4 5 / e p i . 2 0 0 7 . j a n . 0 1 ;   A n e c a ,   2 0 0 8 ,   P R O G R   A C   P R I N C   O R   A P ,   V 2 . 0 ;   * A N E P   F E C ,   2 0 0 8 ,   C A T   R E V   C I E N T   E S P   H U ;   A R C H A M B A U L T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ;   B o r d o n s   M ,   2 0 0 4 ,   R E V   E S P   C A R D I O L ,   V 5 7 ,   P 7 9 9 ,   D O I   1 0 . 1 0 1 6 / S 1 8 8 5 - 5 8 5 7 ( 0 6 ) 6 0 6 4 3 - 9 ;   C e t t o   A   M ,   1 9 9 8 ,   I n t   M i c r o b i o l ,   V 1 ,   P 1 8 1 ;   D E L G A D O - L O P E Z - C O Z A R   E m i l i o ,   2 0 0 5 ,   B I B L I O   3 W   R E V   B I B L I O ,   V 1 0 ;   D E L G A D O L O P E Z C O Z . E ,   2 0 1 0 ,   A U L A   A B I E R T A ,   V 3 8 ,   P 3 ;   * E S F   H U M   U N ,   2 0 0 9 ,   I N C R   V I S   M U L T   H U M   R E ;   G a v e l   Y ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 8 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 6 5 9 5 8 ;   G i m e n e z - T o l e d o   E ,   2 0 0 7 ,   R E S   E V A L U A T ,   V 1 6 ,   P 1 3 7 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 7 X 2 2 0 4 0 9 ;   G I M E N E Z T O L E D O ,   2 0 0 9 ,   J   S C H O L A R L Y   P U B L ,   V 4 0 ,   P 2 8 7 ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   H e m l i n   S ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 5 6 ;   H i c k s   D ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 4 7 3 ;   H u a n g   M H ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 5 ;   L R I B A R R E N M A E S T R . I ,   2 0 0 9 ,   C E L E B R A T I N G   S C H O L A R L ,   P 2 5 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   R O S A D O M I L L A N   M J ,   2 0 0 8 ,   C R I T E R I O S   C L A S I F I C A C ;   R u i z - P e r e z   R ,   2 0 0 6 ,   I N T   J   C L I N   H L T H   P S Y C ,   V 6 ,   P 4 0 1 ;   T o r r e s - S a l i n a s   D ,   2 0 0 9 ,   R E V   E S P   D O C   C I E N T ,   V 3 2 ,   P 2 2 ,   D O I   1 0 . 3 9 8 9 / r e d c . 2 0 0 9 . 1 . 6 7 3 ;   T O R R E S S A L I N A S ,   2 0 1 0 ,   S C O P U S ,   V 1 9 ,   P 2 0 1 ;   Z i t t   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 6 ,   P 2 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 1 9 2 3 3 2 9 2 7 7 	 2 5 	 1 5 	 1 5 	 4 	 2 8 	 E P I 	 B A R C E L O N A 	 A P A R T A D O   3 2   2 8 0 ,   B A R C E L O N A ,   0 8 0 8 0 ,   S P A I N 	 1 3 8 6 - 6 7 1 0 	 	 	 P R O F   I N F O R M 	 P r o f .   I n f . 	 N O V - D E C 	 2 0 1 0 	 1 9 	 6 	 	 	 	 	 6 7 5 	 6 8 3 	 	 1 0 . 3 1 4 5 / e p i . 2 0 1 0 . n o v . 1 5 	 	 9 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 9 5 M D 	 W O S : 0 0 0 2 8 5 3 7 3 7 0 0 0 1 5 	 	 
 
 J 	 M e y e r ,   M ;   L o r s c h e i d ,   I ;   T r o i t z s c h ,   K G 	 	 	 	 M e y e r ,   M a t t h i a s ;   L o r s c h e i d ,   I r i s ;   T r o i t z s c h ,   K l a u s   G . 	 	 	 T h e   D e v e l o p m e n t   o f   S o c i a l   S i m u l a t i o n   a s   R e f l e c t e d   i n   t h e   F i r s t   T e n   Y e a r s   o f   J A S S S :   a   C i t a t i o n   a n d   C o - C i t a t i o n   A n a l y s i s 	 J A S S S - T H E   J O U R N A L   O F   A R T I F I C I A L   S O C I E T I E S   A N D   S O C I A L   S I M U L A T I O N 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 C i t a t i o n   A n a l y s i s ;   C o - C i t a t i o n   A n a l y s i s ;   L i n e s   o f   R e s e a r c h ;   M u l t i d i s c i p l i n a r y ;   S c i e n c e   S t u d i e s ;   S o c i a l   S i m u l a t i o n 	 A R T I F I C I A L   S T O C K - M A R K E T ;   I N T E L L E C T U A L   S T R U C T U R E ;   G E N E T I C A L   E V O L U T I O N ;   M A T H E M A T I C A L - T H E O R Y ;   B O U N D E D   C O N F I D E N C E ;   D Y N A M I C S ;   B I B L I O M E T R I C S ;   C O M M U N I C A T I O N ;   R E P U T A T I O N ;   N E T W O R K 	 S o c i a l   s i m u l a t i o n   i s   o f t e n   d e s c r i b e d   a s   a   m u l t i d i s c i p l i n a r y   a n d   f a s t - m o v i n g   f i e l d .   T h i s   c a n   m a k e   i t   d i f f i c u l t   t o   o b t a i n   a n   o v e r v i e w   o f   t h e   f i e l d   b o t h   f o r   c o n t r i b u t i n g   r e s e a r c h e r s   a n d   f o r   o u t s i d e r s   w h o   a r e   i n t e r e s t e d   i n   s o c i a l   s i m u l a t i o n .   T h e   J o u r n a l   f o r   A r t i f i c i a l   S o c i e t i e s   a n d   S o c i a l   S i m u l a t i o n   ( J A S S S )   c o m p l e t i n g   i t s   t e n t h   y e a r   p r o v i d e s   a   g o o d   o p p o r t u n i t y   t o   t a k e   s t o c k   o f   w h a t   h a p p e n e d   o v e r   t h i s   t i m e   p e r i o d .   F i r s t ,   w e   u s e   c i t a t i o n   a n a l y s i s   t o   i d e n t i f y   t h e   m o s t   i n f l u e n t i a l   p u b l i c a t i o n s   a n d   t o   v e r i f y   c h a r a c t e r i s t i c s   o f   s o c i a l   s i m u l a t i o n   s u c h   a s   i t s   m u l t i d i s c i p l i n a r y   n a t u r e .   T h e n ,   w e   p e r f o r m   a   c o - c i t a t i o n   a n a l y s i s   t o   v i s u a l i z e   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   s o c i a l   s i m u l a t i o n   a n d   i t s   d e v e l o p m e n t .   O v e r a l l ,   t h e   a n a l y s i s   s h o w s   s o c i a l   s i m u l a t i o n   b o t h   i n   i t s   e a r l y   s t a g e   a n d   d u r i n g   i t s   f i r s t   s t e p s   t o w a r d s   b e c o m i n g   a   m o r e   d i f f e r e n t i a t e d   d i s c i p l i n e . 	 	 	 	 	 	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   A l b e r t   R ,   2 0 0 2 ,   R E V   M O D   P H Y S ,   V 7 4 ,   P 4 7 ,   D O I   1 0 . 1 1 0 3 / R e v M o d P h y s . 7 4 . 4 7 ;   A m b l a r d   F ,   2 0 0 4 ,   P H Y S I C A   A ,   V 3 4 3 ,   P 7 2 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 4 . 0 6 . 1 0 2 ;   A r i f o v i c   J ,   1 9 9 6 ,   J   P O L I T   E C O N ,   V 1 0 4 ,   P 5 1 0 ,   D O I   1 0 . 1 0 8 6 / 2 6 2 0 3 2 ;   A R R O W   K J ,   1 9 6 2 ,   R E V   E C O N   S T U D ,   V 2 9 ,   P 1 5 5 ,   D O I   1 0 . 2 3 0 7 / 2 2 9 5 9 5 2 ;   A r t h u r   B r i a n ,   1 9 8 9 ,   E C O N   J ,   V 3 9 4 ,   P 1 1 6 ,   D O I   D O I   1 0 . 2 3 0 7 / 2 2 3 4 2 0 8 ;   A r t h u r   W ,   1 9 9 7 ,   E C   E V O L V I N G   C O M P L E X ,   V I I ;   A R T H U R   W B ,   1 9 9 4 ,   A M   E C O N   R E V ,   V 8 4 ,   P 4 0 6 ;   A r t h u r   W .   B . ,   1 9 9 7 ,   E C   E V O L V I N G   C O M P L E X ,   P 1 5 ;   A r t h u r   W B ,   1 9 8 8 ,   T E C H N I C A L   C H A N G E   E C ,   P 5 9 0 ;   A r t h u r   W .   B r i a n ,   1 9 9 4 ,   I N C R E A S I N G   R E T U R N S   P ;   A X E L R O D   R ,   1 9 8 6 ,   A M   P O L I T   S C I   R E V ,   V 8 0 ,   P 1 0 9 5 ,   D O I   1 0 . 2 3 0 7 / 1 9 6 0 8 5 8 ;   A x e l r o d   R ,   1 9 9 7 ,   C O M P L E X I T Y   C O O P E R A T I ;   A x e l r o d   R . ,   1 9 9 7 ,   S I M U L A T I N G   S O C I A L   P H ;   A X T E L L   R . ,   1 9 9 6 ,   C O M P U T A T I O N A L   M A T H   O ,   V 1 ,   P 1 2 3 ,   D O I   D O I   1 0 . 1 0 0 7 / B F 0 1 2 9 9 0 6 5 ;   A x t e l l   R .   L . ,   2 0 0 0 ,   1 7   C T R   S O C   E C   D Y N ;   B a k   P . ,   1 9 9 6 ,   N A T U R E   W O R K S   S C I   S E L ;   B a n d u r a   A . ,   1 9 7 7 ,   S O C I A L   L E A R N I N G   T H E O ;   B a r r e t e a u   O . ,   1 9 9 9 ,   I N G E N I E R I E   S Y S T E M E S ,   P 6 7 ;   B A R R E T E A U   O ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S I M ,   V 6 ;   B A R R E T E A U   O . ,   2 0 0 1 ,   J   A R T I F I C I A L   S O C   S O C ,   V 4 ;   B e n - N a i m   E ,   2 0 0 3 ,   P H Y S I C A   D ,   V 1 8 3 ,   P 1 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 2 7 8 9 ( 0 3 ) 0 0 1 7 1 - 4 ;   B I G   D ,   2 0 0 4 ,   P   2   C   E U R   S O C   S I M   A S ;   B o l t o n   G E ,   2 0 0 4 ,   M A N A G E   S C I ,   V 5 0 ,   P 1 5 8 7 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 0 3 0 . 0 1 9 9 ;   B o u s q u e t   F ,   2 0 0 2 ,   C O M P L E X I T Y   A N D   E C O S Y S T E M   M A N A G E M E N T ,   P 2 4 8 ;   B o u s q u e t   F . ,   1 9 9 9 ,   A D V   E N V   E C O L O G I C A L   M ,   P 1 1 3 ;   B O U S Q U E T   F . ,   1 9 9 8 ,   L E C T   N O T E S   A R T I F   I N T ,   V 1 4 1 6 ,   P 8 2 6 ;   B o y d   R o b e r t ,   1 9 8 5 ,   C U L T U R E   E V O L U T I O N A R Y ;   B R I C K E R   R J ,   1 9 8 8 ,   A B A C U S - J   A C C O U N T   B U S ,   V 2 4 ,   P 1 2 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 2 8 1 . 1 9 8 8 . t b 0 0 2 0 9 . x ;   C A R L E Y   K ,   1 9 9 2 ,   O R G A N   S C I ,   V 3 ,   P 2 0 ,   D O I   1 0 . 1 2 8 7 / o r s c . 3 . 1 . 2 0 ;   C a r l e y   K . ,   1 9 9 8 ,   J   A R T I F I C I A L   S O C   S O C ,   V 1 ;   C a r l e y   K .   M . ,   1 9 9 5 ,   C O M P U T A T I O N A L   M A T H   O ,   V 1 ,   P 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 3 0 7 8 2 7 ;   C a s t e l f r a n c h i   C . ,   1 9 9 8 ,   J   A R T I F I C I A L   S O C   S O C ,   V 1 ;   C a v a l l i - S f o r z a   L L ,   1 9 8 1 ,   C U L T U R A L   T R A N S M I S S I O ;   C h i a r e l l a   C . ,   1 9 9 2 ,   A n n a l s   o f   O p e r a t i o n s   R e s e a r c h ,   V 3 7 ,   P 1 0 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 7 1 0 5 1 ;   C i o f f i - R e v i l l a   C ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 7 3 1 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 2 0 8 1 4 9 9 ;   C O H E N   M D ,   1 9 7 2 ,   A D M I N   S C I   Q U A R T ,   V 1 7 ,   P 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 0 8 8 ;   C o h e n   P R ,   1 9 8 5 ,   H E U R I S T I C   R E A S O N I N G ;   C o n t e   R ,   1 9 9 5 ,   A R T I F I C I A L   S O C I E T I E S ,   P 2 5 2 ;   C o n t e   R . ,   2 0 0 2 ,   R E P U T A T I O N   A R T I F I C I A ;   C o n t e   R . ,   2 0 0 1 ,   C O M P U T A T I O N A L   M A T H   O ,   V 7 ,   P 1 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 9 1 9 0 1 8 4 0 2 ;   C o n t e   R . ,   1 9 9 5 ,   C O G N I T I V E   S O C I A L   A C T ;   C O N T E   R ,   1 9 9 7 ,   S I M U L A T I N G   S O C I A L   P H ,   P 1 ;   C O W A N   R ,   2 0 0 4 ,   A N N U   R E V   P S Y C H O L ,   V 5 5 ,   P 5 9 1 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C y e r t   R . M . ,   1 9 9 2 ,   B E H A V   T H E O R Y   F I R M ;   D A Q U I N O   P ,   2 0 0 2 ,   P   I N T   E N V   M O D   S O F T W ,   V 2 ,   P 2 7 5 ;   D ' A q u i n o   P . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   D A V I D   P A ,   1 9 8 5 ,   A M   E C O N   R E V ,   V 7 5 ,   P 3 3 2 ;   D a w e s   R o b y n   M . ,   1 9 8 0 ,   A N N U   R E V   P S Y C H O L ,   V 3 1 ,   P 1 6 1 ;   D a w k i n s   R ,   1 9 7 6 ,   S E L F I S H   G E N E ;   D e f f u a n t   G . ,   2 0 0 1 ,   A D V   C O M P L E X   S Y S T ,   V 3 ,   P 8 7 ,   D O I   [ 1 0 . 1 1 4 2 / S 0 2 1 9 5 2 5 9 0 0 0 0 0 0 7 8 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 9 5 2 5 9 0 0 0 0 0 0 7 8 ] ;   D E F F U A N T   G ,   2 0 0 4 ,   2   E S S A   C   V A L L   S E P T   2 ;   D e f f u a n t   G u i l l a u m e ,   2 0 0 2 ,   J   A R T I F I C I A L   S O C   S O C ,   V 5 ;   D e n n e t t   D C ,   1 9 9 5 ,   D A R W I N S   D A N G E R O U S   I D ;   D i t t m e r   J C ,   2 0 0 1 ,   N O N L I N E A R   A N A L - T H E O R ,   V 4 7 ,   P 4 6 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 6 2 - 5 4 6 X ( 0 1 ) 0 0 5 7 4 - 0 ;   D i t t r i c h   P . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   D u n b a r   R . ,   1 9 9 8 ,   G R O O M I N G   G O S S I P   E V O L ;   E d m o n d s   B ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 4 1 5 ,   P 1 3 0 ;   E d m o n d s   B . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   E d w a r d s   M . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   E p s t e i n   J . ,   1 9 9 6 ,   G R O W I N G   A R T I F I C I A L   S ;   E p s t e i n   J .   M . ,   1 9 9 9 ,   C o m p l e x i t y ,   V 4 ,   P 4 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 9 - 0 5 2 6 ( 1 9 9 9 0 5 / 0 6 ) 4 : 5 < 4 1 : : A I D - C P L X 9 > 3 . 0 . C O ; 2 - F ;   E t i e n n e   M . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   F e h r   E ,   2 0 0 3 ,   N A T U R E ,   V 4 2 5 ,   P 7 8 5 ,   D O I   1 0 . 1 0 3 8 / n a t u r e 0 2 0 4 3 ;   F e s t i n g e r   L ,   1 9 5 4 ,   H U M   R E L A T ,   V 7 ,   P 1 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 0 1 8 7 2 6 7 5 4 0 0 7 0 0 2 0 2 ;   F l a c h e   A . ,   1 9 9 9 ,   C o m p u t a t i o n a l   &   M a t h e m a t i c a l   O r g a n i z a t i o n   T h e o r y ,   V 5 ,   P 9 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 9 6 6 2 6 0 2 9 7 5 ;   G a l a n   J .   M . ,   2 0 0 5 ,   J   A R T I F I C I A L   S O C   S O C ,   V 8 ;   G i l b e r t   G . N . ,   1 9 9 9 ,   S I M U L A T I O N   S O C I A L   S C ;   G i l b e r t   N ,   1 9 9 5 ,   A R T I F I C I A L   S O C I E T I E S ,   P 1 4 4 ;   G i l b e r t   N ,   1 9 9 7 ,   S O C I O L O G I C A L   R E S   O N L ,   V 2 ;   G i l b e r t   N . ,   1 9 9 5 ,   A R T I F I C I A L   S O C   C O M P U ;   G I L B E R T   N ,   1 9 9 8 ,   J o u r n a l   o f   A r t i f i c i a l   S o c i e t i e s   a n d   S i m u l a t i o n ,   V 1 ;   G m u r   M ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 7 ,   P 2 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 3 6 1 9 5 0 3 0 0 5 ;   G O D E   D K ,   1 9 9 3 ,   J   P O L I T   E C O N ,   V 1 0 1 ,   P 1 1 9 ,   D O I   1 0 . 1 0 8 6 / 2 6 1 8 6 8 ;   G o l d b e r g   D . ,   1 9 8 9 ,   G E N E T I C   A L G O R I T H M S   S ;   G O L D S P I N K   C . ,   2 0 0 0 ,   J   A R T I F I C I A L   S O C   S O C ,   V 3 ;   G o t t s   N M ,   2 0 0 3 ,   A R T I F   I N T E L L   R E V ,   V 1 9 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 1 2 0 9 2 8 6 0 2 ;   G o t t s   N M ,   2 0 0 3 ,   C Y B E R N E T   S Y S T ,   V 3 4 ,   P 6 6 3 ,   D O I   1 0 . 1 0 8 0 / 0 1 9 6 9 7 2 0 3 9 0 2 4 1 5 6 6 ;   G R A N O V E T T E R   M ,   1 9 8 5 ,   A M   J   S O C I O L ,   V 9 1 ,   P 4 8 1 ,   D O I   1 0 . 1 0 8 6 / 2 2 8 3 1 1 ;   H a l e s   D . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   H A L E S   D ,   2 0 0 2 ,   J   A R T I F I C I A L   S O C   S I M ,   V 5 ;   H A M I L T O N   W D ,   1 9 6 4 ,   J   T H E O R   B I O L ,   V 7 ,   P 1 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 5 1 9 3 ( 6 4 ) 9 0 0 3 9 - 6 ;   H A M I L T O N   W D ,   1 9 6 4 ,   J   T H E O R   B I O L ,   V 7 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 5 1 9 3 ( 6 4 ) 9 0 0 3 8 - 4 ;   H a n n e m a n   R A ,   1 9 9 5 ,   S O C I O L   P E R S P E C T ,   V 3 8 ,   P 4 5 7 ;   H e g s e l m a n n   R . ,   2 0 0 5 ,   C o m p u t a t i o n a l   E c o n o m i c s ,   V 2 5 ,   P 3 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 1 4 - 0 0 5 - 6 2 9 6 - 3 ;   H e g s e l m a n n   R . ,   2 0 0 2 ,   J   A R T I F I C I A L   S O C   S O C ,   V 5 ;   H i g h a m   N .   J ,   2 0 0 2 ,   A C C U R A C Y   S T A B I L I T Y   N ;   H o d g s o n   G e o f f r e y ,   1 9 8 8 ,   E C   I   M A N I F E S T O   M O D E R ;   H o l l a n d   J H ,   1 9 8 6 ,   I N D U C T I O N   P R O C E S S E S ;   H o l l a n d   J .   H . ,   1 9 9 8 ,   E M E R G E N C E   C H A O S   O R D E ;   H O L L A N D   J H ,   1 9 7 5 ,   A D A P T A T I O N   N A T U R A L   A ;   H o m a n s   G . ,   1 9 5 0 ,   H U M A N   G R O U P ;   H U A N G   C Y ,   2 0 0 4 ,   J   A R T I F I C I A L   S O C   S O C ,   V 7 ;   H u t c h i n s   E ,   1 9 9 5 ,   A R T I F I C I A L   S O C I E T I E S ,   P 1 5 7 ;   I a c o b u c c i   D . ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ,   P 9 2 ;   I E E E ,   1 9 8 5 ,   I E E E   S T A N D   B I N   F L O A T ;   J a f f e   K l a u s ,   2 0 0 2 ,   J   A R T I F I C I A L   S O C   S O C ,   V 5 ;   J a n s s e n   M . ,   2 0 0 2 ,   C O M P L E X I T Y   E C O S Y S T E M ;   J o h n s o n   P E ,   2 0 0 2 ,   S O C   S C I   C O M P U T   R E V ,   V 2 0 ,   P 1 7 4 ;   K A H N E M A N   D ,   1 9 7 9 ,   E C O N O M E T R I C A ,   V 4 7 ,   P 2 6 3 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 4 1 8 5 ;   K a h n e m a n   D ,   2 0 0 0 ,   C H O I C E S   V A L U E S   F R A M E ;   K a u f f m a n   S .   A . ,   1 9 9 3 ,   O R I G I N S   O R D E R   S E L F   O ;   K l a v a n s   R ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 7 4 ;   K n u t h   D .   E . ,   1 9 9 8 ,   A R T   C O M P U T E R   P R O G R A M ;   G u m e r m a n   G e o r g e   J . ,   1 9 9 9 ,   D Y N A M I C S   H U M A N   P R I M A ;   K o z a   J .   R . ,   1 9 9 2 ,   G E N E T I C   P R O G R A M M I N G ;   K r a u s e   U ,   2 0 0 0 ,   C O M M U N I C A T I O N S   I N   D I F F E R E N C E   E Q U A T I O N S ,   P 2 2 7 ;   K r a u s e   U . ,   1 9 9 7 ,   M O D E L L I E R U N G   S I M U L A T ,   P 3 7 ;   K R E P S   D M ,   1 9 8 2 ,   J   E C O N   T H E O R Y ,   V 2 7 ,   P 2 5 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 0 5 3 1 ( 8 2 ) 9 0 0 3 0 - 8 ;   K u p e r m a n   M ,   2 0 0 1 ,   P H Y S   R E V   L E T T ,   V 8 6 ,   P 2 9 0 9 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 8 6 . 2 9 0 9 ;   L a n s i n g   J S ,   2 0 0 2 ,   A R T I F   L I F E ,   V 8 ,   P 2 7 9 ,   D O I   1 0 . 1 1 6 2 / 1 0 6 4 5 4 6 0 2 3 2 0 9 9 1 8 6 4 ;   L e B a r o n   B ,   1 9 9 9 ,   J   E C O N   D Y N   C O N T R O L ,   V 2 3 ,   P 1 4 8 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 1 8 8 9 ( 9 8 ) 0 0 0 8 1 - 5 ;   L I E V R O U W   L A ,   1 9 8 9 ,   C O M M U N   R E S ,   V 1 6 ,   P 6 1 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 9 3 6 5 0 8 9 0 1 6 0 0 5 0 0 4 ;   L u h m a n n   N . ,   1 9 8 4 ,   S O Z I A L E   S Y S T E M E   G R U N ;   L U N A   F ,   2 0 0 0 ,   E C   S I M U L A T I O N   S W A R M ;   M a c y   M W ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 7 2 2 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 9 2 0 8 0 0 9 9 ;   M A C Y   M W ,   1 9 9 8 ,   J   A R T I F I C I A L   S O C   S O C ,   V 1 ;   M a l s c h   T ,   2 0 0 1 ,   A U T O N   A G E N T   M U L T I - A G ,   V 4 ,   P 1 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 1 4 4 6 4 1 0 1 9 8 ;   M a r c h   J ,   1 9 5 8 ,   O R G A N I Z A T I O N S ;   M a s l o w   A . ,   1 9 5 4 ,   M O T I V A T I O N   P E R S O N A L I ;   M a u s s   M a r c e l ,   1 9 9 0 ,   G I F T   F O R M   R E A S O N   E X C ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M e r m e t   L . ,   1 9 9 2 ,   S T R A T E G I E S   G E S T I O N   E ;   M E Y E R   M ,   2 0 0 8 ,   Z   B E T R I E B S W I R T ,   V 3 ,   P 6 0 ;   M i n a r   N e l s o n ,   1 9 9 6 ,   S W A R M   S I M U L A T I O N   S Y S ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M o r r i s   S ,   2 0 0 0 ,   R E V   E C O N   S T U D ,   V 6 7 ,   P 5 7 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 3 7 X . 0 0 1 2 1 ;   M o s s   S . ,   1 9 9 8 ,   C o m p u t a t i o n a l   &   M a t h e m a t i c a l   O r g a n i z a t i o n   T h e o r y ,   V 4 ,   P 4 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 9 6 0 0 5 3 0 2 7 9 ;   M o s s   S ,   2 0 0 5 ,   A M   J   S O C I O L ,   V 1 1 0 ,   P 1 0 9 5 ,   D O I   1 0 . 1 0 8 6 / 4 2 7 3 2 0 ;   M o s s   S . ,   1 9 9 5 ,   C o m p u t a t i o n a l   E c o n o m i c s ,   V 8 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 2 9 9 7 3 5 ;   M o s s   S ,   1 9 9 8 ,   C Y B E R N E T   S Y S T ,   V 2 9 ,   P 2 1 5 ;   M O S S   S ,   2 0 0 2 ,   J   A R T I F I C I A L   S O C   S I M ,   V 5 ;   M O S S   S ,   1 9 9 8 ,   J   A R T I F I C I A L   S O C   S O C ,   V 1 ;   M U L L I N S   N C ,   1 9 7 7 ,   A M   S O C I O L   R E V ,   V 4 2 ,   P 5 5 2 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 4 5 5 4 ;   N A M A T A M E   A ,   2 0 0 6 ,   J o u r n a l   o f   E c o n o m i c   I n t e r a c t i o n   a n d   C o o r d i n a t i o n ,   V 1 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 4 0 3 - 0 0 6 - 0 0 0 7 - 6 ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   N E W E L L   A l l e n ,   1 9 9 0 ,   U N I F I E D   T H E O R I E S   C O G ;   N e w m a n   M E J ,   2 0 0 2 ,   P H Y S   R E V   E ,   V 6 6 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 6 6 . 0 3 5 1 0 1 ,   1 0 . 1 1 0 3 / P h y s R e v E . 6 6 . 0 1 6 1 2 8 ] ;   N o w a k   A . ,   1 9 9 6 ,   M O D E L L I N G   S I M U L A T I O N ,   P 2 4 9 ;   N o w a k   M A ,   1 9 9 8 ,   N A T U R E ,   V 3 9 3 ,   P 5 7 3 ,   D O I   1 0 . 1 0 3 8 / 3 1 2 2 5 ;   O l s o n   M . ,   1 9 6 5 ,   L O G I C   C O L L E C T I V E   A C T ;   O r m e r o d   P . ,   1 9 9 5 ,   D E A T H   E C ;   O r m e r o d   P . ,   1 9 9 8 ,   B U T T E R F L Y   E C ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 1 4 9 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 3 . 1 4 9 ;   O s a r e h   F ,   1 9 9 6 ,   L I B R I ,   V 4 6 ,   P 2 1 7 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 6 . 4 6 . 4 . 2 1 7 ;   P A R K E R   M ,   2 0 0 0 ,   S W A R M F   P ;   P a r s o n s   T . ,   1 9 5 1 ,   S O C I A L   S Y S T E M ;   P O L H I L L   J G ,   2 0 0 1 ,   C Y B E R N E T   S Y S T ,   V 3 2 ,   P 8 5 ;   P O L H I L L   J G ,   2 0 0 5 ,   E N V I R O N   M O D E L L   S O F T W ,   V 2 1 ,   P 2 8 3 ;   P o l h i l l   J .   G . ,   2 0 0 5 ,   J   A R T I F I C I A L   S O C   S O C ,   V 8 ;   P O N Z I   L J ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R A U B   W ,   1 9 9 0 ,   A M   J   S O C I O L ,   V 9 6 ,   P 6 2 6 ,   D O I   1 0 . 1 0 8 6 / 2 2 9 5 7 4 ;   R e s n i c k   P . ,   2 0 0 2 ,   A D V   A P P L   M I C R O E C O N O M ,   V 1 1 ;   R O T H   A E ,   1 9 9 5 ,   G A M E   E C O N   B E H A V ,   V 8 ,   P 1 6 4 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 9 - 8 2 5 6 ( 0 5 ) 8 0 0 2 0 - X ;   S a a m   N .   J . ,   1 9 9 9 ,   J   A R T I F I C I A L   S O C   S O C ,   V 2 ;   S a b a t e r   J . ,   2 0 0 2 ,   P r o c e e d i n g s   o f   t h e   F i r s t   I n t e r n a t i o n a l   J o i n t   C o n f e r e n c e   o n   A u t o n o m o u s   A g e n t s   a n d   M u l t i a g e n t   S y s t e m s ,   P 4 7 5 ;   S a w y e r   R K ,   2 0 0 3 ,   S O C I O L   M E T H O D   R E S ,   V 3 1 ,   P 3 2 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 4 9 1 2 4 1 0 2 2 3 9 0 7 9 ;   S c h e l l i n g   T .   C . ,   1 9 6 0 ,   S T R A T E G Y   C O N F L I C T ;   S c h u m p e t e r   J . A . ,   1 9 3 4 ,   T H E O R Y   E C   D E V ;   S H A N N O N   C E ,   1 9 4 8 ,   A T & T   T E C H   J ,   V 2 7 ,   P 6 2 3 ;   S H A N N O N   C E ,   1 9 4 8 ,   A T & T   T E C H   J ,   V 2 7 ,   P 3 7 9 ;   S h l e i f e r   A . ,   2 0 0 0 ,   I N E F F I C I E N T   M A R K E T S ;   S H O H A M   Y ,   1 9 9 2 ,   P R I N C I P L E S   O F   K N O W L E D G E   R E P R E S E N T A T I O N   A N D   R E A S O N I N G :   P R O C E E D I N G S   O F   T H E   T H I R D   I N T E R N A T I O N A L   C O N F E R E N C E   ( K R   9 2 ) ,   P 2 2 5 ;   S h o h a m   Y . ,   1 9 9 2 ,   P   A A A I   9 2 ,   P 2 7 6 ;   S z n a j d - W e r o n   K ,   2 0 0 0 ,   I N T   J   M O D   P H Y S   C ,   V 1 1 ,   P 1 1 5 7 ,   D O I   1 0 . 1 1 4 2 / S 0 1 2 9 1 8 3 1 0 0 0 0 0 9 3 6 ;   T H A C K R A Y   A ,   1 9 7 2 ,   I S I S ,   V 6 3 ,   P 4 7 3 ;   T R I V E R S   R L ,   1 9 7 1 ,   Q   R E V   B I O L ,   V 4 6 ,   P 3 5 ,   D O I   1 0 . 1 0 8 6 / 4 0 6 7 5 5 ;   T R O I T Z S C H   K G ,   1 9 9 7 ,   S I M U L A T I N G   S O C I A L   P H ,   P 4 0 ;   V a l e n t e   T .   W . ,   1 9 9 5 ,   N E T W O R K   M O D E L S   D I F F U ;   V i n c k   D ,   1 9 9 9 ,   R E V   F R   S O C I O L ,   V 4 0 ,   P 3 8 5 ,   D O I   1 0 . 2 3 0 7 / 3 3 2 2 7 7 0 ;   W a l k e r   A . ,   1 9 9 5 ,   P   1   I N T   C   M U L T   S Y S T ,   P 3 8 4 ;   [ A n o n y m o u s ] ,   1 9 9 8 ,   N A T U R E ;   W a t t s   D .   J . ,   1 9 9 9 ,   S M A L L   W O R L D S   D Y N A M I C ;   W e i b u l l   J . ,   1 9 9 5 ,   E V O L U T I O N A R Y   G A M E   T H ;   W e i d l i c h   W . ,   2 0 0 0 ,   S O C I O D Y N A M I C S   S Y S T E M ;   W e i s b u c h   G ,   2 0 0 5 ,   P H Y S I C A   A ,   V 3 5 3 ,   P 5 5 5 ,   D O I   1 0 . 1 0 1 6 / j . p h y s a . 2 0 0 5 . 0 1 . 0 5 4 ;   W e i s b u c h   G ,   2 0 0 4 ,   E U R   P H Y S   J   B ,   V 3 8 ,   P 3 3 9 ,   D O I   1 0 . 1 1 4 0 / e p j b / e 2 0 0 4 - 0 0 1 2 6 - 9 ;   W e i s b u c h   G . ,   2 0 0 2 ,   L E C T   N O T E S   E C   M A T H   S ,   V 5 2 1 ,   P 2 2 5 ;   W O O L D R I D G E   M ,   1 9 9 5 ,   K N O W L   E N G   R E V ,   V 1 0 ,   P 1 1 5 ;   Y O U N G   P ,   1 9 9 9 ,   2   B R O O K   I ;   Y o u n g   P . ,   1 9 9 8 ,   I N D I V I D U A L   S T R A T E G Y ;   Y o u n g e r   S .   M . ,   2 0 0 3 ,   J   A R T I F I C I A L   S O C   S O C ,   V 6 ;   Y O U N G E R   S M ,   2 0 0 4 ,   J   A R T I F I C I A L   S O C   S O C ,   V 7 ;   Z e i g l e r   B .   P . ,   1 9 7 6 ,   T H E O R Y   M O D E L L I N G   S I M 	 1 8 8 	 1 5 	 1 5 	 4 	 1 4 	 J   A   S   S   S 	 G U I L D F O R D 	 U N I V   S U R R E Y ,   D E P T   S O C I O L O G Y ,   G U I L D F O R D   G U 2   7 X H ,   S U R R E Y ,   E N G L A N D 	 1 4 6 0 - 7 4 2 5 	 	 	 J A S S S - J   A R T I F   S O C   S 	 J A S S S 	 O C T 	 2 0 0 9 	 1 2 	 4 	 	 	 	 	 A 2 2 4 	 A 2 4 3 	 1 2 	 	 	 2 0 	 S o c i a l   S c i e n c e s ,   I n t e r d i s c i p l i n a r y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 5 2 2 R C 	 W O S : 0 0 0 2 7 2 0 1 5 0 0 0 0 1 2 	 	 
 
 J 	 K o s t o f f ,   R N ;   K o y t c h e f f ,   R G ;   L a u ,   C G Y 	 	 	 	 K o s t o f f ,   R o n a l d   N . ;   K o y t c h e f f ,   R a y m o n d   G . ;   L a u ,   C l i f f o r d   G .   Y . 	 	 	 S t r u c t u r e   o f   t h e   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y   a p p l i c a t i o n s   l i t e r a t u r e 	 J O U R N A L   O F   T E C H N O L O G Y   T R A N S F E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 n a n o t e c h n o l o g y ;   n a n o s c i e n c e ;   t e x t   m i n i n g ;   e l e c t r o n i c s ;   a p p l i c a t i o n s ;   h e a l t h 	 S C I E N C E - A N D - T E C H N O L O G Y ;   D A T A B A S E   T O M O G R A P H Y ;   B I B L I O M E T R I C S ;   D I S C O V E R Y ;   I N F O R M A T I O N 	 T h e   A p p l i c a t i o n s   l i t e r a t u r e   a s s o c i a t e d   w i t h   n a n o s c i e n c e   a n d   n a n o t e c h n o l o g y   r e s e a r c h   w a s   e x a m i n e d .   A b o u t   6 5 , 0 0 0   n a n o t e c h n o l o g y   r e c o r d s   f o r   2 0 0 5   w e r e   r e t r i e v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   ( S C I / S S C I )   ( S C I   (   2 0 0 6 ) .   C e r t a i n   d a t a   i n c l u d e d   h e r e i n   a r e   d e r i v e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x / S o c i a l   S c i e n c e   C i t a t i o n   I n d e x   p r e p a r e d   b y   t h e   T h o m s o n   S c i e n t i f i c   ( R ) ,   I n c .   ( T h o m s o n   ( R ) ) ,   P h i l a d e l p h i a ,   P e n n s y l v a n i a ,   U S A )   T h r o u g h   v i s u a l   i n s p e c t i o n   o f   t h e   A b s t r a c t   p h r a s e s ,   a l l   t h e   d i v e r s e   n o n - m e d i c a l   A p p l i c a t i o n s   w e r e   i d e n t i f i e d ,   a n d   t h e   r e l a t i o n s h i p s   a m o n g   t h e   A p p l i c a t i o n s ,   b o t h   d i r e c t   a n d   i n d i r e c t ,   w e r e   o b t a i n e d .   T h e   m e d i c a l   a p p l i c a t i o n s   w e r e   i d e n t i f i e d   t h r o u g h   a   f u z z y   c l u s t e r i n g   p r o c e s s .   M e t r i c s   a s s o c i a t e d   w i t h   r e s e a r c h   l i t e r a t u r e s   f o r   s p e c i f i c   A p p l i c a t i o n s /   A p p l i c a t i o n s   g r o u p s   w e r e   g e n e r a t e d . 	 [ K o s t o f f ,   R o n a l d   N . ;   K o y t c h e f f ,   R a y m o n d   G . ]   O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   [ L a u ,   C l i f f o r d   G .   Y . ]   I n s t   D e f   A n a l ,   A l e x a n d r i a ,   V A   2 2 3 1 1   U S A 	 K o s t o f f ,   R N   ( r e p r i n t   a u t h o r ) ,   O f f   N a v a l   R e s ,   8 7 5   N   R a n d o l p h   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 	 	 	 	 D a v i d s e   R J ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 7 4 3 6 ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   G o l d m a n   J A ,   1 9 9 9 ,   M E T H O D   I N F O R M   M E D ,   V 3 8 ,   P 9 6 ;   G o r d o n   M D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 6 7 4 ;   G r e e n g r a s s   E . ,   1 9 9 7 ,   T R R 5 2 0 2 9 6   N A T   S E C   A G ;   H e a r s t   M A ,   1 9 9 9 ,   P   A C L   9 9   3 7   A N N   M   A S ;   K a r y p i s   G . ,   2 0 0 6 ,   C L U T O   C L U S T E R I N G   T O O ;   K o s t e k   B . ,   1 9 9 7 ,   A r c h i v e s   o f   A c o u s t i c s ,   V 2 2 ,   P 3 ;   K o s t o f f   R N ,   2 0 0 4 ,   I N T   J   B I F U R C A T   C H A O S ,   V 1 4 ,   P 6 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 1 2 7 4 0 4 0 0 9 0 8 9 ;   K o s t o f f   R N ,   2 0 0 4 ,   F R A C T A L S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 ;   K o s t o f f   R N ,   2 0 0 3 ,   M E D   H Y P O T H E S E S ,   V 6 1 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 9 8 7 7 ( 0 3 ) 0 0 1 6 7 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   1 9 9 7 ,   J   I N F   S C I ,   V 2 3 ,   P 3 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 7 0 2 3 0 0 4 0 4 ;   K o s t o f f   R . N . ,   2 0 0 3 ,   I N T   H D B   I N N O V A T I O N ,   P 3 8 8 ,   D O I   1 0 . 1 0 1 6 / B 9 7 8 - 0 0 8 0 4 4 1 9 8 - 6 / 5 0 0 2 7 - 9 ;   K o s t o f f   R . N . ,   2 0 0 5 ,   A D A 4 3 5 9 8 4   D T I C ;   K O S T O F F   R N ,   2 0 0 3 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 4 ,   P 2 7 8 9 ;   K o s t o f f   R .   N . ,   2 0 0 6 ,   A D A 4 4 3 3 1 5   D T I C ;   K o s t o f f   R . N . ,   2 0 0 7 ,   A D A 4 6 1 9 3 0   D T I C ;   K o s t o f f   R . N . ,   2 0 0 5 ,   A D A 4 3 5 9 8 6   D T I C ;   K o s t o f f   R N ,   2 0 0 6 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 3 ,   P 9 2 3 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 9 . 0 0 4 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 5 - 8 ;   K o s t o f f   R N ,   2 0 0 6 ,   J   N A N O P A R T   R E S ,   V 8 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 0 5 1 - 0 0 5 - 9 0 3 4 - 9 ;   L o s i e w i c z   P ,   2 0 0 0 ,   J   I N T E L L   I N F   S Y S T ,   V 1 5 ,   P 9 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 7 7 7 2 2 2 4 1 2 ;   N A R I N   F ,   1 9 9 4 ,   E V A L U A T I O N   R E V ,   V 1 8 ,   P 6 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 9 4 0 1 8 0 0 1 0 7 ;   N A R I N   F ,   1 9 7 6 ,   C 6 3 7   N S F ;   S C H U B E R T   A ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 6 4 ;   * S C I ,   2 0 0 6 ,   C E R T   D A T   I N C L   H E R   D E ;   * S E A R C H   T E C H N   I N C ,   2 0 0 6 ,   T E C H O A S I S ;   S W A N S O N   D R ,   1 9 8 6 ,   P E R S P E C T   B I O L   M E D ,   V 3 0 ,   P 7 ;   S w a n s o n   D R ,   1 9 9 7 ,   A R T I F   I N T E L L ,   V 9 1 ,   P 1 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 4 - 3 7 0 2 ( 9 7 ) 0 0 0 0 8 - 8 ;   V i a t o r   J A ,   2 0 0 1 ,   J   A C O U S T   S O C   A M ,   V 1 0 9 ,   P 1 7 7 9 ,   D O I   1 0 . 1 1 2 1 / 1 . 1 3 6 6 7 1 1 ;   Z h u   D H ,   2 0 0 2 ,   T E C H N O L   F O R E C A S T   S O C ,   V 6 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 1 6 2 5 ( 0 1 ) 0 0 1 5 7 - 3 ;   2 0 0 6 ,   T R E C   T E X T   R E T R   C 	 3 4 	 1 5 	 1 5 	 3 	 1 8 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 8 9 2 - 9 9 1 2 	 	 	 J   T E C H N O L   T R A N S F E R 	 J .   T e c h n o l .   T r a n s f . 	 O C T 	 2 0 0 8 	 3 3 	 5 	 	 	 	 	 4 7 2 	 4 8 4 	 	 1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 7 - 9 0 4 2 - 2 	 	 1 3 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s 	 3 5 4 U E 	 W O S : 0 0 0 2 5 9 6 6 3 7 0 0 0 0 2 	 	 
 
 J 	 M i r o ,   O ;   G o n z a l e z - D u q u e ,   A ;   C i n e s i ,   C ;   T o m a s ,   S ;   P a c h e c o ,   A ;   S a n c h e z ,   M ;   B u r i l l o - P u t z e ,   G 	 	 	 	 M i r o ,   O s c a r ;   G o n z a l e z - D u q u e ,   A n a ;   C i n e s i ,   C e s a r ;   T o m a s ,   S a n t i a g o ;   P a c h e c o ,   A n d r e s ;   S a n c h e z ,   M i q u e l ;   B u r i l l o - P u t z e ,   G u i l l e r m o 	 	 	 S c i e n t i f i c   p a p e r s   p u b l i s h e d   i n   " E M E R G E N C I A S "   f r o m   2 0 0 0   t o   2 0 0 4 :   p a r t i c i p a t i o n   o f   e m e r g e n c y   d e p a r t m e n t   p h y s i c i a n s   a n d   c o m p a r i s o n   w i t h   t h e i r   c o n t r i b u t i o n   t o   i n d e x e d   j o u r n a l s 	 E M E R G E N C I A S 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 E m e r g e n c y   m e d i c i n e ;   R e s e a r c h   B i b l i o m e t r i c s 	 	 A i m s :   T o   a s s e s s   t h e   p r e d o m i n a n t   c h a r a c t e r i s t i c s   o f   s c i e n t i f i c   p a p e r s   p u b l i s h e d   b y   S p a n i s h   c l i n i c i a n s   f r o m   e m e r g e n c y   d e p a r t m e n t s   p h y s i c i a n s ,   f r o m   2 0 0 0   t o   2 0 0 4 ,   i n   j o u r n a l s   i n d e x e d   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   d a t a b a s e   a n d   i n   t h e   j o u r n a l   E M E R G E N C I A S ,   w h i c h   i s   n o t   i n c l u d e d   i n   t h e   a f o r e m e n t i o n e d   i n d e x   M a t e r i a l   a n d   m e t h o d :   A l l   t h e   a r t i c l e s   p u b l i s h e d   i n   t h e   j o u r n a l   E M E R G E N C I A S   d u r i n g   t h e   p e r i o d   2 0 0 0 - 2 0 0 4   w e r e   r e v i e w e d   A   s c i e n t i f i c   p a p e r   w a s   c o n s i d e r e d   a   S p a n i s h   e m e r g e n c y   d e p a r t m e n t   p h y s i c i a n   d o c u m e n t   i f   t h e   s e t t i n g   w a s   S p a i n   a n d   i f   i t   i n c l u d e d   a n y   o f   t h e   f o l l o w i n g   e x p r e s s i o n s   r e l a t e d   t o   a n   e m e r g e n c y   s e r v i c e   u r g e n c i a s ,   u r g e n c i e s ,   u r x e n c i a s ,   l a r r i a l d i a k ,   l a r r i a l d i a ,   e m e r g e n t z i a k ,   e m e r g e n c i a s ,   e m e r g e n c i e s ,   e m e r x e n c i a s ,   e m e r g e n c y ,   0 6 1 ,   S A M U ,   1 0 0 6 ,   S U C ,   S E M ,   S E M S A ,   S E R C A M ,   1 1 2 ,   D E I A K   o r   E P E S   T h e   s a m e   s t r a t e g y   w a s   u s e d   t o   s e a r c h   f o r   j o u r n a l s   i n   t h e   S C I   d u r i n g   t h e   s a m e   p e r i o d   A l l   d a t a   a n d   b i b l i o m e t r i c   i n d i c a t o r s   u s e d   i n   p r e v i o u s   s t u d i e s   b y   o u r   g r o u p   w e r e   r e g i s t e r e d   a n d   a n a l y z e d .   A   s l i g h t l y   m o d i f i e d   i n d e x   o f   t h e   t e x t   " T r a t a d o   d e   M e d i c i n a   d e   U r g e n c i a s "   b y   T i n t i n a l l i   w a s   u s e d   t o   d e t e r m i n e   t h e   l i n e s   o f   i n v e s t i g a t i o n   R e s u l t s :   T h r o u g h o u t   t h e   w h o l e   s t u d y   p e r i o d ,   t h e   S p a n i s h   e m e r g e n c y   d e p a r t m e n t   c l i n i c i a n s   p u b l i s h e d   5 9 4   s c i e n t i f i c   p a p e r s ,   a m o n g   w h i c h   2 9 0   a p p e a r e d   i n   E M E R G E N C I A S   a n d   3 0 4   w e r e   i n d e x e d   i n   S C I .   5 1 %   w e r e   w r i t t e n   b y   c l i n i c i a n s   f r o m   2 6   h o s p i t a l a r y   e m e r g e n c y   d e p a r t m e n t s   a n d   3   e m e r g e n c y   s y s t e m s ,   i n   a d d i t i o n   t o   t h e   S E M E S .   S i g n i f i c a n t   d i f f e r e n c e s   w e r e   o b s e r v e d   i n   t h e   c o n t r i b u t i o n   o f   e a c h   c o m m u n i t y   a r e   c e n t r e   t o   t h e   s c i e n t i f i c   p r r o d u c t i o n ,   t h e   b i b l i o m e t r i c   c h a r a c t e r i s t i c s   a n d   t h e   t o p i c s   r e p o r t e d   b e t w e e n   E M E R G E N C I A S   a n d   t h e   S C I   M a d r i d   p r e v a i l e d   i n   E M E R G E N C I A S ,   C a t a l o n i a   a n d   A n d a l u s i a   i n   t h e   S C I   a n d   G a l i c i a   a n d   t h e   B a s q u e   C o u n t r y   h a d   a   b a l a n c e d   s c i e n t i f i c   p r o d u c t i o n   E M E R G E N C I A S   h a d   a   l o w e r   n u m b e r   o f   o r i g i n a l   s t u d i e s ,   s i g n e d   b y   f e w e r   a u t h o r s ,   e m e r g e n c y   d e p a r t m e n t   p h y s i c i a n s   m o r e   f r e q u e n t l y   s i g n e d   i n   f i r s t   p l a c e ,   a n d   f r e q u e n c y   o f   p h y s i c i a n s   f r o m   e x t r a h o s p i t a l a r y   e m e r g e n c y   d e p a r t m e n t s   a n d   i n d e p e n d e n t   e m e r g e n c y   s e r v i c e s   w a s   h i s t e r   C o n c l u s i o n s :   T h e   v o l u m e   o f   s t u d i e s   b y   e m e r g e n c y   d e p a r t m e n t   p h y s i c i a n s   p u l i s h i n g   i n   E M E R G E N C I A S   i s   s i m i l r   t o   t h a t   o f   s t u d i e s   p u b l i s h e d   i n   j o u r n a l s   i n d e x e d   i n   t h e   S C I   a l b e i t   w i t h   d i f f e r e n c e s   i n   t h e   b i b l i o m e t r i c   c h a r a c t e r i s t i c s   a n d   s u b j e c t s   [ E m e r g e n c i a s   2 0 0 8 ; 2 0 : 3 0 8 - 3 1 5 ] 	 [ M i r o ,   O s c a r ;   T o m a s ,   S a n t i a g o ;   P a c h e c o ,   A n d r e s ;   S a n c h e z ,   M i q u e l ;   B u r i l l o - P u t z e ,   G u i l l e r m o ]   H o s p   U n i v   C a n a r i a s ,   C o m   R e d a c c   E M E R G E N C I A S ,   S a n   C r i s t o b a l   l a   L a g u n a ,   S a n t a   C r u z   T e n e ,   S p a i n ;   [ G o n z a l e z - D u q u e ,   A n a ;   C i n e s i ,   C e s a r ]   H o s p   U n i v   C a n a r i a s ,   S e r v   U r g e n c i a s ,   S a n   C r i s t o b a l   l a   L a g u n a ,   S a n t a   C r u z   T e n e ,   S p a i n 	 M i r o ,   O   ( r e p r i n t   a u t h o r ) ,   H o s p   C l i n   B a r c e l o n a ,   A r e a   U r g e n c i a s ,   V i l l a r r o e l   1 7 0 ,   E - 0 8 0 3 6   B a r c e l o n a ,   S p a i n . 	 	 B u r i l l o - P u t z e ,   G u i l l e r m o / L - 2 3 7 3 - 2 0 1 5 	 B u r i l l o - P u t z e ,   G u i l l e r m o / 0 0 0 0 - 0 0 0 1 - 5 6 7 9 - 7 8 4 6 	 	 	 B o s c h   X ,   2 0 0 3 ,   R E V   E S P   C A R D I O L ,   V 5 6 ,   P 1 2 3 9 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 5 5 3 4 5 ;   B o s c h   X ,   2 0 0 1 ,   R E V   E S P   C A R D I O L ,   V 5 4 ,   P 1 4 6 3 ;   B u r i l l o - P u t z e   G ,   2 0 0 5 ,   E M E R G E N C I A S ,   V 1 7 ,   P 1 0 7 ;   B U R I L L O P U T Z E   G ,   2 0 0 6 ,   E M E R G E N C I A S   S 1 ,   V 1 8 ,   P 3 0 1 ;   C a m i   J ,   2 0 0 5 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 4 ,   P 9 3 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 0 8 6 8 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 5 1 5 ;   C a m i   J . ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 5 5 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 1 8 7 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 1 3 6 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 5 9 ;   M i r o   O ,   2 0 0 7 ,   E M E R G E N C I A S ,   V 1 9 ,   P 6 ;   M i r o   O ,   2 0 0 8 ,   E M E R G E N C I A S ,   V 2 0 ,   P 1 ;   O L I V E   A ,   2 0 0 4 ,   R E V   E S P   R E U M A T O L ,   V 3 1 ,   P 1 2 2 ;   * S E M E S   J U N T   D I R   N A ,   2 0 0 4 ,   M O D   A N D   M E D   C R I T   E M ;   T e r a n   C M S ,   2 0 0 4 ,   R E V   C L I N   E S P ,   V 2 0 4 ,   P 3 9 3 ;   T i n t i n a l l y   J E ,   2 0 0 4 ,   E M E R G E N C Y   M E D   C O M P R E 	 1 6 	 1 5 	 1 6 	 2 	 4 	 S A N I D A D   E D I C I O N E S 	 M A D R I D 	 C A P I T A L   H A Y A ,   6 0 ,   M A D R I D ,   2 8 0 2 0 ,   S P A I N 	 1 1 3 7 - 6 8 2 1 	 	 	 E M E R G E N C I A S 	 E m e r g e n c i a s 	 O C T 	 2 0 0 8 	 2 0 	 5 	 	 	 	 	 3 0 8 	 3 1 5 	 	 	 	 8 	 E m e r g e n c y   M e d i c i n e 	 E m e r g e n c y   M e d i c i n e 	 V 1 4 A A 	 W O S : 0 0 0 2 0 7 7 0 6 1 0 0 0 0 3 	 	 
 
 J 	 d e   D i o s ,   J G ;   S e m p e r e ,   A P ;   A l e i x a n d r e - B e n a v e n t ,   R 	 	 	 	 d e   D i o s ,   J .   G o n z a l e z ;   S e m p e r e ,   A .   P . ;   A l e i x a n d r e - B e n a v e n t ,   R . 	 	 	 B i o m e d i c a l   p u b l i c a t i o n s   i n   S p a i n   o n   d e b a t e   ( I ) :   S t a t e   o f   n e u r o l o g i c a l   j o u r n a l s 	 R E V I S T A   D E   N E U R O L O G I A 	 	 	 S p a n i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   b i o m e d i c a l   j o u r n a l s ;   b i o m e d i c i n e ;   n e u r o l o g i c a l   s c i e n c e s 	 S P A N I S H   S C I E N T I F I C   P R O D U C T I O N ;   S C I E N C E - C I T A T I O N - I N D E X ;   C O C H R A N E   C O L L A B O R A T I O N ;   P E D I A T R I C   S U B S P E C I A L I T I E S ;   B I B L I O M E T R I C   I N D I C A T O R S ;   S Y S T E M A T I C   R E V I E W S ;   A N A L E S - E S P A N O L E S ;   D E C I S I O N - M A K I N G ;   H E A L T H - S C I E N C E S ;   I M P A C T   F A C T O R 	 I n t r o d u c t i o n .   B i b l i o m e t r i c   s t u d i e s   b e l o n g   t o   t h e   s o - c a l l e d   ' s o c i a l   s t u d i e s   o f   s c i e n c e ' ,   a n d   s c i e n c e   p o l i c y   c o n s t i t u t e s   o n e   o f   i t s   m a i n   a p p l i e d   f i e l d s ,   p r o v i d i n g   o b j e c t i v e   a n d   u s e f u l   t o o l s   f o r   e v a l u a t i n g   t h e   r e s u l t s   o f   s c i e n t i f i c   a c t i v i t y .   N e u r o l o g i c a l   s c i e n c e s   a r e   v e r y   i m p o r t a n t   i n   t h e   b i b l i o m e t r i c   m a p   o f   S p a i n   a b o u t   b i o m e d i c i n e   a n d   h e a l t h   s c i e n c e s ,   f r o m   a   q u a n t i t a t i v e   ( s e c o n d   t h e m a t i c   a r e a   i n   p r o d u c t i v i t y ,   o n l y   a f t e r   b i o l o g y - b i o c h e m i c a l )   a n d   a   q u a l i t a t i v e   ( h i g h   h e a l t h   c o s t s   a n d   m o r b i m o r t a l i t y )   p o i n t   o f   v i e w .   D e v e l o p m e n t .   I n   S p a i n   w e   c a n   f o u n d   a b o u t   3 6 0   b i o m e d i c a l   j o u r n a l s ,   1 8   o f   t h e m   r e l a t e d   t o   t h e   a r e a   o f   n e u r o l o g i c a l   s c i e n c e s .   I n   2 0 0 5 ,   o n l y   1 7   b i o m e d i c a l   S p a n i s h   j o u r n a l s   w e r e   i n   t h e   S c i e n c e   C i t a t i o n   I n d e x   d a t a b a s e ,   t h r e e   o f   t h e m   i n   t h e   f i e l d   o f   n e u r o s c i e n c e s :   N e u r o l o g i a   ( i m p a c t   f a c t o r :   0 . 5 7 ) ,   R e v i s t a   d e   N e u r o l o g i a   ( 0 . 3 9 )   a n d   N e u r o c i r u g i a   ( 0 . 2 3 ) ,   a n d   t h e s e   j o u r n a l s   h a v e   a l s o   v e r y   g o o d   L a t i n d e x   c r i t e r i a   a b o u t   f o r m a l   a s p e c t s .   B u t   i t   i s   i m p o r t a n t   t o   m e n t i o n   t h a t   t h e   i m p a c t   f a c t o r   s p e c i f i c a l l y   m e a s u r e s   v i s i b i l i t y   a n d   d i f f u s i o n   o f   t h e   w o r k s   p u b l i s h e d   b y   t h e s e   j o u r n a l s   r a t h e r   t h a n   t h e i r   s c i e n t i f i c   q u a l i t y .   W e   s e a r c h   t h e   a n s w e r   t o   s o m e   q u e s t i o n s   a b o u t   t h e   p r e s e n t   a n d   f u t u r e   o f   b i o m e d i c a l   j o u r n a l s   i n   g e n e r a l   a n d   n e u r o l o g i c a l   j o u r n a l s   i n   p a r t i c u l a r :   p a p e r   o r   e l e c t r o n i c   p u b l i c a t i o n ?   f r e e   a c c e s s   o r   o p e n   a c c e s s ? ,   s c i e n t i f i c   j o u r n a l   o r   s c i e n t i f i c   a r t i c l e ? ,   E n g l i s h   o r   S p a n i s h   p u b l i c a t i o n ?   C o n c l u s i o n s .   T h e   A c u e r d o   d e   B u e n o s   A i r e s   i s   a n   i n i t i a t i v e   t o   p r o m o t e   s c i e n t i f i c   n e u r o l o g i c a l   p a p e r s   o f   h i g h   q u a l i t y   i n   S p a n i s h .   T h e   c u r r e n t   s t a t u s   o f   n e u r o l o g i c a l   j o u r n a l s   i n   t h e   b i b l i o m e t r i c   c o n t e x t   o f   o u r   c o u n t r y   i s   g o o d   a n d   o p e n   t o   t h e   a d v a n t a g e s   o f   e l e c t r o n i c   a n d   f r e e   a c c e s s . 	 U n i v   M i g u e l   H e r n a n d e z ,   H o s p   U n i v   S a n   J u a n ,   D e p t   P e d i a t ,   A l i c a n t e ,   S p a i n ;   G e n   H o s p   U n i v   A l i c a n t e ,   N e u r o l   S e r v ,   E - 0 3 0 8 0   A l i c a n t e ,   S p a i n ;   U n i v   V a l e n c i a ,   C S I C ,   I n s t   H i s t   C i e n c i a   &   D o c u m e n t a c   L o p e z   P i n e r o ,   E - 4 6 0 0 3   V a l e n c i a ,   S p a i n 	 d e   D i o s ,   J G   ( r e p r i n t   a u t h o r ) ,   P r o f   M a n u e l   S a l a   6 ,   E - 0 3 0 0 3   A l i c a n t e ,   S p a i n . 	 g o n z a l e z _ j a v @ g v a . e s 	 A l e i x a n d r e - B e n a v e n t ,   R a f a e l / G - 1 0 1 1 - 2 0 1 5 	 A l e i x a n d r e - B e n a v e n t ,   R a f a e l / 0 0 0 0 - 0 0 0 2 - 6 6 7 8 - 8 8 4 4 	 	 	 A B A D G A R C I A   M F ,   2 0 0 5 ,   P R O F   I N F O R M ,   V 1 4 ,   P 3 8 0 ;   A L E I X A N D R E   R ,   2 0 0 3 ,   R E V   T R A U M A T O L   D E P ,   V 1 ,   P 9 3 ;   A L E I X A N D R E   R ,   2 0 0 4 ,   R E V   E S P   E C   S A L U D ,   V 3 ,   P 2 4 2 ;   A L E I X A N D R E B E N A V . R ,   I N   P R E S S   N E U R O L O G I A ;   A L E I X A N D R E B E N A V . R ,   2 0 0 3 ,   P I E L ,   V 1 8 ,   P 3 5 0 ;   B A N O S   J E ,   1 9 9 2 ,   M E D   C L I N - B A R C E L O N A ,   V 9 9 ,   P 9 6 ;   B o r d o n s   M ,   1 9 9 9 ,   R E V   E S P   C A R D I O L ,   V 5 2 ,   P 7 9 0 ;   B o s c h   X ,   2 0 0 1 ,   R E V   E S P   C A R D I O L ,   V 5 4 ,   P 1 4 6 3 ;   B r a v o   R ,   2 0 0 2 ,   A n   S i s t   S a n i t   N a v a r ,   V 2 5 ,   P 2 5 5 ;   C a m i   J ,   2 0 0 5 ,   M E D   C L I N - B A R C E L O N A ,   V 1 2 4 ,   P 9 3 ,   D O I   1 0 . 1 1 5 7 / 1 3 0 7 0 8 6 8 ;   C a m i   J ,   2 0 0 0 ,   G a c   S a n i t ,   V 1 4 ,   P 3 2 7 ;   C a m i   J ,   2 0 0 1 ,   M E D   C L I N - B A R C E L O N A ,   V 1 1 7 ,   P 5 1 0 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 5 1 5 ;   C a m i   J ,   1 9 9 7 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 9 ,   P 4 8 1 ;   C A M I   J ,   1 9 9 3 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 1 ,   P 7 2 1 ;   C a s a s - F e r n a n d e z   C ,   1 9 9 9 ,   R E V   N E U R O L O G I A ,   V 2 9 ,   P 7 9 1 ;   d e   D i o s   J G ,   2 0 0 6 ,   R E V   N E U R O L O G I A ,   V 4 3 ,   P 5 8 9 ;   d e   D i o s   J G ,   2 0 0 5 ,   R E V   N E U R O L O G I A ,   V 4 0 ,   P 4 5 3 ;   d e   D i o s   J G ,   1 9 9 9 ,   R E V   N E U R O L O G I A ,   V 2 8 ,   P 4 6 3 ;   D e d i e u   T ,   1 9 9 6 ,   M O L   R E P R O D   D E V ,   V 4 5 ,   P 3 5 1 ;   D E D I O S   J G ,   2 0 0 5 ,   R E V   E S P   C A R D I O L ,   V 5 8 ,   P 1 0 9 3 ;   D E D I O S   J G ,   2 0 0 4 ,   R E V   E S P   P E D I A T ,   V 6 0 ,   P 1 9 4 ;   D E D I O S   J G ,   2 0 0 4 ,   A N   P E D I A T R ,   V 6 0 ,   P 4 1 7 ;   D E D I O S   J G ,   2 0 0 5 ,   R E V   E S P   P E D I A T ,   V 6 1 ,   P 2 8 8 ;   D E D I O S   J G ,   2 0 0 1 ,   A N   E S P   P E D I A T R ,   V 5 4 ,   P 3 8 0 ;   D E D I O S   J G ,   2 0 0 3 ,   P E D I A T   I N T E G R A L ,   P 1 9 ;   G o n z a l e z   d e   D i o s   J ,   2 0 0 3 ,   R E V   E S P   P E D I A T ,   V 5 9 ,   P 2 4 6 ;   G o n z a l e z   d e   D i o s   J ,   1 9 9 5 ,   A N   E S P   P E D I A T R ,   V 4 2 ,   P 1 1 ;   G o n z a l e z   d e   D i o s   J ,   1 9 9 8 ,   R E V   E S P   P E D I A T ,   V 5 4 ,   P 4 3 0 ;   D E D I O S   J G ,   2 0 0 2 ,   A N   E S P   P E D I A T R ,   V 5 7 ,   P 1 4 1 ;   G o n z a l e z   d e   D i o s   J ,   2 0 0 3 ,   R E V   E S P   P E D I A T ,   V 5 9 ,   P 2 5 9 ;   D E D I O S   J G ,   2 0 0 7 ,   I N   P R E S S   R E V   N E U R O L ,   V 4 4 ;   D E D I O S   J G ,   2 0 0 2 ,   A N   E S P   P E D I A T   S 6 ,   V 2 2 ,   P 2 5 5 ;   G o n z a l e z   d e   D i o s   J . ,   1 9 9 7 ,   A N   E S P   P E D I A T R ,   V 4 7 ,   P 2 3 5 ;   G o n z a l e z   d e   D i o s   J ,   1 9 9 5 ,   A N   E S P   P E D I A T R ,   V 4 2 ,   P 2 ;   D E D I O S   J G ,   2 0 0 4 ,   A N   P E D I A T R ,   V 6 1 ,   P 2 4 2 ;   D E G R A N D A O R I V E   J I ,   2 0 0 5 ,   A R C H   B R O N C O N E U M O L ,   V 4 1 ,   P 4 0 4 ,   D O I   1 0 . 1 0 1 6 / S 1 5 7 9 - 2 1 2 9 ( 0 6 ) 6 0 2 5 2 - 8 ;   d e l   B r u t t o   O H ,   1 9 9 8 ,   R E V   N E U R O L O G I A ,   V 2 6 ,   P 5 7 6 ;   D E L A C U E V A   A ,   1 9 8 5 ,   M E D   C L I N - B A R C E L O N A ,   V 8 5 ,   P 8 5 6 ;   F e r n a n d e z   E s t e v e ,   2 0 0 2 ,   G a c   S a n i t ,   V 1 6 ,   P 2 8 8 ;   G o m e z - C a r i d a d   I . ,   1 9 9 6 ,   P O L I T I C A   C I E N T I F I C A ,   V 4 6 ,   P 2 1 ;   G O N Z A L E Z G U I T I A N   C ,   1 9 9 6 ,   J A N O ,   V 5 0 ,   P 8 1 8 ;   G U A R D I O L A   E ,   1 9 9 0 ,   M E D   C L I N - B A R C E L O N A ,   V 9 4 ,   P 1 9 7 ;   J O R D A O L I V E S   M ,   1 9 9 1 ,   M E D   C L I N - B A R C E L O N A ,   V 9 7 ,   P 2 6 5 ;   L a P o r t e   R E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 1 6 0 9 ;   L A P O R T E   R E ,   1 9 9 5 ,   B R I T   M E D   J ,   V 3 1 0 ,   P 1 3 8 7 ;   L O P E Z   J R ,   2 0 0 5 ,   P R O F E S I O N A L   I N F O R M ,   V 1 4 ,   P 2 4 6 ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 3 8 4 ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 1 0 1 ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 6 4 ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 1 4 2 ;   L o p e z - M u n o z   F ,   1 9 9 6 ,   R e v   N e u r o l ,   V 2 4 ,   P 4 1 7 ;   M a r t i n e z - V i l a   E ,   2 0 0 5 ,   N E U R O L O G I A ,   V 2 0 ,   P 1 ;   M a t i a s - G u i u   J ,   1 9 9 6 ,   R e v   N e u r o l ,   V 2 4 ,   P 9 0 4 ;   M a t i a s - G u i u   J ,   2 0 0 3 ,   R E V   N E U R O L O G I A ,   V 3 6 ,   P 1 ;   M a t i a s G u i u   J ,   1 9 9 7 ,   R E V   N E U R O L O G I A ,   V 2 5 ,   P 6 1 ;   M E L E R O   R e m e d i o s ,   2 0 0 5 ,   P R O F   I N F O R M ,   V 1 4 ,   P 2 5 5 ;   M o r a v c s i k   M J ,   1 9 8 9 ,   R E V   E S P   D O C   C I E N T ,   V 1 2 ,   P 3 1 3 ;   O R T E G A S E R R A N O   J ,   1 9 9 2 ,   C I R   E S P ,   V 5 1 ,   P 3 ;   P a r a d a   A . ,   2 0 0 5 ,   P R O F   I N F O R M ,   V 1 4 ,   P 3 2 6 ;   P a r e j a   F B ,   2 0 0 4 ,   N E U R O L O G I A ,   V 1 9 ,   P 6 4 ;   P a s c u a l - C a s t r o v i e j o   I ,   1 9 9 9 ,   R E V   N E U R O L O G I A ,   V 2 9 ,   P 7 9 1 ;   P o r c e l   A . ,   2 0 0 0 ,   P S I Q U I A T R I A   B I O L ,   V 7 ,   P 2 4 2 ;   P U L I D O   M ,   1 9 8 4 ,   M E D   C L I N - B A R C E L O N A ,   V 8 2 ,   P 4 9 4 ;   S a n c h o   R . ,   1 9 9 0 ,   R E V   E S P   D O C   C I E N T ,   V 1 3 ,   P 8 4 2 ;   S e m p e r e   A P ,   2 0 0 5 ,   R E V   N E U R O L O G I A ,   V 4 0 ,   P 6 5 ;   S e m p e r e   A P ,   2 0 0 5 ,   R E V   N E U R O L O G I A ,   V 4 0 ,   P 1 ;   S e r r a n o   M A B ,   1 9 9 9 ,   M E D   C L I N - B A R C E L O N A ,   V 1 1 3 ,   P 2 3 ;   S m i t h   R ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ,   P 2 4 2 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 9 . 7 4 6 0 . 2 4 2 ;   P e r e z   S o l i s   D ,   2 0 0 5 ,   B O L   P E D I A T ,   V 4 5 ,   P 6 1 	 7 0 	 1 5 	 1 5 	 1 	 6 	 R E V I S T A   D E   N E U R O L O G I A 	 B A R C E L O N A 	 C / O   C E S A R   V I G U E R A ,   E D I T O R ,   A P D O   9 4 1 2 1 ,   0 8 0 8 0   B A R C E L O N A ,   S P A I N 	 0 2 1 0 - 0 0 1 0 	 1 5 7 6 - 6 5 7 8 	 	 R E V   N E U R O L O G I A 	 R e v .   N e u r o l o g i a 	 J A N   1 	 2 0 0 7 	 4 4 	 1 	 	 	 	 	 3 2 	 4 2 	 	 	 	 1 1 	 C l i n i c a l   N e u r o l o g y 	 N e u r o s c i e n c e s   &   N e u r o l o g y 	 1 3 4 H I 	 W O S : 0 0 0 2 4 4 0 7 3 7 0 0 0 0 7 	 	 
 
 J 	 S c h n e i d e r ,   J W 	 	 	 	 S c h n e i d e r ,   J e s p e r   W . 	 	 	 C o n c e p t   s y m b o l s   r e v i s i t e d :   N a m i n g   c l u s t e r s   b y   p a r s i n g   a n d   f i l t e r i n g   o f   n o u n   p h r a s e s   f r o m   c i t a t i o n   c o n t e x t s   o f   c o n c e p t   s y m b o l s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e ;   P r o c e e d i n g s   P a p e r 	 1 0 t h   I n t e r n a t i o n a l   C o n f e r e n c e   o n   S c i e n t o m e t r i c s   a n d   I n f o r m e t r i c s 	 J U L ,   2 0 0 5 	 K a r o l i n s k a   I n s t ,   S t o c k h o l m ,   S W E D E N 	 I n t   S o c   S c i e n t o m e t r   &   I n f o r m e t r 	 K a r o l i n s k a   I n s t 	 	 C O M P U T E R   R E C O G N I T I O N ;   C I T I N G   S T A T E M E N T S ;   W O R D   A N A L Y S I S ;   K N O W L E D G E ;   B I B L I O M E T R I C S ;   C O C I T A T I O N ;   R E T R I E V A L 	 T h e   p r e s e n t   s t u d y   p r e s e n t s   a   s e m i - a u t o m a t i c   m e t h o d   f o r   p a r s i n g   a n d   f i l t e r i n g   o f   n o u n   p h r a s e s   f r o m   c i t a t i o n   c o n t e x t s   o f   c o n c e p t   s y m b o l s .   T h e   p u r p o s e   o f   t h e   m e t h o d   i s   t o   e x t r a c t   c o n t e x t u a l ,   a g r e e d   u p o n ,   a n d   p e r t i n e n t   n o u n   p h r a s e s ,   t o   b e   u s e d   i n   v i s u a l i z a t i o n   s t u d i e s   f o r   n a m i n g   c l u s t e r s   ( c o n c e p t   g r o u p s )   o r   c o n c e p t   s y m b o l s .   T h e   m e t h o d   i s   a p p l i e d   i n   a   c a s e   s t u d y ,   w h i c h   f o r m s   p a r t   o f   a   l a r g e r   d i s s e r t a t i o n   w o r k   c o n c e r n i n g   t h e   a p p l i c a b i l i t y   o f   b i b l i o m e t r i c   m e t h o d s   f o r   t h e s a u r u s   c o n s t r u c t i o n .   T h e   c a s e   s t u d y   i s   c a r r i e d   o u t   w i t h i n   p e r i o d o n t o l o g y ,   a   s p e c i a l t y   a r e a   o f   d e n t i s t r y .   T h e   r e s u l t   o f   t h e   c a s e   s t u d y   i n d i c a t e s   t h a t   t h e   m e t h o d   i s   a b l e   t o   i d e n t i f y   h i g h l y   i m p o r t a n t   n o u n   p h r a s e s ,   a n d   t h a t   t h e s e   p h r a s e s   a c c u r a t e l y   d e s c r i b e   t h e i r   p a r e n t   c l u s t e r s .   H e n c e ,   t h e   m e t h o d   i s   a b l e   t o   r e d u c e   t h e   l a b o u r   i n t e n s i v e   w o r k   o f   m a n u a l   c i t a t i o n   c o n t e x t   a n a l y s i s ,   t h o u g h   f u r t h e r   r e f i n e m e n t s   a r e   s t i l l   n e e d e d . 	 R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   D e p t   I n f o r m a t   S t u d i e s ,   D K - 9 0 0 0   A a l b o r g ,   D e n m a r k 	 S c h n e i d e r ,   J W   ( r e p r i n t   a u t h o r ) ,   R o y a l   S c h   L i b   &   I n f o r m a t   S c i ,   D e p t   I n f o r m a t   S t u d i e s ,   S o h n g a r d s h o l m v e j   2 ,   D K - 9 0 0 0   A a l b o r g ,   D e n m a r k . 	 j w s @ d b . d k 	 S c h n e i d e r ,   J e s p e r / C - 5 2 9 3 - 2 0 0 8 ;   S c h n e i d e r ,   J e s p e r   W i b o r g / J - 9 0 6 8 - 2 0 1 2 	 S c h n e i d e r ,   J e s p e r   W i b o r g / 0 0 0 0 - 0 0 0 1 - 5 5 5 6 - 0 9 1 9 	 	 	 A n i c k   P G ,   1 9 9 7 ,   P R O C E E D I N G S   O F   T H E   2 0 T H   A N N U A L   I N T E R N A T I O N A L   A C M   S I G I R   C O N F E R E N C E   O N   R E S E A R C H   A N D   D E V E L O P M E N T   I N   I N F O R M A T I O N   R E T R I E V A L ,   P 3 1 4 ,   D O I   1 0 . 1 1 4 5 / 2 5 8 5 2 5 . 2 5 8 6 0 1 ;   B a t a g e l j   V ,   1 9 9 8 ,   C O N N E C T I O N S ,   V 2 1 ,   P 4 7 ;   B o r n e r   K ,   2 0 0 3 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 2 / a r i s . 1 4 4 0 3 7 0 1 0 6 ;   B R A A M   R R ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 3 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - I ;   G A R F I E L D   E ,   1 9 7 4 ,   C U R R   C O N T E N T S ,   P 5 ;   H e   Q ,   1 9 9 9 ,   L I B R   T R E N D S ,   V 4 8 ,   P 1 3 3 ;   I n g w e r s e n   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 ;   J O N E S   K S ,   1 9 7 1 ,   A U T O M A T I C   K E Y W O R D   C L ;   M C C A I N   K W ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 2 9 ;   M O R A V C S I K   M J ,   1 9 7 5 ,   S O C   S T U D   S C I ,   V 5 ,   P 8 6 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 5 0 0 5 0 0 1 0 6 ;   N o y o n s   E .   C .   M . ,   1 9 9 9 ,   B I B L I O M E T R I C   M A P P I N G ;   O C H I A I   A K I R A ,   1 9 5 7 ,   B U L L   J A P A N E S E   S O C   S C I   F I S H ,   V 2 2 ,   P 5 2 6 ;   O C O N N O R   J ,   1 9 8 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 9 ,   P 3 6 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 3 ) 9 0 0 5 3 - 5 ;   O C O N N O R   J ,   1 9 8 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 8 ,   P 1 2 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 2 ) 9 0 0 3 6 - X ;   R E E S P O T T E R   L K ,   1 9 8 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 5 ,   P 6 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 9 ) 9 0 1 0 1 - 5 ;   S c h n e i d e r   J W ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 5 2 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 6 0 6 0 9 ;   S C H N E I D E R   J W ,   2 0 0 4 ,   T H E S I S   R O Y A L   S C H   L O B ;   S C H V A N E V E L D T   R W ,   1 9 9 0 ,   P A T H F I N D E R   A S S O C I A T ;   S M A L L   H ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 7 0 3 0 2 ;   S M A L L   H ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 9 ;   S m a l l   H . ,   1 9 8 2 ,   P R O G R   C O M M U N I C A T I O N ,   V 3 ,   P 2 8 7 ;   S M A L L   H G ,   1 9 7 9 ,   P   A M   S O C   I N F O R M   S C I ,   V 1 6 ,   P 2 7 0 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S o e r g e l   D ,   1 9 7 4 ,   I N D E X I N G   L A N G U A G E S   T ;   V o u t i l a i n e n   A . ,   1 9 9 3 ,   P   W O R K S H   V E R   L A R G   C O ,   P 4 8 ;   W h i t e   H D ,   1 9 9 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 2 ,   P 9 9 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 	 2 8 	 1 5 	 1 6 	 1 	 1 1 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 D E C 	 2 0 0 6 	 6 8 	 3 	 	 	 	 	 5 7 3 	 5 9 3 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 3 1 - z 	 	 2 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 7 K K 	 W O S : 0 0 0 2 3 9 3 0 0 6 0 0 0 1 7 	 	 
 
 J 	 C o r n e l i u s ,   B ;   P e r s s o n ,   O 	 	 	 	 C o r n e l i u s ,   B ;   P e r s s o n ,   O 	 	 	 W h o ' s   w h o   i n   v e n t u r e   c a p i t a l   r e s e a r c h 	 T E C H N O V A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 v e n t u r e   c a p i t a l ;   b i b l i o m e t r i c s ;   r e s e a r c h   f r o n t ;   k n o w l e d g e   b a s e ;   r e s e a r c h   f u n d i n g ;   c i t a t i o n   a n a l y s i s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S 	 A   b i b l i o m e t r i c   a n a l y s i s   o f   r e s e a r c h   p a p e r s   i n   v e n t u r e   c a p i t a l   r e v e a l s   a n   i n c r e a s i n g   i n t e r e s t   o v e r   t i m e   b y   r e s e a r c h e r s   a c r o s s   a   b r o a d   s p e c t r u m   o f   b u s i n e s s   d i s c i p l i n e s .   I t   a l s o   r e v e a l s   t h e   d o m i n a n c e   o f   N o r t h   A m e r i c a n ,   p a r t i c u l a r l y   A m e r i c a n   r e s e a r c h e r s   w h o   e n t e r e d   t h e   f i e l d   e a r l y .   I n t e r e s t i n g l y ,   t h e   a n a l y s i s   d e m o n s t r a t e s   t h a t   t w o   s c h o o l s   o f   e n t r e p r e n e u r i a l   r e s e a r c h   c o m p e t e   f o r   d o m i n a n c e   i n   t h e   v e n t u r e   c a p i t a l   f r a m e w o r k .   M u c h   o f   t h e   c o r e   r e s e a r c h ,   t h e   k n o w l e d g e   b a s e ,   c r o s s e s   d i s c i p l i n a r y   l i n e s   b u t   i s   d e v e l o p e d ,   f r o m   t h e r e - o n ,   i n   a   d i s c i p l i n e   s p e c i f i c   f a s h i o n .   R e s e a r c h e r s   w h o s e   p r i m a r y   i n t e r e s t   i s   i n   f i n a n c e   a n d   e c o n o m i c s   u s e   q u a n t i t a t i v e ,   n e o - c l a s s i c a l   m o d e l s   a l m o s t   e x c l u s i v e l y   a n d   p u b l i s h ,   w i t h   t h e   e x c e p t i o n   o f   t h e   m o s t   c i t e d   a u t h o r s ,   s o l e l y   i n   e c o n o m i c s   a n d   f i n a n c e   j o u r n a l s .   T h e s e   r e s e a r c h e r s   t e n d   t o   b e   m o r e   s u c c e s s f u l   a t   a c h i e v i n g   i n t e r n a l   u n i v e r s i t y   f u n d i n g   f o r   t h e i r   p r o j e c t s   w h i l e   t h e   s e c o n d   g r o u p ,   p u b l i s h i n g   i n   j o u r n a l s   d e d i c a t e d   t o   m a n a g e m e n t   a n d   e n t r e p r e n e u r s h i p   r e s e a r c h ,   u s e s   a   b r o a d e r   a r r a y   o f   t h e o r e t i c a l   t e c h n i q u e s ,   a p p l y   b o t h   q u a n t i t a t i v e   a n d   q u a l i t a t i v e   m e t h o d o l o g i e s   a n d   a r e   m o r e   o f t e n   f u n d e d   e x t e r n a l l y .   T h e   c o r e   g r o u p   o f   r e s e a r c h e r s ,   w i t h   r e p u t a t i o n s   s u p p o r t e d   b y   l a r g e   n u m b e r s   o f   c i t a t i o n s ,   a p p e a r   t o   b e   a b l e   t o   r a i s e   f u n d s   b o t h   i n t e r n a l l y   ( t h r o u g h   u n i v e r s i t y   b o d i e s )   a n d   e x t e r n a l l y .   ( c )   2 0 0 5   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U m e a   U n i v ,   D e p t   B u s i n e s s   A d m ,   S E - 9 0 1 8 7   U m e a ,   S w e d e n ;   U m e a   U n i v ,   I n f o r s k   S o c i o l o g   I n s t ,   S E - 9 0 1 8 7   U m e a ,   S w e d e n 	 C o r n e l i u s ,   B   ( r e p r i n t   a u t h o r ) ,   U m e a   U n i v ,   D e p t   B u s i n e s s   A d m ,   S E - 9 0 1 8 7   U m e a ,   S w e d e n . 	 b a r b a r a . c o r n e l i u s @ f e k . u m u . s e ;   o l l e . p e r s o n @ s o c . u m u . s e 	 P e r s s o n ,   O l l e / A - 8 7 0 8 - 2 0 1 1 ;   L u n d g r e n ,   M a r i t h a / A - 8 8 4 6 - 2 0 1 1 	 	 	 	 B a s c h a   A ,   2 0 0 1 ,   J   C O R P   F I N A N C ,   V 7 ,   P 2 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 9 - 1 1 9 9 ( 0 1 ) 0 0 0 2 3 - 2 ;   B e a t t i e   V . ,   2 0 0 5 ,   B R I T   A C C O U N T   R E V ,   V 3 7 ,   P 8 5 ,   D O I   1 0 . 1 0 1 6 / j . b a r . 2 0 0 4 . 0 9 . 0 0 4 ;   E o m   S B ,   1 9 9 6 ,   D E C I S   S U P P O R T   S Y S T ,   V 1 6 ,   P 3 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 1 6 7 - 9 2 3 6 ( 9 5 ) 0 0 0 2 6 - 7 ;   G o l d f a r b   B ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 6 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 3 4 - 3 ;   H e   Y L ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 ;   L a n d s t r o m   H . ,   2 0 0 1 ,   S C A N D   J   M A N A G ,   V 1 7 ,   P 2 2 5 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 6 - 5 2 2 1 ( 9 9 ) 0 0 0 3 0 - 5 ;   S h a r m a   U ,   2 0 0 2 ,   C R I T   P E R S P E C T ,   V 1 3 ,   P 6 6 1 ,   D O I   D O I   1 0 . 1 0 0 6 / C P A C . 2 0 0 2 . 0 5 6 2 ;   L e r n e r   J ,   2 0 0 4 ,   J   F I N A N C   E C O N ,   V 7 2 ,   P 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 4 - 4 0 5 X ( 0 3 ) 0 0 2 0 3 - 4 ;   O k u b o   Y ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 8 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 3 6 - 0 ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   R i n i a   E J ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 3 5 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 8 2 - 2 ;   S c h u m p e t e r   J . A . ,   1 9 3 4 ,   T H E O R Y   E C   D E V ;   S w y g a r t - H o b a u g h   A J ,   2 0 0 4 ,   L I B R   C O L L E C T   A C Q U I S ,   V 2 8 ,   P 1 8 0 ,   D O I   1 0 . 1 0 1 6 / j . l c a t s . 2 0 0 4 . 0 2 . 0 0 3 ;   T h o m a s   P R ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 0 5 0 ;   V a s t a g   G ,   2 0 0 3 ,   I N T   J   P R O D   E C O N ,   V 8 1 - 2 ,   P 1 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 5 - 5 2 7 3 ( 0 2 ) 0 0 3 5 0 - X ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 	 1 6 	 1 5 	 1 5 	 4 	 3 3 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 1 6 6 - 4 9 7 2 	 	 	 T E C H N O V A T I O N 	 T e c h n o v a t i o n 	 F E B 	 2 0 0 6 	 2 6 	 2 	 	 	 	 	 1 4 2 	 1 5 0 	 	 1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 5 . 0 5 . 0 0 9 	 	 9 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s ;   O p e r a t i o n s   R e s e a r c h   &   M a n a g e m e n t   S c i e n c e 	 0 1 7 Y J 	 W O S : 0 0 0 2 3 5 7 2 8 9 0 0 0 0 2 	 	 
 
 J 	 E g g h e ,   L 	 	 	 	 E g g h e ,   L 	 	 	 E x p a n s i o n   o f   t h e   f i e l d   o f   i n f o r m e t r i c s :   O r i g i n s   a n d   c o n s e q u e n c e s 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 	 S T R O N G   S I M I L A R I T Y   M E A S U R E S ;   W O R L D - W I D E - W E B ;   O R D E R E D   S E T S ;   B I B L I O M E T R I C S ;   S C I E N T O M E T R I C S ;   A U T H O R S H I P ;   D O C U M E N T S ;   L A W S 	 	 L i m b u r g s   U n i v   C t r ,   B - 3 5 9 0   D i e p e n b e e k ,   B e l g i u m 	 E g g h e ,   L   ( r e p r i n t   a u t h o r ) ,   U n i v   A n t w e r p ,   C a m p u s   D r i e   E i k e n   U n i v   P l e i n   1 ,   B - 2 6 1 0   A n t w e r p ,   B e l g i u m . 	 l e o . e g g h e @ l u c . a c . b e 	 	 	 	 	 A d a m i c   L A ,   2 0 0 1 ,   P H Y S   R E V   E ,   V 6 4 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v E . 6 4 . 0 4 6 1 3 5 ;   A l b e r t   R ,   1 9 9 9 ,   N A T U R E ,   V 4 0 1 ,   P 1 3 0 ;   A n t e l m a n   K ,   2 0 0 4 ,   C O L L   R E S   L I B R ,   V 6 5 ,   P 3 7 2 ;   B a r - I l a n   J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 4 3 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 5 < 4 3 2 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 7 ;   B a r a b a s i   A L ,   2 0 0 2 ,   P H Y S I C A   A ,   V 3 1 1 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 4 3 7 1 ( 0 2 ) 0 0 7 3 6 - 7 ;   B a r a b a s i   A L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 0 9 ;   B j o r n e b o r n   L ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 2 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 0 7 7 ;   B l a c k e r t   L . ,   1 9 7 9 ,   W I S S E N S C H A F T L I C H E   Z ,   V 2 5 ,   P 1 8 7 ;   B O S S Y   M J ,   1 9 9 5 ,   S O L A R I S   I N F O R M A T I O N ,   V 2 ,   P 2 4 5 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R O D Y   T ,   2 0 0 4 ,   E A R L I E R   W E B   U S A G E   S T ;   B r o o k e s   B .   C . ,   1 9 9 0 ,   I N F O R M E T R I C S ,   V 8 9 ,   P 3 1 ;   * C L E V E R ,   1 9 9 9 ,   S C I   A M                       J U N ,   P 4 4 ;   C o n d o n   E U ,   1 9 2 8 ,   S C I E N C E ,   V 6 7 ,   P 3 0 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 7 . 1 7 3 3 . 3 0 0 ;   E g g h e   L ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   S E R ,   P 1 ;   E g g h e   L ,   2 0 0 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 9 ,   P 7 7 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 2 7 - 4 ;   E g g h e   L ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 8 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 5 1 - 6 ;   E G G H E   L ,   1 9 8 8 ,   P   1   I N T   C   B I B L   T H E O R ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   E G G H E   L ,   1 9 9 0 ,   P   2   I N T   C   B I B L   S C I   I ;   E s t o u p   J . B . ,   1 9 1 6 ,   G A M M E S   S T E N O G R A P H I Q U ;   G l a n z e l   W ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 5 ,   P 1 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 7 5 ;   H A R N A D   S ,   2 0 0 4 ,   B R I T   M E D   J   R A P I D   R E S ;   H a r n a d   S . ,   2 0 0 4 ,   D   L I B   M A G A Z I N E ,   V 1 0 ;   H e   S Y ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 9 5 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 1 3 1 ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   H u b e r m a n   B A ,   1 9 9 8 ,   S C I E N C E ,   V 2 8 0 ,   P 9 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 0 . 5 3 6 0 . 9 5 ;   I K P A A H I N D I   L ,   1 9 8 5 ,   L I B R I ,   V 3 5 ,   P 1 6 3 ;   L A W A N I   S M ,   1 9 8 1 ,   L I B R I ,   V 3 1 ,   P 2 9 4 ;   L i p e t z   B A ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 9 9 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 1 < 9 9 4 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - U ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   N A C K E   O ,   1 9 7 9 ,   N A C H R   D O K ,   V 3 0 ,   P 2 1 9 ;   N A L I M O V   V V ,   1 9 6 9 ,   N A U K O M E T R I J A ;   P e r n e g e r   T V ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ,   P 5 4 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 9 . 7 4 6 5 . 5 4 6 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R o u s s e a u   R ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 5 ,   P 3 1 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 9 6 7 5 9 0 9 8 2 9 ;   S c h u b e r t   A ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 8 6 2 0 2 4 2 5 ;   S u m m e r s   R ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 1 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 1 5 3 : : A I D - A S I 2 0 > 3 . 0 . C O ; 2 - H ;   T A G U E S U T C L I F F E   J ,   1 9 9 4 ,   5 0   Y E A R S   I N F O R M   P R O G ,   P 1 4 7 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   Z i p f   G . ,   1 9 4 9 ,   H U M A N   B E H A V   P R I N C I P L 	 4 2 	 1 5 	 1 6 	 2 	 2 1 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 1 8 7 3 - 5 3 7 1 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 D E C 	 2 0 0 5 	 4 1 	 6 	 	 	 	 	 1 3 1 1 	 1 3 1 6 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 1 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 9 5 6 X E 	 W O S : 0 0 0 2 3 1 3 3 2 6 0 0 0 0 1 	 	 
 
 J 	 A r u n a c h a l a m ,   S ;   G u n a s e k a r a n ,   S 	 	 	 	 A r u n a c h a l a m ,   S ;   G u n a s e k a r a n ,   S 	 	 	 T u b e r c u l o s i s   r e s e a r c h   i n   I n d i a   a n d   C h i n a :   F r o m   b i b l i o m e t r i c s   t o   r e s e a r c h   p o l i c y 	 C U R R E N T   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 B U R D E N ;   S T E P S 	 	 M S   S w a m i n a t h a n   R e s   F d n ,   C h e n n a i   6 0 0 1 1 3 ,   I n d i a 	 A r u n a c h a l a m ,   S   ( r e p r i n t   a u t h o r ) ,   M S   S w a m i n a t h a n   R e s   F d n ,   3 r d   C r o s s   S t , T a r a m a n i   I n s t   A r e a ,   C h e n n a i   6 0 0 1 1 3 ,   I n d i a . 	 	 A R U N A C H A L A M ,   S U B B I A H / B - 9 9 2 5 - 2 0 0 9 ;   	 A R U N A C H A L A M ,   S U B B I A H / 0 0 0 0 - 0 0 0 2 - 4 3 9 8 - 4 6 5 8 ;   S u b b i a h ,   G u n a s e k a r a n / 0 0 0 0 - 0 0 0 1 - 7 6 1 9 - 5 5 1 9 	 	 	 A C O S T A C A Z A R E S   B ,   C L I N M E D 2 0 0 0 1 0 0 0 8 ;   A r u n a c h a l a m   S ,   1 9 9 7 ,   C U R R   S C I   I N D I A ,   V 7 2 ,   P 9 1 2 ;   A r u n a c h a l a m   S ,   1 9 9 8 ,   N A T L   M E D   J   I N D I A ,   V 1 1 ,   P 2 7 ;   A r u n a c h a l a m   S ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 5 8 2 3 4 3 4 ;   A R U N A C H A L A M   S ,   2 0 0 2 ,   A N N   C   2 0 0 2   S R I   C H I T R ;   A R U N A C H A L A M   S ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 1 5 ;   A R U N A C H A L A M   S ,   2 0 0 1 ,   I N   P R E S S   C U R R   S C I ,   V 8 2 ;   B A L A S A N G A M E S H W A . V H ,   2 0 0 0 ,   S T A T U S   T U B E R C U L O S I S ,   P 4 1 ;   B R O W N   S ,   2 0 0 1 ,   S T A T E M E N T   M A D E   P R E S S ;   B u t l e r   D ,   2 0 0 0 ,   N A T U R E ,   V 4 0 3 ,   P 6 9 2 ,   D O I   1 0 . 1 0 3 8 / 3 5 0 0 1 7 3 5 ;   C o e   G   A ,   1 9 9 2 ,   I n t   J   T e c h n o l   A s s e s s   H e a l t h   C a r e ,   V 8 ,   P 2 5 5 ;   C o l l i n s   C ,   2 0 0 0 ,   A M   J   P U B L I C   H E A L T H ,   V 9 0 ,   P 1 3 8 9 ,   D O I   1 0 . 2 1 0 5 / A J P H . 9 0 . 9 . 1 3 8 9 ;   D E   S N ,   1 9 5 3 ,   J   P A T H O L   B A C T E R I O L ,   V 6 6 ,   P 5 5 9 ,   D O I   1 0 . 1 0 0 2 / p a t h . 1 7 0 0 6 6 0 2 2 8 ;   D E   S N ,   1 9 5 9 ,   N A T U R E ,   V 1 8 3 ,   P 1 5 3 3 ,   D O I   1 0 . 1 0 3 8 / 1 8 3 1 5 3 3 a 0 ;   D E   S N ,   1 9 5 6 ,   J   P A T H O L   B A C T E R I O L ,   V 7 1 ,   P 2 0 1 ,   D O I   1 0 . 1 0 0 2 / p a t h . 1 7 0 0 7 1 0 1 2 6 ;   D y e   C ,   1 9 9 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 2 ,   P 6 7 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 2 . 7 . 6 7 7 ;   F r i e d e n   T R ,   2 0 0 0 ,   L A N C E T ,   V 3 5 5 ,   P 1 0 8 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 0 ) 0 2 0 4 8 - 1 ;   G A R F I E L D   E ,   1 9 8 6 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 9 ,   P 1 0 3 ;   G e i t e r   L ,   2 0 0 0 ,   E N D I N G   N E G L E C T   E L I M I ;   G L A S E R   N ,   2 0 0 0 ,   G A T E ,   V 1 8 ,   P 8 ;   * G L O B   F O R   H L T H   R E S ,   2 0 0 0 ,   1 0 9 0   H L T H   R E S ;   H i c k s   E K ,   1 9 9 3 ,   K N O W L E D G E   P O L I C Y ,   V 6 ,   P 7 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 9 6 2 8 3 ;   M i c h a u d   C M ,   2 0 0 1 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 5 ,   P 5 3 5 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 5 . 5 . 5 3 5 ;   * N I A I D ,   2 0 0 1 ,   G L O B   H L T H   R E S   P L A N   H ;   N U N N   P ,   2 0 0 1 ,   A N N   F O R   3 ;   O ' B r i e n   R J ,   2 0 0 1 ,   A M   J   R E S P   C R I T   C A R E ,   V 1 6 3 ,   P 1 0 5 5 ;   O G D E N   J ,   1 9 9 9 ,   D E V   R E S   I N S I G H T S   D E C ,   P 3 2 ;   * O P   S O C   I ,   1 9 9 9 ,   G L O B   I M P   D R U G   R E S   T U ;   R O S C I G N O   G ,   2 0 0 1 ,   A S   R   D   C O A L   C   P E N   2 ;   R o w s o n   M ,   2 0 0 1 ,   B R I T   M E D   J ,   V 3 2 3 ,   P 1 8 6 ;   S e n   K ,   2 0 0 0 ,   L A N C E T ,   V 3 5 6 ,   P 5 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 0 ) 0 2 5 9 0 - 3 ;   * T U B   P R E V   T R I A L ,   1 9 8 0 ,   I N D I A N   J   M E D   R E S   S ,   V 7 2 ,   P 1 ;   T u b e r c u l o s i s   R e s e a r c h   C e n t r e ,   1 9 9 9 ,   I N D I A N   J   M E D   R E S   S ,   V 1 1 0 ,   P 5 6 ;   * W E L L C   T R U S T ,   2 0 0 1 ,   F I N A N C I A L   T I M E S   0 3 2 7 ,   P 1 0 ;   * W H O ,   1 9 9 9 ,   1 9 9 9   W O R L D   H L T H   R E P ,   P 1 ;   W o r l d   H e a l t h   O r g a n i z a t i o n ,   2 0 0 1 ,   W H O C D S T B 2 0 0 1 2 8 7 ,   V 2 0 0 1 ,   P 2 8 7 ;   W o r l d   H e a l t h   O r g a n i z a t i o n ,   2 0 0 0 ,   W H O   L A B   M A N   E X   H U M   S ,   P 4 ;   1 9 9 0 ,   C U R R   S C I ,   V 5 9 ,   P 6 2 3 ;   2 0 0 0 ,   G L O B A L   A L L I A N C E   T B   D ;   2 0 0 1 ,   F I N A N C I A L   T I M E S   0 7 1 9 ,   P 1 2 ;   2 0 0 1 ,   G L O B A L   A L L I A N C E   T B   D 	 4 1 	 1 5 	 1 9 	 0 	 7 	 C U R R E N T   S C I E N C E   A S S N 	 B A N G A L O R E 	 C   V   R A M A N   A V E N U E ,   P O   B O X   8 0 0 5 ,   B A N G A L O R E   5 6 0   0 8 0 ,   I N D I A 	 0 0 1 1 - 3 8 9 1 	 	 	 C U R R   S C I   I N D I A 	 C u r r .   S c i . 	 A P R   2 5 	 2 0 0 2 	 8 2 	 8 	 	 	 	 	 9 3 3 	 9 4 7 	 	 	 	 1 5 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 5 4 8 W B 	 W O S : 0 0 0 1 7 5 4 1 1 9 0 0 0 1 4 	 	 
 
 J 	 P a r d o ,   C ;   R e o l i d ,   M ;   D e l i c a d o ,   M V ;   M a l l e b r e r a ,   E ;   G a r c i a - M e s e g u e r ,   M J 	 	 	 	 P a r d o ,   C ;   R e o l i d ,   M ;   D e l i c a d o ,   M V ;   M a l l e b r e r a ,   E ;   G a r c i a - M e s e g u e r ,   M J 	 	 	 N u r s i n g   r e s e a r c h   i n   S p a i n :   b i b l i o m e t r i c s   o f   r e f e r e n c e s   o f   r e s e a r c h   p a p e r s   i n   t h e   d e c a d e   1 9 8 5 - 1 9 9 4 	 J O U R N A L   O F   A D V A N C E D   N U R S I N G 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   S p a n i s h   n u r s i n g   r e s e a r c h ;   a n a l y s i s   o f   r e f e r e n c e s ;   b i b l i o g r a p h i c   r e f e r e n c e s 	 	 B a c k g r o u n d .   S p a i n   i s   o n e   o f   t h e   f e w   E u r o p e a n   c o u n t r i e s   t o   h a v e   r e c e n t l y   t o t a l l y   i n c o r p o r a t e d   t h e   s t u d y   o f   n u r s i n g   i n t o   t h e   u n i v e r s i t y   s e c t o r .   B i b l i o m e t r i c   s t u d i e s   m a y   b e   o f   a   g r e a t   h e l p   f o r   t h e   c o n s o l i d a t i o n   o f   n u r s i n g   r e s e a r c h .   A i m   o f   t h e   s t u d y .   T h e   a i m   o f   t h i s   p a p e r   i s   t o   d e s c r i b e   b i b l i o g r a p h i c   r e f e r e n c e s   i n   S p a n i s h   n u r s i n g   r e s e a r c h   p a p e r s   a n d   t h e i r   e v o l u t i o n   o v e r   a   d e c a d e .   M e t h o d .   T h e   m e t h o d   c o n s i s t s   o f   a   r e t r o s p e c t i v e   b i b l i o m e t r i c   s t u d y   o f   a   s a m p l e   ( c l u s t e r   s a m p l i n g )   o f   6 2 2   r e s e a r c h   p a p e r s   ( o r i g i n a l   p a p e r s   a n d   r e v i e w   p a p e r s ) ,   w h i c h   w e r e   c o n t a i n e d   i n   t h e   S p a n i s h   n u r s i n g   j o u r n a l s   E n f e r m e r i a   C i e n t i f i c a ,   R e v i s t a   R O L   d e   E n f e r m e r i a ,   E n f e r m e r i a   C l i n i c a   a n d   E n f e r m e r i a   I n t e g r a l ,   a n d   p u b l i s h e d   f r o m   1 9 8 5   t o   1 9 9 4 .   T h e   j o u r n a l   N u r s i n g   R e s e a r c h   w a s   s e l e c t e d   f o r   q u a l i t a t i v e   c o m p a r a t i v e   p u r p o s e s .   A   s e r i e s   o f   c l a s s i c   b i b l i o m e t r i c   i n d e x e s   w e r e   u s e d .   R e s u l t s .   T h e   m e a n   o f   r e f e r e n c e s   p e r   p a p e r   i s   1 0 . 6 4   + / -   1 0 . 4 2 ;   t h i s   i n c r e a s e d   o v e r   t i m e   ( P   <   0 . 0 0 1 ) .   R e v i e w   p a p e r s   h a v e   m o r e   r e f e r e n c e s   ( P   <   0 . 0 0 1 ) .   P r i c e   i n d e x   ( p e r c e n t a g e   o f   r e f e r e n c e s   p u b l i s h e d   d u r i n g   t h e   l a s t   5   y e a r s )   i s   4 4 %   a n d   t h e   I n s u l a r i t y   ( p e r c e n t a g e   o f   r e f e r e n c e s   p u b l i s h e d   i n   s a m e   c o u n t r y   a s   t h e   a r t i c l e )   i s   5 5 % .   R e f e r e n c e s   t o   j o u r n a l s   p r e d o m i n a t e   ( 5 8 . 6 % ) ,   w i t h   a   g r o w i n g   t e n d e n c y   f o r   r e f e r e n c e s   t o   S p a n i s h   n u r s i n g   j o u r n a l s ,   a l t h o u g h   t h e y   a r e   s t i l l   s c a r c e   ( 1 8 . 1 %   o f   t h e   r e f e r e n c e s   t o   j o u r n a l s ) .   S p a n i s h   i s   t h e   l a n g u a g e   o f   m o s t   o f   t h e   r e f e r e n c e s   ( 6 0 . 3 % ) ,   t h e   s e c o n d   l a n g u a g e   b e i n g   E n g l i s h   ( 3 6 . 1 % ) .   C o n c l u s i o n s .   B i b l i o g r a p h i c   r e f e r e n c e s   i n   S p a n i s h   n u r s i n g   r e s e a r c h   p a p e r s   a r e   s c a r c e   a n d   n o t   v e r y   s p e c i f i c :   t h i s   h a p p e n s   b o t h   i n   r e g a r d   t o   N u r s i n g   R e s e a r c h   a n d   t o   p u b l i c a t i o n s   i n   o t h e r   n a t i o n a l   a n d   i n t e r n a t i o n a l   s c i e n c e   a r e a s .   H o w e v e r ,   t h e r e   i s   a n   i n c r e a s i n g   t e n d e n c y   o f   r e f e r e n c e s   ( i n c l u d i n g   r e f e r e n c e s   t o   n u r s i n g   j o u r n a l s )   i n   t h e   p e r i o d   a n a l y s e d .   T h e   a g e   o f   t h e   r e f e r e n c e s   p l a c e s   S p a n i s h   n u r s i n g   i n   a i l   i n t e r m e d i a t e   p o s i t i o n   b e t w e e n   t h e   ' h a r d '   s c i e n c e s   a n d   t h e   h u m a n i t i e s ;   a n d ,   a c c o r d i n g   t o   t h e   t y p e   o f   d o c u m e n t a t i o n   u s e d ,   w e   f i n d   i t   h a l f w a y   b e t w e e n   e x p e r i m e n t a l   a n d   n a t u r a l   s c i e n c e s ,   a n d   t e c h n o l o g i e s   a n d   s o c i a l   s c i e n c e s .   T h e r e   h a s   b e e n   a   s l i g h t   i n c r e a s e   i n   r e f e r e n c e s   i n   E n g l i s h   i n   r e c e n t   y e a r s . 	 U n i v   C a s t i l l a   L a   M a n c h a ,   D e p t   N u r s i n g ,   A l b a c e t e ,   S p a i n ;   P r i m a r y   C a r e   C t r   4 ,   A l b a c e t e ,   S p a i n 	 P a r d o ,   C   ( r e p r i n t   a u t h o r ) ,   E s c u e l a   U n i v   E n f e r m e r i a ,   C a m p u s   U n i v , E d i f i c i o   B e n j a m i n   P a l e n c i a ,   A l b a c e t e   0 2 0 7 1 ,   S p a i n . 	 	 	 	 	 	 A L E I X A N D R E   R ,   1 9 9 5 ,   A T E N C I O N   P R I M A R I A ,   V 1 7 ,   P 3 2 1 ;   A l v a r e z   S o l a r   M ,   1 9 9 6 ,   A t e n   P r i m a r i a ,   V 1 8 ,   P 2 2 9 ;   A R C A S   P ,   1 9 9 4 ,   M E D   C L I N - B A R C E L O N A ,   V 1 0 2 ,   P 5 8 4 ;   B A I G E T   T ,   1 9 8 6 ,   M E D   C L I N - B A R C E L O N A ,   V 8 7 ,   P 5 0 0 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   C A B R E R O   J ,   1 9 9 1 ,   E N F E R M E R I A   C I E N T I F I C ,   V 1 1 6 ,   P 4 4 ;   C A B R E R O   J ,   1 9 9 2 ,   E N F E R M E R I A   C I E N T I F I C ,   V 1 2 2 ,   P 3 7 ;   C A R T A G E N A   E ,   1 9 9 3 ,   2 0   C   C U A D R   E N F   M A D R ,   P 6 0 ;   D E L B U R G O   J L ,   1 9 9 2 ,   A T E N C I O N   P R I M A R I A ,   V 9 ,   P 3 9 ;   F A W C E T T   J ,   1 9 9 4 ,   A N A L   E V A L U A T I O N   C O N C ;   * F O R   C I E N T ,   1 9 9 7 ,   3   J O R N   D O C   C I E N T   C I U ;   G A L V E Z   A ,   1 9 9 9 ,   E N F E R M E R I A   C I E N T I F I C ,   V 2 0 2 ,   P 6 8 ;   G A R F I E L D   E ,   1 9 7 8 ,   M E T R I C   S C I ;   G A R F I E L D   E ,   1 9 8 4 ,   C U R R E N T   C O N T E N T S   C L I ,   V 4 3 ,   P 3 ;   G O N Z A L E Z   A ,   1 9 9 6 ,   I N D E X   E N F E R M E R I A ,   V 5 ,   P 8 5 ;   G O N Z A L E Z   M ,   1 9 9 7 ,   E N F E R M E R I A   C L I N ,   V 7 ,   P 6 3 ;   H U T C H   E J ,   1 9 9 2 ,   C O M O   E S C R I B I R   P U B L I C ;   I C A R T   M T ,   1 9 9 4 ,   E N F E R M E R I A   C L I N ,   V 4 ,   P 4 2 ;   I C A R T   M T ,   1 9 9 4 ,   E N F E R M E R I A   C L I N ,   V 4 ,   P 3 6 ;   I C A R T   M T ,   1 9 9 1 ,   E N F E R M E R I A   C I E N T I F I C ,   V 1 1 6 ,   P 3 3 ;   J i m e n e z   V i l l a   J ,   1 9 9 3 ,   A t e n   P r i m a r i a ,   V 1 2 ,   P 9 ;   K I L B Y   S A ,   1 9 9 1 ,   N U R S   O U T L O O K ,   V 3 9 ,   P 8 2 ;   K R A G H   H ,   1 9 8 7 ,   I N T R O   H I S T   C I E N C I A ;   L o p e z   P . ,   1 9 9 6 ,   I N T R O   B I B L I O M E T R I A ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 1 0 1 ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 6 4 ;   L o p e z   P i n e r o   J   M ,   1 9 9 2 ,   M e d   C l i n   ( B a r c ) ,   V 9 8 ,   P 1 4 2 ;   M O O D Y   L E ,   1 9 8 8 ,   N U R S   R E S ,   V 3 7 ,   P 3 7 4 ;   M o r a v c s i k   M J ,   1 9 8 9 ,   R E V   E S P   D O C   C I E N T ,   V 1 2 ,   P 3 1 3 ;   M O R E N O T O R R E S   R ,   1 9 8 6 ,   A C T   C   T E S   D O C T ,   V 3 6 ,   P 6 7 1 ;   N A R V A I Z A   M J ,   1 9 9 5 ,   I N V E S T I G A C I O N   L U G A R ,   P 8 1 ;   P A R D O   C ,   1 9 9 3 ,   2 0   C   C U A D R   E N F   M A D R ,   P 6 0 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   R I C H A R T   M ,   1 9 9 6 ,   I M P O R T A N C I A   D E S A R R O L ,   P 2 2 ;   R I C H A R T   M ,   1 9 9 4 ,   E N F E R M E R I A   C L I N ,   V 4 ,   P 1 1 8 ;   R o m e r a   M .   J e s u s ,   1 9 9 2 ,   R E V   E D U C ,   V 2 9 7 ,   P 4 5 9 ;   S A N C H E Z P R I E T O   J M ,   1 9 9 7 ,   I N V E S T I G A C I O N   D I A L O G ,   P 1 7 ;   S a n c h o   R . ,   1 9 9 0 ,   R E V   E S P   D O C   C I E N T ,   V 1 3 ,   P 8 4 2 ;   S C H L O M A N   B F ,   1 9 9 2 ,   H E A L T H   E D U C   R E S ,   V 7 ,   P 1 1 7 ,   D O I   1 0 . 1 0 9 3 / h e r / 7 . 1 . 1 1 7 ;   S i l v a   L .   C . ,   1 9 9 7 ,   C U L T U R A   E S T A D I S T I C A ;   S M I T H   J P ,   1 9 8 1 ,   N U R S I N G   S C I   N U R S I N G ;   S O L E R   J M ,   1 9 9 5 ,   A T E N C I O N   P R I M A R I A ,   V 1 6 ,   P 3 3 1 ;   T O R R A   J E ,   1 9 9 6 ,   R E V   R O L   E N F E R M E R I A ,   V 2 1 8 ,   P 3 3 ;   T O R R A   J E ,   1 9 9 4 ,   E N F E R M E R I A   C L I N ,   V 4 ,   P 2 9 1 	 4 4 	 1 5 	 1 5 	 1 	 1 7 	 B L A C K W E L L   S C I E N C E   L T D 	 O X F O R D 	 P   O   B O X   8 8 ,   O S N E Y   M E A D ,   O X F O R D   O X 2   0 N E ,   O X O N ,   E N G L A N D 	 0 3 0 9 - 2 4 0 2 	 	 	 J   A D V   N U R S 	 J .   A d v .   N u r s . 	 S E P 	 2 0 0 1 	 3 5 	 6 	 	 	 	 	 9 3 3 	 9 4 3 	 	 1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 1 . 0 1 9 3 1 . x 	 	 1 1 	 N u r s i n g 	 N u r s i n g 	 4 7 4 V Z 	 W O S : 0 0 0 1 7 1 1 2 8 7 0 0 0 2 2 	 1 1 5 5 5 0 4 2 	 
 
 J 	 G o l d e r ,   W 	 	 	 	 G o l d e r ,   W 	 	 	 T h e   i m p a c t   f a c t o r :   A   c r i t i c a l   a n a l y s i s . 	 R O F O - F O R T S C H R I T T E   A U F   D E M   G E B I E T   D E R   R O N T G E N S T R A H L E N   U N D   D E R   B I L D G E B E N D E N   V E R F A H R E N 	 	 	 G e r m a n 	 R e v i e w 	 	 	 	 	 	 s c i e n t o m e t r i c s ;   b i b l i o m e t r i c s ;   i m p a c t   f a c t o r ;   s o u r c e   j o u r n a l ;   c i t a t i o n ;   r e f e r e n c e 	 J O U R N A L S ;   S C I E N C E ;   T O O L 	 T h e   i m p a c t   f a c t o r ,   p r o v i d e d   b y   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ,   P h i l a d e l p h i a   ( P A ) ,   h a s   b e c o m e   t h e   m o s t   i m p o r t a n t   e v a l u a t i o n   t o o l   f o r   s c i e n t i f i c   r e s e a r c h   a n d   a c a d e m i c   w o r k .   I t   i s   c a l c u l a t e d   b y   d i v i d i n g   t h e   n u m b e r   o f   c u r r e n t   y e a r   c i t a t i o n s   t o   t h e   s o u r c e   i t e m s   p u b l i s h e d   i n   t h e   j o u r n a l   d u r i n g   t h e   p r e v i o u s   t w o   y e a r s .   I n   m a r k e t   r e s e a r c h ,   t h e   i m p a c t   f a c t o r   p r o v i d e s   q u a n t i t a t i v e   e v i d e n c e   f o r   e d i t o r s   a n d   p u b l i s h e r s   f o r   p o s i t i o n i n g   t h e i r   j o u r n a l s   i n   r e l a t i o n   t o   t h e   c o m p e t i t i o n .   D e s p i t e   i t s   p o p u l a r i t y ,   t h e   p a r a m e t e r   s h o u l d   b e   u s e d   w i t h   c a r e f u l   a t t e n t i o n   t o   t h e   m a n y   p h e n o m e n a   t h a t   i n f l u e n c e   c i t a t i o n   r a t e s .   T h e   c o r r e l a t i o n   b e t w e e n   t h e   c i t a t i o n   f r e q u e n c y   o f   a   c e r t a i n   a r t i c l e   a n d   t h e   i m p a c t   f a c t o r   o f   t h e   j o u r n a l   i n   w h i c h   i t   i s   p u b l i s h e d   i s   q u e s t i o n a b l e ,   A   f e w   a r t i c l e s   h a v e   m a n y   c i t a t i o n s   a n d   t h e   r e s t   a r e   s p a r s e l y   c i t e d   o r   n o t   a t   a l l .   C i t a t i o n   i m p a c t   i s   m o r e   a   m e a s u r e   o f   u t i l i t y   t h a n   o f   s c i e n t i f i c   v a l u e .   A u t h o r s '   s e l e c t i o n   o f   r e f e r e n c e s   i s   s u b j e c t   t o   b i a s e s   u n r e l a t e d   t o   q u a l i t y .   M o r e o v e r ,   t h e r e   i s   a   t r e m e n d o u s   b i a s   t o w a r d s   e n g l i s h   l a n g u a g e   j o u r n a l s   c o m p a r e d   w i t h   t h o s e   i n   o t h e r   l a n g u a g e s .   F i n a l l y ,   d i f f e r e n t   s p e c i a l t i e s   e x h i b i t   d i f f e r e n t   r a n g e s   o f   p e a k   i m p a c t .   T h e   i m p a c t   f a c t o r   f a v o u r s   r e s e a r c h   a r e a s   t h a t   p r o m o t e   m a n y   s h o r t - t e r m   s t u d i e s .   C o n v e r s e l y ,   a   t e n d e n c y   t o   t r e a t   c l i n i c a l   i n v e s t i g a t i o n s   a s   l e s s   i m p o r t a n t   i s   c r e a t e d . 	 F r e e   U n i v   B e r l i n ,   K l i n i k u m   B e n j a m i n   F r a n k l i n ,   A b t   R a d i o l   &   N u k l   M e d ,   D - 1 2 2 0 0   B e r l i n ,   G e r m a n y 	 G o l d e r ,   W   ( r e p r i n t   a u t h o r ) ,   F r e e   U n i v   B e r l i n ,   K l i n i k u m   B e n j a m i n   F r a n k l i n ,   A b t   R a d i o l   &   N u k l   M e d ,   H i n d e n b u r g d a m m   3 0 ,   D - 1 2 2 0 0   B e r l i n ,   G e r m a n y . 	 	 	 	 	 	 A r t u s   H M ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 2 9 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 3 6 2 6 ;   B o n a t i   M R ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 2 7 1 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 2 7 1 a 0 ;   C A L Z A   L ,   1 9 9 5 ,   N A T U R E ,   V 3 7 4 ,   P 4 9 2 ,   D O I   1 0 . 1 0 3 8 / 3 7 4 4 9 2 a 0 ;   D E U R E N B E R G   R ,   1 9 9 3 ,   B   M E D   L I B R   A S S O C ,   V 8 1 ,   P 3 1 6 ;   F i n z e n   A ,   1 9 9 6 ,   R O F O - F O R T S C H R   R O N T G ,   V 1 6 5 ,   P 2 1 3 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 7 - 1 0 1 5 7 4 5 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G a r f i e l d   E . ,   1 9 9 4 ,   C U R R   C O N T E N T S ,   V 2 5 ,   P 3 ;   G E R V A I S   H W ,   1 9 9 5 ,   W I E N   K L I N   W O C H E N S C H R ,   V 1 0 7 ,   P 3 5 7 ;   H A N S S O N   S ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 9 0 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 5 ) 9 2 7 4 9 - 2 ;   L E H R L   S ,   1 9 9 3 ,   F O R S C H U N G S Q U A L I T A T   D ;   L i n d n e r   U K ,   1 9 9 8 ,   R A D I O L O G E ,   V 3 8 ,   P 1 ;   M A C R O B E R T S   M H ,   1 9 8 8 ,   N A T U R E ,   P 3 2 7 ;   M e e n e n   N   M ,   1 9 9 7 ,   U n f a l l c h i r u r g i e ,   V 2 3 ,   P 1 2 8 ;   P L O M P   R ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 2 9 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 3 3 4 4 6 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   T A U B E S   G ,   1 9 9 3 ,   S C I E N C E ,   V 2 6 0 ,   P 8 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 8 4 9 3 5 1 6 ;   W A C H I N G E R   M ,   1 9 9 7 ,   R O F O   F O R T S C H R   R O N T G ,   V 1 6 6 ,   p R 7 	 1 8 	 1 5 	 1 5 	 0 	 4 	 G E O R G   T H I E M E   V E R L A G 	 S T U T T G A R T 	 P   O   B O X   3 0   1 1   2 0 ,   D - 7 0 4 5 1   S T U T T G A R T ,   G E R M A N Y 	 0 9 3 6 - 6 6 5 2 	 	 	 R O F O - F O R T S C H R   R O N T G 	 R o f o - F o r t s c h r .   G e b i e t   R o n t g e n s t r a h l e n   B i l d g e b .   V e r f a h r . 	 S E P 	 1 9 9 8 	 1 6 9 	 3 	 	 	 	 	 2 2 0 	 2 2 6 	 	 1 0 . 1 0 5 5 / s - 2 0 0 7 - 1 0 1 5 0 8 2 	 	 7 	 R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 R a d i o l o g y ,   N u c l e a r   M e d i c i n e   &   M e d i c a l   I m a g i n g 	 1 2 6 K E 	 W O S : 0 0 0 0 7 6 2 9 1 8 0 0 0 0 2 	 9 7 7 9 0 6 0 	 
 
 J 	 W A L L A C E ,   D P 	 	 	 	 W A L L A C E ,   D P 	 	 	 A   S O L U T I O N   I N   S E A R C H   O F   A   P R O B L E M   -   B I B L I O M E T R I C S   A N D   L I B R A R I E S 	 L I B R A R Y   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 	 	 	 W A L L A C E ,   D P   ( r e p r i n t   a u t h o r ) ,   L O U I S I A N A   S T A T E   U N I V , S C H   L I B   &   I N F O R M A T   S C I , B A T O N   R O U G E , L A   7 0 8 0 3 ,   U S A . 	 	 	 	 	 	 B A S I L E   V A ,   1 9 7 0 ,   S P E C   L I B R ,   V 6 1 ,   P 8 1 ;   B A U G H M A N   J C ,   1 9 7 7 ,   C O L L   R E S   L I B R ,   V 3 8 ,   P 2 4 1 ;   B O U R N E   C P ,   1 9 6 5 ,   E L E C T R O N I C   I N F O R M A T I ,   P 9 3 ;   B O Y C E   B R ,   1 9 7 8 ,   L I B R A R Y   R E S O U R C E S   T E ,   V 2 2 ,   P 3 9 1 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C U M E N T A T I O N ,   V 2 4 ,   P 2 4 9 ;   B U L I C K   S ,   1 9 7 8 ,   C O L L E G E   R E S   L I B R A R I E ,   V 3 9 ,   P 2 1 8 ;   B U R T O N   R E ,   1 9 6 0 ,   A M   D O C ,   V 1 1 ,   P 1 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 1 0 1 0 5 ;   C H E N   C C ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 2 5 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 4 0 5 ;   C O L E   P F ,   1 9 5 8 ,   J   D O C ,   V 1 4 ,   P 1 9 7 ;   D O U G L A S   J A ,   1 9 7 2 ,   N A T U R E ,   V 2 3 9 ,   P 4 7 7 ;   F L E M I N G   T P ,   1 9 6 4 ,   B   M E D   L I B R   A S S O C ,   V 5 2 ,   P 2 3 4 ;   G O L D H O R   H ,   1 9 5 9 ,   L I B R   Q U A R T ,   V 2 9 ,   P 2 5 1 ;   G O R D O N   M ,   1 9 8 2 ,   S E R I A L S   L I B R ,   V 6 ,   P 6 3 ,   D O I   1 0 . 1 3 0 0 / J 1 2 3 v 0 6 n 0 4 _ 0 7 ;   H O C K I N G S   E F ,   1 9 7 4 ,   J   A M   S O C   I N F O R M A T I O N ,   V 2 5 ,   P 1 3 2 ;   H u n t   J W ,   1 9 3 7 ,   L I B R   Q U A R T ,   V 7 ,   P 1 2 1 ;   K E N T   A ,   1 9 7 7 ,   U S E   L I B R A R Y   M A T E R I A L ,   P 3 8 ;   K I L G O U R   F G ,   1 9 6 1 ,   A M   D O C ,   V 1 2 ,   P 2 6 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 2 0 4 0 5 ;   L A W A N I   S M ,   1 9 7 3 ,   I N T   L I B R A R Y   R E V ,   V 5 ,   P 3 4 9 ;   L I N E   M B ,   1 9 7 4 ,   J   D O C ,   V 3 0 ,   P 2 8 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 8 3 ;   L I N E   M B ,   1 9 7 0 ,   J   D O C U M E N T A T I O N ,   V 2 6 ,   P 4 7 ;   L i n e   M .   B . ,   1 9 7 8 ,   C O L L E C T I O N   M A N A G E M E N ,   V 2 ,   P 3 1 3 ;   M A Y E S   P B ,   1 9 7 5 ,   J   D O C ,   V 3 1 ,   P 2 8 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 0 9 ;   M O R S E   P M ,   1 9 7 9 ,   O P E R   R E S ,   V 2 7 ,   P 1 8 7 ,   D O I   1 0 . 1 2 8 7 / o p r e . 2 7 . 1 . 1 8 7 ;   M O R T O N   D J ,   1 9 7 7 ,   B   M E D   L I B R   A S S O C ,   V 6 5 ,   P 4 2 5 ;   O C O N N O R   D ,   1 9 8 1 ,   L I B R A R Y   T R E N D S ,   V 3 0 ,   P 1 2 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   S P Y E R S D U R A N   P ,   1 9 6 1 ,   W I L S O N   L I B R A R Y   B ,   V 3 6 ,   P 2 9 9 ;   S U L L I V A N   M V ,   1 9 8 0 ,   L I B R   R E S ,   V 2 ,   P 2 9 ;   V I C K E R Y   B C ,   1 9 4 8 ,   J   D O C ,   V 4 ,   P 1 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 1 3 3 ;   W A L L A C E   D P ,   1 9 8 5 ,   P   A M   S O C   I N F O R M A T I O N ,   V 1 1 ,   P 1 9 3 ;   W I L K I N S O . E A ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 1 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 3 4 ;   W O R T H E N   D B ,   1 9 7 5 ,   J   D O C ,   V 3 1 ,   P 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 9 0 	 3 3 	 1 5 	 1 5 	 0 	 2 	 B O W K E R   M A G A Z I N E   G R O U P   C A H N E R S   M A G A Z I N E   D I V I S I O N 	 N E W   Y O R K 	 2 4 9   W   1 7 T H   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 1 	 0 3 6 3 - 0 2 7 7 	 	 	 L I B R   J 	 L i b r .   J . 	 M A Y   1 	 1 9 8 7 	 1 1 2 	 8 	 	 	 	 	 4 3 	 4 7 	 	 	 	 5 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 H 0 7 7 9 	 W O S : A 1 9 8 7 H 0 7 7 9 0 0 0 1 4 	 	 
 
 J 	 B o r n m a n n ,   L ;   M a r x ,   W 	 	 	 	 B o r n m a n n ,   L u t z ;   M a r x ,   W e r n e r 	 	 	 M e t h o d s   f o r   t h e   g e n e r a t i o n   o f   n o r m a l i z e d   c i t a t i o n   i m p a c t   s c o r e s   i n   b i b l i o m e t r i c s :   W h i c h   m e t h o d   b e s t   r e f l e c t s   t h e   j u d g e m e n t s   o f   e x p e r t s ? 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 F 1 0 0 0 ;   B i b l i o m e t r i c s ;   C i t i n g - s i d e   i n d i c a t o r ;   C i t e d - s i d e   i n d i c a t o r ;   N o r m a l i z e d   c i t a t i o n   i m p a c t 	 R A N K   A P P R O A C H ;   A D J U S T E D   P R E D I C T I O N S ;   I N D I C A T O R ;   S C I E N C E ;   P 1 0 0 ;   O U T P U T ;   F 1 0 0 0 	 E v a l u a t i v e   b i b l i o m e t r i c s   c o m p a r e   t h e   c i t a t i o n   i m p a c t   o f   r e s e a r c h e r s ,   r e s e a r c h   g r o u p s   a n d   i n s t i t u t i o n s   w i t h   e a c h   o t h e r   a c r o s s   t i m e   s c a l e s   a n d   d i s c i p l i n e s .   B o t h   f a c t o r s ,   d i s c i p l i n e   a n d   p e r i o d   -   h a v e   a n   i n f l u e n c e   o n   t h e   c i t a t i o n   c o u n t   w h i c h   i s   i n d e p e n d e n t   o f   t h e   q u a l i t y   o f   t h e   p u b l i c a t i o n .   N o r m a l i z i n g   t h e   c i t a t i o n   i m p a c t   o f   p a p e r s   f o r   t h e s e   t w o   f a c t o r s   s t a r t e d   i n   t h e   m i d - 1 9 8 0 s .   S i n c e   t h e n ,   a   r a n g e   o f   d i f f e r e n t   m e t h o d s   h a v e   b e e n   p r e s e n t e d   f o r   p r o d u c i n g   n o r m a l i z e d   c i t a t i o n   i m p a c t   s c o r e s .   T h e   c u r r e n t   s t u d y   u s e s   a   d a t a   s e t   o f   o v e r   5 0 , 0 0 0   r e c o r d s   t o   t e s t   w h i c h   o f   t h e   m e t h o d s   s o   f a r   p r e s e n t e d   c o r r e l a t e   b e t t e r   w i t h   t h e   a s s e s s m e n t   o f   p a p e r s   b y   p e e r s .   T h e   p e e r   a s s e s s m e n t s   c o m e   f r o m   F 1 0 0 0 P r i m e   -   a   p o s t - p u b l i c a t i o n   p e e r   r e v i e w   s y s t e m   o f   t h e   b i o m e d i c a l   l i t e r a t u r e .   O f   t h e   n o r m a l i z e d   i n d i c a t o r s ,   t h e   c u r r e n t   s t u d y   i n v o l v e s   n o t   o n l y   c i t e d - s i d e   i n d i c a t o r s ,   s u c h   a s   t h e   m e a n   n o r m a l i z e d   c i t a t i o n   s c o r e ,   b u t   a l s o   c i t i n g - s i d e   i n d i c a t o r s .   A s   t h e   r e s u l t s   s h o w ,   t h e   c o r r e l a t i o n s   o f   t h e   i n d i c a t o r s   w i t h   t h e   p e e r   a s s e s s m e n t s   a l l   t u r n   o u t   t o   b e   v e r y   s i m i l a r .   S i n c e   F 1 0 0 0   f o c u s e s   o n   b i o m e d i c i n e ,   i t   i s   i m p o r t a n t   t h a t   t h e   r e s u l t s   o f   t h i s   s t u d y   a r e   v a l i d a t e d   b y   o t h e r   s t u d i e s   b a s e d   o n   d a t a s e t s   f r o m   o t h e r   d i s c i p l i n e s   o r   ( i d e a l l y )   b a s e d   o n   m u l t i - d i s c i p l i n a r y   d a t a s e t s .   ( c )   2 0 1 5   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ B o r n m a n n ,   L u t z ]   M a x   P l a n c k   G e s e l l ,   A d m   H e a d q u a r t e r s ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y ;   [ M a r x ,   W e r n e r ]   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   G e s e l l ,   A d m   H e a d q u a r t e r s ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e ;   w . m a r x @ f k f . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 	 	 	 A d a m s   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 3 2 - 7 ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B o r n m a n n   L . ,   2 0 1 5 ,   J   A S S   I N F O R   I N   P R E S S ;   B o r n m a n n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 1 9 3 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 1 5 2 ;   B o r n m a n n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 1 2 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 1 0 0 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 9 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 9 . 0 0 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 6 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 2 . 0 0 5 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 2 8 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 2 . 0 0 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 1 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 6 ;   B o r n m a n n   L ,   2 0 1 1 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 5 ,   P 1 9 9 ;   C o h e n   J ,   1 9 8 8 ,   S T A T   P O W E R   A N A L   B E H A ;   C o l l e d g e   L . ,   2 0 1 4 ,   S N O W B A L L   M E T R I C S   R E C ;   C o u n c i l   o f   C a n a d i a n   A c a d e m i e s ,   2 0 1 2 ,   I N F   R E S   C H O I C   I N D   J U ;   E g g h e   L ,   2 0 0 5 ,   L I B R   I N F O R M   S C I   S E R ,   P 1 ;   F 1 0 0 0 ,   2 0 1 2 ,   W H A T   I S   F 1 0 0 0 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   H a z e n   A ,   1 9 1 4 ,   T   A M   S O C   C I V I L   E N G ,   V 7 7 ,   P 1 5 3 9 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   H o s m e r   D W ,   2 0 0 0 ,   A P P L   L O G I S T I C S   R E G R E ;   K r e i m a n   G . ,   2 0 1 1 ,   F R O N T I E R S   C O M P U T A T I O ,   V 5 ;   L e y d e s d o r f f   L ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 2 2 9 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 9 1 1 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 5 0 ;   M a r x   W ,   2 0 1 5 ,   S C I E N T O M E T R I C S ,   V 1 0 2 ,   P 1 8 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 4 - 1 4 9 9 - 9 ;   O r g a n i s a t i o n   f o r   E c o n o m i c   C o - o p e r a t i o n   a n d   D e v e l o p m e n t ,   2 0 0 7 ,   R E V   F I E L D   S C I   T E C H N ;   R u i z - C a s t i l l o   J . ,   2 0 1 4 ,   F I E L D   N O R M A L I Z E D   C I T ;   S c h r e i b e r   M ,   2 0 1 4 ,   J   I N F O R M E T R ,   V 8 ,   P 9 9 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 4 . 1 0 . 0 0 1 ;   S c h r e i b e r   M ,   2 0 1 4 ,   J   I N F O R M E T R ,   V 8 ,   P 7 3 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 4 . 0 6 . 0 0 7 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S C I m a g o   R e s e a r c h   G r o u p ,   2 0 1 3 ,   S I R   W O R L D   R E P   2 0 1 3 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S h e s k i n   D .   J . ,   2 0 0 7 ,   H D B   P A R A M E T R I C   N O N P A ;   S t a t a   C o r p o r a t i o n ,   2 0 1 3 ,   S T A T   S T A T   S O F T W   R E L ;   W a l t m a n   L . ,   2 0 1 3 ,   P   I S S I   2 0 1 3   1 4   I N T   S ;   W a l t m a n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 4 0 ;   W a l t m a n   L ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 6 ,   P 6 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 9 1 3 - 4 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 ;   W a l t m a n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 1 ;   W e t s   K ,   2 0 0 3 ,   L E A R N   P U B L ,   V 1 6 ,   P 2 4 9 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 3 3 2 2 4 2 1 9 8 2 ;   W i l l i a m s   R . ,   2 0 1 4 ,   M E A S U R I N G   S C H O L A R L Y ,   P 2 5 9 ;   W i l l i a m s   R ,   2 0 1 2 ,   S T A T A   J ,   V 1 2 ,   P 3 0 8 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I S M   C O N ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y ;   Z i t t   M ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 0 	 4 4 	 1 4 	 1 5 	 1 2 	 4 8 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 A P R 	 2 0 1 5 	 9 	 2 	 	 	 	 	 4 0 8 	 4 1 8 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 5 . 0 1 . 0 0 6 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C E 2 J A 	 W O S : 0 0 0 3 5 1 6 4 0 7 0 0 0 1 3 	 	 
 
 J 	 X i ,   J ;   K r a u s ,   S ;   F i l s e r ,   M ;   K e l l e r m a n n s ,   F W 	 	 	 	 X i ,   J i n g   ( M e l a n i e ) ;   K r a u s ,   S a s c h a ;   F i l s e r ,   M a t t h i a s ;   K e l l e r m a n n s ,   F r a n z   W . 	 	 	 M a p p i n g   t h e   f i e l d   o f   f a m i l y   b u s i n e s s   r e s e a r c h :   p a s t   t r e n d s   a n d   f u t u r e   d i r e c t i o n s 	 I N T E R N A T I O N A L   E N T R E P R E N E U R S H I P   A N D   M A N A G E M E N T   J O U R N A L 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 F a m i l y   b u s i n e s s   r e s e a r c h ;   B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   C o n t e n t   a n a l y s i s 	 S O C I O E M O T I O N A L   W E A L T H ;   C O N T R O L L E D   F I R M S ;   N O N F A M I L Y   F I R M S ;   A G E N C Y   C O S T S ;   O W N E R S H I P ;   P E R S P E C T I V E ;   P E R F O R M A N C E ;   M A N A G E M E N T ;   D E T E R M I N A N T S ;   D I M E N S I O N S 	 R e c e i v i n g   i n c r e a s i n g   a t t e n t i o n   o v e r   t h e   p a s t   d e c a d e   b y   s c h o l a r s   w o r l d w i d e ,   f a m i l y   b u s i n e s s   r e s e a r c h   h a s   d e v e l o p e d   i n   d i v e r s e   d i r e c t i o n s .   D u e   t o   t h e   n u m e r o u s   c h a l l e n g e s   f a m i l y   b u s i n e s s e s   f a c e   i n   t h e i r   d e v e l o p m e n t   a n d   c o n t i n u a t i o n ,   r e s e a r c h   h a s   g e n e r a t e d   a   w i d e   r a n g i n g   s p e c t r u m   o f   t h e   s u b j e c t s   e x p l o r e d   w i t h i n   i t   a n d   a   l a r g e   b o d y   o f   k n o w l e d g e   a s   a   r e s u l t .   B a s e d   o n   t h e   r e s u l t s   o f   t h e   b y   f a r   l a r g e s t   b i b l i o m e t r i c   a n a l y s e s   i n   t h e   f i e l d ,   t h i s   p a p e r   e l a b o r a t e s   a n d   c l a r i f i e s   t h e   f r a g m e n t e d   s t a t e   o f   f a m i l y   b u s i n e s s   r e s e a r c h .   B y   a n a l y z i n g   v i r t u a l l y   a l l   e x i s t i n g   f a m i l y   b u s i n e s s - r e l a t e d   w r i t i n g s ,   t h e   m o s t   i n f l u e n t i a l   p u b l i c a t i o n s   a r e   h i g h l i g h t e d ,   a n d   c h a n g e s   i n   c i t a t i o n   p a t t e r n s   b e f o r e   a n d   a f t e r   t h e   y e a r   2 0 0 0   a r e   d i s c u s s e d .   H e r e ,   f i v e   t o p i c a l   c l u s t e r s   a r e   i d e n t i f i e d   w h i c h   r e f l e c t   t h e   t r a c k s   f a m i l y   b u s i n e s s   r e s e a r c h   f o l l o w s .   W i t h   t h e s e   c l u s t e r s   a s   a   b a s i s ,   t h e   p a p e r   c o n c l u d e s   b y   i d e n t i f y i n g   a v e n u e s   f o r   f u t u r e   r e s e a r c h . 	 [ X i ,   J i n g   ( M e l a n i e ) ]   G u a n g d o n g   U n i v   T e c h n o l ,   S c h   M a n a g e m e n t ,   R e s   C t r   E n t e r p r i s e   M a n a g e m e n t   I n n o v a t ,   G u a n g z h o u ,   G u a n g d o n g ,   P e o p l e s   R   C h i n a ;   [ K r a u s ,   S a s c h a ;   F i l s e r ,   M a t t h i a s ]   U n i v   L i e c h t e n s t e i n ,   I n s t   E n t r e p r e n e u r s h i p ,   F L - 9 4 9 0   V a d u z ,   L i e c h t e n s t e i n ;   [ K r a u s ,   S a s c h a ]   U n i v   S t   G a l l e n ,   S w i s s   R e s   I n s t   S m a l l   B u s i n e s s   &   E n t r e p r e n e u r s h i p ,   C H - 9 0 0 0   S t   G a l l e n ,   S w i t z e r l a n d ;   [ K e l l e r m a n n s ,   F r a n z   W . ]   U n i v   N   C a r o l i n a ,   B e l k   C o l l   B u s i n e s s ,   C h a r l o t t e ,   N C   2 8 2 2 3   U S A ;   [ K e l l e r m a n n s ,   F r a n z   W . ]   W H U   O t t o   B e i s h e i m   S c h   M a n a g e m e n t ,   I N T E S   C t r   F a m i l y   E n t e r p r i s e s ,   V a l l e n d a r ,   G e r m a n y 	 K r a u s ,   S   ( r e p r i n t   a u t h o r ) ,   U n i v   L i e c h t e n s t e i n ,   I n s t   E n t r e p r e n e u r s h i p ,   F u r s t   F r a n z   J o s e f   S t r ,   F L - 9 4 9 0   V a d u z ,   L i e c h t e n s t e i n . 	 m e l a n i e x i @ 1 6 3 . c o m ;   s a s c h a . k r a u s @ u n i . l i ;   m a t t h i a s . f i l s e r @ u n i . l i ;   k e l l e r m a n n s @ u n c c . e d u 	 C a b r e r a ,   J u l i o / F - 5 7 8 2 - 2 0 1 6 	 	 	 	 A g u i l e r a   R V ,   2 0 0 3 ,   A C A D   M A N A G E   R E V ,   V 2 8 ,   P 4 4 7 ;   A l c o r n   P ,   1 9 8 2 ,   S U C C E S S   S U R V I V A L   F A M ;   A l d r i c h   H E ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 5 7 3 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 1 1 - 9 ;   A n d e r s o n   R C ,   2 0 0 3 ,   J   F I N A N C ,   V 5 8 ,   P 1 3 0 1 ,   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 6 2 6 1 . 0 0 5 6 7 ;   A S T R A C H A N   J . H . ,   2 0 0 2 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 5 ,   P 4 5 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 2 0 0 2 . 0 0 0 4 5 . X ;   B A R N E S   L B ,   1 9 7 6 ,   H A R V A R D   B U S   R E V ,   V 5 4 ,   P 1 0 5 ;   B a r n e t t   T ,   2 0 0 6 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 0 ,   P 8 3 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 6 . 0 0 1 5 5 . x ;   B a u c e l l s   M ,   2 0 1 1 ,   M A N A G E   S C I ,   V 5 7 ,   P 5 0 6 ,   D O I   1 0 . 1 2 8 7 / m n s c . 1 1 0 0 . 1 2 8 6 ;   B E C K H A R D   R ,   1 9 8 3 ,   O R G A N   D Y N ,   V 1 2 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 0 - 2 6 1 6 ( 8 3 ) 9 0 0 2 2 - 0 ;   B e n a v i d e s - V e l a s c o   C A ,   2 0 1 3 ,   S M A L L   B U S   E C O N ,   V 4 0 ,   P 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 8 7 - 0 1 1 - 9 3 6 2 - 3 ;   B e r r o n e   P ,   2 0 1 2 ,   F A M   B U S   R E V ,   V 2 5 ,   P 2 5 8 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 4 4 8 6 5 1 1 4 3 5 3 5 5 ;   B i r l e y   S . ,   1 9 8 6 ,   J   S M A L L   B U S   M A N A G E ,   V 2 4 ,   P 3 6 ;   B o r k   D . ,   1 9 8 6 ,   F A M I L Y   B U S I N E S S   R I S K ;   C a s i l l a s   J ,   2 0 0 7 ,   F A M   B U S   R E V ,   V 2 0 ,   P 1 4 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 2 0 0 7 . 0 0 0 9 2 . x ;   C e n n a m o   C ,   2 0 1 2 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 6 ,   P 1 1 5 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 1 2 . 0 0 5 4 3 . x ;   C h r i s m a n   J J ,   2 0 1 0 ,   F A M   B U S   R E V ,   V 2 3 ,   P 9 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 4 4 8 6 5 0 9 3 5 7 9 2 0 ;   C h r i s m a n   J J ,   2 0 0 9 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 3 ,   P 7 3 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 9 . 0 0 3 2 4 . x ;   C h r i s m a n   J J ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 4 4 1 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 5 2 - 1 ;   C h r i s m a n   J J ,   2 0 0 5 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 9 ,   P 5 5 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 5 . 0 0 0 9 8 . x ;   C h r i s m a n   J J ,   2 0 0 4 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 8 ,   P 3 3 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 4 . 0 0 0 4 9 . x ;   C h r i s m a n   J .   J . ,   1 9 9 9 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 3 ,   P 1 9 ;   D a i l y   C .   M . ,   1 9 9 2 ,   F A M I L Y   B U S I N E S S   R E V ,   V 5 ,   P 1 1 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 9 2 . 0 0 1 1 7 . x ;   D a n c o   L .   A . ,   1 9 7 5 ,   S U R V I V A L   B U S I N E S S   O W ;   D a v i s   J H ,   1 9 9 7 ,   A C A D   M A N A G E   R E V ,   V 2 2 ,   P 2 0 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 9 7 . 9 7 0 7 1 8 0 2 5 8 ;   D A V I S   P ,   1 9 8 3 ,   O R G A N   D Y N ,   V 1 2 ,   P 4 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 0 - 2 6 1 6 ( 8 3 ) 9 0 0 2 6 - 8 ;   D e   M a s s i s   A ,   2 0 0 8 ,   F A M   B U S   R E V ,   V 2 1 ,   P 1 8 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 2 0 0 8 . 0 0 1 1 8 . x ;   D e b i c k i   B J ,   2 0 0 9 ,   F A M   B U S   R E V ,   V 2 2 ,   P 1 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 4 4 8 6 5 0 9 3 3 3 5 9 8 ;   D e b i c k i   B .   J . ,   2 0 1 2 ,   T H E S I S   M I S S I S S I P P I   S ;   D E V R I E S   M F R K ,   1 9 9 3 ,   O R G A N   D Y N ,   V 2 1 ,   P 5 9 ;   D O N C K E L S   R . ,   1 9 9 1 ,   F A M I L Y   B U S I N E S S   R E V ,   V 4 ,   P 1 4 9 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 1 9 9 1 . 0 0 1 4 9 . X ;   D O N N E L L E Y   R G ,   1 9 6 4 ,   H A R V A R D   B U S   R E V ,   V 4 2 ,   P 9 3 ;   D y e r   J r   W . G . ,   2 0 0 3 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 7 ,   P 4 0 1 ,   D O I   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 8 5 2 0 . 0 0 0 1 8 ;   D y e r   W .   G . ,   1 9 8 8 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 ,   P 3 7 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 1 9 8 8 . 0 0 0 3 7 . X ;   D y e r   W .   G . ,   1 9 8 6 ,   C U L T U R A L   C H A N G E   F A M I ;   G i b b   D y e r   W . ,   1 9 9 8 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 1 ,   P 2 8 7 ;   E d d l e s t o n   K A ,   2 0 1 3 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 7 ,   P 1 1 7 7 ,   D O I   1 0 . 1 1 1 1 / e t a p . 1 2 0 0 2 ;   F A M A   E F ,   1 9 8 3 ,   J   L A W   E C O N ,   V 2 6 ,   P 3 0 1 ,   D O I   1 0 . 1 0 8 6 / 4 6 7 0 3 7 ;   G e d a j l o v i c   E ,   2 0 1 2 ,   J   M A N A G E ,   V 3 8 ,   P 1 0 1 0 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 1 1 4 2 9 9 9 0 ;   G e r s i c k   K . E . ,   1 9 9 7 ,   G E N E R A T I O N   G E N E R A T I O ;   G o m e z - M e j i a   L R ,   2 0 0 1 ,   A C A D   M A N A G E   J ,   V 4 4 ,   P 8 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 6 9 3 3 8 ;   G o m e z - M e j i a   L R ,   2 0 0 7 ,   A D M I N   S C I   Q U A R T ,   V 5 2 ,   P 1 0 6 ,   D O I   1 0 . 2 1 8 9 / a s q u . 5 2 . 1 . 1 0 6 ;   G o m e z - M e j i a   L R ,   2 0 1 0 ,   J   M A N A G E   S T U D ,   V 4 7 ,   P 2 2 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 2 0 0 9 . 0 0 8 8 9 . x ;   G u n d o l f   K ,   2 0 1 3 ,   J   B U S   E T H I C S ,   V 1 1 2 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 1 2 - 1 2 4 0 - 7 ;   H a b b e r s h o n   T G ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 4 5 1 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 5 3 - 3 ;   H a b b e r s h o n   T .   G . ,   1 9 9 9 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 2 ,   P 1 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 1 9 9 9 . 0 0 0 0 1 . X ;   H a n d l e r   W .   C . ,   1 9 8 9 ,   F A M I L Y   B U S I N E S S   R E V ,   V 2 ,   P 2 5 7 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 1 9 8 9 . 0 0 2 5 7 . X ;   H a n d l e r   W . C . ,   1 9 8 8 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 ,   P 3 6 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 8 8 . 0 0 3 6 1 . x ;   H A N D L E R   W . C . ,   1 9 9 0 ,   E N T R E P   T H E O R Y   P R A C T ,   V 1 5 ,   P 3 7 ;   H o l l a n d e r   B .   S . ,   1 9 8 8 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 ,   P 1 4 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 8 8 . 0 0 1 4 5 . x ;   J E N S E N   M C ,   1 9 7 6 ,   J   F I N A N C   E C O N ,   V 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 7 6 ) 9 0 0 2 6 - X ;   K A H N E M A N   D ,   1 9 7 9 ,   E C O N O M E T R I C A ,   V 4 7 ,   P 2 6 3 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 4 1 8 5 ;   K e l l e r m a n n s   F W ,   2 0 0 7 ,   J   B U S   R E S ,   V 6 0 ,   P 1 0 4 8 ,   D O I   1 0 . 1 0 1 6 / j . j b u s r e s . 2 0 0 6 . 1 2 . 0 1 8 ;   K e l l e r m a n n s   F W ,   2 0 1 2 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 6 ,   P 1 1 7 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 1 2 . 0 0 5 4 4 . x ;   K e l l e r m a n n s   F W ,   2 0 0 4 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 8 ,   P 2 0 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 4 . 0 0 0 4 0 . x ;   K E P N E R   E ,   1 9 8 3 ,   O R G A N   D Y N ,   V 1 2 ,   P 5 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 0 - 2 6 1 6 ( 8 3 ) 9 0 0 2 7 - X ;   K r a u s   S a s c h a ,   2 0 1 1 ,   I n t e r n a t i o n a l   J o u r n a l   o f   E n t r e p r e n e u r s h i p   a n d   I n n o v a t i o n   M a n a g e m e n t ,   V 1 3 ,   P 3 2 ,   D O I   1 0 . 1 5 0 4 / I J E I M . 2 0 1 1 . 0 3 8 4 4 6 ;   K r a u s   S ,   2 0 1 3 ,   R E V   M A N A G E R I A L   S C I ,   P 1 ;   K r a u s   S ,   2 0 1 1 ,   B E T R I E B   F O R S C H   P R A X ,   V 6 3 ,   P 5 8 7 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   L a   P o r t a   R ,   1 9 9 9 ,   J   F I N A N C ,   V 5 4 ,   P 4 7 1 ,   D O I   1 0 . 1 1 1 1 / 0 0 2 2 - 1 0 8 2 . 0 0 1 1 5 ;   L A N S B E R G   I ,   1 9 8 3 ,   O R G A N   D Y N ,   V 1 2 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 9 0 - 2 6 1 6 ( 8 3 ) 9 0 0 2 5 - 6 ;   L A N S B E R G   I . ,   1 9 9 9 ,   S U C C E E D I N G   G E N E R A T I O ;   L a n s b e r g   I . ,   1 9 8 8 ,   A 7 0   Y A L   S C H   O R G   M A N ;   L a n s b e r g   I .   S . ,   1 9 9 4 ,   F A M I L Y   B U S I N E S S   R E V ,   V 7 ,   P 3 9 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 1 9 9 4 . 0 0 0 3 9 . X ;   L e v i n s o n   H . ,   1 9 7 1 ,   H A R V A R D   B U S   R E V ,   V 4 9 ,   P 9 1 ;   L i t z   R .   A . ,   1 9 9 5 ,   F A M I L Y   B U S I N E S S   R E V ,   V 8 ,   P 7 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 9 5 . 0 0 0 7 1 . x ;   M a d i s o n   K .   M . ,   2 0 1 3 ,   J   M A N A G E M E N T   S P I R I T U ,   V 1 0 ,   P 1 5 9 ;   M e m i l i   E ,   2 0 1 3 ,   F A M   R E L A T ,   V 6 2 ,   P 4 4 3 ,   D O I   1 0 . 1 1 1 1 / f a r e . 1 2 0 1 5 ;   M i l l e r   D ,   2 0 1 1 ,   J   M A N A G E   S T U D ,   V 4 8 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 2 0 0 9 . 0 0 8 9 6 . x ;   M i l l e r   E .   J . ,   1 9 6 7 ,   S Y S T E M S   O R G ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o r r i s   M H ,   2 0 1 0 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 4 ,   P 1 0 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 1 0 . 0 0 4 1 3 . x ;   P r e v o t   F ,   2 0 1 0 ,   R E S   C O M P E T - B A S E D   M A N ,   V 5 ,   P 2 3 1 ,   D O I   1 0 . 1 1 0 8 / S 1 7 4 4 - 2 1 1 7 ( 2 0 1 0 ) 0 0 0 0 0 0 5 0 1 2 ;   R o s e n b l a t t   P . C . ,   1 9 8 5 ,   F A M I L Y   B U S I N E S S   U N D E ;   S c h u l z e   W S ,   2 0 0 1 ,   O R G A N   S C I ,   V 1 2 ,   P 9 9 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 2 . 2 . 9 9 . 1 0 1 1 4 ;   S c h u l z e   W S ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 4 7 3 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 5 4 - 5 ;   S H A N K E R   M . C . ,   1 9 9 6 ,   F A M I L Y   B U S I N E S S   R E V ,   V 9 ,   P 1 0 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 9 6 . 0 0 1 0 7 . x ;   S h a r m a   P ,   2 0 0 3 ,   J   B U S   V E N T U R I N G ,   V 1 8 ,   P 6 6 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 1 5 - 6 ;   S h a r m a   P ,   2 0 0 5 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 9 ,   P 1 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 0 5 . 0 0 0 6 7 . x ;   S h a r m a   P . ,   2 0 0 4 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 7 ,   P 1 ,   D O I   D O I   1 0 . 1 1 1 1 / J . 1 7 4 1 - 6 2 4 8 . 2 0 0 4 . 0 0 0 0 1 . X ;   S h a r m a   P . ,   1 9 9 7 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 0 ,   P 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 1 9 9 7 . 0 0 0 0 1 . x ;   S h a r m a   P . ,   2 0 0 1 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 5 ,   P 1 7 ;   S h a r m a   P ,   2 0 1 2 ,   F A M   B U S   R E V ,   V 2 5 ,   P 5 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 4 4 8 6 5 1 2 4 3 7 6 2 6 ;   S i r m o n   D .   G . ,   2 0 0 3 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 7 ,   P 3 3 9 ,   D O I   D O I   1 0 . 1 1 1 1 / 1 5 4 0 - 8 5 2 0 . T 0 1 - 1 - 0 0 0 1 3 ;   S o r e n s o n   R .   L . ,   1 9 9 9 ,   F A M I L Y   B U S I N E S S   R E V ,   V 1 2 ,   P 3 2 5 ,   D O I   [ 1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 1 1 - 9 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 3 ) 0 0 0 1 1 - 9 ] ;   S t a n l e y   L J ,   2 0 1 0 ,   E N T R E P   T H E O R Y   P R A C T ,   V 3 4 ,   P 1 0 8 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 6 5 2 0 . 2 0 1 0 . 0 0 4 1 4 . x ;   H i t t   M .   A . ,   2 0 1 2 ,   F A M I L Y   B U S I N E S S   R E V ,   V 2 5 ,   P 3 3 ;   V a n   E s s e n   M . ,   2 0 1 1 ,   A C A D   M A N A G E M E N T   B E S T ;   V i l l a l o n g a   B ,   2 0 0 6 ,   J   F I N A N C   E C O N ,   V 8 0 ,   P 3 8 5 ,   D O I   1 0 . 1 0 1 6 / j . j f i n e c o . 2 0 0 4 . 1 2 . 0 0 5 ;   W a r d   J . ,   1 9 8 7 ,   K E E P I N G   F A M I L Y   B U S I N ;   W e s t h e a d   P . ,   1 9 9 8 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 3 ,   P 3 1 ;   W r i g h t   M ,   2 0 1 1 ,   J   F A M I L Y   B U S I N E S S   S T ,   V 2 ,   P 1 8 7 ;   Y u   A ,   2 0 1 2 ,   F A M   B U S   R E V ,   V 2 5 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 8 9 4 4 8 6 5 1 1 4 3 0 3 2 9 ;   Y u e   W P ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 3 1 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 7 7 . 9 3 4 3 7 . 1 8 ;   Z a h r a   S . A . ,   2 0 0 4 ,   F A M   B U S   R E V ,   V 1 7 ,   P 3 3 1 ,   D O I   D O I   1 0 . 1 1 1 1 / F A B R . 2 0 0 4 . 1 7 . I S S U E - 4 ;   Z e l l w e g e r   T M ,   2 0 1 2 ,   O R G A N   S C I ,   V 2 3 ,   P 8 5 1 ,   D O I   1 0 . 1 2 8 7 / o r s c . 1 1 1 0 . 0 6 6 5 ;   Z e l l w e g e r   T .   M . ,   2 0 1 0 ,   J   F A M I L Y   B U S I N E S S   S T ,   V 1 ,   P 5 4 ,   D O I   [ 1 0 . 1 0 1 6 / j . j f b s . 2 0 0 9 . 1 2 . 0 0 3 ,   D O I   1 0 . 1 0 1 6 / J . J F B S . 2 0 0 9 . 1 2 . 0 0 3 ] 	 9 7 	 1 4 	 1 4 	 4 	 3 6 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 1 5 5 4 - 7 1 9 1 	 1 5 5 5 - 1 9 3 8 	 	 I N T   E N T R E P   M A N A G   J 	 I n t .   E n t r e p .   M a n a g .   J . 	 M A R 	 2 0 1 5 	 1 1 	 1 	 	 	 	 	 1 1 3 	 1 3 2 	 	 1 0 . 1 0 0 7 / s 1 1 3 6 5 - 0 1 3 - 0 2 8 6 - z 	 	 2 0 	 B u s i n e s s ;   M a n a g e m e n t 	 B u s i n e s s   &   E c o n o m i c s 	 C B 3 K G 	 W O S : 0 0 0 3 4 9 5 2 6 1 0 0 0 0 7 	 	 
 
 J 	 O r t e g a ,   J L 	 	 	 	 L u i s   O r t e g a ,   J o s e 	 	 	 R e l a t i o n s h i p   b e t w e e n   a l t m e t r i c   a n d   b i b l i o m e t r i c   i n d i c a t o r s   a c r o s s   a c a d e m i c   s o c i a l   s i t e s :   T h e   c a s e   o f   C S I C ' s   m e m b e r s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C S I C ;   A l t m e t r i c s ;   B i b l i o m e t r i c s ;   A c a d e m i c   s o c i a l   n e t w o r k   s i t e s ;   A c a d e m i c   s e a r c h   e n g i n e s 	 G O O G L E   S C H O L A R ;   S C I E N T I F I C   I M P A C T ;   C I T A T I O N S ;   M E T R I C S ;   S E A R C H 	 T h i s   s t u d y   e x p l o r e s   t h e   c o n n e c t i o n s   b e t w e e n   s o c i a l   a n d   u s a g e   m e t r i c s   ( a l t m e t r i c s )   a n d   b i b l i o m e t r i c   i n d i c a t o r s   a t   t h e   a u t h o r   l e v e l .   I t   s t u d i e s   t o   w h a t   e x t e n t   t h e s e   i n d i c a t o r s ,   g a i n e d   f r o m   a c a d e m i c   s i t e s ,   c a n   p r o v i d e   a   p r o x y   f o r   r e s e a r c h   i m p a c t .   C l o s e   t o   1 0 , 0 0 0   a u t h o r   p r o f i l e s   b e l o n g i n g   t o   t h e   S p a n i s h   N a t i o n a l   R e s e a r c h   C o u n c i l   w e r e   e x t r a c t e d   f r o m   t h e   p r i n c i p a l   s c h o l a r l y   s o c i a l   s i t e s :   R e s e a r c h G a t e ,   A c a d e m i a . e d u   a n d   M e n d e l e y   a n d   a c a d e m i c   s e a r c h   e n g i n e s :   M i c r o s o f t   A c a d e m i c   S e a r c h   a n d   G o o g l e   S c h o l a r   C i t a t i o n s .   R e s u l t s   d e s c r i b e   l i t t l e   o v e r l a p p i n g   b e t w e e n   s i t e s   b e c a u s e   m o s t   o f   t h e   r e s e a r c h e r s   o n l y   m a n a g e   o n e   p r o f i l e   ( 7 2 % ) .   C o r r e l a t i o n s   p o i n t   o u t   t h a t   t h e r e   i s   s c a n t   r e l a t i o n s h i p   b e t w e e n   a l t m e t r i c   a n d   b i b l i o m e t r i c   i n d i c a t o r s   a t   a u t h o r   l e v e l .   T h i s   i s   d u e   t o   t h e   a l m e t r i c   o n e s   a r e   s i t e - d e p e n d e n t ,   w h i l e   t h e   b i b l i o m e t r i c   o n e s   a r e   m o r e   s t a b l e   a c r o s s   w e b   s i t e s .   I t   i s   c o n c l u d e d   t h a t   a l t m e t r i c s   c o u l d   r e f l e c t   a n   a l t e r n a t i v e   d i m e n s i o n   o f   t h e   r e s e a r c h   p e r f o r m a n c e ,   c l o s e ,   p e r h a p s ,   t o   s c i e n c e   p o p u l a r i z a t i o n   a n d   n e t w o r k i n g   a b i l i t i e s ,   b u t   f a r   f r o m   c i t a t i o n   i m p a c t .   ( C )   2 0 1 4   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 C C H S   C S I C ,   C y b e r m e t r   L a b ,   M a d r i d   2 8 0 3 7 ,   S p a i n 	 O r t e g a ,   J L   ( r e p r i n t   a u t h o r ) ,   C C H S   C S I C ,   C y b e r m e t r   L a b ,   A l b a s a n z   2 6 - 2 8 ,   M a d r i d   2 8 0 3 7 ,   S p a i n . 	 j o r t e g a @ o r g c . c s i c . e s 	 	 O r t e g a ,   J o s e   L u i s / 0 0 0 0 - 0 0 0 1 - 9 8 5 7 - 1 5 1 1 	 	 	 A l m o u s a   O . ,   2 0 1 1 ,   P   2 0 1 1   I E E E   J O R D   C   A ;   B a n b e r s t a   M . ,   2 0 1 0 ,   S U C C E S S   F A C T O R S   S O C I ;   B a r - I l a n   J . ,   2 0 1 2 ,   P   1 7   I N T   C   S C I   T E C H N ,   P 1 4 ;   B o l l e n   J ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 6 0 2 2 ;   B r o d y   T ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 0 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 7 3 ;   C o s t a s   R . ,   2 0 1 4 ,   A R X I V 1 4 0 1 4 3 2 1 ;   C r o n i n   B ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 1 0 9 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 9 8 9 ;   C S I C ,   2 0 1 3 ,   D A T   2 0 1 2   R E S   C T R   I ;   E l d e r   J . ,   2 0 1 4 ,   W A L L   S T R E E T   J ;   E y s e n b a c h   G ,   2 0 1 1 ,   J   M E D   I N T E R N E T   R E S ,   V 1 3 ,   D O I   1 0 . 2 1 9 6 / j m i r . 2 0 1 2 ;   G a r c i a   D ,   2 0 1 3 ,   C   O N L   S O C   N E T W   B O S T ,   P 3 9 ;   H a l e y   M R ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 1 0 7 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 8 0 ;   H a u s t e i n   S ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 1 0 1 ,   P 1 1 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 2 2 1 - 3 ;   J a c s o   P . ,   2 0 1 1 ,   O N L I N E   I N F O R M   R E V ,   V 3 5 ,   P 9 8 3 ;   J a c s o   P ,   2 0 1 2 ,   O N L I N E   I N F O R M   R E V ,   V 3 6 ,   P 1 2 6 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 1 2 1 1 2 0 9 5 8 1 ;   W e i   J e n g ,   2 0 1 4 ,   A R X I V 1 4 0 1 6 4 9 5 ;   J e n g   W . ,   2 0 1 2 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 1 ;   J i a n g   J i e p u ,   2 0 1 3 ,   P   1 3   A C M   I E E E   C S   J O I ,   P 1 3 5 ;   K e l l y   B r i a n ,   2 0 1 2 ,   O R 2 0 1 2   7   I N T   C   O P   R E ;   K h a b s a   M ,   2 0 1 4 ,   P L O S   O N E ,   V 9 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 9 3 9 4 9 ;   K o r d e s t a n i   A .   A . ,   2 0 1 1 ,   P   A N N   C   A C   M A R K   S C I ;   L i   X . ,   2 0 1 2 ,   P   1 7   I N T   C   S C I   T E C H N ,   V 2 ,   P 4 5 1 ;   L i   X D ,   2 0 1 1 ,   S O I L   C O N T A M I N A T I O N ,   P 1 ,   D O I   1 0 . 1 0 9 7 / B R S . 0 b 0 1 3 e 3 1 8 2 0 5 6 2 0 a ;   L o p e z - C o z a r   E .   D . ,   2 0 1 2 ,   A R X I V 1 2 1 2 0 6 3 8 ;   O r t e g a   J L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 1 1 4 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 3 6 ;   O r t e g a   J L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 6 1 ;   M a s - B l e d a   A . ,   2 0 1 4 ,   S C I E N T O M E T R I C S ;   M e n e n d e z   M ,   2 0 1 2 ,   R E S   P R A C T I C E   D E S I G N ;   M o h a m m a d i   E . ,   2 0 1 4 ,   J   A S S   I N F O R M   S C I   T E C ;   N e n t w i c h   M . ,   2 0 1 4 ,   O P E N I N G   S C I ,   P 1 0 7 ,   D O I   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 3 1 9 - 0 0 0 2 6 - 8 _ ;   O r t e g a   J L ,   2 0 1 4 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ;   P e r n e g e r   T V ,   2 0 0 4 ,   B R I T   M E D   J ,   V 3 2 9 ,   P 5 4 6 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 9 . 7 4 6 5 . 5 4 6 ;   P i t t s   M . ,   2 0 1 4 ,   P   1 7   I N T   C   E X T   D A T   T ,   P 6 4 8 ;   P o n t e   D ,   2 0 1 1 ,   S E R I A L S   R E V ,   V 3 7 ,   P 1 4 9 ,   D O I   1 0 . 1 0 1 6 / j . s e r r e v . 2 0 1 1 . 0 6 . 0 0 2 ;   P r i e m   J . ,   2 0 1 0 ,   1   M O N D A Y ,   V 1 5 ;   P r i e m   J ,   2 0 1 2 ,   A R X I V 1 2 0 3 4 7 4 5 ;   R e s e a r c h G a t e ,   2 0 1 4 ,   R G   S C O R   F A W   R E S ;   R o w l a n d s   I ,   2 0 1 1 ,   L E A R N   P U B L ,   V 2 4 ,   P 1 8 3 ,   D O I   1 0 . 1 0 8 7 / 2 0 1 1 0 3 0 6 ;   T h e l w a l l   M . ,   2 0 1 4 ,   J   A S S   I N F O R M   S C I   T E C ;   T h e l w a l l   M ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 7 2 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 3 8 ;   T h e l w a l l   M ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 6 4 8 4 1 ;   W a l l a c e   D . ,   2 0 1 3 ,   S E A R C H   E N G I N E   J ;   W a t s o n   A .   B . ,   2 0 0 9 ,   J   V I S I O N ,   V 9 ;   Z a h e d i   Z . ,   2 0 1 3 ,   P L O S   A L M   W O R K S H   S A N 	 4 4 	 1 4 	 1 4 	 2 0 	 9 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 5 	 9 	 1 	 	 	 	 	 3 9 	 4 9 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 4 . 1 1 . 0 0 4 	 	 1 1 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C B 6 X O 	 W O S : 0 0 0 3 4 9 7 7 0 5 0 0 0 0 6 	 	 
 
 J 	 B o r n m a n n ,   L 	 	 	 	 B o r n m a n n ,   L u t z 	 	 	 V a l i d i t y   o f   a l t m e t r i c s   d a t a   f o r   m e a s u r i n g   s o c i e t a l   i m p a c t :   A   s t u d y   u s i n g   d a t a   f r o m   A l t m e t r i c   a n d   F 1 0 0 0 P r i m e 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A l t m e t r i c s ;   B i b l i o m e t r i c s ;   F 1 0 0 0 ;   T w i t t e r ;   S o c i e t a l   i m p a c t 	 A D J U S T E D   P R E D I C T I O N S 	 C a n   a l t m e t r i c   d a t a   b e   v a l i d l y   u s e d   f o r   t h e   m e a s u r e m e n t   o f   s o c i e t a l   i m p a c t ?   T h e   c u r r e n t   s t u d y   s e e k s   t o   a n s w e r   t h i s   q u e s t i o n   w i t h   a   c o m p r e h e n s i v e   d a t a s e t   ( a b o u t   1 0 0 , 0 0 0   r e c o r d s )   f r o m   v e r y   d i s p a r a t e   s o u r c e s   ( F 1 0 0 0 ,   A l t m e t r i c ,   a n d   a n   i n - h o u s e   d a t a b a s e   b a s e d   o n   W e b   o f   S c i e n c e ) .   I n   t h e   F 1 0 0 0   p e e r   r e v i e w   s y s t e m ,   e x p e r t s   a t t a c h   p a r t i c u l a r   t a g s   t o   s c i e n t i f i c   p a p e r s   w h i c h   i n d i c a t e   w h e t h e r   a   p a p e r   c o u l d   b e   o f   i n t e r e s t   f o r   s c i e n c e   o r   r a t h e r   f o r   o t h e r   s e g m e n t s   o f   s o c i e t y .   T h e   r e s u l t s   s h o w   t h a t   p a p e r s   w i t h   t h e   t a g   " g o o d   f o r   t e a c h i n g "   d o   a c h i e v e   h i g h e r   a l t m e t r i c   c o u n t s   t h a n   p a p e r s   w i t h o u t   t h i s   t a g   -   i f   t h e   q u a l i t y   o f   t h e   p a p e r s   i s   c o n t r o l l e d .   A t   t h e   s a m e   t i m e ,   a   h i g h e r   c i t a t i o n   c o u n t   i s   s h o w n   e s p e c i a l l y   b y   p a p e r s   w i t h   a   t a g   t h a t   i s   s p e c i f i c a l l y   s c i e n t i f i c a l l y   o r i e n t e d   ( " n e w   f i n d i n g " ) .   T h e   f i n d i n g s   i n d i c a t e   t h a t   p a p e r s   t a i l o r e d   f o r   a   r e a d e r s h i p   o u t s i d e   t h e   a r e a   o f   r e s e a r c h   s h o u l d   l e a d   t o   s o c i e t a l   i m p a c t .   I f   a l t m e t r i c   d a t a   i s   t o   b e   u s e d   f o r   t h e   m e a s u r e m e n t   o f   s o c i e t a l   i m p a c t ,   t h e   q u e s t i o n   a r i s e s   o f   i t s   n o r m a l i z a t i o n .   I n   b i b l i o m e t r i c s ,   c i t a t i o n s   a r e   n o r m a l i z e d   f o r   t h e   p a p e r s '   s u b j e c t   a r e a   a n d   p u b l i c a t i o n   y e a r .   T h i s   s t u d y   h a s   t a k e n   a   s e c o n d   a n a l y t i c   s t e p   i n v o l v i n g   a   p o s s i b l e   n o r m a l i z a t i o n   o f   a l t m e t r i c   d a t a .   A s   t h e   r e s u l t s   s h o w   t h e r e   a r e   p a r t i c u l a r   s c i e n t i f i c   t o p i c s   w h i c h   a r e   o f   e s p e c i a l   i n t e r e s t   f o r   a   w i d e   a u d i e n c e .   S i n c e   t h e s e   m o r e   o r   l e s s   i n t e r e s t i n g   t o p i c s   a r e   n o t   c o m p l e t e l y   r e f l e c t e d   i n   T h o m s o n   R e u t e r s '   j o u r n a l   s e t s ,   a   n o r m a l i z a t i o n   o f   a l t m e t r i c   d a t a   s h o u l d   n o t   b e   b a s e d   o n   t h e   l e v e l   o f   s u b j e c t   c a t e g o r i e s ,   b u t   o n   t h e   l e v e l   o f   t o p i c s .   ( C )   2 0 1 4   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 	 	 	 B a r - I l a n   J . ,   2 0 1 4 ,   B E Y O N D   B I B L I O M E T R I C S ,   P 3 0 7 ;   B a r - I l a n   J . ,   2 0 1 2 ,   B U L L E T I N   O F   T H E   A M E R ,   V 3 8 ,   P 2 4 ;   B o r n m a n n   L . ,   2 0 1 4 ,   J O U R N A L   O F   T H E   A S S O C ;   B o r n m a n n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 6 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 7 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 9 3 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 9 . 0 0 3 ;   B o r n m a n n   L ,   2 0 1 4 ,   S C I E N T O M E T R I C S ,   V 9 8 ,   P 2 1 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 0 2 0 - x ;   B o r n m a n n   L ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 2 1 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 8 0 3 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 6 2 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 2 . 0 0 5 ;   B o r n m a n n   L ,   2 0 1 2 ,   E M B O   R E P ,   V 1 3 ,   P 6 7 3 ,   D O I   1 0 . 1 0 3 8 / e m b o r . 2 0 1 2 . 9 9 ;   D a r l i n g   E .   S . ,   2 0 1 3 ,   P E E R J   P R E P R I N T S ,   V 1 ,   P 1 ,   D O I   [ 1 0 . 7 2 8 7 / p e e r j . p r e p r i n t s . 1 6 v 1 ,   D O I   1 0 . 7 2 8 7 / P E E R J . P R E P R I N T S . 1 6 V 1 ] ;   F 1 0 0 0 ,   2 0 1 2 ,   W H A T   I S   F 1 0 0 0 ;   G r a n t   J . ,   1 9 9 9 ,   R E S   E V A L U A T ,   V 8 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 9 9 7 8 1 7 7 7 6 5 8 ;   H A U S M A N   J ,   1 9 8 4 ,   E C O N O M E T R I C A ,   V 5 2 ,   P 9 0 9 ,   D O I   1 0 . 2 3 0 7 / 1 9 1 1 1 9 1 ;   H a u s t e i n   S ,   2 0 1 4 ,   B E Y O N D   B I B L I O M E T R I C S :   H A R N E S S I N G   M U L T I D I M E N S I O N A L   I N D I C A T O R S   O F   S C H O L A R L Y   I M P A C T ,   P 3 2 7 ;   H a z e l k o r n   E ,   2 0 1 1 ,   R A N K I N G S   A N D   T H E   R E S H A P I N G   O F   H I G H E R   E D U C A T I O N :   T H E   B A T T L E   F O R   W O R L D - C L A S S   E X C E L L E N C E ,   P 1 ,   D O I   1 0 . 1 0 5 7 / 9 7 8 0 2 3 0 3 0 6 3 9 4 ;   H i l b e   J .   M . ,   2 0 0 7 ,   N E G A T I V E   B I N O M I A L   R E ;   H o s m e r   J r   D .   W . ,   2 0 0 0 ,   A P P L I E D   L O G I S T I C   R E G ;   K r e i m a n   G . ,   2 0 1 1 ,   F R O N T I E R S   I N   C O M P U T A ,   V 5 ;   L e w i s o n   G ,   2 0 0 8 ,   B R I T   J   C A N C E R ,   V 9 8 ,   P 1 9 4 4 ,   D O I   1 0 . 1 0 3 8 / s j . b j c . 6 6 0 4 4 0 5 ;   L o a c h   T . ,   2 0 1 4 ,   A N A L Y S I N G   A T T E N T I O N ;   L o n g   J .   S . ,   2 0 0 6 ,   R E G R E S S I O N   M O D E L S   F O ;   M a h r t   M . ,   2 0 1 2 ,   T W I T T E R   A N D   S O C I E T Y ,   P 3 9 9 ;   M o h a m m a d i   E . ,   2 0 1 4 ,   J O U R N A L   O F   T H E   A S S O C ;   M o h a m m a d i   E ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 7 ,   P 3 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 0 9 9 3 - 9 ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   P r i e m   J . ,   2 0 1 0 ,   A L T M E T R I C S   A   M A N I F E S ;   C o s t e l l o   K .   L . ,   2 0 1 0 ,   P   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 1 ,   D O I   D O I   1 0 . 1 0 0 2 / M E E T . 1 4 5 0 4 7 0 1 2 0 1 ;   P r i e m   J . ,   2 0 1 0 ,   F I R S T   M O N D A Y ,   V 1 5 ;   P r i e m   J ,   2 0 1 4 ,   B E Y O N D   B I B L I O M E T R I C S :   H A R N E S S I N G   M U L T I D I M E N S I O N A L   I N D I C A T O R S   O F   S C H O L A R L Y   I M P A C T ,   P 2 6 3 ;   R o d g e r s   E . P . ,   2 0 1 3 ,   L O O K   A L T M E T R I C S   I T S ;   S t a t a C o r p ,   2 0 1 3 ,   S T A T A   S T A T I S T I C A L   S O ;   T o r r e s - S a l i n a s   D ,   2 0 1 3 ,   C O M U N I C A R ,   P 5 3 ,   D O I   1 0 . 3 9 1 6 / C 4 1 - 2 0 1 3 - 0 5 ;   V i n k l e r   P . ,   2 0 1 0 ,   T H E   E V A L U A T I O N   O F   R E ;   W a l t m a n   L ,   2 0 1 4 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 5 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 0 4 0 ;   W a n g   J ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 8 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 7 5 - 9 ;   W e t s   K ,   2 0 0 3 ,   L E A R N   P U B L ,   V 1 6 ,   P 2 4 9 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 3 3 2 2 4 2 1 9 8 2 ;   W i l l i a m s   R . ,   2 0 1 4 ,   M E A S U R I N G   S C H O L A R L Y ;   W i l l i a m s   R ,   2 0 1 2 ,   S T A T A   J ,   V 1 2 ,   P 3 0 8 ;   W o u t e r s   P . ,   2 0 1 2 ,   U S E R S   N A R C I S S I S M   A N D ;   Z u b i a g a   A . ,   2 0 1 4 ,   J O U R N A L   O F   T H E   A S S O C 	 4 0 	 1 4 	 1 4 	 1 3 	 8 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 O C T 	 2 0 1 4 	 8 	 4 	 	 	 	 	 9 3 5 	 9 5 0 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 4 . 0 9 . 0 0 7 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A U 3 Q B 	 W O S : 0 0 0 3 4 5 5 2 7 4 0 0 0 1 4 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   R o s a t i ,   F 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   R o s a t i ,   F r a n c e s c o 	 	 	 C a r e e r   a d v a n c e m e n t   a n d   s c i e n t i f i c   p e r f o r m a n c e   i n   u n i v e r s i t i e s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   R e c r u i t m e n t ;   C a r e e r   a d v a n c e m e n t ;   B i b l i o m e t r i c s ;   U n i v e r s i t i e s ;   I t a l y 	 M I N O R I T Y   F A C U L T Y   R E C R U I T M E N T ;   H I G H E R - E D U C A T I O N ;   R E T E N T I O N ;   P R O M O T I O N ;   N E P O T I S M ;   G E N D E R ;   I M P A C T ;   L E V E L 	 M a n y   g o v e r n m e n t s   h a v e   p l a c e d   p r i o r i t y   o n   e x c e l l e n c e   i n   h i g h e r   e d u c a t i o n   a s   p a r t   o f   t h e i r   p o l i c y   a g e n d a s .   P r o c e s s e s   f o r   r e c r u i t m e n t   a n d   c a r e e r   a d v a n c e m e n t   i n   u n i v e r s i t i e s   t h u s   h a v e   a   c r i t i c a l   r o l e .   T h e   e f f i c i e n c y   o f   f a c u l t y   s e l e c t i o n   p r o c e s s e s   c a n   b e   e v a l u a t e d   b y   c o m p a r i n g   t h e   s u b s e q u e n t   p e r f o r m a n c e   o f   c o m p e t i t i o n   w i n n e r s   a g a i n s t   t h a t   o f   t h e   l o s e r s   a n d   t h e   p r e - e x i s t i n g   s t a f f   o f   e q u a l   a c a d e m i c   r a n k .   O u r   s t u d y   p r e s e n t s   a n   e m p i r i c a l   a n a l y s i s   c o n c e r n i n g   t h e   r e c r u i t m e n t   p r o c e d u r e s   f o r   a s s o c i a t e   p r o f e s s o r s   i n   t h e   I t a l i a n   u n i v e r s i t y   s y s t e m .   T h e   r e s u l t s   o f   a   b i b l i o m e t r i c   a n a l y s i s   o f   t h e   h a r d   s c i e n c e   a r e a s   r e v e a l   t h a t   n e w   a s s o c i a t e   p r o f e s s o r s   a r e   o n   a v e r a g e   m o r e   p r o d u c t i v e   t h a n   t h e   i n c u m b e n t s .   H o w e v e r   a   n u m b e r   o f   c r u c i a l   c o n c e r n s   e m e r g e ,   i n   p a r t i c u l a r   c o n c e r n i n g   o c c u r r e n c e   o f   n o n - w i n n e r   c a n d i d a t e s   t h a t   a r e   m o r e   p r o d u c t i v e   t h a n   t h e   w i n n e r s   o v e r   t h e   s u b s e q u e n t   t r i e n n i u m ,   a n d   c a s e s   o f   w i n n e r s   t h a t   a r e   c o m p l e t e l y   u n p r o d u c t i v e .   B e y o n d   t h e   i m p l i c a t i o n s   f o r   t h e   I t a l i a n   c a s e ,   t h e   a n a l y s i s   o f f e r s   c o n s i d e r a t i o n s   f o r   a l l   d e c i s i o n - m a k e r s   r e g a r d i n g   t h e   e x   p o s t   e v a l u a t i o n   o f   t h e   e f f i c i e n c y   o f   t h e   r e c r u i t m e n t   p r o c e s s   a n d   t h e   d e s i r a b i l i t y   o f   p r o v i d i n g   s e l e c t i o n   c o m m i t t e e s   w i t h   b i b l i o m e t r i c   i n d i c a t o r s   i n   s u p p o r t   o f   e v a l u a t i o n   ( i . e .   i n f o r m e d   p e e r   r e v i e w ) . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 8 5   R o m e ,   I t a l y ;   [ D ' A n g e l o ,   C i r i a c o   A n d r e a ;   R o s a t i ,   F r a n c e s c o ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t   &   E n g n ,   I - 0 0 1 3 3   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   V i a l e   M a n z o n i   3 0 ,   I - 0 0 1 8 5   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t ;   f r a n c e s c o . r o s a t i @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   R o s a t i ,   F r a n c e s c o / C - 4 7 8 3 - 2 0 1 3 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   R o s a t i ,   F r a n c e s c o / 0 0 0 0 - 0 0 0 1 - 5 0 8 5 - 5 0 5 6 	 	 	 A b r a m o   G . ,   2 0 1 2 ,   R E L A T I V E S   S A M E   U   F A C ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 1 . 0 1 3 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 6 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 6 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 1 . 0 0 3 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 7 ;   A b r a m o   G ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 5 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 4 ;   A b r a m o   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 8 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 0 0 - 1 ;   A b r a m o   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 6 0 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 6 4 - 1 ;   A L L E N   N ,   1 9 8 8 ,   H I G H   E D U C ,   V 1 7 ,   P 2 6 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 1 6 3 7 9 0 ;   A l l e s i n a   S ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 2 1 1 6 0 ;   A u r a n e n   O ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 8 2 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 3 . 0 0 3 ;   A y d o g a n   I . ,   2 0 1 2 ,   A F R I C A N   J   B U S I N E S S   M ,   V 6 ,   P 4 5 7 7 ;   C o r a - B r a m b l e   D ,   2 0 0 6 ,   J   H E A L T H   C A R E   P O O R   U ,   V 1 7 ,   P 2 5 1 ,   D O I   1 0 . 1 3 5 3 / h p u . 2 0 0 6 . 0 0 5 7 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   H o l t z - E a k i n   D . ,   2 0 0 0 ,   5 6 2 2   N B E R ;   D u r a n t e   R . ,   2 0 1 1 ,   1 7 5 7 2   N B E R ;   D u r a n t e   R . ,   2 0 0 9 ,   A C A D   D Y N A S T I E S ;   E V A N S   C ,   1 9 9 5 ,   S T U D   H I G H   E D U C ,   V 2 0 ,   P 2 5 3 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 7 5 0 7 9 5 1 2 3 3 1 3 8 1 5 3 5 ;   F o g e l b e r g   P . ,   1 9 9 9 ,   H A R D   W O R K   A C A D   R E S   I ;   H u s u   L . ,   2 0 0 0 ,   H I G H E R   E D   E U R O P E ,   V 2 5 ,   P 2 2 1 ,   D O I   1 0 . 1 0 8 0 / 7 1 3 6 6 9 2 5 7 ;   L e d w i t h   S ,   2 0 0 0 ,   E U R   J   W O M E N S   S T U D ,   V 7 ,   P 7 ;   L E N T Z   B F ,   1 9 8 9 ,   J   H U M   R E S O U R ,   V 2 4 ,   P 3 9 6 ,   D O I   1 0 . 2 3 0 7 / 1 4 5 8 2 0 ;   M a r t i n   B . ,   2 0 0 9 ,   I N T   J   E D   I N T E G R I T Y ,   V 5 ,   P 3 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   M a   W a n h u a ,   2 0 0 8 ,   H I G H   E D U C   P O L I C Y ,   V 2 1 ,   P 5 ,   D O I   D O I   1 0 . 1 0 5 7 / P A L G R A V E . H E P . 8 3 0 0 1 7 5 ;   P E R O T T I   R o b e r t o ,   2 0 0 8 ,   U   T R U C C A T A ;   P r i c e   E G ,   2 0 0 5 ,   J   G E N   I N T E R N   M E D ,   V 2 0 ,   P 5 6 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 2 5 - 1 4 9 7 . 2 0 0 5 . 0 1 2 7 . x ;   R e e s   T . ,   2 0 0 4 ,   E U R O P E A N   C O M M I S S I O N ;   S a l m i   J ,   2 0 0 9 ,   D I R   D E V ,   P 1 ,   D O I   1 0 . 1 5 9 6 / 9 7 8 - 0 - 8 2 1 3 - 7 8 6 5 - 6 ;   S I M O N   R J ,   1 9 6 6 ,   S O C I O L   E D U C ,   V 3 9 ,   P 3 4 4 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 1 9 1 8 ;   S t a n l e y   J M ,   2 0 0 7 ,   J   P R O F   N U R S ,   V 2 3 ,   P 2 5 3 ,   D O I   1 0 . 1 0 1 6 / j . p r o f n u r s . 2 0 0 7 . 0 7 . 0 0 5 ;   T r o t m a n   C A ,   2 0 0 2 ,   A M   J   O R T H O D   D E N T O F A C ,   V 1 2 2 ,   P 2 ,   D O I   1 0 . 1 0 6 7 / m o d . 2 0 0 2 . 1 2 4 9 9 6 ;   v a n   d e n   B r i n k   M ,   2 0 1 0 ,   O R G A N   S T U D ,   V 3 1 ,   P 1 4 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 1 0 3 8 0 8 1 2 ;   V e u g e l e r s   R . ,   2 0 0 8 ,   G O V E R N A N C E   E U R O P E A N ;   Z a g a r i a   C . ,   2 0 0 7 ,   P R O C E S S O   U   C R O N A C H E ;   Z i e g l e r   B . ,   2 0 0 1 ,   I N T   J   S O C I O L O G Y   S O C I ,   V 2 1 ,   P 4 4 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 3 3 0 1 1 0 7 8 9 5 5 6 ;   Z i n o v y e v a   N . ,   2 0 1 2 ,   B U S I N E S S   E C   W O R K I N G 	 3 7 	 1 4 	 1 5 	 6 	 4 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 F E B 	 2 0 1 4 	 9 8 	 2 	 	 	 	 	 8 9 1 	 9 0 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 1 0 7 5 - 8 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 3 0 2 R M 	 W O S : 0 0 0 3 3 0 6 2 2 6 0 0 0 0 7 	 	 
 
 J 	 J e o n g ,   Y K ;   S o n g ,   M ;   D i n g ,   Y 	 	 	 	 J e o n g ,   Y o o   K y u n g ;   S o n g ,   M i n ;   D i n g ,   Y i n g 	 	 	 C o n t e n t - b a s e d   a u t h o r   c o - c i t a t i o n   a n a l y s i s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 A u t h o r   c o - c i t a t i o n   a n a l y s i s ;   C i t a t i o n   c o n t e n t   a n a l y s i s ;   B i b l i o m e t r i c s ;   I n f o r m a t i o n   s c i e n c e ;   C i t a t i o n   a n a l y s i s 	 I N T E L L E C T U A L   S T R U C T U R E ;   A L L - A U T H O R ;   I N F O R M A T I O N - S C I E N C E ;   C I T A T I O N   A N A L Y S I S ;   M A N A G E M E N T   F I E L D ;   P R O X I M I T Y ;   W E B ;   P U B L I C A T I O N S ;   N E T W O R K S ;   1 S T 	 A u t h o r   c o - c i t a t i o n   a n a l y s i s   ( A C A )   h a s   l o n g   b e e n   u s e d   a s   a n   e f f e c t i v e   m e t h o d   f o r   i d e n t i f y i n g   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   a   r e s e a r c h   d o m a i n ,   b u t   i t   r e l i e s   o n   s i m p l e   c o - c i t a t i o n   c o u n t i n g ,   w h i c h   d o e s   n o t   t a k e   t h e   c i t a t i o n   c o n t e n t   i n t o   c o n s i d e r a t i o n .   T h e   p r e s e n t   s t u d y   p r o p o s e s   a   n e w   m e t h o d   f o r   m e a s u r i n g   t h e   s i m i l a r i t y   b e t w e e n   c o - c i t e d   a u t h o r s   b y   c o n s i d e r i n g   a u t h o r ' s   c i t a t i o n   c o n t e n t .   W e   c o l l e c t e d   t h e   f u l l - t e x t   j o u r n a l   a r t i c l e s   i n   t h e   i n f o r m a t i o n   s c i e n c e   d o m a i n   a n d   e x t r a c t e d   t h e   c i t i n g   s e n t e n c e s   t o   c a l c u l a t e   t h e i r   s i m i l a r i t y   d i s t a n c e s .   W e   c o m p a r e d   o u r   m e t h o d   w i t h   t r a d i t i o n a l   A C A   a n d   f o u n d   o u t   t h a t   o u r   a p p r o a c h ,   w h i l e   d i s p l a y i n g   a   s i m i l a r   i n t e l l e c t u a l   s t r u c t u r e   f o r   t h e   i n f o r m a t i o n   s c i e n c e   d o m a i n   a s   t h e   o t h e r   b a s e l i n e   m e t h o d s ,   a l s o   p r o v i d e s   m o r e   d e t a i l s   a b o u t   t h e   s u b - d i s c i p l i n e s   i n   t h e   d o m a i n   t h a n   w i t h   t r a d i t i o n a l   A C A .   ( C )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ J e o n g ,   Y o o   K y u n g ;   S o n g ,   M i n ]   Y o n s e i   U n i v ,   D e p t   L i b   &   I n f o r m a t   S c i ,   S e o u l   1 2 0 7 4 9 ,   S o u t h   K o r e a ;   [ D i n g ,   Y i n g ]   I n d i a n a   U n i v ,   D e p t   I n f o r m a t   &   L i b   S c i ,   B l o o m i n g t o n ,   I N   U S A 	 S o n g ,   M   ( r e p r i n t   a u t h o r ) ,   Y o n s e i   U n i v ,   D e p t   L i b   &   I n f o r m a t   S c i ,   S e o u l   1 2 0 7 4 9 ,   S o u t h   K o r e a . 	 y k . j e o n g @ y o n s e i . a c . k r ;   m i n . s o n g @ y o n s e i . a c . k r ;   d i n g y i n g @ i n d i a n a . e d u 	 	 	 	 	 A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   B a s t i a n   M . ,   2 0 0 9 ,   P   3   I N T   I C W S M   C ;   B a y e r   A .   E . ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 4 4 ;   B l o n d e l   D .   V . ,   2 0 0 8 ,   J   S T A T   M E C H - T H E O R Y   E ,   V 1 0 ,   P 1 0 0 0 ;   B o y a c k   K W ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 1 7 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 8 9 6 ;   C a l l a h a n   A ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 1 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 1 3 ;   C h e n   C M ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 1 3 8 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 0 9 ;   C h e n   L C ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 8 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 5 8 - y ;   D i n g   Y ,   1 9 9 9 ,   J   I N F   S C I ,   V 2 5 ,   P 6 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 1 0 7 ;   E l k i s s   A ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 0 7 ;   E o m   S ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 5 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 9 . 0 0 1 ;   G i l e s   C .   L . ,   1 9 9 8 ,   D i g i t a l   9 8   L i b r a r i e s .   T h i r d   A C M   C o n f e r e n c e   o n   D i g i t a l   L i b r a r i e s ,   P 8 9 ;   G i p p   B ,   2 0 0 9 ,   P R O   I N T   C O N F   S C I   I N F ,   V 2 ,   P 5 7 1 ;   H a i r   J .   F . ,   1 9 9 8 ,   M U L T I V A R I A T E   D A T A   A N ;   H e   Q . ,   2 0 1 0 ,   P   1 9   I N T   C   W O R L D   W I D ;   H e   Y L ,   2 0 0 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 8 ,   P 4 9 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 1 ) 0 0 0 4 6 - 2 ;   H o r n i k   K . ,   2 0 0 7 ,   S N O W B A L L   S N O W B A L L   S T ;   K A M A D A   T ,   1 9 8 9 ,   I N F O R M   P R O C E S S   L E T T ,   V 3 1 ,   P 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 0 - 0 1 9 0 ( 8 9 ) 9 0 1 0 2 - 6 ;   L i u   S B ,   2 0 1 1 ,   P R O   I N T   C O N F   S C I   I N F ,   P 4 7 4 ;   L u   K ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 1 9 7 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 6 2 8 ;   M a   R M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 2 0 6 3 - x ;   M A C R O B E R T S   M H ,   1 9 8 4 ,   S O C   S T U D   S C I ,   V 1 4 ,   P 9 1 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 8 4 0 1 4 0 0 1 0 0 6 ;   M c C a i n   K W ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 2 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 4 3 9 7 ;   M c C a i n   K .   W . ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 5 1 ;   N a k o v   P .   I . ,   2 0 0 4 ,   S I G I R   2 0 0 4   W O R K S H   S E ;   N a n b a   H ,   2 0 0 5 ,   L E C T   N O T E S   C O M P U T   S C ,   V 3 6 5 2 ,   P 3 9 1 ;   N a n b a   H . ,   1 9 9 9 ,   P   1 6   I N T   J O I N T   C   A R T ,   P 9 2 6 ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   N e w m a n   M E J ,   2 0 0 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 3 ,   P 8 5 7 7 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 6 0 1 6 0 2 1 0 3 ;   P e r s s o n   O ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 4 0 0 9 4 2 8 ;   R i t c h i e   A . ,   2 0 0 6 ,   P   C O L I N G   A C L   W O R K S H ;   S c h n e i d e r   J W ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 5 8 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 4 3 ;   S c h n e i d e r   J W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 1 9 - y ;   S M A L L   H ,   1 9 7 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 4 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 4 0 4 0 6 ;   S m a l l   H ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 4 9 - 2 ;   S m a l l   H ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 8 3 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 2 1 - z ;   T e u f e l   S . ,   1 9 9 9 ,   T H E S I S   U   E D I N B U R G H   U ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 5 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   Z h a n g   G ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 1 4 9 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 8 5 0 ;   Z h a o   D Z ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 4 ;   Z h a o   D Z ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 2 8 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 1 7 ;   Z h a o   D Z ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 7 8 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 2 ;   Z h a o   D Z ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 6 5 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 9 5 ;   Z h a o   D Z ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 4 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 9 0 6 0 1 7 1 0 ;   Z i z i   M . ,   1 9 9 4 ,   P   1 9 9 4   A C M   E U R   C   H Y P ,   P 1 2 6 ,   D O I   1 0 . 1 1 4 5 / 1 9 2 7 5 7 . 1 9 2 7 8 6 	 5 0 	 1 4 	 1 4 	 8 	 7 4 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 4 	 8 	 1 	 	 	 	 	 1 9 7 	 2 1 1 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 1 2 . 0 0 1 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A B 4 P H 	 W O S : 0 0 0 3 3 1 7 7 1 9 0 0 0 1 8 	 	 
 
 J 	 D i e m ,   A ;   W o l t e r ,   S C 	 	 	 	 D i e m ,   A n d r e a ;   W o l t e r ,   S t e f a n   C . 	 	 	 T h e   U s e   o f   B i b l i o m e t r i c s   t o   M e a s u r e   R e s e a r c h   P e r f o r m a n c e   i n   E d u c a t i o n   S c i e n c e s 	 R E S E A R C H   I N   H I G H E R   E D U C A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   E d u c a t i o n   s c i e n c e s ;   R e s e a r c h   p e r f o r m a n c e ;   S c i e n t o m e t r i c   m e t h o d s ;   S c i e n c e   r e s e a r c h 	 R E S E A R C H   P R O D U C T I V I T Y ;   S C I E N T I F I C   P R O D U C T I V I T Y ;   S O C I A L - S C I E N C E S ;   G O O G L E   S C H O L A R ;   A C A D E M I C   S C I E N T I S T S ;   G E N D E R - D I F F E R E N C E S ;   R E S E A R C H   O U T P U T ;   L I F E - C Y C L E ;   I M P A C T ;   H U M A N I T I E S 	 T h i s   p a p e r   i n v e s t i g a t e s   t h e   f i t n e s s - f o r - p u r p o s e   a n d   s o u n d n e s s   o f   b i b l i o m e t r i c   p a r a m e t e r s   f o r   m e a s u r i n g   a n d   e l u c i d a t i n g   t h e   r e s e a r c h   p e r f o r m a n c e   o f   i n d i v i d u a l   r e s e a r c h e r s   i n   t h e   f i e l d   o f   e d u c a t i o n   s c i e n c e s   i n   S w i t z e r l a n d .   I n   o r d e r   t o   t a k e   i n t o   a c c o u n t   t h e   s p e c i f i c i t i e s   o f   p u b l i c a t i o n   p r a c t i c e s   o f   r e s e a r c h e r s   i n   e d u c a t i o n   s c i e n c e s ,   t h e   a n a l y s e s   a r e   b a s e d   o n   t w o   s e p a r a t e   d a t a b a s e s :   W e b   o f   S c i e n c e   a n d   G o o g l e   S c h o l a r .   B o t h   d a t a b a s e s   s h o w   a   v e r y   u n e q u a l   d i s t r i b u t i o n   o f   t h e   i n d i v i d u a l   r e s e a r c h   o u t p u t ,   a n d   t h e   i n d i c a t o r s   u s e d   t o   m e a s u r e   r e s e a r c h   p e r f o r m a n c e   ( q u a n t i t y   o f   p u b l i c a t i o n s   a n d   c i t a t i o n   i m p a c t )   f r o m   t h e   t w o   d a t a   s o u r c e s   a r e   h i g h l y   p o s i t i v e l y   c o r r e l a t e d .   H o w e v e r ,   i n d i v i d u a l   c h a r a c t e r i s t i c s   o f   t h e   r e s e a r c h e r s ,   s u c h   a s   a g e ,   g e n d e r   a n d   a c a d e m i c   p o s i t i o n ,   t h a t   s e r v e   t o   e x p l a i n   t h e   g r e a t   v a r i a n c e   i n   r e s e a r c h   p e r f o r m a n c e ,   c a n   o n l y   b e   i d e n t i f i e d   i f   t h e   W e b   o f   S c i e n c e   i s   u s e d   a s   a   b e n c h m a r k   o f   r e s e a r c h   p e r f o r m a n c e .   T h e   r e s u l t s   i n d i c a t e   t h a t   G o o g l e   S c h o l a r   i s   s o   i n c l u s i v e   t h a t   i t   i m p e d e s   a   m e a n i n g f u l   i n t e r p r e t a t i o n   o f   t h e   d a t a .   H o w e v e r ,   t h e   W e b   o f   S c i e n c e   i n c l u s i o n   p o l i c y   f o r   j o u r n a l s   i s   a l s o   a s s o c i a t e d   w i t h   c e r t a i n   s h o r t c o m i n g s   t h a t   p u t   s o m e   r e s e a r c h e r s   a t   a n   u n j u s t i f i e d   d i s a d v a n t a g e .   T h e r e f o r e ,   p r o b l e m s   c u r r e n t l y   e x i s t   i n   r e g a r d   t o   b o t h   c i t a t i o n   d a t a b a s e s   w h e n   u s e d   t o   b e n c h m a r k   i n d i v i d u a l   r e s e a r c h   p e r f o r m a n c e . 	 [ D i e m ,   A n d r e a ;   W o l t e r ,   S t e f a n   C . ]   S C C R E ,   C H - 5 0 0 0   A a r a u ,   S w i t z e r l a n d ;   [ W o l t e r ,   S t e f a n   C . ]   U n i v   B e r n ,   B e r n ,   S w i t z e r l a n d ;   [ W o l t e r ,   S t e f a n   C . ]   C E S i f o ,   M u n i c h ,   G e r m a n y ;   [ W o l t e r ,   S t e f a n   C . ]   I Z A ,   B o n n ,   G e r m a n y 	 D i e m ,   A   ( r e p r i n t   a u t h o r ) ,   S C C R E ,   E n t f e l d e r s t r   6 1 ,   C H - 5 0 0 0   A a r a u ,   S w i t z e r l a n d . 	 a n d r e a . d i e m @ s k b f - c s r e . c h ;   s t e f a n . w o l t e r @ s k b f - c s r e . c h 	 	 W o l t e r ,   S t e f a n / 0 0 0 0 - 0 0 0 3 - 2 7 2 1 - 2 2 8 4 	 	 	 A a l t o j a r v i   I ,   2 0 0 8 ,   A C T A   S O C I O L ,   V 5 1 ,   P 5 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 1 6 9 9 3 0 7 0 8 6 8 1 5 ;   A b r a m o   G ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 9 ,   P 5 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 4 6 - 8 ;   A d l e r   R ,   2 0 0 9 ,   S T A T   S C I ,   V 2 4 ,   P 1 ,   D O I   1 0 . 1 2 1 4 / 0 9 - S T S 2 8 5 ;   A r c h a m b a u l t   E ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 5 - z ;   B A K A N I C   V ,   1 9 8 7 ,   A M   S O C I O L   R E V ,   V 5 2 ,   P 6 3 1 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 5 5 9 9 ;   B e r n a u e r   T ,   2 0 1 0 ,   S W I S S   P O L I T   S C I   R E V ,   V 1 6 ,   P 2 7 9 ,   D O I   1 0 . 1 0 0 2 / j . 1 6 6 2 - 6 3 7 0 . 2 0 1 0 . t b 0 0 1 6 0 . x ;   B o n a c c o r s i   A ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 5 4 2 7 5 0 7 5 5 2 ;   B o r r e g o   A ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 5 - y ;   B o z e m a n   B ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 1 3 9 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 7 . 0 0 2 ;   B u d d   J M ,   2 0 1 0 ,   R E S   H I G H   E D U C ,   V 5 1 ,   P 2 9 4 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 6 2 - 0 0 9 - 9 1 5 5 - 6 ;   B u t l e r   L ,   2 0 0 2 ,   N A T U R E ,   V 4 1 9 ,   P 8 7 7 ,   D O I   1 0 . 1 0 3 8 / 4 1 9 8 7 7 a ;   C a r a y o l   N ,   2 0 0 6 ,   I N F   E C O N   P O L I C Y ,   V 1 8 ,   P 5 5 ,   D O I   1 0 . 1 0 1 6 / j . i n f o e c o p o l . 2 0 0 5 . 0 9 . 0 0 2 ;   C o r b y   K ,   2 0 0 3 ,   P O R T A L - L I B R   A C A D ,   V 3 ,   P 2 0 7 ,   D O I   1 0 . 1 3 5 3 / p l a . 2 0 0 3 . 0 0 2 9 ;   C o r b y   K ,   2 0 0 1 ,   L I B   A C A D ,   V 1 ,   P 2 7 9 ;   C u s i n   C ,   2 0 0 0 ,   F E R   S T U D I E   P R O S P E C T I ;   D ' A m i c o   R ,   2 0 1 1 ,   J   D I V E R S   H I G H   E D U C ,   V 4 ,   P 1 7 5 ,   D O I   1 0 . 1 0 3 7 / a 0 0 2 2 5 7 0 ;   D e   W i t t e   K ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 6 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 8 6 - 5 ;   D e e s   W ,   2 0 0 8 ,   P   W I S   2 0 0 8   4   I N T   C   W ,   P 1 ;   E a r p   V .   J ,   2 0 1 0 ,   B E H A V   S O C I A L   S C I   L I B ,   V 2 9 ,   P 2 8 3 ,   D O I   1 0 . 1 0 8 0 / 0 1 6 3 9 2 6 9 . 2 0 1 0 . 5 2 1 0 3 4 ;   C o m m i s s i o n   E u r o p e a n ,   2 0 1 0 ,   2 4 1 8 7   E U R   E N   C O M M   E U ;   F a i r b a i r n   H ,   2 0 0 9 ,   A A R E   2 0 0 8   C ;   F e r n a n d e z - C a n o   A ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 3 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 4 7 8 3 ;   F r o h l i c h   G ,   1 9 9 9 ,   K O M M U N I K A T I O N   S T A T T ,   P 2 7 ;   G a r c i a - P e r e z   M A ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 3 7 2 ;   G o n z a l e z - B r a m b i l a   C ,   2 0 0 7 ,   R E S   P O L I C Y ,   V 3 6 ,   P 1 0 3 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 7 . 0 3 . 0 0 5 ;   G r a b e r   M ,   2 0 0 8 ,   G E R   E C O N   R E V ,   V 9 ,   P 4 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 4 7 5 . 2 0 0 8 . 0 0 4 4 9 . x ;   H a d d o w   G ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 4 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 9 8 - 4 ;   H a l l   B .   H ,   2 0 0 5 ,   N B E R   W O R K I N G   P A P E R   S ;   H a r z i n g   A - W ,   2 0 0 7 ,   P U B L I S H   P E R I S H ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i c k s   B ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 4 ,   P 1 9 3 ;   H i c k s   D ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 7 8 ;   H i c k s   D ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 8 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 5 8 ;   H o r n b o s t e l   S ,   2 0 0 2 ,   Z   E R Z I E H W I S S ,   V 5 ,   P 6 3 4 ,   D O I   1 0 . 1 0 0 7 / s 1 1 6 1 8 - 0 0 2 - 0 0 3 6 - 4 ;   H u a n g   M H ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 8 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 8 5 ;   H u n t e r   L A ,   2 0 1 0 ,   S O C   S T U D   S C I ,   V 4 0 ,   P 4 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 0 9 3 5 8 4 7 2 ;   J a c s o   P ,   2 0 0 8 ,   O N L I N E   I N F O R M   R E V ,   V 3 2 ,   P 1 0 2 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 8 1 0 8 6 6 0 1 0 ;   J a n s e n   D ,   2 0 0 7 ,   K O L N E R   Z   S O Z I O L   S O Z ,   V 5 9 ,   P 1 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 5 7 7 - 0 0 7 - 0 0 0 6 - 1 ;   J e n s e n   P ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 7 8 ,   P 4 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 1 4 - 3 ;   J o k i c   M B ,   2 0 0 6 ,   Q U A L I T A T   Q U A N T I T A T   W ;   K e i n e r   E . ,   1 9 9 9 ,   E R Z I E H U N G S W I S S E N S C H A ,   V 2 1 ;   K n o r r   K . ,   1 9 7 9 ,   E F F E C T I V E N E S S   R E S   G R ,   P 5 5 ;   K r a m p e n   G ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 1 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 5 9 - 2 ;   K r o c   R .   J . ,   1 9 8 4 ,   E D   R E S ,   V 1 3 ,   P 1 7 ,   D O I   1 0 . 2 3 0 7 / 1 1 7 5 5 5 5 ;   K y v i k   S ,   1 9 9 6 ,   S C I   T E C H N O L   H U M   V A L ,   V 2 1 ,   P 5 4 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 6 0 2 1 0 0 1 0 3 ;   L a r i v i e r e   V ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 9 - y ;   L e i n e n k u g e l   P ,   2 0 1 1 ,   I N F O R M   W I S S E N   G L O B A L ,   P 1 6 0 ;   L E V I N   S G ,   1 9 9 1 ,   A M   E C O N   R E V ,   V 8 1 ,   P 1 1 4 ;   L i n m a n s   A J M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 3 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 8 8 - 9 ;   L O N G   J S ,   1 9 9 3 ,   A M   S O C I O L   R E V ,   V 5 8 ,   P 7 0 3 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 6 2 8 2 ;   L u c e   T .   S ,   1 9 7 8 ,   E D   R E S ,   V 7 ,   P 8 ,   D O I   1 0 . 2 3 0 7 / 1 1 7 5 9 1 7 ;   M c N a l l y   G P ,   2 0 1 0 ,   A U S T   J   P S Y C H O L ,   V 6 2 ,   P 2 0 4 ,   D O I   1 0 . 1 0 8 0 / 0 0 0 4 9 5 3 1 0 0 3 6 6 7 4 0 6 ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M o e d   H F ,   2 0 0 5 ,   I N F O R M   S C I   K N O W L   M A N ,   V 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / 1 - 4 0 2 0 - 3 7 1 4 - 7 ;   N e d e r h o f   A J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 0 7 - 2 ;   N e u h a u s   C h r i s t o p h ,   2 0 1 0 ,   V E R G L E I C H E N D E   A N A L   F ;   P a l u d k i e w i c z   K ,   2 0 1 0 ,   I F O   S C H N E L L D I E N S T ,   V 6 3 ,   P 1 8 ;   P u u s k a   H M ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 4 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 3 7 - 7 ;   R a u b e r   M ,   2 0 0 8 ,   G E R   E C O N   R E V ,   V 9 ,   P 4 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 0 4 7 5 . 2 0 0 8 . 0 0 4 4 8 . x ;   R e y   O ,   2 0 0 9 ,   D O S S I E R   A C T U A L I T E   V S ,   V 4 6 ;   R o k a c h   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 4 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 3 8 ;   S a x   L J ,   2 0 0 2 ,   R E S   H I G H   E D U C ,   V 4 3 ,   P 4 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 5 5 7 5 6 1 6 2 8 5 ;   S c h u l z e   G G ,   2 0 0 8 ,   P E R S P E K T I V E N   W I R T S C H ,   V 9 ,   P 2 8 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 8 - 2 5 1 6 . 2 0 0 8 . 0 0 2 8 1 . x ;   S h i n   E J ,   2 0 0 4 ,   L I B R I ,   V 5 4 ,   P 2 2 1 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 4 . 2 2 1 ;   S h i n   J C ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 5 ,   P 5 8 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 3 6 - 2 ;   S M A R T   J C ,   1 9 8 3 ,   R E S   H I G H   E D U C ,   V 1 9 ,   P 1 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 9 7 4 7 5 7 ;   S m e b y   J C ,   2 0 0 5 ,   R E S   H I G H   E D U C ,   V 4 6 ,   P 5 9 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 6 2 - 0 0 4 - 4 1 3 6 - 2 ;   S t a c k   S ,   2 0 0 4 ,   R E S   H I G H   E D U C ,   V 4 5 ,   P 8 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 6 2 - 0 0 4 - 5 9 5 3 - z ;   T o g i a   A . ,   2 0 0 6 ,   I N T   J   E D U C   R E S ,   V 4 5 ,   P 3 6 2 ,   D O I   D O I   1 0 . 1 0 1 6 / J . I J E R . 2 0 0 7 . 0 2 . 0 0 1 ;   v a n   A a l s t   J ,   2 0 1 0 ,   E D U C   R E S E A R C H E R ,   V 3 9 ,   P 3 8 7 ,   D O I   1 0 . 3 1 0 2 / 0 0 1 3 1 8 9 X 1 0 3 7 1 1 2 0 ;   v a n   L e e u w e n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 1 0 - 7 ;   V a n   O u r s   J C ,   2 0 0 9 ,   E C O N O M I S T - N E T H E R L A N D ,   V 1 5 7 ,   P 4 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 4 5 - 0 0 9 - 9 1 3 2 - 7 ;   v a n   R a a n   A F J ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 4 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 8 2 - 1 ;   W e l l i n g t o n   J . ,   2 0 0 5 ,   J   F U R T H E R   H I G H E R   E D ,   V 2 9 ,   P 3 5 ,   D O I   [ 1 0 . 1 0 8 0 / 0 3 0 9 8 7 7 0 5 0 0 0 3 7 7 3 9 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 9 8 7 7 0 5 0 0 0 3 7 7 3 9 ] ;   W i n k e l m a n n   R ,   2 0 0 8 ,   E C   A N A L   C O U N T   D A T A 	 7 5 	 1 4 	 1 6 	 6 	 1 0 4 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 3 6 1 - 0 3 6 5 	 1 5 7 3 - 1 8 8 X 	 	 R E S   H I G H   E D U C 	 R e s .   H i g h .   E d u c . 	 F E B 	 2 0 1 3 	 5 4 	 1 	 	 	 	 	 8 6 	 1 1 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 6 2 - 0 1 2 - 9 2 6 4 - 5 	 	 2 9 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 E d u c a t i o n   &   E d u c a t i o n a l   R e s e a r c h 	 0 7 5 F K 	 W O S : 0 0 0 3 1 3 8 6 9 0 0 0 0 0 4 	 	 
 
 J 	 B o r n m a n n ,   L ;   M a r x ,   W 	 	 	 	 B o r n m a n n ,   L u t z ;   M a r x ,   W e r n e r 	 	 	 T h e   p r o p o s a l   o f   a   b r o a d e n i n g   o f   p e r s p e c t i v e   i n   e v a l u a t i v e   b i b l i o m e t r i c s   b y   c o m p l e m e n t i n g   t h e   t i m e s   c i t e d   w i t h   a   c i t e d   r e f e r e n c e   a n a l y s i s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C i t a t i o n   i m p a c t ;   N o r m a l i z e d   c i t a t i o n   c o u n t s ;   J o u r n a l   i m p a c t   f a c t o r ;   C i t e d   r e f e r e n c e s 	 P R E D I C T I V E - V A L I D I T Y ;   P U B L I C A T I O N S ;   D I F F U S I O N ;   H I S T O R Y 	 A   p r o p o s a l   i s   m a d e   i n   t h i s   p a p e r   f o r   a   b r o a d e n i n g   o f   p e r s p e c t i v e   i n   e v a l u a t i v e   b i b l i o m e t r i c s   b y   c o m p l e m e n t i n g   t h e   ( s t a n d a r d )   t i m e s   c i t e d   w i t h   a   c i t e d   r e f e r e n c e   a n a l y s i s   f o r   a   f i e l d s p e c i f i c   c i t a t i o n   i m p a c t   m e a s u r e m e n t .   T h e   t i m e s   c i t e d   a p p r o a c h   c o u n t s   t h e   c i t a t i o n s   o f   a   g i v e n   p u b l i c a t i o n   s e t .   I n   c o n t r a s t ,   w e   c h a n g e   t h e   p e r s p e c t i v e   a n d   s t a r t   b y   s e l e c t i n g   a l l   p a p e r s   d e a l i n g   w i t h   a   s p e c i f i c   r e s e a r c h   t o p i c   o r   f i e l d   ( t h e   e x a m p l e   i n   t h i s   s t u d y   i s   r e s e a r c h   o n   A s p i r i n ) .   T h e n   w e   e x t r a c t   a l l   c i t e d   r e f e r e n c e s   f r o m   t h e   p a p e r s   o f   t h i s   f i e l d - s p e c i f i c   p u b l i c a t i o n   s e t   a n d   a n a l y s e   w h i c h   p a p e r s ,   s c i e n t i s t s ,   a n d   j o u r n a l s   h a v e   b e e n   c i t e d   m o s t   o f t e n .   I n   t h i s   s t u d y ,   w e   u s e   t h e   C h e m i c a l   A b s t r a c t s   r e g i s t r y   n u m b e r   t o   s e l e c t   t h e   p u b l i c a t i o n s   f o r   a   s p e c i f i c   f i e l d .   H o w e v e r ,   t h e   c i t e d   r e f e r e n c e   a p p r o a c h   c a n   b e   u s e d   w i t h   a n y   o t h e r   f i e l d   c l a s s i f i c a t i o n   s y s t e m   p r o p o s e d   u p   t o   n o w .   ( C )   2 0 1 2   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ B o r n m a n n ,   L u t z ]   M a x   P l a n c k   G e s e l l ,   A d m   H e a d q u a r t e r s ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y ;   [ M a r x ,   W e r n e r ]   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   M a x   P l a n c k   G e s e l l ,   A d m   H e a d q u a r t e r s ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 ;   M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 ;   M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 	 	 	 B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   R   S T A T   S O C   A   S T A T ,   V 1 7 4 ,   P 8 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 8 5 X . 2 0 1 1 . 0 0 6 8 9 . x ;   B o r n m a n n   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 1 8 ;   B o r n m a n n   L ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 1 3 4 4 ;   D i   V a i o   G ,   2 0 1 2 ,   E X P L O R   E C O N   H I S T ,   V 4 9 ,   P 9 2 ,   D O I   1 0 . 1 0 1 6 / j . e e h . 2 0 1 1 . 1 0 . 0 0 2 ;   F r o g h i   S ,   2 0 1 2 ,   B J U   I N T ,   V 1 0 9 ,   P 3 2 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 4 - 4 1 0 X . 2 0 1 1 . 1 0 8 5 6 . x ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   K E S S L E R   M M ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 1 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 1 0 3 ;   K r e i m a n   G . ,   2 0 1 1 ,   F R O N T I E R S   C O M P U T A T I O ,   V 5 ;   K u h n   T .   S . ,   1 9 7 0 ,   C R I T I C I S M   G R O W T H   K N O ,   P 1 ;   L a b a n d   D N ,   2 0 1 2 ,   K Y K L O S ,   V 6 5 ,   P 2 3 6 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 3 5 . 2 0 1 2 . 0 0 5 3 6 . x ;   L E Y D E S D O R F F   L ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 2 ;   L e y d e s d o r f f   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 3 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 5 3 4 ;   L i m i n g   L . ,   2 0 1 0 ,   G E O M A T I C S   I N F O R M   S C I ,   V 3 5 ,   P 6 ;   L i u   Y X ,   2 0 1 2 ,   J   D O C ,   V 6 8 ,   P 3 1 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 1 2 1 1 2 0 0 3 1 0 ;   L i u   Y X ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 3 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 4 8 ;   N a t i o n a l   S c i e n c e   B o a r d ,   2 0 1 2 ,   1 2 0 1   N S B ;   v a n   L e e u w e n   T N ,   2 0 1 2 ,   R E S   E V A L U A T ,   V 2 1 ,   P 6 1 ,   D O I   1 0 . 1 0 9 3 / r e s e v a l / r v r 0 0 6 ;   V i n k l e r   P ,   2 0 1 0 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 2 5 0 ;   W a l t m a n   L . ,   2 0 1 2 ,   N E W   M E T H O D O L O G Y   C O N S 	 2 0 	 1 4 	 1 4 	 1 	 4 0 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 3 	 7 	 1 	 	 	 	 	 8 4 	 8 8 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 9 . 0 0 3 	 	 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 5 B G 	 W O S : 0 0 0 3 1 3 1 2 1 3 0 0 0 0 8 	 	 
 
 J 	 G o n z a l e z - A l c a i d e ,   G ;   P a r k ,   J ;   H u a m a n i ,   C ;   G a s c o n ,   J ;   R a m o s ,   J M 	 	 	 	 G o n z a l e z - A l c a i d e ,   G r e g o r i o ;   P a r k ,   J i n s e o ;   H u a m a n i ,   C h a r l e s ;   G a s c o n ,   J o a q u i n ;   M a n u e l   R a m o s ,   J o s e 	 	 	 S C I E N T I F I C   A U T H O R S H I P S   A N D   C O L L A B O R A T I O N   N E T W O R K   A N A L Y S I S   O N   C H A G A S   D I S E A S E :   P A P E R S   I N D E X E D   I N   P U B M E D   ( 1 9 4 0 - 2 0 0 9 ) 	 R E V I S T A   D O   I N S T I T U T O   D E   M E D I C I N A   T R O P I C A L   D E   S A O   P A U L O 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C h a g a s   d i s e a s e ;   B i b l i o m e t r i c s ;   C o o p e r a t i v e   b e h a v i o r ;   N e t w o r k   a n a l y s i s ;   R e s e a r c h   a r e a s ;   R e s e a r c h   g r o u p s 	 T R Y P A N O S O M A - C R U Z I   I N F E C T I O N ;   B I B L I O M E T R I C   A N A L Y S I S ;   C O A U T H O R S H I P   N E T W O R K S ;   T R O P I C A L - M E D I C I N E ;   I N V I S I B L E   C O L L E G E ;   H E A L T H ;   P U B L I C A T I O N S ;   T R A N S M I S S I O N ;   P R O D U C T I V I T Y ;   B E N Z N I D A Z O L E 	 C h a g a s   d i s e a s e   i s   a   c h r o n i c ,   t r o p i c a l ,   p a r a s i t i c   d i s e a s e ,   e n d e m i c   t h r o u g h o u t   L a t i n   A m e r i c a .   T h e   l a r g e - s c a l e   m i g r a t i o n   o f   p o p u l a t i o n s   h a s   i n c r e a s e d   t h e   g e o g r a p h i c   d i s t r i b u t i o n   o f   t h e   d i s e a s e   a n d   c a s e s   h a v e   b e e n   o b s e r v e d   i n   m a n y   o t h e r   c o u n t r i e s   a r o u n d   t h e   w o r l d .   T o   s t r e n g t h e n   t h e   c r i t i c a l   m a s s   o f   k n o w l e d g e   g e n e r a t e d   i n   d i f f e r e n t   c o u n t r i e s ,   i t   i s   e s s e n t i a l   t o   p r o m o t e   c o o p e r a t i v e   a n d   t r a n s l a t i o n a l   r e s e a r c h   i n i t i a t i v e s .   W e   a n a l y z e d   a u t h o r s h i p   o f   s c i e n t i f i c   d o c u m e n t s   o n   C h a g a s   d i s e a s e   i n d e x e d   i n   t h e   M e d l i n e   d a t a b a s e   f r o m   1 9 4 0   t o   2 0 0 9 .   B i b l i o m e t r i c s   w a s   u s e d   t o   a n a l y z e   t h e   e v o l u t i o n   o f   c o l l a b o r a t i o n   p a t t e r n s .   A   S o c i a l   N e t w o r k   A n a l y s i s   w a s   c a r r i e d   o u t   t o   i d e n t i f y   t h e   m a i n   r e s e a r c h   g r o u p s   i n   t h e   a r e a   b y   a p p l y i n g   c l u s t e r i n g   m e t h o d s .   W e   t h e n   a n a l y z e d   1 3 , 9 8 9   p a p e r s   p r o d u c e d   b y   2 1 , 3 5 0   a u t h o r s .   C o l l a b o r a t i o n   a m o n g   a u t h o r s   d r a m a t i c a l l y   i n c r e a s e d   o v e r   t h e   s t u d y   p e r i o d ,   r e a c h i n g   a n   a v e r a g e   o f   6 . 2   a u t h o r s   p e r   p a p e r   i n   t h e   l a s t   f i v e - y e a r   p e r i o d .   A p p l y i n g   a   t h r e s h o l d   o f   c o l l a b o r a t i o n   o f   f i v e   o r   m o r e   p a p e r s   s i g n e d   i n   c o - a u t h o r s h i p ,   w e   i d e n t i f i e d   1 4 8   c o n s o l i d a t e d   r e s e a r c h   g r o u p s   m a d e   u p   o f   1 , 7 5 0   a u t h o r s .   T h e   C h a g a s   d i s e a s e   n e t w o r k   i d e n t i f i e d   c o n s t i t u t e s   a   " s m a l l   w o r l d , "   c h a r a c t e r i z e d   b y   a   h i g h   d e g r e e   o f   c l u s t e r i n g   a n d   a   n o t a b l y   h i g h   n u m b e r   o f   B r a z i l i a n   r e s e a r c h e r s . 	 [ G o n z a l e z - A l c a i d e ,   G r e g o r i o ]   U n i v   V a l e n c i a ,   F a c   M e d   &   O d o n t o l ,   D e p t   H i s t   S c i ,   V a l e n c i a   4 6 0 2 0 ,   S p a i n ;   [ G o n z a l e z - A l c a i d e ,   G r e g o r i o ]   U n i v   V a l e n c i a ,   D o c u m e n t a t   D e p t ,   V a l e n c i a   4 6 0 2 0 ,   S p a i n ;   [ P a r k ,   J i n s e o ]   K o r e a   I n s t   S c i   &   T e c h n o l   I n f o r m a t   K I S T I ,   T a e j o n ,   S o u t h   K o r e a ;   [ H u a m a n i ,   C h a r l e s ]   U n i v   N a c l   M a y o r   S a n   M a r c o s ,   S o c   C i e n t   S a n   F e r n a n d o ,   L i m a   1 4 ,   P e r u ;   [ G a s c o n ,   J o a q u i n ]   U n i v   B a r c e l o n a ,   B a r c e l o n a   C t r   I n t   H l t h   R e s ,   C R E S I B ,   H o s p   C l i n ,   B a r c e l o n a ,   S p a i n ;   [ M a n u e l   R a m o s ,   J o s e ]   G e n   H o s p   U n i v   A l i c a n t e ,   D e p t   I n t e r n a l   M e d ,   E - 0 3 0 8 0   A l i c a n t e ,   S p a i n 	 G o n z a l e z - A l c a i d e ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   V a l e n c i a ,   F a c   M e d   &   O d o n t o l ,   D e p t   H i s t   S c i ,   1 5   B l a s c o   I b a n e z   A v e ,   V a l e n c i a   4 6 0 2 0 ,   S p a i n . 	 g r e g o r i o . g o n z a l e z @ u v . e s ;   j a y o u j i n @ h a n m a i l . n e t ;   h u a m a n i _ c a @ h o t m a i l . c o m ;   j g a s c o n @ c l i n i c . u b . e s ;   j r a m o s r i n c o n @ y a h o o . e s 	 G a s c o n ,   J o a q u i m / M - 3 5 9 8 - 2 0 1 5 	 G a s c o n ,   J o a q u i m / 0 0 0 0 - 0 0 0 2 - 5 0 4 5 - 1 5 8 5 	 	 	 A b b a s i   A ,   2 0 1 1 ,   I E E E   P   4 4   H A W   I N T   C ;   A b b a s i   A ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 3 9 - 2 ;   A l m e i d a   E r o s   A n t o n i o   d e ,   2 0 0 9 ,   R e v .   S o c .   B r a s .   M e d .   T r o p . ,   V 4 2 ,   P 6 0 5 ,   D O I   1 0 . 1 5 9 0 / S 0 0 3 7 - 8 6 8 2 2 0 0 9 0 0 0 5 0 0 0 2 5 ;   B a l e s   M E ,   2 0 0 8 ,   A M I A   A N N   S   P ,   V 4 0 ,   P 8 7 0 ;   B a l e s   M E ,   2 0 1 1 ,   A M   J   P R E V   M E D ,   V 4 1 ,   P 1 1 2 ,   D O I   1 0 . 1 0 1 6 / j . a m e p r e . 2 0 1 1 . 0 3 . 0 1 8 ;   B a r a b a s i   A L ,   2 0 0 2 ,   P H Y S I C A   A ,   V 3 1 1 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 4 3 7 1 ( 0 2 ) 0 0 7 3 6 - 7 ;   B a r a b a s i   A L ,   1 9 9 9 ,   S C I E N C E ,   V 2 8 6 ,   P 5 0 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 8 6 . 5 4 3 9 . 5 0 9 ;   B u r t   R S ,   2 0 0 4 ,   A M   J   S O C I O L ,   V 1 1 0 ,   P 3 4 9 ,   D O I   1 0 . 1 0 8 6 / 4 2 1 7 8 7 ;   B u r t   R o n a l d   S . ,   1 9 9 5 ,   S T R U C T U R A L   H O L E S   S O C ;   C h a n g   Y F ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 4 0 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 3 4 ;   C o s t a s   R ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 8 ,   P 1 4 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 6 8 - z ;   C R A N E   D ,   1 9 6 9 ,   A M   S O C I O L   R E V ,   V 3 4 ,   P 3 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 9 2 4 9 9 ;   V a n z   S A D ,   2 0 1 0 ,   P E R S P E C T   C I E N C   I N F ,   V 1 5 ,   P 4 2 ,   D O I   1 0 . 1 5 9 0 / S 1 4 1 3 - 9 9 3 6 2 0 1 0 0 0 0 2 0 0 0 0 4 ;   d e A n d r a d e   A L S S ,   1 9 9 6 ,   L A N C E T ,   V 3 4 8 ,   P 1 4 0 7 ;   E s t a n i   S S ,   1 9 9 8 ,   A M   J   T R O P   M E D   H Y G ,   V 5 9 ,   P 5 2 6 ;   F a l a g a s   M E ,   2 0 0 6 ,   A C T A   T R O P ,   V 9 9 ,   P 1 5 5 ,   D O I   1 0 . 1 0 1 6 / j . a c t a t r o p i c a . 2 0 0 6 . 0 7 . 0 1 0 ;   A b a d   F r a n c h   F ,   2 0 1 1 ,   P L O S   N E G L E C T   T R O P   D ,   V 5 ,   p e 1 2 0 7 ;   G a r c i a   C C ,   2 0 1 0 ,   R E V   B R A S   C I R   C A R D I O V ,   V 2 5 ,   P 5 5 9 ,   D O I   1 0 . 1 5 9 0 / S 0 1 0 2 - 7 6 3 8 2 0 1 0 0 0 0 4 0 0 0 2 1 ;   G a r g   K C ,   2 0 0 9 ,   H E A L T H   I N F O   L I B R   J ,   V 2 6 ,   P 2 2 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 7 1 - 1 8 4 2 . 2 0 0 8 . 0 0 7 7 9 . x ;   G a s c o n   J o a q u i m ,   2 0 1 0 ,   A c t a   T r o p ,   V 1 1 5 ,   P 2 2 ,   D O I   1 0 . 1 0 1 6 / j . a c t a t r o p i c a . 2 0 0 9 . 0 7 . 0 1 9 ;   G l o v e r   S W ,   2 0 0 4 ,   T R O P   M E D   I N T   H E A L T H ,   V 9 ,   P 1 3 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 3 1 5 6 . 2 0 0 4 . 0 1 3 3 1 . x ;   G o h   K I ,   2 0 0 3 ,   P H Y S   R E V   E ,   V 6 7 ,   D O I   [ 1 0 . 1 1 0 3 / P h y s R e v E . 6 7 . 0 1 7 1 0 1 ,   1 0 . 1 1 0 3 / P h y s R e v . E . 6 7 . 0 1 7 1 0 1 ] ;   G o n z a l e z - A l c a i d e   G ,   2 0 0 8 ,   R E V   N E U R O L O G I A ,   V 4 6 ,   P 6 4 2 ;   G o n z a l e z - A l c a i d e   G ,   2 0 1 0 ,   E N F E R M   I N F E C   M I C R   C L ,   V 2 8 ,   P 5 0 9 ,   D O I   1 0 . 1 0 1 6 / j . e i m c . 2 0 0 9 . 1 2 . 0 1 1 ;   J a c k s o n   Y ,   2 0 1 0 ,   P L O S   N E G L E C T   T R O P   D ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p n t d . 0 0 0 0 5 9 2 ;   K e i s e r   J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 3 5 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 2 7 - 3 ;   K l e i n f e l d   J S ,   2 0 0 2 ,   S O C I E T Y ,   V 3 9 ,   P 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 7 1 7 5 3 0 ;   K R A C K H A R D T   D ,   1 9 9 2 ,   N E T W O R K S   A N D   O R G A N I Z A T I O N S   :   S T R U C T U R E ,   F O R M ,   A N D   A C T I O N ,   P 2 1 6 ;   C o s t a   L i m a   J A ,   1 9 8 5 ,   E D   M E D   S A L U D ,   V 1 9 ,   P 2 0 9 ;   R a m o s   J M ,   2 0 1 1 ,   R E V   S O C   B R A S   M E D   T R O ,   V 4 4 ,   P 7 0 8 ,   D O I   [ 1 0 . 1 5 9 0 / S 0 0 3 7 - 8 6 8 2 2 0 1 1 0 0 5 0 0 0 0 6 0 ,   1 0 . 1 5 9 0 / s 0 0 3 7 - 8 6 8 2 2 0 1 1 0 0 5 0 0 0 0 6 0 ] ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M u l l i n s   N C ,   1 9 8 0 ,   S O C I A L   N E T W O R K S   B I O L ;   M u n o z   J ,   2 0 0 9 ,   A C T A   T R O P ,   V 1 1 1 ,   P 5 1 ,   D O I   1 0 . 1 0 1 6 / j . a c t a t r o p i c a . 2 0 0 9 . 0 2 . 0 0 5 ;   N e w m a n   M E J ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 2 0 0 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 4 5 1 0 0 ;   N e w m a n   M E J ,   2 0 0 1 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 8 ,   P 4 0 4 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 2 1 5 4 4 8 9 8 ;   N e w m a n   M E J ,   2 0 0 4 ,   L E C T   N O T E S   P H Y S ,   V 6 5 0 ,   P 3 3 7 ;   D i a s   J C P ,   2 0 0 9 ,   M E M   I   O S W A L D O   C R U Z ,   V 1 0 4 ,   P 4 1 ,   D O I   1 0 . 1 5 9 0 / S 0 0 7 4 - 0 2 7 6 2 0 0 9 0 0 0 9 0 0 0 0 7 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P R I C E   D J D ,   1 9 6 6 ,   A M   P S Y C H O L ,   V 2 1 ,   P 1 0 1 1 ;   R a m o s   A N ,   2 0 1 0 ,   J   I N F E C T   D E V   C O U N T R ,   V 4 ,   P 6 8 2 ,   D O I   1 0 . 3 8 5 5 / j i d c . 1 1 7 6 ;   R o l l i n   L ,   2 0 1 0 ,   S C A N D   J   W O R K   E N V   H E A ,   V 3 6 ,   P 4 8 4 ,   D O I   1 0 . 5 2 7 1 / s j w e h . 3 0 8 2 ;   S c h o o n b a e r t   D ,   2 0 0 8 ,   L E P R O S Y   R E V ,   V 7 9 ,   P 3 8 7 ;   S c o t t   J ,   1 9 9 1 ,   S O C I A L   N E T W O R K   A N A L ;   S i l v e i r a   A C ,   2 0 0 2 ,   C O N T R O L E   D O E N C A   C H A G ,   P 1 5 ;   W a t t s   D J ,   2 0 0 4 ,   A N N U   R E V   S O C I O L ,   V 3 0 ,   P 2 4 3 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . s o c . 3 0 . 0 2 0 4 0 4 . 1 0 4 3 4 2 ;   W a t t s   D J ,   1 9 9 8 ,   N A T U R E ,   V 3 9 3 ,   P 4 4 0 ,   D O I   1 0 . 1 0 3 8 / 3 0 9 1 8 ;   W i l l i a m s   J o h n   R ,   2 0 0 8 ,   E m e r g   T h e m e s   E p i d e m i o l ,   V 5 ,   P 1 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 7 6 2 2 - 5 - 1 7 ;   W u   B ,   2 0 0 9 ,   S W S M   0 9 ,   P 3 3 ;   Z h e n g   H C ,   2 0 0 9 ,   B M C   I N F E C T   D I S ,   V 9 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 3 3 4 - 9 - 2 8 	 4 9 	 1 4 	 1 6 	 2 	 3 6 	 I N S T   M E D I C I N A   T R O P I C A L   S A O   P A U L O 	 S A O   P A U L O 	 A V   D R   E N E A S   C A R V A L H O   D E   A G U I A R ,   4 7 0 ,   C   C E S A R ,   S A O   P A U L O ,   0 5 4 0 3 - 0 0 0 ,   B R A Z I L 	 0 0 3 6 - 4 6 6 5 	 1 6 7 8 - 9 9 4 6 	 	 R E V   I N S T   M E D   T R O P   S P 	 R e v .   I n s t .   M e d .   T r o p .   S a o   P a u l o 	 J U L - A U G 	 2 0 1 2 	 5 4 	 4 	 	 	 	 	 2 1 9 	 2 2 8 	 	 1 0 . 1 5 9 0 / S 0 0 3 6 - 4 6 6 5 2 0 1 2 0 0 0 4 0 0 0 0 7 	 	 1 0 	 T r o p i c a l   M e d i c i n e 	 T r o p i c a l   M e d i c i n e 	 9 8 1 N J 	 W O S : 0 0 0 3 0 6 9 7 4 8 0 0 0 0 8 	 2 2 8 5 0 9 9 5 	 
 
 J 	 R o r i s s a ,   A ;   Y u a n ,   X J 	 	 	 	 R o r i s s a ,   A b e b e ;   Y u a n ,   X i a o j u n 	 	 	 V i s u a l i z i n g   a n d   m a p p i n g   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   i n f o r m a t i o n   r e t r i e v a l 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 I n f o r m a t i o n   r e t r i e v a l ;   C i t a t i o n   a n a l y s i s ;   B i b l i o m e t r i c s ;   I n f o r m e t r i c s ;   D o m a i n   a n a l y s i s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   B I B L I O M E T R I C   A N A L Y S I S ;   G O O G L E   S C H O L A R ;   S C I E N C E ;   L I B R A R Y ;   J A S I S ;   C O L L A B O R A T I O N ;   S C I E N T I S T S ;   N E T W O R K S ;   A R T I C L E S 	 I n f o r m a t i o n   r e t r i e v a l   i s   a   l o n g   e s t a b l i s h e d   s u b f i e l d   o f   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e .   S i n c e   i t s   i n c e p t i o n   i n   t h e   e a r l y -   t o   m i d   - 1 9 5 0 s ,   i t   h a s   g r o w n   a s   a   r e s u l t ,   i n   p a r t ,   o f   w e l l - r e g a r d e d   r e t r i e v a l   s y s t e m   e v a l u a t i o n   e x e r c i s e s / c a m p a i g n s ,   t h e   p r o l i f e r a t i o n   o f   W e b   s e a r c h   e n g i n e s ,   a n d   t h e   e x p a n s i o n   o f   d i g i t a l   l i b r a r i e s .   A l t h o u g h   r e s e a r c h e r s   h a v e   e x a m i n e d   t h e   i n t e l l e c t u a l   s t r u c t u r e   a n d   n a t u r e   o f   t h e   g e n e r a l   f i e l d   o f   l i b r a r y   a n d   i n f o r m a t i o n   s c i e n c e ,   t h e   s a m e   c a n n o t   b e   s a i d   a b o u t   t h e   s u b f i e l d   o f   i n f o r m a t i o n   r e t r i e v a l .   W e   a d d r e s s   t h a t   i n   t h i s   w o r k   b y   s k e t c h i n g   t h e   i n f o r m a t i o n   r e t r i e v a l   i n t e l l e c t u a l   l a n d s c a p e   t h r o u g h   v i s u a l i z a t i o n s   o f   c i t a t i o n   b e h a v i o r s .   C i t a t i o n   d a t a   f o r   1 0   y e a r s   ( 2 0 0 0 - 2 0 0 9 )   w e r e   r e t r i e v e d   f r o m   t h e   W e b   o f   S c i e n c e   a n d   a n a l y z e d   u s i n g   e x i s t i n g   v i s u a l i z a t i o n   t e c h n i q u e s .   O u r   r e s u l t s   a d d r e s s   i n f o r m a t i o n   r e t r i e v a l ' s   c o - a u t h o r s h i p   n e t w o r k ,   h i g h l y   p r o d u c t i v e   a u t h o r s ,   h i g h l y   c i t e d   j o u r n a l s   a n d   p a p e r s ,   a u t h o r - a s s i g n e d   k e y w o r d s ,   a c t i v e   i n s t i t u t i o n s ,   a n d   t h e   i m p o r t   o f   i d e a s   f r o m   o t h e r   d i s c i p l i n e s .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ R o r i s s a ,   A b e b e ;   Y u a n ,   X i a o j u n ]   S U N Y   A l b a n y ,   D e p t   I n f o r m a t   S t u d i e s ,   A l b a n y ,   N Y   1 2 2 2 2   U S A 	 R o r i s s a ,   A   ( r e p r i n t   a u t h o r ) ,   S U N Y   A l b a n y ,   D e p t   I n f o r m a t   S t u d i e s ,   D r a p e r   H a l l , R o o m   1 1 3 , 1 3 5   W e s t e r n   A v e ,   A l b a n y ,   N Y   1 2 2 2 2   U S A . 	 a r o r i s s a @ a l b a n y . e d u ;   x y u a n @ a l b a n y . e d u 	 	 	 	 	 A s t r o m   F ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 9 4 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 5 6 7 ;   A s t r o m   F ,   2 0 1 0 ,   L I B R   Q U A R T ,   V 8 0 ,   P 1 4 3 ;   B a r - I l a n   J ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 2 1 6 - y ;   B O R G M A N   C L ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 3 9 7 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - M ;   B r o o k s   T A ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 4 8 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 5 < 4 8 5 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - F ;   C h e n   C . ,   2 0 1 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 1 ,   p x x x x ;   C h e n   C . ,   2 0 0 4 ,   I N F O R M   V I S U A L I Z A T I O N ;   C h e n   C M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 1 7 ;   C h e n   C M ,   2 0 0 4 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 1 ,   P 5 3 0 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 3 0 7 5 1 3 1 0 0 ;   C h e n   C M ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 9 ;   C h e n   C M ,   2 0 0 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 3 ,   P 6 7 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 0 7 5 ;   C h u   H T ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 0 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 5 3 ;   C L E V E R D O N   C ,   1 9 8 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 8 ,   P 4 4 8 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C R O N I N   B ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 3 8 1 ,   D O I   1 0 . 1 1 7 7 / 1 0 2 8 3 1 5 3 9 0 0 1 6 0 0 6 0 6 ;   C r o n i n   B ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 5 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 6 4 ;   C r o n i n   B ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 9 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 6 7 ;   D i n g   Y ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 6 5 7 0 9 1 0 9 ;   D i n g   Y ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 2 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 7 1 ;   D O N O H U E   J C ,   1 9 7 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 3 ,   P 3 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 3 0 5 0 6 ;   E l l i s   D ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 9 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 0 9 5 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - Q ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 0 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 0 2 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Q ;   H A R T E R   S P ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 5 4 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 1 0 ) 4 4 : 9 < 5 4 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - F ;   H A R T E R   S P ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 5 8 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 5 8 3 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - O ;   K l a v a n s   R . ,   2 0 0 9 ,   P   1 2   I N T   C   S C I   I N F   I ,   P 2 6 5 ;   L e v i t t   J M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 4 3 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 0 0 ;   M c K e c h n i e   L .   E .   F . ,   2 0 0 5 ,   H U M A N   I N F O R M   B E H A V   R ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M o o e r s   C .   N . ,   1 9 5 1 ,   A M   D O C ,   V 2 ,   P 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 0 2 0 1 0 7 ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   P E R S S O N   O ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 3 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 1 ) 4 5 : 1 < 3 1 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - G ;   R i c e   R .   E ,   1 9 9 0 ,   H I E R A R C H I E S   C L U S T E R S ,   P 1 3 8 ;   S a l t o n   G . ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M ;   S a r a c e v i c   T ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 1 0 5 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 1 2 < 1 0 5 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - Z ;   S a r a c e v i c   T e f k o ,   1 9 9 2 ,   P   I N T   C   C O N C   L I B   I N F ,   P 5 ;   S H A R A B C H I E V   J T ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 8 0 4 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S M A L L   H ,   1 9 8 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 1 7 ,   P 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 1 ) 9 0 0 4 0 - 6 ;   S c h a m b e r   L i n d a . ,   2 0 0 4 ,   P   6 7   A S I S   T   A N N   M ,   P 5 4 ;   v a n   d e n   B e s s e l a a r   P ,   1 9 9 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 7 ,   P 4 1 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 6 0 6 ) 4 7 : 6 < 4 1 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - Y ;   W A R N E R   A J ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 6 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 1 ) 4 2 : 1 < 6 4 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - 7 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 2 0 7 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 9 1 0 ;   Z h a o   D Z ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 1 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 9 9 	 4 6 	 1 4 	 1 5 	 8 	 6 6 	 E L S E V I E R   S C I   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   O X O N ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 1 8 7 3 - 5 3 7 1 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 J A N 	 2 0 1 2 	 4 8 	 1 	 	 	 	 	 1 2 0 	 1 3 5 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 1 1 . 0 3 . 0 0 4 	 	 1 6 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 8 5 6 B M 	 W O S : 0 0 0 2 9 7 6 1 1 4 0 0 0 1 0 	 	 
 
 J 	 H a u p t m a n ,   J S ;   C h o w ,   D S ;   M a r t i n ,   N A ;   I t a g a k i ,   M W 	 	 	 	 H a u p t m a n ,   J a s o n   S . ;   C h o w ,   D a n i e l   S . ;   M a r t i n ,   N e i l   A . ;   I t a g a k i ,   M i c h a e l   W . 	 	 	 R e s e a r c h   p r o d u c t i v i t y   i n   n e u r o s u r g e r y :   t r e n d s   i n   g l o b a l i z a t i o n ,   s c i e n t i f i c   f o c u s ,   a n d   f u n d i n g   A   r e v i e w 	 J O U R N A L   O F   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 n e u r o s u r g e r y ;   n e u r o s c i e n c e ;   b i b l i o m e t r i c s 	 U N I T E D - S T A T E S ;   S P I N E   S U R G E R Y ;   J O U R N A L S ;   A R T I C L E S ;   I N T E R N A T I O N A L I Z A T I O N ;   C H A L L E N G E S ;   R A D I O L O G Y ;   Q U A L I T Y ;   I M P A C T ;   T R I A L S 	 O b j e c t .   W h i l e   r e s e a r c h   i s   i m p o r t a n t   f o r   t h e   s u r v i v a l ,   g r o w t h ,   a n d   e x p a n s i o n   o f   n e u r o s u r g e r y ,   l i t t l e   w o r k   h a s   b e e n   d o n e   t o   q u a n t i f y   t h e   s t a t u s   a n d   t r e n d s   o f   n e u r o s u r g i c a l   p u b l i c a t i o n s .   T h e   p u r p o s e   o f   t h i s   b i b l i o m e t r i c   s t u d y   w a s   t o   q u a n t i t a t i v e l y   a n a l y z e   t r e n d s   i n   n e u r o s u r g i c a l   p u b l i c a t i o n s ,   i n c l u d i n g   c h a n g e s   i n   w o r l d w i d e   p r o d u c t i v i t y ,   s t u d y   m e t h o d o l o g y ,   s u b s p e c i a l t y   t o p i c ,   a n d   f u n d i n g .   M e t h o d s .   T h i s   w a s   a   r e t r o s p e c t i v e   b i b l i o m e t r i c   s t u d y   u s i n g   M E D L I N E   t o   r e c o r d   a l l   p u b l i c a t i o n s   b e t w e e n   1 9 9 6   a n d   2 0 0 9   b y   f i r s t   a u t h o r s   a f f i l i a t e d   w i t h   n e u r o s u r g i c a l   d e p a r t m e n t s .   C o u n t r y   o f   o r i g i n ,   M E D L I N E - d e f i n e d   m e t h o d o l o g y ,   s t u d y   t o p i c ,   a n d   f u n d i n g   s o u r c e s   ( f o r   U S   a r t i c l e s )   w e r e   r e c o r d e d .   L i n e a r   r e g r e s s i o n   w a s   u s e d   t o   d e r i v e   g r o w t h   r a t e s .   R e s u l t s .   T o t a l   a r t i c l e s   n u m b e r e d   5 3 , 4 2 5   d u r i n g   t h e   s t u d y   p e r i o d ,   w i t h   l e a d i n g   g l o b a l   c o n t r i b u t o r s   i n c l u d i n g   t h e   U S   w i t h   1 6 , 9 4 3   a r t i c l e s   ( 3 1 . 7 % )   a n d   J a p a n   w i t h   1 0 , 8 0 2   a r t i c l e s   ( 2 0 . 2 % ) .   C o u n t r i e s   d e m o n s t r a t i n g   r a p i d   g r o w t h   i n   p r o d u c t i v i t y   i n c l u d e d   C h i n a   ( 1 2 1 . 9   + / -   9 . 9 8 % / y e a r ,   p   <   0 . 0 0 1 ) ,   S o u t h   K o r e a   ( 5 0 . 5   + / -   4 . 7 % / y e a r ,   p   <   0 . 0 0 1 ) ,   I n d i a   ( 1 9 . 4   + / -   1 . 8 % / y e a r ,   p   <   0 . 0 0 1 ) ,   a n d   T u r k e y   ( 2 5 . 3   + / -   2 . 8 % / y e a r ,   p   <   0 . 0 0 1 ) .   W h i l e   g e n e r a l   r e s e a r c h   a r t i c l e s ,   c a s e   r e p o r t s ,   a n d   r e v i e w   a r t i c l e s   h a v e   s h o w n   s t e a d y   g r o w t h   s i n c e   1 9 9 6 ,   c l i n i c a l   t r i a l s   a n d   r a n d o m i z e d   c o n t r o l l e d   t r i a l s   h a v e   d e c l i n e d   t o   2 0 0 4   l e v e l s .   T h e   g r e a t e s t   o v e r a l l   s u b s p e c i a l t y   g r o w t h   w a s   s e e n   i n   s p i n e   s u r g e r y .   R e g a r d i n g   f u n d i n g ,   r e l a t i v e   c o n t r i b u t i o n   o f   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N T H )   f u n d e d   p u b l i c a t i o n s   d e c r e a s e d   f r o m   3 0 . 2 %   ( 2 9 0   o f   9 5 9 )   t o   2 2 . 5 %   ( 3 5 6   o f   1 2 2 9 )   b e t w e e n   1 9 9 6   a n d   2 0 0 9 .   C o n c l u s i o n s .   N e u r o s u r g i c a l   p u b l i c a t i o n s   d e m o n s t r a t e   c o n t i n u e d   i n c r e a s e s   i n   p r o d u c t i v i t y   a s   w e l l   a s   i n   g l o b a l   e x p a n s i o n ,   a l t h o u g h   U S   c o n t r i b u t i o n s   r e m a i n   d o m i n a n t .   T w o   c h a l l e n g e s   t h a t   t h e   n e u r o s u r g i c a l   c o m m u n i t y   i s   f a c i n g   i n c l u d e   t h e   p r e p o n d e r a n c e   o f   c a s e   r e p o r t s   a n d   r e v i e w   a r t i c l e s   a n d   t h e   r e l a t i v e   d e c l i n e   i n   N I H   f u n d i n g   f o r   U S   n e u r o s u r g i c a l   p u b l i c a t i o n s ,   a s   p r o d u c t i v i t y   h a s   o u t p a c e d   g o v e r n m e n t   f i n a n c i a l   s u p p o r t .   ( D O I :   1 0 . 3 1 7 1 / 2 0 1 1 . 8 . J N S 1 1 8 5 7 ) 	 [ H a u p t m a n ,   J a s o n   S . ;   C h o w ,   D a n i e l   S . ;   M a r t i n ,   N e i l   A . ]   U n i v   C a l i f   L o s   A n g e l e s ,   D a v i d   G e f f e n   S c h   M e d ,   D e p t   N e u r o s u r g ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A ;   [ I t a g a k i ,   M i c h a e l   W . ]   U n i v   W a s h i n g t o n ,   M e d   C t r ,   D e p t   R a d i o l ,   S e a t t l e ,   W A   9 8 1 9 5   U S A 	 H a u p t m a n ,   J S   ( r e p r i n t   a u t h o r ) ,   U n i v   C a l i f   L o s   A n g e l e s ,   D a v i d   G e f f e n   S c h   M e d ,   D e p t   N e u r o s u r g ,   1 8 - 2 2 8   N P I , B o x   9 5 7 0 3 9 ,   L o s   A n g e l e s ,   C A   9 0 0 9 5   U S A . 	 j h a u p t m a n @ m e d n e t . u c l a . e d u 	 C h o w ,   D a n i e l / H - 4 5 0 7 - 2 0 1 1 	 C h o w ,   D a n i e l / 0 0 0 0 - 0 0 0 2 - 2 3 5 9 - 7 3 9 4 	 	 	 * A M   A S S   A D V   S C I ,   A A A S   R   D   F U N D   U P D   R ;   B E R G L A N D   R M ,   1 9 7 3 ,   N E W   E N G L   J   M E D ,   V 2 8 8 ,   P 1 0 4 3 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 7 3 0 5 1 7 2 8 8 2 0 0 4 ;   B l a c k   P M ,   2 0 0 6 ,   N E U R O S U R G E R Y ,   V 5 8 ,   P 4 1 9 ,   D O I   1 0 . 1 2 2 7 / 0 1 . N E U . 0 0 0 0 1 9 7 1 3 9 . 6 1 4 1 2 . 3 6 ;   B o o s   N ,   2 0 0 9 ,   E U R   S P I N E   J ,   V 1 8 ,   p S 3 3 8 ,   D O I   1 0 . 1 0 0 7 / s 0 0 5 8 6 - 0 0 9 - 0 9 3 9 - 3 ;   B r o w n   A J ,   2 0 0 7 ,   N E U R O S U R G E R Y ,   V 6 1 ,   P 1 3 1 4 ,   D O I   1 0 . 1 2 2 7 / 0 1 . N E U . 0 0 0 0 2 8 0 1 6 4 . 7 2 6 0 2 . D 2 ;   B u r n e t t   M G ,   2 0 0 4 ,   J   N E U R O S U R G ,   V 1 0 0 ,   P 7 3 ,   D O I   1 0 . 3 1 7 1 / j n s . 2 0 0 4 . 1 0 0 . 1 . 0 0 7 3 ;   C a p p e l l   M S ,   2 0 0 8 ,   A M   J   G A S T R O E N T E R O L ,   V 1 0 3 ,   P 1 0 6 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 7 2 - 0 2 4 1 . 2 0 0 7 . 0 1 7 6 7 . x ;   C h a n g   A A ,   2 0 0 6 ,   L A R Y N G O S C O P E ,   V 1 1 6 ,   P 3 3 6 ,   D O I   1 0 . 1 0 9 7 / 0 1 . m l g . 0 0 0 0 1 9 5 3 7 1 . 7 2 8 8 7 . a 2 ;   C h e n   M Y ,   2 0 0 3 ,   A M   J   R O E N T G E N O L ,   V 1 8 1 ,   P 9 0 7 ;   C H E W   F S ,   1 9 8 6 ,   A M   J   R O E N T G E N O L ,   V 1 4 7 ,   P 1 0 5 5 ;   C h o w   D S ,   2 0 1 0 ,   R A D I O L O G Y ,   V 2 5 7 ,   P 4 1 0 ,   D O I   1 0 . 1 1 4 8 / r a d i o l . 1 0 1 0 0 0 7 0 ;   D A Y   A L ,   1 9 9 4 ,   N E U R O S U R G E R Y ,   V 3 4 ,   P 1 0 5 2 ;   G l u u d   L L ,   2 0 0 5 ,   A M   J   G A S T R O E N T E R O L ,   V 1 0 0 ,   P 2 4 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 7 2 - 0 2 4 1 . 2 0 0 5 . 0 0 3 2 7 . x ;   G o t t f r i e d   O N ,   2 0 0 5 ,   J   N E U R O S U R G ,   V 1 0 2 ,   P 2 0 2 ,   D O I   1 0 . 3 1 7 1 / j n s . 2 0 0 5 . 1 0 2 . 2 . 0 2 0 2 ;   H a t h e r   G J ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 2 2 0 3 ;   * H O S P   W O R L D W ,   H O S P   H L T H   C L I N   L I S T ;   K a s s e l l   N F ,   2 0 0 6 ,   J   T H O R A C   C A R D I O V   S U R ,   V 1 3 2 ,   P 2 4 3 ,   D O I   1 0 . 1 0 1 6 / j . j t c v s . 2 0 0 6 . 0 3 . 0 4 1 ;   K o b a y a s h i   S ,   2 0 0 2 ,   N E U R O S U R G E R Y ,   V 5 1 ,   P 8 6 4 ,   D O I   1 0 . 1 2 2 7 / 0 1 . N E U . 0 0 0 0 0 2 9 0 8 9 . 3 2 3 9 1 . 2 3 ;   L A N G F I T T   T W ,   1 9 8 2 ,   J   N E U R O S U R G ,   V 5 7 ,   P 7 3 3 ,   D O I   1 0 . 3 1 7 1 / j n s . 1 9 8 2 . 5 7 . 6 . 0 7 3 3 ;   L u n d h   A ,   2 0 1 0 ,   P L O S   M E D ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p m e d . 1 0 0 0 3 5 4 ;   M e r v i s   J ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 7 ,   P 5 8 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 1 7 . 5 8 3 8 . 5 8 2 ;   * N A T   L I B   M E D ,   B I B L   S E R V   D I V   B S D   D A ;   [ A n o n y m o u s ] ,   F A C T   S H E E T   M E D L I N E ;   * N A T   L I B   M E D ,   U S   M E S H   I N D ;   N a t i o n a l   L i b r a r y   o f   M e d i c i n e   w e b s i t e ,   1 9 9 8 ,   F A C T   S H E E T   O N L   I N D ;   R a h m a n   M ,   2 0 0 5 ,   A C A D   R A D I O L ,   V 1 2 ,   P 8 2 5 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 0 5 . 0 3 . 0 6 1 ;   R a t c h e s o n   R A ,   2 0 0 5 ,   J   N E U R O S U R G ,   V 1 0 3 ,   P 5 8 5 ,   D O I   1 0 . 3 1 7 1 / j n s . 2 0 0 5 . 1 0 3 . 4 . 0 5 8 5 ;   R e u l e n   H J ,   2 0 0 9 ,   A C T A   N E U R O C H I R ,   V 1 5 1 ,   P 7 1 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 7 0 1 - 0 0 9 - 0 3 9 6 - 0 ;   S l o n e   R M ,   1 9 9 6 ,   A M   J   R O E N T G E N O L ,   V 1 6 7 ,   P 5 7 1 ;   S T O S S E L   T P ,   1 9 9 0 ,   N E W   E N G L   J   M E D ,   V 3 2 2 ,   P 7 3 9 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 0 0 3 1 5 3 2 2 1 1 0 6 ;   [ A n o n y m o u s ] ,   J   C I T   R E P ;   T o m p k i n s   R K ,   2 0 0 1 ,   A R C H   S U R G - C H I C A G O ,   V 1 3 6 ,   P 1 3 4 5 ,   D O I   1 0 . 1 0 0 1 / a r c h s u r g . 1 3 6 . 1 2 . 1 3 4 5 ;   * U S   D E P   C O M M ,   B U R   E C   A N   N A T   I N C   P R ;   W a g e r   E ,   2 0 1 0 ,   P L O S   O N E ,   V 5 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 1 3 5 9 1 ;   W a n g   M C ,   2 0 0 7 ,   S P I N E ,   V 3 2 ,   P 3 4 2 ,   D O I   1 0 . 1 0 9 7 / 0 1 . b r s . 0 0 0 0 2 5 4 1 2 0 . 2 5 4 1 1 . a e ;   W i l s o n   M P ,   2 0 0 7 ,   A C A D   E M E R G   M E D ,   V 1 4 ,   P 6 3 5 ,   D O I   1 0 . 1 1 9 7 / j . a e m . 2 0 0 7 . 0 1 . 0 2 3 ;   Z h a o   J i - Z o n g ,   2 0 0 8 ,   N e u r o s u r g e r y ,   V 6 2 ,   P 5 1 6 ,   D O I   1 0 . 1 2 2 7 / 0 1 . n e u . 0 0 0 0 3 1 6 0 2 0 . 2 8 4 2 1 . 1 8 	 3 7 	 1 4 	 1 4 	 1 	 4 	 A M E R   A S S O C   N E U R O L O G I C A L   S U R G E O N S 	 R O L L I N G   M E A D O W S 	 5 5 5 0   M E A D O W B R O O K   D R I V E ,   R O L L I N G   M E A D O W S ,   I L   6 0 0 0 8   U S A 	 0 0 2 2 - 3 0 8 5 	 	 	 J   N E U R O S U R G 	 J .   N e u r o s u r g . 	 D E C 	 2 0 1 1 	 1 1 5 	 6 	 	 	 	 	 1 2 6 2 	 1 2 7 2 	 	 1 0 . 3 1 7 1 / 2 0 1 1 . 8 . J N S 1 1 8 5 7 	 	 1 1 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 8 5 3 U H 	 W O S : 0 0 0 2 9 7 4 5 0 7 0 0 0 3 4 	 2 1 9 6 2 0 3 0 	 
 
 J 	 R o m o - F e r n a n d e z ,   L M ;   L o p e z - P u j a l t e ,   C ;   B o t e ,   V P G ;   M o y a - A n e g o n ,   F 	 	 	 	 R o m o - F e r n a n d e z ,   L u z   M . ;   L o p e z - P u j a l t e ,   C r i s t i n a ;   G u e r r e r o   B o t e ,   V i c e n t e   P . ;   M o y a - A n e g o n ,   F e l i x 	 	 	 A n a l y s i s   o f   E u r o p e ' s   s c i e n t i f i c   p r o d u c t i o n   o n   r e n e w a b l e   e n e r g i e s 	 R E N E W A B L E   E N E R G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 R e n e w a b l e   e n e r g y ;   B i b l i o m e t r i c s ;   E u r o p e ;   S t a t i s t i c s   &   n u m e r i c a l   d a t a ;   R e s e a r c h   s u p p o r t 	 B I O M A S S 	 A n   o v e r v i e w   i s   g i v e n   o f   r e s e a r c h   i n   t h e   m a j o r   c o u n t r i e s   o f   E u r o p e   i n   t h e   a r e a   o f   r e n e w a b l e   e n e r g i e s .   T h e   a n a l y s i s   u s e d   t h e   S c o p u s   ( E l s e v i e r )   d a t a b a s e   o f   s c i e n t i f i c   l i t e r a t u r e ,   c a l c u l a t i n g   b i b l i o m e t r i c   i n d i c e s   ( p r i m a r y   p r o d u c t i o n ,   a v e r a g e   c i t a t i o n s   p e r   d o c u m e n t ,   p e r c e n t a g e   v a r i a t i o n ,   S J R ,   e t c . )   f o r   t h e   g e o g r a p h i c a l   d o m a i n   o f   E u r o p e   d u r i n g   t h e   p e r i o d   2 0 0 2 - 2 0 0 7 .   T h e   a i m   o f   t h e   s t u d y   i s   t o   s u p p l e m e n t   p r e v i o u s   w o r k s   o n   t h e   s u b j e c t   w h i c h   h a v e   m o s t l y   b e e n   l i m i t e d   t o   a   p a r t i c u l a r   t y p e   o f   e n e r g y   w i t h o u t   a d d r e s s i n g   t h e   a r e a   a s   a   w h o l e ,   a s   w e l l   a s   t o   e x p a n d   t h e i r   m e t h o d o l o g i c a l   a p p r o a c h e s   i n   b o t h   t h e   d a t a   r e t r i e v a l   s t r a t e g y   a n d   t h e   c a l c u l a t i o n   o f   i n d i c e s .   T h e   r e s u l t s   s h o w   E u r o p e   t o   b e   w e l l   p o s i t i o n e d   g l o b a l l y   i n   t h i s   s c i e n t i f i c   f i e l d   -   i n   p r o d u c t i o n ,   i n   c i t a t i o n s ,   a n d   i n   i m p a c t .   ( C )   2 0 1 1   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ R o m o - F e r n a n d e z ,   L u z   M . ;   L o p e z - P u j a l t e ,   C r i s t i n a ;   G u e r r e r o   B o t e ,   V i c e n t e   P . ]   U n i v   E x t r e m a d u r a ,   D e p t   I n f o r m a t   &   C o m m u n ,   S C I m a g o   G r p ,   E - 0 6 0 7 1   B a d a j o z ,   S p a i n ;   [ M o y a - A n e g o n ,   F e l i x ]   S C I m a g o   G r p ,   I P P ,   C C H S ,   C S I C ,   M a d r i d ,   S p a i n 	 B o t e ,   V P G   ( r e p r i n t   a u t h o r ) ,   U n i v   E x t r e m a d u r a ,   D e p t   I n f o r m a t   &   C o m m u n ,   S C I m a g o   G r p ,   E - 0 6 0 7 1   B a d a j o z ,   S p a i n . 	 g u e r r e r o @ u n e x . e s 	 M o y a   A n e g o n ,   F e l i x / C - 4 0 0 4 - 2 0 0 9 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / E - 7 5 4 6 - 2 0 1 6 	 M o y a   A n e g o n ,   F e l i x / 0 0 0 0 - 0 0 0 2 - 0 2 5 5 - 8 6 2 8 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / 0 0 0 0 - 0 0 0 3 - 4 8 2 1 - 9 7 6 8 	 J u n t a   d e   E x t r e m a d u r a   -   C o n s e j e r i a   d e   E d u c a c i o n   C i e n c i a   T e c n o l o g i a ;   F o n d o   S o c i a l   E u r o p e o   [ P R I 0 6 A 2 3 3 ] ;   P l a n   N a c i o n a l   d e   I n v e s t i g a c i o n   C i e n t i f i c a ,   D e s a r r o l l o   e   I n n o v a c i o n   T e c n o l o g i c a ;   F o n d o   E u r o p e o   d e   D e s a r r o l l o   R e g i o n a l   ( F E D E R )   [ T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 1 ,   T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 2 ] ;     [ P R E 0 7 0 5 1 ] 	 T h i s   w o r k   w a s   f i n a n c e d   b y   t h e   J u n t a   d e   E x t r e m a d u r a   -   C o n s e j e r i a   d e   E d u c a c i o n   C i e n c i a   &   T e c n o l o g i a   a n d   t h e   F o n d o   S o c i a l   E u r o p e o   a s   p a r t   o f   r e s e a r c h   p r o j e c t   P R I 0 6 A 2 3 3   a n d   t h e   p r e d o c t o r a l   s t u d e n t s h i p   P R E 0 7 0 5 1 ,   a n d   b y   t h e   P l a n   N a c i o n a l   d e   I n v e s t i g a c i o n   C i e n t i f i c a ,   D e s a r r o l l o   e   I n n o v a c i o n   T e c n o l o g i c a   2 0 0 8 - 2 0 1 1   a n d   t h e   F o n d o   E u r o p e o   d e   D e s a r r o l l o   R e g i o n a l   ( F E D E R )   a s   p a r t   o f   r e s e a r c h   p r o j e c t s   T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 1   a n d   T I N 2 0 0 8 - 0 6 5 1 4 - C 0 2 - 0 2 . 	 M o y a   A n e g o n   F ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 5 3 ;   M o y a   A n e g o n   F ,   2 0 0 4 ,   I N D I C A D O R E S   B I B L I O M E ;   A r c h a m b a u l t   E ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ;   B o l l e n   J ,   2 0 0 9 ,   P L O S   O N E ,   V 4 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 6 0 2 2 ;   C e l i k t a s   M S ,   2 0 0 9 ,   R E N E W   E N E R G ,   V 3 4 ,   P 1 4 7 9 ,   D O I   1 0 . 1 0 1 6 / j . r e n e n e . 2 0 0 8 . 1 0 . 0 2 1 ;   G A R F I E L D   E ,   1 9 9 2 ,   C U R R   C O N T E N T S ,   V 2 3 ,   P 5 ;   G o n z a l e z - P e r e i r a   B ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 3 7 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 3 . 0 0 2 ;   H A N E   P ,   2 0 0 4 ,   E L S E V I E R   A N N O U N C E S   S ;   H a s s a n   E ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 1 6 - 6 ;   I L L E S C A S   C L ,   2 0 0 8 ,   E U R   J   C A N C E R ,   V 4 4 ,   P 2 2 8 ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 7 7 1 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 7 . 0 5 . 0 0 5 ;   K a j i k a w a   Y ,   2 0 0 8 ,   T E C H N O L   F O R E C A S T   S O C ,   V 7 5 ,   P 1 3 4 9 ,   D O I   1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 8 . 0 4 . 0 0 7 ;   L E Y D E S D O R F F L   M ,   2 0 1 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 1 ,   P 3 5 2 ;   P i c k e r i n g   B . ,   2 0 0 4 ,   E L S E V I E R   P R E P A R E S   S C ;   S M A L L   H ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 7 6 ;   T H O M A S   S M ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 3 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 9 2 0 ;   T s a y   M Y ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 4 2 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 8 5 - x ;   U z u n   A ,   2 0 0 2 ,   E N E R G   P O L I C Y ,   V 3 0 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 1 - 4 2 1 5 ( 0 1 ) 0 0 0 8 4 - 2 	 1 8 	 1 4 	 1 6 	 1 	 2 0 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 9 6 0 - 1 4 8 1 	 	 	 R E N E W   E N E R G 	 R e n e w .   E n e r g y 	 S E P 	 2 0 1 1 	 3 6 	 9 	 	 	 	 	 2 5 2 9 	 2 5 3 7 	 	 1 0 . 1 0 1 6 / j . r e n e n e . 2 0 1 1 . 0 2 . 0 0 1 	 	 9 	 G R E E N   &   S U S T A I N A B L E   S C I E N C E   &   T E C H N O L O G Y ;   E n e r g y   &   F u e l s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s ;   E n e r g y   &   F u e l s 	 7 6 2 U J 	 W O S : 0 0 0 2 9 0 5 0 6 7 0 0 0 2 8 	 	 
 
 J 	 F r a n c e s c h i n i ,   F ;   M a i s a n o ,   D ;   P e r o t t i ,   A ;   P r o t o ,   A 	 	 	 	 F r a n c e s c h i n i ,   F i o r e n z o ;   M a i s a n o ,   D o m e n i c o ;   P e r o t t i ,   A n n a ;   P r o t o ,   A n d r e a 	 	 	 A n a l y s i s   o f   t h e   c h - i n d e x :   a n   i n d i c a t o r   t o   e v a l u a t e   t h e   d i f f u s i o n   o f   s c i e n t i f i c   r e s e a r c h   o u t p u t   b y   c i t e r s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 H i r s c h   i n d e x ;   C i t e r s ;   C i t i n g   a u t h o r s ;   C i t a t i o n s ;   B i b l i o m e t r i c s ;   S e l f - c i t a t i o n ;   R e c u r r e n t   c i t e r s 	 H - I N D E X ;   H I R S C H - I N D E X ;   S E L F - C I T A T I O N S ;   B I B L I O M E T R I C   I N D I C A T O R S ;   I M P A C T ;   J O U R N A L S ;   S C I E N C E ;   A U T H O R 	 T h i s   p a p e r   f o c u s e s   t h e   a t t e n t i o n   o n   t h e   c h - i n d e x ,   a   r e c e n t   b i b l i o m e t r i c   i n d i c a t o r   s i m i l a r   t o   t h e   H i r s c h   ( h )   i n d e x ,   t o   e v a l u a t e   t h e   p u b l i s h e d   r e s e a r c h   o u t p u t   o f   a   s c i e n t i s t   ( A j i f e r u k e   a n d   W o l f r a m ,   P r o c e e d i n g s   o f   t h e   1 2 t h   i n t e r n a t i o n a l   c o n f e r e n c e   o f   t h e   i n t e r n a t i o n a l   s o c i e t y   f o r   s c i e n t o m e t r i c s   a n d   i n f o r m e t r i c s .   R i o   d e   J a n e i r o ,   p p .   7 9 8 - 8 0 8 ,   2 0 0 9 ) .   C h - i n d e x   i s   d e f i n e d   a s   t h e   n u m b e r   s u c h   t h a t ,   f o r   a   g e n e r a l   g r o u p   o f   s c i e n t i f i c   p u b l i c a t i o n s ,   c h   p u b l i c a t i o n s   a r e   c i t e d   b y   a t   l e a s t   c h   d i f f e r e n t   c i t e r s   w h i l e   t h e   o t h e r   p u b l i c a t i o n s   a r e   c i t e d   b y   n o   m o r e   t h a n   c h   d i f f e r e n t   c i t e r s .   T h e   b a s i c   d i f f e r e n c e   f r o m   t h e   c l a s s i c a l   h   i s   t h a t ,   a c c o r d i n g   t o   c h ,   t h e   d i f f u s i o n   o f   o n e   a u t h o r ' s   p u b l i c a t i o n   i s   e v a l u a t e d   o n   t h e   b a s i s   o f   t h e   n u m b e r   o f   d i f f e r e n t   c i t i n g   a u t h o r s   ( o r   c i t e r s ) ,   r a t h e r   t h a n   t h e   n u m b e r   o f   r e c e i v e d   c i t a t i o n s .   T h e   g o a l   o f   t h i s   w o r k   i s   t o   d i s c u s s   t h e   p r o s   a n d   c o n s   o f   c h   a n d   i d e n t i f y   i t s   c o n n e c t i o n   w i t h   h .   A   l a r g e   s a m p l e   o f   s c i e n t i s t s   i n   t h e   Q u a l i t y   E n g i n e e r i n g / M a n a g e m e n t   f i e l d   a r e   a n a l y z e d   s o   a s   t o   i n v e s t i g a t e   t h e   n o v e l   i n d i c a t o r ' s   c h a r a c t e r i s t i c s .   T h e n ,   t h e   a n a l y s i s   i s   p r e l i m i n a r i l y   e x t e n d e d   t o   o t h e r   s c i e n t i f i c   d i s c i p l i n e s .   T h e   m o s t   i m p o r t a n t   r e s u l t   i s   t h a t   c h   i s   a l m o s t   i n s e n s i t i v e   t o   s e l f - c i t a t i o n s   a n d / o r   c i t a t i o n s   m a d e   b y   r e c u r r e n t   c i t e r s ,   a n d   i t   c a n   b e   p r o f i t a b l y   u s e d   f o r   c o m p l e m e n t i n g   h . 	 [ F r a n c e s c h i n i ,   F i o r e n z o ;   M a i s a n o ,   D o m e n i c o ;   P r o t o ,   A n d r e a ]   P o l i t e c n   T o r i n o ,   D I S P E A ,   I - 1 0 1 2 9   T u r i n ,   I t a l y ;   [ P e r o t t i ,   A n n a ]   P o l i t e c n   T o r i n o ,   B i b l i o t e c a   C e n t   F a c   I n g n   2 ,   I - 1 0 1 2 9   T u r i n ,   I t a l y 	 F r a n c e s c h i n i ,   F   ( r e p r i n t   a u t h o r ) ,   P o l i t e c n   T o r i n o ,   D I S P E A ,   C o r s o   D u c a   A b r u z z i   2 4 ,   I - 1 0 1 2 9   T u r i n ,   I t a l y . 	 f i o r e n z o . f r a n c e s c h i n i @ p o l i t o . i t 	 M A I S A N O ,   D o m e n i c o / B - 4 3 0 1 - 2 0 1 0 	 M A I S A N O ,   D o m e n i c o / 0 0 0 0 - 0 0 0 2 - 8 1 5 4 - 4 4 6 9 	 	 	 A J I F E R U K E   I ,   2 0 1 0 ,   S C I E N T O M E T R   I N   P R E S S ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 1 1 9 2 - 0 0 9 - 0 1 2 7 - 6 ;   A j i f e r u k e   I . ,   2 0 0 9 ,   P   1 2   I N T   C   I N T   S O C   S ,   P 7 9 8 ;   A m i n   M . ,   2 0 0 0 ,   P E R S P E C T I V E S   P U B L I S H ,   V 1 ,   P 1 ;   A n d e r s o n   T R ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 6 ,   P 5 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 2 0 7 1 - 2 ;   A n t o n a k i s   J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 9 5 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 8 0 2 ;   B a n k s   M G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 6 - 5 ;   B a t i s t a   P D ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 9 0 - 4 ;   B i H u i   J . ,   2 0 0 7 ,   C H I N E S E   S C I   B U L L ,   V 5 2 ,   P 8 5 5 ,   D O I   [ D O I   1 0 . 1 0 0 7 / S 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ,   1 0 . 1 0 0 7 / s 1 1 4 3 4 - 0 0 7 - 0 1 4 5 - 9 ] ;   B o r n m a n n   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 1 3 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 0 9 ;   B r a u n   T . ,   1 9 8 5 ,   S C I E N T O M E T R I C   I N D I C A ;   B r a u n   T ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 6 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 7 - 4 ;   B u r r e l l   Q L ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 7 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 1 . 0 0 3 ;   B u r r e l l   Q L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 1 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 1 7 7 4 - 5 ;   C a s t i l l o   C ,   2 0 0 7 ,   L E C T   N O T E S   C O M P U T   S C ,   V 4 7 2 6 ,   P 1 0 7 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 5 4 0 - 7 5 5 3 0 - 2 _ 1 0 ;   C H A N G   K H ,   1 9 7 5 ,   3 7 1 7 5   F O M ;   * C O L L   P R E S   C O R S   S T ,   2 0 0 8 ,   C O N S   P R O P   R E L   I N D   Q U ;   C o s t a s   R ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 0 2 . 0 0 1 ;   C r o n i n   B ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 5 5 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 9 7 . a b s ;   d a   L u z   M P ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 6 4 - 9 ;   D I E K S   D ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 2 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 2 0 4 ;   E g g h e   L . ,   2 0 1 0 ,   A N N   R E V   I N F O R M   S C I   T ,   V 4 4 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   F r a n c e s c h i n i   F . ,   2 0 0 7 ,   M A N A G E M E N T   M E A S U R E M E ;   F R A N C E S C H I N I   F ,   2 0 1 0 ,   Q U A L I T Y   R E L   I N   P R E S S ,   D O I   D O I   1 0 . 1 0 0 2 / Q R E . 1 0 8 3 ;   F r a n c e s c h i n i   F ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 8 . 0 0 3 ;   F r a n c e s c h i n i   F ,   2 0 0 9 ,   Q U A L   R E L I A B   E N G   I N T ,   V 2 5 ,   P 9 8 7 ,   D O I   1 0 . 1 0 0 2 / q r e . 1 0 1 6 ;   F r a n c e s c h i n i   F ,   2 0 1 0 ,   E U R   J   O P E R   R E S ,   V 2 0 3 ,   P 4 9 4 ,   D O I   1 0 . 1 0 1 6 / j . e j o r . 2 0 0 9 . 0 8 . 0 0 1 ;   F r a n d s e n   T F ,   2 0 0 7 ,   J   I N F O R M E T R ,   V 1 ,   P 4 7 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 6 . 0 9 . 0 0 2 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G l a n z e l   W ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 2 6 3 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 2 . 8 ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 3 9 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 1 7 . 1 3 3 4 8 . b 1 ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G l a n z e l   W . ,   2 0 0 6 ,   S C I   F O C U S ,   V 1 ,   P 1 0 ;   G O F F M A N   W ,   1 9 6 4 ,   N A T U R E ,   V 2 0 4 ,   P 2 2 5 ,   D O I   1 0 . 1 0 3 8 / 2 0 4 2 2 5 a 0 ;   H a r z i n g   A .   W . ,   2 0 0 7 ,   R E F L E C T I O N S   H   I N D E X ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   H i r s c h   J E ,   2 0 0 7 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 4 ,   P 1 9 1 9 3 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 7 0 7 9 6 2 1 0 4 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K A T S A R O S   D ,   2 0 0 7 ,   P   W O R K S H   S O C   A S P   W E B ;   K e l l y   C D ,   2 0 0 6 ,   T R E N D S   E C O L   E V O L ,   V 2 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 6 . 0 1 . 0 0 5 ;   L E H M A N N   S ,   2 0 0 5 ,   M E A S U R E S   M I S M E A S U R E S ;   L e h m a n n   S ,   2 0 0 6 ,   N A T U R E ,   V 4 4 4 ,   P 1 0 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 4 1 0 0 3 a ;   M e h o   L I ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 1 0 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 6 7 7 ;   M i n g e r s   J ,   2 0 0 9 ,   J   O P E R   R E S   S O C ,   V 6 0 ,   P 1 1 4 3 ,   D O I   1 0 . 1 0 5 7 / j o r s . 2 0 0 8 . 9 4 ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   O r b a y   M . ,   2 0 0 7 ,   B I B L I O S ,   V 2 7 ,   P 1 ;   R o u s s e a u   R . ,   2 0 0 6 ,   N E W   D E V   R E L A T E D   H I R S ;   S a a d   G ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 2 - 9 ;   S C H R E I B E R   M ,   2 0 0 7 ,   E P L - E U R O P H Y S   L E T T ,   V 7 8 ,   D O I   D O I   1 0 . 1 2 0 9 / 0 2 9 5 - 5 0 7 5 / 7 8 / 3 0 0 0 2 ;   S C H R E I B E R   M ,   2 0 0 8 ,   M O D I F I C A T I O N   H   I N D E X ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   S u a r e z - B a l s e i r o   C ,   2 0 0 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 5 ,   P 4 6 9 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 9 . 0 3 . 0 0 1 ;   * T H O M S   R E U T ,   2 0 1 0 ,   2 0 0 8   J   C I T   R E P   S C I   E ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   W e n d l   M C ,   2 0 0 7 ,   N A T U R E ,   V 4 4 9 ,   P 4 0 3 ,   D O I   1 0 . 1 0 3 8 / 4 4 9 4 0 3 b ;   H a t t e n d o r f   W e s t n e y   L . C . ,   1 9 9 8 ,   J   A S S   H I S T   C O M P U T I N G ,   V 1 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   M A T H   S O C   S C I ,   V 5 6 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t h s o c s c i . 2 0 0 8 . 0 3 . 0 0 1 ;   [ A n o n y m o u s ] ,   2 0 0 9 ,   N A T   C E L L   B I O L ,   V 1 1 ,   P 1 ,   D O I   1 0 . 1 0 3 8 / n c b 0 1 0 9 - 1 	 5 8 	 1 4 	 1 5 	 4 	 2 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 O C T 	 2 0 1 0 	 8 5 	 1 	 	 	 	 	 2 0 3 	 2 1 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 1 6 5 - 0 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 3 9 C C 	 W O S : 0 0 0 2 8 0 9 4 7 4 0 0 0 1 6 	 	 
 
 J 	 F u ,   L D ;   A l i f e r i s ,   C F 	 	 	 	 F u ,   L a w r e n c e   D . ;   A l i f e r i s ,   C o n s t a n t i n   F . 	 	 	 U s i n g   c o n t e n t - b a s e d   a n d   b i b l i o m e t r i c   f e a t u r e s   f o r   m a c h i n e   l e a r n i n g   m o d e l s   t o   p r e d i c t   c i t a t i o n   c o u n t s   i n   t h e   b i o m e d i c a l   l i t e r a t u r e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   M a c h i n e   l e a r n i n g ;   I n f o r m a t i o n   r e t r i e v a l 	 T E X T   C A T E G O R I Z A T I O N 	 T h e   m o s t   p o p u l a r   m e t h o d   f o r   j u d g i n g   t h e   i m p a c t   o f   b i o m e d i c a l   a r t i c l e s   i s   c i t a t i o n   c o u n t   w h i c h   i s   t h e   n u m b e r   o f   c i t a t i o n s   r e c e i v e d .   T h e   m o s t   s i g n i f i c a n t   l i m i t a t i o n   o f   c i t a t i o n   c o u n t   i s   t h a t   i t   c a n n o t   e v a l u a t e   a r t i c l e s   a t   t h e   t i m e   o f   p u b l i c a t i o n   s i n c e   c i t a t i o n s   a c c u m u l a t e   o v e r   t i m e .   T h i s   w o r k   p r e s e n t s   c o m p u t e r   m o d e l s   t h a t   a c c u r a t e l y   p r e d i c t   c i t a t i o n   c o u n t s   o f   b i o m e d i c a l   p u b l i c a t i o n s   w i t h i n   a   d e e p   h o r i z o n   o f   1 0   y e a r s   u s i n g   o n l y   p r e d i c t i v e   i n f o r m a t i o n   a v a i l a b l e   a t   p u b l i c a t i o n   t i m e .   O u r   e x p e r i m e n t s   s h o w   t h a t   i t   i s   i n d e e d   f e a s i b l e   t o   a c c u r a t e l y   p r e d i c t   f u t u r e   c i t a t i o n   c o u n t s   w i t h   a   m i x t u r e   o f   c o n t e n t - b a s e d   a n d   b i b l i o m e t r i c   f e a t u r e s   u s i n g   m a c h i n e   l e a r n i n g   m e t h o d s .   T h e   m o d e l s   p a v e   t h e   w a y   f o r   p r a c t i c a l   p r e d i c t i o n   o f   t h e   l o n g - t e r m   i m p a c t   o f   p u b l i c a t i o n ,   a n d   t h e i r   s t a t i s t i c a l   a n a l y s i s   p r o v i d e s   g r e a t e r   i n s i g h t   i n t o   c i t a t i o n   b e h a v i o r . 	 [ F u ,   L a w r e n c e   D . ;   A l i f e r i s ,   C o n s t a n t i n   F . ]   N Y U   M e d   C t r ,   C t r   H l t h   I n f o r m a t   &   B i o i n f o r m a t ,   N e w   Y o r k ,   N Y   1 0 0 1 6   U S A 	 F u ,   L D   ( r e p r i n t   a u t h o r ) ,   N Y U   M e d   C t r ,   C t r   H l t h   I n f o r m a t   &   B i o i n f o r m a t ,   3 3 3   E   3 8 t h   S t , 6 t h   F l o o r ,   N e w   Y o r k ,   N Y   1 0 0 1 6   U S A . 	 l a w r e n c e . f u @ n y u m c . o r g 	 	 	 	 	 A L I F E R I S   C ,   2 0 0 9 ,   J M L R   I N   P R E S S ;   A l i f e r i s   C F ,   2 0 0 6 ,   C A N C   I N F O R M ,   V 2 ,   P 1 3 3 ;   A p h i n y a n a p h o n g s   Y ,   2 0 0 5 ,   J   A M   M E D   I N F O R M   A S S N ,   V 1 2 ,   P 2 0 7 ,   D O I   1 0 . 1 1 9 7 / j a m i a . M 1 6 4 1 ;   B u r g e s   C .   J .   C . ,   1 9 9 8 ,   D A T A   M I N   K N O W L   D I S C ,   V 2 ,   P 1 1 0 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 0 9 7 1 5 9 2 3 5 5 5 ;   F e i t e l s o n   D G ,   2 0 0 4 ,   J   D O C ,   V 6 0 ,   P 4 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 4 1 0 5 1 6 6 4 4 ;   F U   L ,   2 0 0 8 ,   A M I A   S ;   G a r f i e l d   E . ,   1 9 6 2 ,   E S S A Y S   I N F O R M A T I O N   S ,   V 1 ,   P 8 4 ;   G e t o o r   L . ,   2 0 0 3 ,   S I G K D D   E X P L O R A T I O N S ,   V 5 ,   P 8 4 ;   G r o s s   P   L ,   1 9 2 7 ,   S c i e n c e ,   V 6 6 ,   P 3 8 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 6 6 . 1 7 1 3 . 3 8 5 ;   L e o p o l d   E ,   2 0 0 2 ,   M A C H   L E A R N ,   V 4 6 ,   P 4 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 4 9 1 4 1 9 6 3 5 ;   L O K K E R   C ,   2 0 0 8 ,   B M J ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   P h e l a n   T J ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 5 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 7 2 ;   P O R T E R   M F ,   1 9 8 0 ,   P R O G R A M - A U T O M   L I B R ,   V 1 4 ,   P 1 3 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 4 6 8 1 4 ;   R A T T I G A N   M ,   2 0 0 3 ,   S I G K D D   E X P L O R A T I O N S ,   V 5 ,   P 4 1 ;   S e g l e n   P O ,   1 9 9 8 ,   A C T A   O R T H O P   S C A N D ,   V 6 9 ,   P 2 2 4 ,   D O I   1 0 . 3 1 0 9 / 1 7 4 5 3 6 7 9 8 0 9 0 0 0 9 2 0 	 1 6 	 1 4 	 1 4 	 4 	 2 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 O C T 	 2 0 1 0 	 8 5 	 1 	 	 	 	 	 2 5 7 	 2 7 0 	 	 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 3 9 C C 	 W O S : 0 0 0 2 8 0 9 4 7 4 0 0 0 1 9 	 	 
 
 J 	 M a r x ,   W ;   B o r n m a n n ,   L 	 	 	 	 M a r x ,   W e r n e r ;   B o r n m a n n ,   L u t z 	 	 	 H o w   a c c u r a t e l y   d o e s   T h o m a s   K u h n ' s   m o d e l   o f   p a r a d i g m   c h a n g e   d e s c r i b e   t h e   t r a n s i t i o n   f r o m   t h e   s t a t i c   v i e w   o f   t h e   u n i v e r s e   t o   t h e   b i g   b a n g   t h e o r y   i n   c o s m o l o g y ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 T h o m a s   K u h n ;   P a r a d i g m ;   H i s t o r i c a l   r e c o n s t r u c t i o n ;   C o s m o l o g y ;   B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s 	 E X T R A - G A L A C T I C   N E B U L A E ;   C I T A T I O N   C O U N T S ;   S C I E N T I F I C   D I S C O V E R Y ;   S C I E N C E ;   D I S T R I B U T I O N S ;   R E L A T I V I T Y ;   C U R V A T U R E ;   C H E M I S T R Y ;   R A D I A T I O N ;   V E L O C I T Y 	 U p   t o   t h e   1 9 6 0 s   t h e   p r e v a l e n t   v i e w   o f   s c i e n c e   w a s   t h a t   i t   w a s   a   s t e p - b y - s t e p   u n d e r t a k i n g   i n   s l o w ,   p i e c e m e a l   p r o g r e s s i o n   t o w a r d s   t r u t h .   T h o m a s   K u h n   a r g u e d   a g a i n s t   t h i s   v i e w   a n d   c l a i m e d   t h a t   s c i e n c e   a l w a y s   f o l l o w s   t h i s   p a t t e r n :   a f t e r   a   p h a s e   o f   " n o r m a l "   s c i e n c e ,   a   s c i e n t i f i c   " r e v o l u t i o n "   o c c u r s .   T a k i n g   a s   a   c a s e   s t u d y   t h e   t r a n s i t i o n   f r o m   t h e   s t a t i c   v i e w   o f   t h e   u n i v e r s e   t o   t h e   B i g   B a n g   t h e o r y   i n   c o s m o l o g y ,   w e   a p p r a i s e d   K u h n ' s   t h e o r e t i c a l   a p p r o a c h   b y   c o n d u c t i n g   a   h i s t o r i c a l   r e c o n s t r u c t i o n   a n d   a   c i t a t i o n   a n a l y s i s .   A s   t h e   r e s u l t s   s h o w ,   t h e   t r a n s i t i o n   i n   c o s m o l o g y   c a n   b e   l i n k e d   t o   m a n y   d i f f e r e n t   p e r s o n s ,   p u b l i c a t i o n s ,   a n d   p o i n t s   i n   t i m e .   T h e   f i n d i n g s   i n d i c a t e   t h a t   t h e r e   w a s   n o t   o n e   ( s h o r t   t e r m )   s c i e n t i f i c   r e v o l u t i o n   i n   c o s m o l o g y   b u t   i n s t e a d   a   p a r a d i g m   s h i f t   t h a t   p r o g r e s s e d   a s   a   s l o w ,   p i e c e m e a l   p r o c e s s . 	 [ B o r n m a n n ,   L u t z ]   E T H ,   C H - 8 0 9 2   Z u r i c h ,   S w i t z e r l a n d ;   [ M a r x ,   W e r n e r ]   M a x   P l a n c k   I n s t   S o l i d   S t a t e   R e s ,   D - 7 0 5 6 9   S t u t t g a r t ,   G e r m a n y 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   E T H ,   Z a h r i n g e r s t r   2 4 ,   C H - 8 0 9 2   Z u r i c h ,   S w i t z e r l a n d . 	 w . m a r x @ f k f . m p g . d e ;   b o r n m a n n @ g e s s . e t h z . c h 	 M a r x ,   W e r n e r / G - 6 8 0 1 - 2 0 1 2 ;   B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 	 M a r x ,   W e r n e r / 0 0 0 0 - 0 0 0 2 - 1 7 6 3 - 5 7 5 3 ;   B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 	 	 	 A b t   H A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 0 3 1 8 3 7 9 ;   A B T   H A ,   1 9 9 5 ,   A S T R O P H Y S   J ,   V 4 5 5 ,   P 4 0 7 ,   D O I   1 0 . 1 0 8 6 / 1 7 6 5 8 7 ;   A L P H E R   R A ,   1 9 4 9 ,   P H Y S   R E V ,   V 7 5 ,   P 1 0 8 9 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v . 7 5 . 1 0 8 9 ;   A n d e r s e n   H ,   2 0 0 9 ,   S C I E N C E ,   V 3 2 3 ,   P 3 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 2 3 . 5 9 1 0 . 3 7 ;   B O N D I   H ,   1 9 4 8 ,   M O N   N O T   R   A S T R O N   S O C ,   V 1 0 8 ,   P 2 5 2 ;   B o r n m a n n   L . ,   2 0 0 8 ,   E U R O P E A N   S C I   E D I T I N G ,   V 3 4 ,   P 3 5 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 6 6 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 7 6 ;   C a r d o n a   M . ,   2 0 0 8 ,   N U O V O   S A G G I A T O R E ,   V 2 4 ,   P 3 9 ;   C h a r l t o n   B G ,   2 0 0 7 ,   M E D   H Y P O T H E S E S ,   V 6 9 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . m e h y . 2 0 0 7 . 0 1 . 0 0 1 ;   C h e n   Y ,   2 0 0 9 ,   I E T   C O M M U N ,   V 3 ,   P 2 0 9 ,   D O I   1 0 . 1 0 4 9 / i e t - c o m : 2 0 0 8 0 0 6 4 ;   C o l e   S . ,   1 9 9 2 ,   M A K I N G   S C I   N A T U R E   S O ;   C R A N E   D ,   1 9 8 0 ,   S O C   S T U D   S C I ,   V 1 0 ,   P 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 8 0 0 1 0 0 0 1 0 2 ;   D a v i s   P M ,   2 0 0 9 ,   L E A R N   P U B L ,   V 2 2 ,   P 5 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 8 X 3 7 8 7 1 2 ;   d e   S i t t e r   W ,   1 9 1 7 ,   M O N   N O T   R   A S T R O N   S O C ,   V 7 8 ,   P 0 0 0 3 ;   D E W I T T   T W ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 4 8 ;   D I C K E   R H ,   1 9 6 5 ,   A S T R O P H Y S   J ,   V 1 4 2 ,   P 4 1 4 ,   D O I   1 0 . 1 0 8 6 / 1 4 8 3 0 6 ;   E i n s t e i n   A ,   1 9 1 5 ,   S I T Z B E R   K   P R E U S S   A K A ,   P 7 7 8 ;   E i n s t e i n   A ,   1 9 0 5 ,   A N N   P H Y S - B E R L I N ,   V 1 7 ,   P 1 3 2 ;   E i n s t e i n   A ,   1 9 1 6 ,   A N N   P H Y S - B E R L I N ,   V 4 9 ,   P 7 6 9 ;   E i n s t e i n   A ,   1 9 0 5 ,   A N N   P H Y S - B E R L I N ,   V 1 7 ,   P 8 9 1 ;   E i n s t e i n   A . ,   1 9 1 7 ,   S I T Z B E R   P R E U S S   A K A D ,   V 1 ,   p [ 1 4 2 ,   3 6 1 ] ;   F e i s t   G .   J . ,   2 0 0 6 ,   P S Y C H O L   S C I   O R I G I N S ;   F r i e d m a n   A ,   1 9 2 2 ,   Z   P H Y S ,   V 1 0 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 3 3 2 5 8 0 ;   F r i e d m a n n   A ,   1 9 2 4 ,   Z   P H Y S ,   V 2 1 ,   P 3 2 6 ,   D O I   1 0 . 1 0 0 7 / B F 0 1 3 2 8 2 8 0 ;   G a r f i e l d   E . ,   1 9 6 4 ,   U S E   C I T A T I O N   D A T A   W R ;   G i e r e   R .   N . ,   2 0 0 6 ,   S C I   P E R S P E C T I V I S M ;   G i e r y n   T .   F . ,   1 9 9 5 ,   H D B   S C I   T E C H N O L O G Y   S ,   P 3 9 3 ;   G U T H   A H ,   1 9 8 1 ,   P H Y S   R E V   D ,   V 2 3 ,   P 3 4 7 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v D . 2 3 . 3 4 7 ;   H e n t s c h e l   K l a u s ,   2 0 0 5 ,   N A T U R W I S S E N S C H A F T L I C ,   V 5 8 ,   P 3 6 3 ;   H e n t s c h e l   K l a u s ,   2 0 0 5 ,   N A T U R W I S S E N S C H A F T L I C ,   V 5 8 ,   P 3 1 1 ;   H E N T S C H E L   K ,   2 0 0 6 ,   P H Y S   P H I L O S ,   V 1 ;   H e r t z s p r u n g   E . ,   1 9 1 3 ,   A S T R O N   N A C H R ,   V 1 9 6 ,   P 2 0 1 ;   H O Y L E   F ,   1 9 4 8 ,   M O N   N O T   R   A S T R O N   S O C ,   V 1 0 8 ,   P 3 7 2 ;   H O Y L E   F ,   1 9 4 9 ,   M O N   N O T   R   A S T R O N   S O C ,   V 1 0 9 ,   P 3 6 5 ;   H u b b l e   E ,   1 9 2 5 ,   A S T R O P H Y S   J ,   V 6 2 ,   P 4 0 9 ,   D O I   1 0 . 1 0 8 6 / 1 4 2 9 4 3 ;   H u b b l e   E ,   1 9 3 1 ,   A S T R O P H Y S   J ,   V 7 4 ,   P 4 3 ,   D O I   1 0 . 1 0 8 6 / 1 4 3 3 2 3 ;   H u b b l e   E ,   1 9 2 6 ,   A S T R O P H Y S   J ,   V 6 4 ,   P 3 2 1 ,   D O I   1 0 . 1 0 8 6 / 1 4 3 0 1 8 ;   H u b b l e   E ,   1 9 2 9 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 5 ,   P 1 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 5 . 3 . 1 6 8 ;   J a n s k y   K G ,   1 9 3 3 ,   N A T U R E ,   V 1 3 2 ,   P 6 6 ,   D O I   1 0 . 1 0 3 8 / 1 3 2 0 6 6 a 0 ;   K U H N   T S ,   1 9 6 2 ,   S C I E N C E ,   V 1 3 6 ,   P 7 6 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 3 6 . 3 5 1 8 . 7 6 0 ;   K u h n   T . S . ,   1 9 6 2 ,   S T R U C T U R E   S C I   R E V O L U ;   K u u k k a n e n   J M ,   2 0 0 7 ,   S T U D   H I S T   P H I L O S   S C I ,   V 3 8 ,   P 5 5 5 ,   D O I   1 0 . 1 0 1 6 / j . s h p s a . 2 0 0 7 . 0 6 . 0 1 1 ;   L e a v i t t   H .   S . ,   1 9 1 2 ,   H A R V A R D   C O L L   O B S   C I R ,   V 1 7 3 ,   P 1 ;   L e d f o r d   H ,   2 0 0 8 ,   N A T U R E ,   V 4 5 5 ,   P 1 0 2 3 ,   D O I   1 0 . 1 0 3 8 / 4 5 5 1 0 2 3 a ;   L e m a i t r e   G ,   1 9 3 1 ,   N A T U R E ,   V 1 2 7 ,   P 7 0 6 ,   D O I   1 0 . 1 0 3 8 / 1 2 7 7 0 6 b 0 ;   L e m a i t r e   G . ,   1 9 2 7 ,   A N N A L E S   S O C I E T E   S C   A ,   V 4 7 ,   P 4 9 ;   L o k k e r   C ,   2 0 0 8 ,   B R I T   M E D   J ,   V 3 3 6 ,   P 6 5 5 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 9 4 8 2 . 5 2 6 7 1 3 . B E ;   L U C I O A R I A S   D ,   2 0 0 9 ,   J   I N F O R M E T R I C S ,   V 3 ;   L u n d m a r k   K . ,   1 9 2 4 ,   M o n t h l y   N o t i c e s   o f   t h e   R o y a l   A s t r o n o m i c a l   S o c i e t y ,   V 8 4 ,   P 7 4 7 ;   M a r x   W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 1 8 2 4 - 2 ;   M a s t e r m a n   M a r g a r e t ,   1 9 7 0 ,   C R I T I C I S M   G R O W T H   K N O ,   V 4 ,   P 5 9 ,   D O I   D O I   1 0 . 1 0 2 9 / J D 0 9 4 I D 1 3 P 1 6 3 4 3 ;   d e   L u c a s   J V M ,   2 0 0 9 ,   S T U D   H I S T   P H I L O S   S C I ,   V 4 0 ,   P 1 7 5 ,   D O I   1 0 . 1 0 1 6 / j . s h p s a . 2 0 0 9 . 0 3 . 0 0 2 ;   M E R T O N   R K ,   1 9 5 7 ,   A M   S O C I O L   R E V ,   V 2 2 ,   P 6 3 5 ,   D O I   1 0 . 2 3 0 7 / 2 0 8 9 1 9 3 ;   M e r t o n   R .   K . ,   1 9 6 5 ,   S H O U L D E R S   G I A N T S   S H A ;   M e r t o n   R .   K . ,   1 9 6 8 ,   S O C I A L   T H E O R Y   S O C I A L ;   M O R A V C S I K   M J ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 6 8 ;   M o r r i s   S A ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 0 8 ;   N u s s b a u m e r   H ,   2 0 0 9 ,   D I S C O V E R I N G   T H E   E X P A N D I N G   U N I V E R S E ,   P 1 ;   P E N Z I A S   A A ,   1 9 6 5 ,   A S T R O P H Y S   J ,   V 1 4 2 ,   P 4 1 9 ,   D O I   1 0 . 1 0 8 6 / 1 4 8 3 0 7 ;   d e   S o l l a   P r i c e   D e r e k   J . ,   1 9 6 5 ,   L I T T L E   S C I   B I G   S C I ;   P R I E S T E R   W ,   1 9 8 7 ,   S T E R N E   W E L T R A U M ,   V 7 ,   P 3 7 6 ;   R a d i c c h i   F ,   2 0 0 8 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 5 ,   P 1 7 2 6 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 8 0 6 9 7 7 1 0 5 ;   R Y L E   M ,   1 9 6 1 ,   M O N   N O T   R   A S T R O N   S O C ,   V 1 2 2 ,   P 3 4 9 ;   S h i m p   C P ,   2 0 0 4 ,   J   E X P   A N A L   B E H A V ,   V 8 2 ,   P 1 0 3 ,   D O I   1 0 . 1 9 0 1 / j e a b . 2 0 0 4 . 8 2 - 1 0 3 ;   S I L K   J ,   1 9 8 0 ,   B I G   B A N G   C R E A T I O N   E V ;   S i n g h   S i m o n ,   2 0 0 4 ,   B I G   B A N G   M O S T   I M P O R T ;   S l i p h e r   V . M . ,   1 9 1 7 ,   P r o c e e d i n g s   o f   t h e   A m e r i c a n   P h i l o s o p h i c a l   S o c i e t y ,   V 5 6 ,   P 4 0 3 ;   S l i p h e r   V .   M . ,   1 9 1 2 ,   L O W E L L   O B S E R V A T O R Y   B ,   V 5 8 ,   P 5 6 ;   S M I T H   L C ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 8 3 ;   S m o o t   G .   F . ,   1 9 9 2 ,   A P J ,   V 3 9 6 ,   p L 1 ;   T a b a h   A N ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 2 4 9 ;   V a n   R a a n   A .   F .   J . ,   2 0 0 5 ,   M E A S U R E M E N T ,   V 3 ,   P 1 ,   D O I   D O I   1 0 . 1 2 0 7 / S 1 5 3 6 6 3 5 9 M E A 0 3 0 1 _ 1 ;   W I R T Z   C ,   1 9 2 1 ,   A S T R O N O M I S C H E   N A C H R I ,   V 2 1 5 ,   P 3 5 0 ;   W i r t z   C . ,   1 9 2 4 ,   A S T R O N O M I S C H E   N A C H R I ,   V 2 2 2 ,   P 2 2 ;   W R I G H T   E L ,   1 9 9 2 ,   A S T R O P H Y S   J ,   V 3 9 6 ,   p L 1 3 ,   D O I   1 0 . 1 0 8 6 / 1 8 6 5 0 6 ;   Z i m a n   J . ,   2 0 0 0 ,   R E A L   S C I 	 7 7 	 1 4 	 1 4 	 4 	 2 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A U G 	 2 0 1 0 	 8 4 	 2 	 	 	 	 	 4 4 1 	 4 6 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 1 0 7 - x 	 	 2 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 6 0 9 Y T 	 W O S : 0 0 0 2 7 8 6 9 5 5 0 0 0 1 5 	 	 
 
 J 	 S t r o t m a n n ,   A ;   Z h a o ,   D Z 	 	 	 	 S t r o t m a n n ,   A n d r e a s ;   Z h a o ,   D a n g z h i 	 	 	 C o m b i n i n g   c o m m e r c i a l   c i t a t i o n   i n d e x e s   a n d   o p e n - a c c e s s   b i b l i o g r a p h i c   d a t a b a s e s   t o   d e l i m i t   h i g h l y   i n t e r d i s c i p l i n a r y   r e s e a r c h   f i e l d s   f o r   c i t a t i o n   a n a l y s i s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 F i e l d   d e l i m i t a t i o n ;   C i t a t i o n   a n a l y s i s ;   B i b l i o m e t r i c s ;   I n f o r m a t i o n   s c i e n c e ;   M u l t i p l e   d a t a b a s e s 	 M E D L I N E ;   A U T H O R 	 F i e l d   d e l i m i t a t i o n   f o r   c i t a t i o n   a n a l y s i s ,   t h e   p r o c e s s   o f   c o l l e c t i n g   a   s e t   o f   b i b l i o g r a p h i c   r e c o r d s   w i t h   c i t e d - r e f e r e n c e   i n f o r m a t i o n   o f   r e s e a r c h   a r t i c l e s   t h a t   r e p r e s e n t   a   r e s e a r c h   f i e l d ,   i s   t h e   f i r s t   s t e p   i n   a n y   c i t a t i o n   a n a l y s i s   s t u d y   o f   a   r e s e a r c h   f i e l d .   D u e   t o   a   n u m b e r   o f   l i m i t a t i o n s ,   t h e   c o m m e r c i a l   c i t a t i o n   i n d e x e s   h a v e   l o n g   m a d e   i t   d i f f i c u l t   t o   o b t a i n   a   c o m p r e h e n s i v e   d a t a s e t   i n   t h i s   s t e p .   T h i s   p a p e r   d i s c u s s e s   s o m e   o f   t h e   l i m i t a t i o n s   i m p o s e d   b y   t h e s e   d a t a b a s e s ,   a n d   r e p o r t s   o n   a   m e t h o d   t o   o v e r c o m e   s o m e   o f   t h e s e   l i m i t a t i o n s   t h a t   w a s   u s e d   w i t h   g r e a t   s u c c e s s   t o   d e l i m i t   a n   e m e r g i n g   a n d   h i g h l y   i n t e r d i s c i p l i n a r y   b i o m e d i c a l   r e s e a r c h   f i e l d ,   s t e m   c e l l   r e s e a r c h .   T h e   r e s u l t i n g   f i e l d   d e l i m i t a t i o n   a n d   t h e   c i t a t i o n   n e t w o r k   i t   i n d u c e s   a r e   b o t h   e x c e l l e n t .   T h i s   m u l t i - d a t a b a s e   m e t h o d   r e l i e s   o n   u s i n g   P u b M e d   f o r   t h e   a c t u a l   f i e l d   d e l i m i t a t i o n ,   a n d   o n   m a p p i n g   b e t w e e n   S c o p u s   a n d   P u b M e d   r e c o r d s   f o r   o b t a i n i n g   c o m p r e h e n s i v e   i n f o r m a t i o n   a b o u t   c i t e d - r e f e r e n c e s   c o n t a i n e d   i n   t h e   r e s u l t i n g   l i t e r a t u r e .   T h i s   m e t h o d   p r o v i d e s   h i g h - q u a l i t y   f i e l d   d e l i m i t a t i o n s   f o r   c i t a t i o n   s t u d i e s   t h a t   c a n   b e   u s e d   a s   b e n c h m a r k s   f o r   s t u d i e s   o f   t h e   i m p a c t   o f   d a t a   c o l l e c t i o n   b i a s e s   o n   c i t a t i o n   m e t r i c s ,   a n d   m a y   h e l p   i m p r o v e   c o n f i d e n c e   i n   r e s u l t s   o f   s c i e n t o m e t r i c   s t u d i e s   f o r   a n   i n c r e a s e d   i m p a c t   o f   s c i e n t o m e t r i c s   o n   r e s e a r c h   p o l i c y .   ( C )   2 0 1 0   P u b l i s h e d   b y   E l s e v i e r   L t d . 	 [ S t r o t m a n n ,   A n d r e a s ]   U n i v   A l b e r t a ,   S c h   P u b l   H l t h ,   E d m o n t o n ,   A B   T 6 G   2 V 2 ,   C a n a d a ;   [ Z h a o ,   D a n g z h i ]   U n i v   A l b e r t a ,   S c h   L i b   &   I n f o r m a t   S t u d i e s ,   E d m o n t o n ,   A B   T 6 G   2 J 4 ,   C a n a d a 	 S t r o t m a n n ,   A   ( r e p r i n t   a u t h o r ) ,   U n i v   A l b e r t a ,   S c h   P u b l   H l t h ,   1 3 - 1 0 3   C l i n   S c i   B l d g , 1 1 3 5 0 - 8 3   A v e ,   E d m o n t o n ,   A B   T 6 G   2 V 2 ,   C a n a d a . 	 a n d r e a s . s t r o t m a n n @ u a l b e r t a . c a ;   d z h a o @ u a l b e r t a . c a 	 	 S t r o t m a n n ,   A n d r e a s / 0 0 0 0 - 0 0 0 2 - 0 6 7 9 - 6 4 9 8 	 	 	 B A S S E C O U L A R D   E ,   2 0 0 7 ,   P   1 1   I N T   C   I N T   S O C   S ;   F U N K   M E ,   1 9 8 3 ,   B   M E D   L I B R   A S S O C ,   V 7 1 ,   P 1 7 6 ;   H a r z i n g   A .   W .   K . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 6 1 ,   D O I   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 7 6 ;   I n g w e r s e n   P ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 3 ) 4 8 : 3 < 2 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - 0 ;   P e r s s o n   O ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 3 3 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 3 4 0 0 9 4 2 8 ;   Q i n   J ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 6 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 6 6 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - Z ;   S C H N E I D E R   J W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 0 ,   P 1 0 5 ;   S T R O T M A N N   A ,   2 0 0 9 ,   P   1 2   I N T   C   I N T   S O C   S ,   P 6 3 1 ;   S u o m e l a   B P ,   2 0 0 5 ,   B M C   B I O I N F O R M A T I C S ,   V 6 ,   D O I   1 0 . 1 1 8 6 / 1 4 7 1 - 2 1 0 5 - 6 - 7 5 ;   Z h a o   D Z ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 2 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 4 ;   Z i t t   M ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 5 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 6 	 1 1 	 1 4 	 1 5 	 4 	 3 9 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 A P R 	 2 0 1 0 	 4 	 2 	 	 	 	 	 1 9 4 	 2 0 0 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 1 2 . 0 0 1 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 5 6 8 I I 	 W O S : 0 0 0 2 7 5 5 1 5 5 0 0 0 0 8 	 	 
 
 J 	 T o d d ,   P A ;   G u e s t ,   J R ;   L u ,   J X ;   C h o u ,   L M 	 	 	 	 T o d d ,   P e t e r   A . ;   G u e s t ,   J a m e s   R . ;   L u ,   J u n x i u ;   C h o u ,   L o k e   M i n g 	 	 	 O n e   i n   f o u r   c i t a t i o n s   i n   m a r i n e   b i o l o g y   p a p e r s   i s   i n a p p r o p r i a t e 	 M A R I N E   E C O L O G Y   P R O G R E S S   S E R I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n ;   E c o l o g y ;   I m p a c t   f a c t o r ;   M a r i n e   b i o l o g y ;   P e r f o r m a n c e   i n d i c a t o r s 	 Q U O T A T I O N   A C C U R A C Y ;   I M P A C T   F A C T O R S ;   S E L F - C I T A T I O N ;   J O U R N A L S ;   I N D I C A T O R S ;   R E F E R E N C E S ;   S C I E N C E ;   B I A S 	 C i t i n g   s o u r c e s   t h a t   d o   n o t   s u p p o r t   t h e   a s s e r t i o n   b e i n g   m a d e   c a n   m i s i n f o r m   r e a d e r s ,   p e r p e t u a t e   m i s t a k e s   a n d   d e n y   c r e d i t   t o   t h e   r e s e a r c h e r s   w h o   s h o u l d   h a v e   b e e n   a c k n o w l e d g e d .   T o   q u a n t i f y   c i t a t i o n   f i d e l i t y   i n   m a r i n e   b i o l o g y ,   w e   r e t r i e v e d   1 9 8   p a p e r s   f r o m   2   r e c e n t   i s s u e s   o f   3 3   m a r i n e   b i o l o g y   j o u r n a l s .   F r o m   e a c h   p a p e r   w e   r a n d o m l y   s e l e c t e d   1   c i t a t i o n ,   r e c o v e r e d   t h e   s o u r c e   m a t e r i a l ,   a n d   e v a l u a t e d   i t s   a p p r o p r i a t e n e s s .   W e   d i s c o v e r e d   t h a t   t h e   a s s e r t i o n   w a s   ' c l e a r l y   s u p p o r t e d '   b y   t h e   c i t a t i o n   i n   o n l y   7 5 . 8 %   o f   c a s e s ,   t h e   s u p p o r t   w a s   ' a m b i g u o u s '   i n   1 0 . 6 %   o f   c a s e s   a n d   t h e   c i t a t i o n   o f f e r e d   ' n o   s u p p o r t '   t o   t h e   o r i g i n a l   s t a t e m e n t   i n   6 . 0 %   o f   c a s e s .   T h e   r e m a i n i n g   7 . 6 %   o f   c a s e s   w e r e   c l a s s i f i e d   a s   ' e m p t y '   ( c i t a t i o n s   t o   s e c o n d a r y   s o u r c e s ) .   W e   f o u n d   n o   r e l a t i o n s h i p   b e t w e e n   c i t a t i o n   a p p r o p r i a t e n e s s   a n d   t h e   p o s i t i o n   o f   t h e   a s s e r t i o n   i n   t h e   p a p e r ,   n u m b e r   o f   a u t h o r s ,   n u m b e r   o f   r e f e r e n c e s ,   a r t i c l e   l e n g t h   a n d   J o u r n a l   I m p a c t   F a c t o r .   T h a t   1   i n   4   c i t a t i o n s   i n   m a r i n e   b i o l o g y   s h o u l d   b e   v i e w e d   w i t h   s c e p t i c i s m   i s   a l a r m i n g   a n d   h a s   i m p o r t a n t   r a m i f i c a t i o n s   f o r   b o t h   s c h o l a r s h i p   a n d   b i b l i o m e t r i c s . 	 [ T o d d ,   P e t e r   A . ;   G u e s t ,   J a m e s   R . ;   C h o u ,   L o k e   M i n g ]   N a t l   U n i v   S i n g a p o r e ,   D e p t   B i o l   S c i ,   S i n g a p o r e   1 1 7 5 4 3 ,   S i n g a p o r e ;   [ L u ,   J u n x i u ]   U n i v   W o l l o n g o n g ,   S c h   B i o l   S c i ,   W o l l o n g o n g ,   N S W   2 5 2 2 ,   A u s t r a l i a 	 T o d d ,   P A   ( r e p r i n t   a u t h o r ) ,   N a t l   U n i v   S i n g a p o r e ,   D e p t   B i o l   S c i ,   1 4   S c i   D r   4 ,   S i n g a p o r e   1 1 7 5 4 3 ,   S i n g a p o r e . 	 d b s p a t @ n u s . e d u . s g 	 G u e s t ,   J a m e s / D - 5 1 7 9 - 2 0 1 1 ;   T o d d ,   P e t e r / H - 8 4 1 0 - 2 0 1 2 ;   C h o u ,   L o k e   M i n g / I - 2 9 5 1 - 2 0 1 2 	 G u e s t ,   J a m e s / 0 0 0 0 - 0 0 0 2 - 9 7 1 4 - 9 0 0 9 ;   	 S i n g a p o r e ' s   M i n i s t r y   o f   E d u c a t i o n   [ R - 1 5 4 - 0 0 0 - 4 1 4 - 1 3 3 ] 	 T h i s   r e s e a r c h   w a s   f u n d e d   b y   S i n g a p o r e ' s   M i n i s t r y   o f   E d u c a t i o n ' s   A c R F   T i e r   1   g r a n t   n o .   R - 1 5 4 - 0 0 0 - 4 1 4 - 1 3 3 .   M a n y   t h a n k s   t o   C h r i s t i n a   B e l l e   f o r   h e l p   w i t h   c o l l a t i n g   d a t a   a n d   t o   t h e   2   a n o n y m o u s   r e f e r e e s   f o r   t h e i r   c o m m e n t s . 	 A d l e r   N J ,   2 0 0 9 ,   A C A D   M A N A G   L E A R N   E D U ,   V 8 ,   P 7 2 ;   A l - B e n n a   S ,   2 0 0 9 ,   B U R N S ,   V 3 5 ,   P 6 7 7 ,   D O I   1 0 . 1 0 1 6 / j . b u r n s . 2 0 0 8 . 1 1 . 0 1 4 ;   B a l l   P ,   2 0 0 8 ,   N A T U R E ,   V 4 5 5 ,   P 2 7 4 ,   D O I   1 0 . 1 0 3 8 / 4 5 5 2 7 4 a ;   B I E B U Y C K   J F ,   1 9 9 2 ,   A N E S T H E S I O L O G Y ,   V 7 7 ,   P 1 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 0 5 4 2 - 1 9 9 2 0 7 0 0 0 - 0 0 0 0 1 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B r o w m a n   H o w a r d   I ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 1 ,   D O I   1 0 . 3 3 5 4 / e s e p 0 0 0 8 9 ;   B u c h a n   J C ,   2 0 0 5 ,   A M   J   O P H T H A L M O L ,   V 1 4 0 ,   P 1 1 4 6 ,   D O I   1 0 . 1 0 1 6 / j . a j o . 2 0 0 5 . 0 7 . 0 1 8 ;   D E L A C E Y   G ,   1 9 8 5 ,   B R I T   M E D   J ,   V 2 9 1 ,   P 8 8 4 ;   D u p p s   W J ,   2 0 0 8 ,   J   C A T A R A C T   R E F R   S U R G ,   V 3 4 ,   P 1 4 1 9 ,   D O I   1 0 . 1 0 1 6 / j . j c r s . 2 0 0 8 . 0 7 . 0 0 1 ;   E V A N S   J T ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 3 5 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 3 5 3 ;   F e n t o n   J E ,   2 0 0 0 ,   C L I N   O T O L A R Y N G O L ,   V 2 5 ,   P 4 0 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 2 7 3 . 2 0 0 0 . 0 0 3 2 2 . x ;   G a v r a s   H ,   2 0 0 2 ,   A M   J   H Y P E R T E N S ,   V 1 5 ,   P 8 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 7 0 6 1 ( 0 2 ) 0 2 9 8 9 - 8 ;   G O L D B E R G   R ,   1 9 9 3 ,   A N N   E M E R G   M E D ,   V 2 2 ,   P 1 4 5 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 6 - 0 6 4 4 ( 0 5 ) 8 1 9 9 5 - X ;   G o s l i n g   C M ,   2 0 0 4 ,   M A N U A L   T H E R ,   V 9 ,   P 3 6 ,   D O I   1 0 . 1 0 1 6 / S 1 3 5 6 - 6 8 9 X ( 0 3 ) 0 0 0 5 6 - 0 ;   G u p t a   P ,   2 0 0 5 ,   I N D I A N   P E D I A T R ,   V 4 2 ,   P 1 4 0 ;   H A N S E N   M E ,   1 9 9 4 ,   A M   J   R O E N T R ,   V 1 6 3 ,   P 7 2 0 ;   H a r n a d   S . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 1 0 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 8 ;   H a r z i n g   A W ,   2 0 0 2 ,   J   O R G A N   B E H A V ,   V 2 3 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 2 / j o b . 1 2 5 ;   I N G E L F I N G E R   F J ,   1 9 7 6 ,   N E W   E N G L   J   M E D ,   V 2 9 5 ,   P 1 0 7 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 7 6 1 1 0 4 2 9 5 1 9 1 1 ;   L a w r e n c e   P . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 7 9 ;   L a w r e n c e   P A ,   2 0 0 7 ,   C U R R   B I O L ,   V 1 7 ,   p R 5 8 3 ,   D O I   1 0 . 1 0 1 6 / j . c u b . 2 0 0 7 . 0 6 . 0 1 4 ;   L e i m u   R ,   2 0 0 5 ,   T R E N D S   E C O L   E V O L ,   V 2 0 ,   P 2 8 ,   D O I   1 0 . 1 0 1 6 / j . t r e e . 2 0 0 4 . 1 0 . 0 1 0 ;   L u k i c   I K ,   2 0 0 4 ,   C L I N   A N A T ,   V 1 7 ,   P 5 3 4 ,   D O I   1 0 . 1 0 0 2 / c a . 1 0 2 5 5 ;   M A R T Y N   J ,   1 9 7 5 ,   J   D O C ,   V 3 1 ,   P 2 9 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 0 ;   N i e m i n e n   P ,   2 0 0 7 ,   J   C L I N   E P I D E M I O L ,   V 6 0 ,   P 9 3 9 ,   D O I   1 0 . 1 0 1 6 / j . j c l i n e p i . 2 0 0 6 . 1 1 . 0 1 4 ;   R e t z e r   V ,   2 0 0 9 ,   B A S I C   A P P L   E C O L ,   V 1 0 ,   P 3 9 3 ,   D O I   1 0 . 1 0 1 6 / j . b a a e . 2 0 0 8 . 0 9 . 0 0 1 ;   R U I Z   J M G ,   2 0 0 8 ,   B   A S O C I A C I O N   G O G R A F O ,   V 4 6 ,   P 3 8 9 ;   S a l a   S D ,   2 0 0 8 ,   C O R T E X ,   V 4 4 ,   P 1 1 3 9 ,   D O I   1 0 . 1 0 1 6 / j . c o r t e x . 2 0 0 8 . 0 7 . 0 0 1 ;   S c h r e i b e r   M ,   2 0 0 9 ,   A N N   P H Y S - B E R L I N ,   V 1 8 ,   P 6 0 7 ,   D O I   1 0 . 1 0 0 2 / a n d p . 2 0 0 9 1 0 3 6 0 ;   S c h u l m e i s t e r   L ,   1 9 9 8 ,   I m a g e   J   N u r s   S c h ,   V 3 0 ,   P 1 4 3 ;   S m i t h   D R ,   2 0 0 9 ,   M A N U A L   T H E R ,   V 1 4 ,   P 4 5 6 ,   D O I   1 0 . 1 0 1 6 / j . m a t h . 2 0 0 8 . 1 1 . 0 0 4 ;   S t e r g i o u   K .   I . ,   2 0 0 6 ,   E T H I C S   S C I   E N V   P O L I T ,   V 2 0 0 6 ,   P 1 5 ;   T o d d   P e t e r   A . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 1 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 9 1 ;   T o d d   P A ,   2 0 0 8 ,   N A T U R E ,   V 4 5 1 ,   P 2 4 4 ,   D O I   1 0 . 1 0 3 8 / 4 5 1 2 4 4 b ;   T o d d   P A ,   2 0 0 7 ,   O I K O S ,   V 1 1 6 ,   P 1 5 9 9 ,   D O I   1 0 . 1 1 1 1 / j . 2 0 0 7 . 0 0 3 0 - 1 2 9 9 . 1 5 9 9 2 . x ;   T o d d   P A ,   2 0 0 9 ,   E N V I R O N   P L A N N   A ,   V 4 1 ,   P 7 6 5 ,   D O I   1 0 . 1 0 6 8 / a 4 2 4 ;   W a g e r   E ,   2 0 0 8 ,   C O C H R A N E   D B   S Y S T   R E V ,   D O I   1 0 . 1 0 0 2 / 1 4 6 5 1 8 5 8 . M R 0 0 0 0 0 2 . p u b 3 ;   Z A C H L I N   A C ,   1 9 4 8 ,   S C I E N C E ,   V 1 0 7 ,   P 2 9 2 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 0 7 . 2 7 7 7 . 2 9 2 - a 	 3 8 	 1 4 	 1 4 	 1 5 	 3 2 	 I N T E R - R E S E A R C H 	 O L D E N D O R F   L U H E 	 N O R D B U N T E   2 3 ,   D - 2 1 3 8 5   O L D E N D O R F   L U H E ,   G E R M A N Y 	 0 1 7 1 - 8 6 3 0 	 	 	 M A R   E C O L   P R O G   S E R 	 M a r .   E c o l . - P r o g .   S e r . 	 	 2 0 1 0 	 4 0 8 	 	 	 	 	 	 2 9 9 	 3 0 3 	 	 1 0 . 3 3 5 4 / m e p s 0 8 5 8 7 	 	 5 	 E c o l o g y ;   M a r i n e   &   F r e s h w a t e r   B i o l o g y ;   O c e a n o g r a p h y 	 E n v i r o n m e n t a l   S c i e n c e s   &   E c o l o g y ;   M a r i n e   &   F r e s h w a t e r   B i o l o g y ;   O c e a n o g r a p h y 	 6 1 3 K T 	 W O S : 0 0 0 2 7 8 9 7 8 8 0 0 0 2 6 	 	 
 
 J 	 T i j s s e n ,   R J W 	 	 	 	 T i j s s e n ,   R o b e r t   J .   W . 	 	 	 I n t e r n a t i o n a l i s a t i o n   o f   p h a r m a c e u t i c a l   R & D :   h o w   g l o b a l i s e d   a r e   E u r o p e ' s   l a r g e s t   m u l t i n a t i o n a l   c o m p a n i e s ? 	 T E C H N O L O G Y   A N A L Y S I S   &   S T R A T E G I C   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b u s i n e s s   a n d   m a n a g e m e n t   s t u d i e s ;   t e c h n o l o g y   a n d   i n n o v a t i o n   s t u d i e s ;   b i b l i o m e t r i c s ;   q u a n t i t a t i v e ;   p h a r m a c e u t i c a l   i n d u s t r y ;   E u r o p e 	 B I B L I O M E T R I C   A N A L Y S I S ;   I N D U S T R Y ;   K N O W L E D G E ;   F I R M S ;   I N N O V A T I O N ;   T R E N D S ;   B I O T E C H N O L O G Y ;   T E C H N O L O G Y ;   N E T W O R K S 	 T h e   i n t e r n a t i o n a l i s a t i o n   o f   c o r p o r a t e   r e s e a r c h   i s   a n   i s s u e   w i t h   a   l a r g e   i m p a c t   o n   s t r a t e g i c   d e c i s i o n - m a k i n g   w i t h i n   t h e   r e s e a r c h - i n t e n s i v e   p h a r m a c e u t i c a l   i n d u s t r y .   H o w e v e r ,   s e c t o r - w i d e   c o m p a r a t i v e   s t a t i s t i c s   o n   t h e   w h e r e a b o u t s   o f   c o r p o r a t e   r e s e a r c h   a c t i v i t i e s   a n d   t h e   g e o g r a p h i c   d i s t r i b u t i o n   o f   t h e i r   r e s e a r c h   p a r t n e r s   i s   s c a r c e .   T h i s   p a p e r   d e s c r i b e s   t h e   i n t e r n a t i o n a l   r e s e a r c h   p r o f i l e s   o f   E u r o p e ' s   t o p   1 0   l a r g e s t   m u l t i n a t i o n a l   p h a r m a c e u t i c a l   c o m p a n i e s   b a s e d   o n   p u b l i c a t i o n   c o u n t s   a n d   a u t h o r   a d d r e s s   i n f o r m a t i o n   d r a w n   f r o m   t h e   t h o u s a n d s   o f   p h a r m a c e u t i c a l   r e s e a r c h   a r t i c l e s   p u b l i s h e d   i n   2 0 0 5 - 2 0 0 6 .   T h e   r e s u l t s   p r o v i d e   r e l e v a n t   a g g r e g a t e - l e v e l   b a c k g r o u n d   i n t e l l i g e n c e   f o r   s t r a t e g i c   a n a l y s i s   o f   t h e   i n d u s t r y ' s   i n t e r n a t i o n a l i s a t i o n   p r o c e s s e s   a n d   r e s e a r c h   c o o p e r a t i o n   p a t t e r n s .   T h e   o v e r a l l   s t a t i s t i c s   i n d i c a t e   t h a t   i n t e r n a t i o n a l   r e s e a r c h   a c t i v i t y   o f   E u r o p e a n   i n d u s t r y   i s   s i g n i f i c a n t l y   m o r e   o r i e n t e d   t o w a r d s   t h e   U S   s c i e n c e   b a s e   t h a n   v i c e   v e r s a .   C o m p a n y - l e v e l   s t a t i s t i c a l   d a t a   o n   t h e   r e s e a r c h   c o o p e r a t i o n   i n v o l v i n g   e a c h   c o m p a n y ' s   c e n t r a l   r e s e a r c h   c e n t r e s   b a s e d   i n   c o u n t r y   o f   c o r p o r a t e   h e a d q u a r t e r s ,   r e v e a l   q u i t e   d i s t i n c t i v e   g e o g r a p h i c a l   c h a r a c t e r i s t i c s   a l o n g s i d e   d i f f e r e n t i a l   p r e f e r e n c e s   f o r   i n - h o u s e   o r   e x t e r n a l   r e s e a r c h   p a r t n e r s . 	 L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   C W T S ,   N L - 2 3 0 0   A X   L e i d e n ,   N e t h e r l a n d s 	 T i j s s e n ,   R J W   ( r e p r i n t   a u t h o r ) ,   L e i d e n   U n i v ,   C t r   S c i   &   T e c h n o l   S t u d i e s ,   C W T S ,   P O B   9 0 5 ,   N L - 2 3 0 0   A X   L e i d e n ,   N e t h e r l a n d s . 	 t i j s s e n @ c w t s . l e i d e n u n i v . n l 	 T i j s s e n ,   R o b e r t / B - 2 3 9 7 - 2 0 0 9 	 	 	 	 A B R A M O V S K Y   L ,   2 0 0 6 ,   W P 0 7 0 2   I   F I S C   S T U D ;   A R C H I B U G I   D ,   1 9 9 5 ,   C A M B R I D G E   J   E C O N ,   V 1 9 ,   P 1 2 1 ;   A r u n d e l   A . ,   2 0 0 4 ,   E C   I N N O V A T I O N   N E W   T E ,   V 1 3 ,   P 5 5 9 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 3 8 5 9 0 9 2 0 0 0 2 3 4 3 1 1 ;   B e i s e   M ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 9 9 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 4 . 0 3 . 0 0 3 ;   B O W E R   D J ,   1 9 9 3 ,   I N T   B U S I N E S S   R E V ,   V 2 ,   P 8 3 ;   C a l e r o   C ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 8 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 5 0 - y ;   C a s s o n   M . ,   1 9 9 1 ,   G L O B A L   R E S   S T R A T E G Y ,   P 1 0 4 ;   C a r d i n a l   L B ,   2 0 0 0 ,   J   E N G   T E C H N O L   M A N A G E ,   V 1 7 ,   P 2 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 2 3 - 4 7 4 8 ( 0 0 ) 0 0 0 2 5 - 4 ;   C h a n   P ,   2 0 0 6 ,   S C R I P ,   V 1 0 0 ,   P 3 5 ;   C o c k b u r n   I ,   1 9 9 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 3 ,   P 1 2 7 2 5 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 3 . 2 3 . 1 2 7 2 5 ;   C o o m b s   R ,   2 0 0 2 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 4 ,   P 2 6 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 2 2 0 0 0 0 2 1 0 4 ;   C R I S C U O L O   P ,   2 0 0 7 ,   M A N A G E   I N T   R E V ,   V 4 6 ,   P 6 3 9 ;   D r e w s   J ,   1 9 8 9 ,   E U R O P E A N   M A N A G E M E N T ,   V 7 ,   P 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 2 6 3 - 2 3 7 3 ( 8 9 ) 9 0 1 4 0 - 0 ;   * D T I ,   2 0 0 6 ,   U   E N H   C O M P   Q U A L   L I F ;   * E C ,   2 0 0 5 ,   E U   I N D   R   D   I N V   S C O R ,   V 2 ;   * E E P I A ,   2 0 0 6 ,   P H A R M   I N D   F I G ;   G a m b a r d e l l a   A . ,   1 9 9 5 ,   S C I   I N N O V A T I O N   U S   P H ;   G a s s m a n n   O ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 2 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 1 1 4 - 0 ;   H i c k s   D . ,   1 9 9 5 ,   I N D   C O R P   C H A N G E ,   V 4 ,   P 4 0 1 ,   D O I   1 0 . 1 0 9 3 / i c c / 4 . 2 . 4 0 1 ;   J o n e s   O ,   2 0 0 0 ,   B R I T   J   M A N A G E ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 8 5 5 1 . 0 0 1 7 7 ;   K E T T L E R   H ,   2 0 0 1 ,   C O N S O L I D A T I O N   C O M P E T ,   P 1 0 6 ;   K O E N I G   M E D ,   1 9 8 3 ,   R E S   P O L I C Y ,   V 1 2 ,   P 1 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 3 ) 9 0 0 2 4 - 0 ;   K u e m m e r l e   W ,   1 9 9 9 ,   R E S   P O L I C Y ,   V 2 8 ,   P 1 7 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 1 1 0 - 3 ;   M c K e l v e y   M ,   2 0 0 4 ,   S E C T O R A L   S Y S T E M S   O F   I N N O V A T I O N ,   P 7 3 ,   D O I   1 0 . 1 0 1 7 / C B O 9 7 8 0 5 1 1 4 9 3 2 7 0 . 0 0 4 ;   M c M i l l a n   G S ,   2 0 0 0 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 2 ,   P 4 6 5 ;   N A R I N   F ,   1 9 8 8 ,   R E S   P O L I C Y ,   V 1 7 ,   P 1 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 8 ) 9 0 0 3 9 - X ;   O E C D   ( O r g a n i s a t i o n   f o r   E c o n o m i c   C o - o p e r a t i o n   a n d   D e v e l o p m e n t ) ,   2 0 0 5 ,   H D B   E C   G L O B   I N D ;   O r s e n i g o   L ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 4 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 9 4 - 9 ;   P A T E L   P ,   1 9 9 1 ,   J   I N T   B U S   S T U D ,   V 2 2 ,   P 1 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j i b s . 8 4 9 0 2 8 9 ;   P i s a n o   G .   P . ,   1 9 8 8 ,   I N T   C O L L A B O R A T I V E   V E ,   P 1 8 3 ;   P o w e l l   W W ,   1 9 9 8 ,   C A L I F   M A N A G E   R E V ,   V 4 0 ,   P 2 2 8 ;   * P W C ,   2 0 0 7 ,   P H A R M   2 0 2 0   V I S   P A T H ;   R o i j a k k e r s   N ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 4 3 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 1 . 0 0 6 ;   R u g m a n   A .   M ,   2 0 0 4 ,   M A N A G E   I N T   R E V ,   V 4 4 ,   P 7 ;   T a p o n   F ,   1 9 9 9 ,   R & D   M A N A G E ,   V 2 9 ,   P 2 1 9 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 7 - 9 3 1 0 . 0 0 1 3 2 ;   T h u r s b y   J ,   2 0 0 6 ,   S C I E N C E ,   V 3 1 4 ,   P 1 5 4 7 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 3 4 2 5 7 ;   T i j s s e n   R J W ,   2 0 0 4 ,   R E S   P O L I C Y ,   V 3 3 ,   P 7 0 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 3 . 1 1 . 0 0 2 ;   T I J S S E N   R J W ,   2 0 0 6 ,   I N T   B E N C H M A R K I N G   R E S ;   W a l s h   V ,   2 0 0 2 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 4 ,   P 2 7 3 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 2 2 0 0 0 0 0 2 1 1 3 ;   W A L S H   V ,   1 9 9 3 ,   I M P A C T   G L O B A L I S A T I O N ,   P 1 7 5 ;   W H I T T A K E R   E ,   1 9 9 4 ,   R & D   M A N A G E ,   V 2 4 ,   P 2 4 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 3 1 0 . 1 9 9 4 . t b 0 0 8 7 7 . x 	 4 1 	 1 4 	 1 5 	 2 	 2 3 	 R O U T L E D G E   J O U R N A L S ,   T A Y L O R   &   F R A N C I S   L T D 	 A B I N G D O N 	 4   P A R K   S Q U A R E ,   M I L T O N   P A R K ,   A B I N G D O N   O X 1 4   4 R N ,   O X F O R D S H I R E ,   E N G L A N D 	 0 9 5 3 - 7 3 2 5 	 	 	 T E C H N O L   A N A L   S T R A T E G 	 T e c h n o l .   A n a l .   S t r a t e g .   M a n a g e . 	 	 2 0 0 9 	 2 1 	 7 	 	 	 	 	 8 5 9 	 8 7 9 	 	 1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 9 0 3 1 8 2 3 3 0 	 	 2 1 	 M a n a g e m e n t ;   M u l t i d i s c i p l i n a r y   S c i e n c e s 	 B u s i n e s s   &   E c o n o m i c s ;   S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 5 0 3 E Y 	 W O S : 0 0 0 2 7 0 5 1 7 3 0 0 0 0 4 	 	 
 
 J 	 C o n e n ,   D ;   T o r r e s ,   J ;   R i d k e r ,   P M 	 	 	 	 C o n e n ,   D a v i d ;   T o r r e s ,   J o s e ;   R i d k e r ,   P a u l   M . 	 	 	 D i f f e r e n t i a l   c i t a t i o n   r a t e s   o f   m a j o r   c a r d i o v a s c u l a r   c l i n i c a l   t r i a l s   a c c o r d i n g   t o   s o u r c e   o f   f u n d i n g   -   A   s u r v e y   f r o m   2 0 0 0   t o   2 0 0 5 	 C I R C U L A T I O N 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c a r d i o v a s c u l a r   d i s e a s e s ;   f i n a n c i a l   s u p p o r t ;   o r g a n i z a t i o n s ,   n o n p r o f i t ;   r a n d o m i z e d   c o n t r o l l e d   t r i a l s   a s   t o p i c 	 C H R O N I C   H E A R T - F A I L U R E ;   R A D I A T I O N   T H E R A P Y ;   I M P A C T ;   A R T I C L E S ;   R E G I S T R A T I O N ;   P U B L I C A T I O N ;   R E S T E N O S I S ;   J O U R N A L S ;   A C C E S S 	 B a c k g r o u n d   -   P r i o r   w o r k   i n d i c a t e s   t h a t   t h e r a p e u t i c   t r i a l s   f u n d e d   b y   f o r - p r o f i t   o r g a n i z a t i o n s   a r e   m o r e   l i k e l y   t o   r e p o r t   p o s i t i v e   f i n d i n g s   t h a n   t r i a l s   f u n d e d   b y   n o t - f o r - p r o f i t   o r g a n i z a t i o n s .   W h a t   i m p a c t ,   i f   a n y ,   f u n d i n g   s o u r c e   h a s   o n   s u b s e q u e n t   d i s s e m i n a t i o n   o f   t r i a l   d a t a   i s   u n c e r t a i n .   T o   a d d r e s s   t h i s   i s s u e ,   w e   u s e d   t h e   n u m b e r   o f   c i t a t i o n s   p e r   p u b l i c a t i o n   p e r   y e a r   t o   a s s e s s   d i f f e r e n c e s   i n   t r i a l   d i s s e m i n a t i o n   a c c o r d i n g   t o   f u n d i n g   s o u r c e .   M e t h o d s   a n d   R e s u l t s   -   W e   a s s e s s e d   3 0 3   c o n s e c u t i v e   s u p e r i o r i t y   t r i a l s   o f   c a r d i o v a s c u l a r   m e d i c i n e   p u b l i s h e d   b e t w e e n   J a n u a r y   1 ,   2 0 0 0 ,   a n d   J u l y   3 0 ,   2 0 0 5 ,   i n   t h e   J o u r n a l   o f   t h e   A m e r i c a n   M e d i c a l   A s s o c i a t i o n ,   T h e   L a n c e t ,   a n d   t h e   N e w   E n g l a n d   J o u r n a l   o f   M e d i c i n e .   T h e   p r i m a r y   o u t c o m e   m e a s u r e   w a s   t h e   n u m b e r   o f   c i t a t i o n s   p e r   p u b l i c a t i o n   p e r   y e a r   u p   t o   D e c e m b e r   3 1 ,   2 0 0 6 .   O v e r a l l ,   t h e   m e d i a n   n u m b e r   o f   c i t a t i o n s   p e r   p u b l i c a t i o n   p e r   y e a r   w a s   4 6   f o r   t r i a l s   f u n d e d   e x c l u s i v e l y   b y   f o r - p r o f i t   o r g a n i z a t i o n s ,   3 7   f o r   t r i a l s   j o i n t l y   f u n d e d ,   a n d   2 9   f o r   t r i a l s   f u n d e d   b y   n o t - f o r - p r o f i t   o r g a n i z a t i o n s   ( P   =   0 . 0 0 0 7 ) .   H i g h e r   c i t a t i o n   r a t e s   f o r   t r i a l s   f u n d e d   b y   f o r - p r o f i t   o r g a n i z a t i o n s   w e r e   c o n s i s t e n t l y   o b s e r v e d   i n   a n a l y s e s   s t r a t i f i e d   b y   j o u r n a l   a n d   v a r i o u s   t r i a l   d e s i g n   f e a t u r e s   a n d   w e r e   m o s t   s t r i k i n g   w h e n   t h e   n e w   i n t e r v e n t i o n   w a s   f a v o r e d   o v e r   t h e   s t a n d a r d   o f   c a r e ;   i n   t h i s   s u b g r o u p ,   t h e   m e d i a n   n u m b e r   o f   c i t a t i o n s   p e r   p u b l i c a t i o n   p e r   y e a r   w a s   5 2   f o r   t r i a l s   f u n d e d   b y   f o r - p r o f i t   o r g a n i z a t i o n s   c o m p a r e d   w i t h   2 5   f o r   t r i a l s   f u n d e d   b y   n o t - f o r - p r o f i t   o r g a n i z a t i o n s   ( P   =   0 . 0 0 0 6 ) .   I n   m a r k e d   c o n t r a s t ,   i n   a n a l y s e s   l i m i t e d   t o   t r i a l s   i n   w h i c h   t h e   n e w   i n t e r v e n t i o n   w a s   s i g n i f i c a n t l y   w o r s e   t h a n   t h e   s t a n d a r d   o f   c a r e ,   a n   i n v e r s e   p a t t e r n   w a s   o b s e r v e d   w i t h   f e w e r   c i t a t i o n s   p e r   p u b l i c a t i o n   p e r   y e a r   f o r   t r i a l s   f u n d e d   b y   f o r - p r o f i t   o r g a n i z a t i o n s   c o m p a r e d   w i t h   n o t - f o r - p r o f i t   o r g a n i z a t i o n s   ( 3 3   v e r s u s   4 1 ;   P   =   0 . 0 4 8 ) .   H i g h e r   c i t a t i o n   r a t e s   w e r e   o b s e r v e d   f o r   i n d u s t r y - f u n d e d   t r i a l s   t h a n   f o r   f e d e r a l l y   f u n d e d   t r i a l s   e v e n   w h e n   t h e   t r i a l s   d e a l t   w i t h   s i m i l a r   i s s u e s   a n d   w e r e   p u b l i s h e d   b a c k - t o - b a c k   i n   t h e   s a m e   j o u r n a l .   C o n c l u s i o n s   -   D i s s e m i n a t i o n   o f   c l i n i c a l   t r i a l   r e s u l t s   i s   i m p o r t a n t   f o r   c l i n i c a l   p r a c t i c e   b u t   a p p e a r s   t o   b e   b i a s e d   i n   f a v o r   o f   f o r - p r o f i t   e n t i t i e s .   C o n s i d e r a t i o n   s h o u l d   b e   g i v e n   t o   m o r e   e x t e n s i v e   p r o m o t i o n   o f   c l i n i c a l   t r i a l   r e s u l t s   t h a t   a r e   f u n d e d   b y   n o t - f o r - p r o f i t   o r g a n i z a t i o n s . 	 [ C o n e n ,   D a v i d ;   T o r r e s ,   J o s e ;   R i d k e r ,   P a u l   M . ]   H a r v a r d   U n i v ,   B r i g h a m   &   W o m e n s   H o s p ,   S c h   M e d ,   C t r   C a r d i o v a s c   D i s   P r e v e n t , D e p t   M e d ,   B o s t o n ,   M A   0 2 2 1 5   U S A 	 R i d k e r ,   P M   ( r e p r i n t   a u t h o r ) ,   H a r v a r d   U n i v ,   B r i g h a m   &   W o m e n s   H o s p ,   S c h   M e d ,   C t r   C a r d i o v a s c   D i s   P r e v e n t , D e p t   M e d ,   9 0 0   C o m m o n w e a l t h   A v e   E ,   B o s t o n ,   M A   0 2 2 1 5   U S A . 	 p r i d k e r @ p a r t n e r s . o r g 	 	 	 S w i s s   N a t i o n a l   S c i e n c e   F o u n d a t i o n   [ P A S M A   1 1 8 5 8 6 / 1 ] ;   J a n g g e n - P o e h n   F o u n d a t i o n ,   S t   G a l l e n ,   S w i t z e r l a n d ;   S t i f t u n g   f u r   G e s u n d h e i t   u n d   k a r d i o - / n e u r o v a s k u l a r e   F o r s c h u n g ,   B a s e l ,   S w i t z e r l a n d 	 T h e   a u t h o r s   r e c e i v e d   n o   d i r e c t   f u n d i n g   t o   s u p p o r t   t h e   d a t a   c o l l e c t i o n ,   a n a l y s i s ,   o r   p r e s e n t a t i o n   o f   t h i s   m a n u s c r i p t .   D r   C o n e n   i s   s u p p o r t e d   b y   g r a n t s   f r o m   t h e   S w i s s   N a t i o n a l   S c i e n c e   F o u n d a t i o n   ( P A S M A   1 1 8 5 8 6 / 1 ) ,   t h e   J a n g g e n - P o e h n   F o u n d a t i o n ,   S t   G a l l e n ,   S w i t z e r l a n d ,   a n d   t h e   S t i f t u n g   f u r   G e s u n d h e i t   u n d   k a r d i o - / n e u r o v a s k u l a r e   F o r s c h u n g ,   B a s e l ,   S w i t z e r l a n d . 	 A b r a h a m   W T ,   2 0 0 2 ,   N E W   E N G L   J   M E D ,   V 3 4 6 ,   P 1 8 4 5 ,   D O I   1 0 . 1 0 5 6 / N E J M o a 0 1 3 1 6 8 ;   B e k e l m a n   J E ,   2 0 0 3 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 9 ,   P 4 5 4 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 9 . 4 . 4 5 4 ;   B E R O   L A ,   1 9 9 2 ,   N E W   E N G L   J   M E D ,   V 3 2 7 ,   P 1 1 3 5 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 2 1 0 1 5 3 2 7 1 6 0 6 ;   C a l l a h a m   M ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 7 ,   P 2 8 4 7 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 7 . 2 1 . 2 8 4 7 ;   C a m p b e l l   E G ,   2 0 0 7 ,   N E W   E N G L   J   M E D ,   V 3 5 6 ,   P 1 7 4 2 ,   D O I   1 0 . 1 0 5 6 / N E J M s a 0 6 4 5 0 8 ;   D e   A n g e l i s   C ,   2 0 0 4 ,   L A N C E T ,   V 3 6 4 ,   P 9 1 1 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 4 ) 1 7 0 3 4 - 7 ;   E i c h h o r n   E ,   2 0 0 1 ,   N E W   E N G L   J   M E D ,   V 3 4 4 ,   P 1 6 5 9 ;   E y s e n b a c h   G ,   2 0 0 6 ,   P L O S   B I O L ,   V 4 ,   P 6 9 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p b i o . 0 0 4 0 1 5 7 ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   K a l l a   K ,   2 0 0 6 ,   C I R C U L A T I O N ,   V 1 1 3 ,   P 2 3 9 8 ,   D O I   1 0 . 1 1 6 1 / C I R C U L A T I O N A H A . 1 0 5 . 5 8 6 1 9 8 ;   K u l k a r n i   A V ,   2 0 0 7 ,   P L O S   O N E ,   V 2 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 0 0 4 0 3 ;   L a m a s   G A ,   2 0 0 2 ,   N E W   E N G L   J   M E D ,   V 3 4 6 ,   P 1 8 5 4 ,   D O I   1 0 . 1 0 5 6 / N E J M o a 0 1 3 0 4 0 ;   L e o n   M B ,   2 0 0 1 ,   N E W   E N G L   J   M E D ,   V 3 4 4 ,   P 2 5 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 2 0 0 1 0 1 2 5 3 4 4 0 4 0 2 ;   L e s s e r   L I ,   2 0 0 7 ,   P L O S   M E D ,   V 4 ,   P 4 1 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p m e d . 0 0 4 0 0 0 5 ;   P a c k e r   M ,   2 0 0 1 ,   N E W   E N G L   J   M E D ,   V 3 4 4 ,   P 1 6 5 1 ,   D O I   1 0 . 1 0 5 6 / N E J M 2 0 0 1 0 5 3 1 3 4 4 2 2 0 1 ;   P a t s o p o u l o s   N A ,   2 0 0 5 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 3 ,   P 2 3 6 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 3 . 1 9 . 2 3 6 2 ;   P a t s o p o u l o s   N A ,   2 0 0 6 ,   B R I T   M E D   J ,   V 3 3 2 ,   P 1 0 6 1 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 8 7 6 8 . 4 2 0 1 3 9 . 8 0 ;   P H I L L I P S   D P ,   1 9 9 1 ,   N E W   E N G L   J   M E D ,   V 3 2 5 ,   P 1 1 8 0 ,   D O I   1 0 . 1 0 5 6 / N E J M 1 9 9 1 1 0 1 7 3 2 5 1 6 2 0 ;   R i d k e r   P M ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 2 2 7 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 9 . 2 2 7 0 ;   R O C H O N   P A ,   1 9 9 4 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 7 2 ,   P 1 0 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 7 2 . 2 . 1 0 8 ;   R o s s   J S ,   2 0 0 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 9 ,   P 1 8 0 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 9 . 1 5 . 1 8 0 0 ;   R o s s o u w   J E ,   2 0 0 2 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 8 ,   P 3 2 1 ;   S t e i n b r o o k   R ,   2 0 0 5 ,   N E W   E N G L   J   M E D ,   V 3 5 2 ,   P 1 7 3 9 ,   D O I   1 0 . 1 0 5 6 / N E J M p 0 5 8 0 8 8 ;   V e r i n   V ,   2 0 0 1 ,   N E W   E N G L   J   M E D ,   V 3 4 4 ,   P 2 4 3 ,   D O I   1 0 . 1 0 5 6 / N E J M 2 0 0 1 0 1 2 5 3 4 4 0 4 0 1 ;   Y a n k   V ,   2 0 0 7 ,   B R I T   M E D   J ,   V 3 3 5 ,   P 1 2 0 2 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 9 3 7 6 . 4 4 7 2 1 1 . B E ;   Z a r i n   D A ,   2 0 0 5 ,   N E W   E N G L   J   M E D ,   V 3 5 3 ,   P 2 7 7 9 ,   D O I   1 0 . 1 0 5 6 / N E J M s a 0 5 3 2 3 4 	 2 7 	 1 4 	 1 4 	 1 	 5 	 L I P P I N C O T T   W I L L I A M S   &   W I L K I N S 	 P H I L A D E L P H I A 	 5 3 0   W A L N U T   S T ,   P H I L A D E L P H I A ,   P A   1 9 1 0 6 - 3 6 2 1   U S A 	 0 0 0 9 - 7 3 2 2 	 	 	 C I R C U L A T I O N 	 C i r c u l a t i o n 	 S E P   2 3 	 2 0 0 8 	 1 1 8 	 1 3 	 	 	 	 	 1 3 2 1 	 1 3 2 7 	 	 1 0 . 1 1 6 1 / C I R C U L A T I O N A H A . 1 0 8 . 7 9 4 0 1 6 	 	 7 	 C a r d i a c   &   C a r d i o v a s c u l a r   S y s t e m s ;   P e r i p h e r a l   V a s c u l a r   D i s e a s e 	 C a r d i o v a s c u l a r   S y s t e m   &   C a r d i o l o g y 	 3 5 1 C O 	 W O S : 0 0 0 2 5 9 4 0 2 3 0 0 0 0 4 	 1 8 7 7 9 4 4 1 	 
 
 J 	 O e r m a n n ,   M H ;   N o r d s t r o m ,   C K ;   W i l m e s ,   N A ;   D e n i s o n ,   D ;   W e b b ,   S A ;   F e a t h e r s t o n ,   D E ;   B e d n a r z ,   H ;   S t r i z ,   P 	 	 	 	 O e r m a n n ,   M a r i l y n   H . ;   N o r d s t r o m ,   C h e r y l   K . ;   W i l m e s ,   N a n c y   A . ;   D e n i s o n ,   D o r i s ;   W e b b ,   S u e   A . ;   F e a t h e r s t o n ,   D i a n e   E . ;   B e d n a r z ,   H e d i ;   S t r i z ,   P e n e l o p e 	 	 	 I n f o r m a t i o n   s o u r c e s   f o r   d e v e l o p i n g   t h e   n u r s i n g   l i t e r a t u r e 	 I N T E R N A T I O N A L   J O U R N A L   O F   N U R S I N G   S T U D I E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 c i t a t i o n   a n a l y s i s ;   g r a y   l i t e r a t u r e ;   n u r s i n g   l i t e r a t u r e ;   s c i e n t i f i c   c o m m u n i c a t i o n 	 S C I E N T I F I C   C O M M U N I C A T I O N ;   E P I S T E M I C   O R I G I N S ;   S O C I A L - S C I E N C E S ;   D I G I T A L   L I B R A R Y ;   K N O W L E D G E ;   B I B L I O M E T R I C S ;   F R A M E W O R K S ;   S E R V I C E S ;   N U R S E S ;   A C C E S S 	 B a c k g r o u n d :   J o u r n a l s   a r e   a n   i m p o r t a n t   m e t h o d   f o r   d i s s e m i n a t i n g   r e s e a r c h   f i n d i n g s   a n d   o t h e r   e v i d e n c e   f o r   p r a c t i c e   t o   n u r s e s .   B i b l i o m e t r i c   a n a l y s e s   o f   n u r s i n g   j o u r n a l s   c a n   r e v e a l   i n f o r m a t i o n   a b o u t   a u t h o r s h i p ,   t y p e s   o f   d o c u m e n t s   c i t e d ,   a n d   h o w   i n f o r m a t i o n   i s   c o m m u n i c a t e d   i n   n u r s i n g ,   a m o n g   o t h e r   c h a r a c t e r i s t i c s .   O b j e c t i v e s :   T h e   p u r p o s e s   o f   o u r   s t u d y   w e r e   t o   d e s c r i b e   t h e   t y p e s   o f   d o c u m e n t s   u s e d   t o   d e v e l o p   t h e   c l i n i c a l   a n d   r e s e a r c h   l i t e r a t u r e   i n   n u r s i n g ,   a n d   e x t e n t   o f   g r a y   l i t e r a t u r e   c i t e d   i n   t h o s e   p u b l i c a t i o n s .   D e s i g n :   T h i s   w a s   a   d e s c r i p t i v e   s t u d y   o f   1 8 , 9 0 1   c i t a t i o n s   o f   a r t i c l e s   i n   c l i n i c a l   s p e c i a l t y   a n d   r e s e a r c h   j o u r n a l s   i n   n u r s i n g   p u b l i s h e d   b e t w e e n   J a n u a r y   2 0 0 4   a n d   J u n e   2 0 0 5 .   M e t h o d s :   T h e   r e s e a r c h   t e a m   r e v i e w e d   e a c h   c i t a t i o n   t o   a s s e s s   i f   t h e   c i t e d   d o c u m e n t   w a s   a   j o u r n a l   a r t i c l e ,   b o o k   c h a p t e r   o r   b o o k ,   o r   d o c u m e n t   f a l l i n g   i n t o   t h e   c a t e g o r y   o f   g r a y   l i t e r a t u r e .   F r e q u e n c y   c o u n t s   f o r   e a c h   t y p e   o f   c i t e d   d o c u m e n t   w e r e   r e c o r d e d .   R e s u l t s :   M o s t   o f   t h e   c i t a t i o n s   w e r e   t o   j o u r n a l   a r t i c l e s   ( n = 1 4 ,   3 9 2 ,   7 6 . 1 % )   a n d   a m o n g   t h o s e ,   t o   a r t i c l e s   i n   m e d i c a l   j o u r n a l s   ( n = 7 7 1 9 ,   4 0 . 8 %   o f   a l l   t h e   c i t a t i o n s ) .   T h i s   w a s   t r u e   f o r   t h e   l i t e r a t u r e   a s   a   w h o l e   a n d   f o r   t h e   c l i n i c a l   s p e c i a l t y   a n d   r e s e a r c h   l i t e r a t u r e   s e p a r a t e l y .   A l t h o u g h   c i t a t i o n s   t o   m e d i c a l   j o u r n a l s   w e r e   m o s t   c o m m o n ,   i n   t h e   c l i n i c a l   n u r s i n g   l i t e r a t u r e   t h e r e   w a s   a   s i g n i f i c a n t l y   h i g h e r   p r o p o r t i o n   o f   c i t a t i o n s   t o   m e d i c a l   j o u r n a l   a r t i c l e s   ( n = 6 3 3 2 ,   4 4 . 5 % )   t h a n   i n   t h e   n u r s i n g   r e s e a r c h   l i t e r a t u r e   ( L R X 2 =   3 2 6 . 7 ,   p   <   0 . 0 0 0 1 ) .   N e a r l y   1 0 %   o f   t h e   c i t a t i o n s   w e r e   t o   g r a y   l i t e r a t u r e .   T h e r e   w a s   a n   i n c r e a s e   i n   c i t a t i o n s   t o   w e b s i t e s   ( 5 . 7 % )   c o m p a r e d   t o   a   s t u d y   d o n e   o n l y   a   f e w   y e a r s   e a r l i e r .   C o n c l u s i o n s :   O u r   s t u d y   d o c u m e n t e d   t h a t   j o u r n a l   l i t e r a t u r e   w a s   t h e   p r i m a r y   s o u r c e   o f   i n f o r m a t i o n   f o r   c o m m u n i c a t i o n   w i t h i n   n u r s i n g .   T h i s   i s   c o n s i s t e n t   w i t h   o t h e r   b i o m e d i c a l   a n d   h a r d   s c i e n c e s   w h e r e   t h e   t r a n s f e r ,   a s s i m i l a t i o n ,   a n d   u s e   o f   i n f o r m a t i o n   o c c u r   m a i n l y   w i t h i n   t h e   s c i e n t i f i c   c o m m u n i t y .   W i t h   a   r e l i a n c e   o n   j o u r n a l   a r t i c l e s   f o r   d i s s e m i n a t i o n   o f   r e s e a r c h   a n d   e v i d e n c e   f o r   c l i n i c a l   p r a c t i c e ,   i m p r o v e d   m e t h o d s   w i l l   b e   n e e d e d   f o r   i n t e g r a t i n g   t h i s   k n o w l e d g e   a n d   p r e s e n t i n g   i t   i n   a   u s a b l e   f o r m   t o   c l i n i c i a n s .   A s   j o u r n a l s   p r o l i f e r a t e ,   i t   w i l l   b e c o m e   i n c r e a s i n g l y   d i f f i c u l t   f o r   c l i n i c i a n s   t o   k e e p   c u r r e n t   w i t h   r e s e a r c h   f i n d i n g s   t o   g u i d e   t h e i r   p r a c t i c e .   T h e   d e v e l o p m e n t   a n d   t e s t i n g   o f   n e w   m e t h o d s   f o r   i n t e g r a t i n g   a n d   d i s s e m i n a t i n g   r e s e a r c h   e v i d e n c e   t o   b u s y   c l i n i c i a n s   w i l l   b e   i n c r e a s i n g l y   i m p o r t a n t   i n   n u r s i n g .   G r a y   l i t e r a t u r e   w a s   n e a r l y   1 0 %   o f   t h e   c i t a t i o n s .   T h e   s t u d y   a l s o   r e v e a l e d   a n   i n c r e a s e   i n   c i t a t i o n s   t o   w e b s i t e s ,   w h i c h   i s   a n t i c i p a t e d   t o   c o n t i n u e   i n   t h e   f u t u r e .   F u r t h e r   s t u d y   i s   n e e d e d   o n   t h e   i n d e x i n g   o f   g r a y   l i t e r a t u r e   r e l e v a n t   t o   r e s e a r c h   u s e   a n d   e v i d e n c e - b a s e d   p r a c t i c e   i n   n u r s i n g   a n d   o n   h o w   t o   m a k e   t h i s   l i t e r a t u r e   e a s i l y   a v a i l a b l e   t o   c l i n i c i a n s .   ( c )   2 0 0 6   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ O e r m a n n ,   M a r i l y n   H . ;   N o r d s t r o m ,   C h e r y l   K . ;   D e n i s o n ,   D o r i s ;   W e b b ,   S u e   A . ;   F e a t h e r s t o n ,   D i a n e   E . ;   B e d n a r z ,   H e d i ]   W a y n e   S t a t e   U n i v ,   C o l l   N u r s i n g ,   D e t r o i t ,   M I   4 8 2 0 2   U S A ;   [ W i l m e s ,   N a n c y   A . ]   W a y n e   S t a t e   U n i v ,   S c i   &   E n g n   L i b ,   D e t r o i t ,   M I   4 8 2 0 2   U S A ;   [ S t r i z ,   P e n e l o p e ]   H e n r y   F o r d   H o m e   H l t h   C a r e ,   D e t r o i t ,   M I   U S A 	 O e r m a n n ,   M H   ( r e p r i n t   a u t h o r ) ,   W a y n e   S t a t e   U n i v ,   C o l l   N u r s i n g ,   5 5 5 7   C a s s   A v e ,   D e t r o i t ,   M I   4 8 2 0 2   U S A . 	 m o e r m a n n @ m s n . c o m ;   c n o r d s t r o m @ w a y n e . e d u ;   n . w i l m e s @ w a y n e . e d u ;   d . d e n i s o n @ w a y n e . e d u ;   a a 4 3 2 9 @ w a y n e . e d u ;   d e f e a t h e r @ w a y n e . e d u ;   a h 4 9 6 9 @ w a y n e . e d u ;   p s t r i z 1 @ h f h s . o r g 	 	 	 	 	 A l l e n   M P ,   2 0 0 6 ,   J   M E D   L I B R   A S S O C ,   V 9 4 ,   P 2 0 6 ;   B a r r o s o   J ,   2 0 0 6 ,   C I N - C O M P U T   I N F O R M   N U ,   V 2 4 ,   P 8 5 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 2 4 6 6 5 - 2 0 0 6 0 3 0 0 0 - 0 0 0 0 7 ;   B e c k s t e a d   J W ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 1 3 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r t s u . 2 0 0 4 . 0 9 . 0 2 1 ;   B j o r k   B C ,   2 0 0 5 ,   L E A R N   P U B L ,   V 1 8 ,   P 1 6 5 ,   D O I   1 0 . 1 0 8 7 / 0 9 5 3 1 5 1 0 5 4 6 3 6 1 2 9 ;   C o r r e i a   A M R ,   2 0 0 5 ,   O N L I N E   I N F O R M   R E V ,   V 2 9 ,   P 3 4 9 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 5 1 0 6 1 7 8 0 2 ;   E s t a b r o o k s   C A ,   2 0 0 4 ,   N U R S   R E S ,   V 5 3 ,   P 2 9 3 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 4 0 9 0 0 0 - 0 0 0 0 3 ;   E s t a b r o o k s   C a r o l e   A ,   2 0 0 5 ,   C a n   J   N u r s   R e s ,   V 3 7 ,   P 1 1 8 ;   F r e n c h   B ,   2 0 0 5 ,   J   A D V   N U R S ,   V 4 9 ,   P 1 2 5 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 6 5 - 2 6 4 8 . 2 0 0 4 . 0 3 2 7 2 . x ;   G l a n z e l   W ,   1 9 9 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 5 ,   P 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 8 ) 0 0 0 2 8 - 4 ;   H u r d   J u l i e   M . ,   2 0 0 4 ,   S c i e n c e   &   T e c h n o l o g y   L i b r a r i e s ,   V 2 5 ,   P 5 ,   D O I   1 0 . 1 3 0 0 / J 1 2 2 v 2 5 n 0 1 _ 0 2 ;   H u t h   E J ,   1 9 9 9 ,   W R I T I N G   P U B L I S H I N G   M ;   L a r i v i e r e   V ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 9 9 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 3 4 9 ;   M c C a u g h a n   D ,   2 0 0 5 ,   F A M   P R A C T ,   V 2 2 ,   P 4 9 0 ,   D O I   1 0 . 1 0 9 3 / f a m p r a / c m i 0 4 2 ;   N i c h o l s o n   S ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 7 8 5 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 5 . 0 0 8 ;   O ' N e i l l   A L ,   2 0 0 0 ,   N U R S   R E S ,   V 4 9 ,   P 2 2 4 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 1 9 9 - 2 0 0 0 0 7 0 0 0 - 0 0 0 0 6 ;   O O E R M A N N   M H ,   2 0 0 6 ,   N U R S E   R E S ,   V 1 3 ,   P 6 6 ;   O O E R M A N N   M H ,   2 0 0 2 ,   W R I T I N G   P U B L I C A T I O N ;   O O E R M A N N   M H ,   I N   P R E S S   D I S S E M I N A T I ;   O O E R M A N N   M H ,   I N   P R E S S   C I T A T I O N   A N ;   P r a v i k o f f   D S ,   2 0 0 5 ,   A M   J   N U R S ,   V 1 0 5 ,   P 4 0 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   S E A T O N   H J ,   2 0 0 6 ,   J   M E D I C A L   L I B   A S S   S 2 ,   V 2 ,   p E 8 0 ;   S h a m s   M a r i e - L i s e   A n t o u n ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 1 1 4 ;   T a y l o r   M a r y   K ,   2 0 0 6 ,   J   M e d   L i b r   A s s o c ,   V 9 4 ,   p E 6 5 ;   T h e l w a l l   M ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 3 ;   T h e l w a l l   M ,   2 0 0 2 ,   O N L I N E   I N F O R M   R E V ,   V 2 6 ,   P 4 1 3 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 8 4 5 2 0 2 1 0 4 5 2 7 4 5 ;   T u r n e r   A M ,   2 0 0 5 ,   J   M E D   L I B R   A S S O C ,   V 9 3 ,   P 4 8 7 ;   U r q u h a r t   C ,   1 9 9 8 ,   J   D O C ,   V 5 4 ,   P 4 2 0 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 1 7 6 ;   U r q u h a r t   C ,   2 0 0 6 ,   I N T   J   N U R S   S T U D ,   V 4 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 5 . 1 0 . 0 0 2 ;   W i n k e r   M A ,   1 9 9 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 1 ,   P 1 5 4 3 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 1 . 1 6 . 1 5 4 3 	 3 0 	 1 4 	 1 5 	 0 	 1 2 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 0 2 0 - 7 4 8 9 	 	 	 I N T   J   N U R S   S T U D 	 I n t .   J .   N u r s .   S t u d . 	 A P R 	 2 0 0 8 	 4 5 	 4 	 	 	 	 	 5 8 0 	 5 8 7 	 	 1 0 . 1 0 1 6 / j . i j n u r s t u . 2 0 0 6 . 1 0 . 0 0 5 	 	 8 	 N u r s i n g 	 N u r s i n g 	 2 9 2 K W 	 W O S : 0 0 0 2 5 5 2 6 5 9 0 0 0 1 2 	 1 7 1 4 5 0 5 9 	 
 
 J 	 A l l i k ,   J 	 	 	 	 A l l i k ,   J u e r i 	 	 	 Q u a l i t y   o f   E s t o n i a n   s c i e n c e   e s t i m a t e d   t h r o u g h   b i b l i o m e t r i c   i n d i c a t o r s   ( 1 9 9 7 - 2 0 0 7 ) 	 P R O C E E D I N G S   O F   T H E   E S T O N I A N   A C A D E M Y   O F   S C I E N C E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 s c i e n t o m e t r y ;   b i b l i o m e t r i c s ;   E s t o n i a n   s c i e n c e 	 S P A N 	 T h e   m a i n   g o a l   o f   t h i s   p a p e r   i s   t o   p r o v i d e   a n   a n a l y s i s   o f   b i b l i o m e t r i c   i n d i c a t o r s   o f   t h e   q u a l i t y   o f   E s t o n i a n   s c i e n c e   i n   c o m p a r i s o n   t o   i t s   n e i g h b o u r s   L a t v i a   a n d   L i t h u a n i a   d u r i n g   t h e   1 1 - y e a r   p e r i o d   f r o m   1 9 9 7   t o   2 0 0 7 .   S i n c e   1 9 9 0 ,   E s t o n i a n   a n d   L i t h u a n i a n   s c i e n t i s t   m o r e   t h a n   t r i p l e d   t h e   n u m b e r   o f   a r t i c l e s   t h e y   p u b l i s h e d   i n   j o u r n a l s   i n d e x e d   b y   t h e   T h o m s o n   R e u t e r s   W e b   o f   S c i e n c e .   T h e   n u m b e r   o f   a r t i c l e s   f r o m   L a t v i a   h a s   d e c r e a s e d   r e l a t i v e   t o   t h e   g e n e r a l   i n c r e a s e   o f   p u b l i s h e d   a r t i c l e s   i n   t h e   w o r l d .   A c c o r d i n g   t o   t h e   E s s e n t i a l   S c i e n c e   I n d i c a t o r s   d a t a b a s e ,   p a p e r s   p u b l i s h e d   b y   E s t o n i a n   s c i e n t i s t s   h a d   t h e   h i g h e s t   i m p a c t   ( 7 . 8 7 )   c o m p a r e d   t o   a l l   o t h e r   f o r m e r   C o m m u n i s t   b l o c   c o u n t r i e s   i n c l u d i n g   H u n g a r y   ( 7 . 8 3 ) ,   L a t v i a   ( 5 . 9 2 ) ,   L i t h u a n i a   ( 4 . 9 5 ) ,   a n d   R u s s i a   ( 3 . 9 8 ) .   W h i l e   L a t v i a   f a i l e d   t o   i n c r e a s e   t h e   p r o d u c t i v i t y   a n d   L i t h u a n i a   t o   i m p r o v e   t h e   q u a l i t y   o f   t h e i r   s c i e n t i f i c   p u b l i c a t i o n s ,   E s t o n i a   s u c c e e d e d   i n   r e d u c i n g   t h e   g a p   b o t h   i n   t h e   p r o d u c t i v i t y   a n d   i m p a c t   o f   i t s   p u b l i c a t i o n s   c o m p a r e d   t o   t h e   w o r l d   l e a d i n g   c o u n t r i e s .   T h e   o b s e r v a t i o n   o f   c h a n g e s   d u r i n g   t h e   l a s t   t h r e e   y e a r s   a l l o w s   i d e n t i f y i n g   A g r i c u l t u r a l   S c i e n c e s ,   M o l e c u l a r   B i o l o g y   &   G e n e t i c s ,   a n d   S o c i a l   S c i e n c e s   a s   t h r e e   f a s t e s t   g r o w i n g   f i e l d s   i n   E s t o n i a . 	 U n i v   T a r t u ,   D e p t   P s y c h o l ,   E E - 5 0 4 1 0   T a r t u ,   E s t o n i a 	 A l l i k ,   J   ( r e p r i n t   a u t h o r ) ,   U n i v   T a r t u ,   D e p t   P s y c h o l ,   T i i g i   7 8 ,   E E - 5 0 4 1 0   T a r t u ,   E s t o n i a . 	 j u r i . a l l i k @ u t . e e 	 A l l i k ,   J u r i / D - 5 6 0 9 - 2 0 0 9 	 A l l i k ,   J u r i / 0 0 0 0 - 0 0 0 2 - 8 3 5 8 - 4 7 4 7 	 	 	 A a r i k   J ,   1 9 9 9 ,   T H I N   S O L I D   F I L M S ,   V 3 4 0 ,   P 1 1 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 0 - 6 0 9 0 ( 9 8 ) 0 1 3 5 6 - X ;   A l l i k   J . ,   1 9 9 8 ,   T R A M E S - J   H U M A N I T   S O C ,   V 2 ,   P 9 1 ;   A l l i k   J . ,   2 0 0 3 ,   T R A M E S - J   H U M A N I T   S O C ,   V 7 ,   P 4 0 ;   A n d r e i s   M ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 2 6 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 8 5 8 - x ;   C h e o u r   M ,   1 9 9 8 ,   N A T   N E U R O S C I ,   V 1 ,   P 3 5 1 ,   D O I   1 0 . 1 0 3 8 / 1 5 6 1 ;   * E U R   C O M M ,   2 0 0 5 ,   K E Y   F I G   2 0 0 5   E U R   R E S ;   K a l j u r a n d   I ,   2 0 0 5 ,   J   O R G   C H E M ,   V 7 0 ,   P 1 0 1 9 ,   D O I   1 0 . 1 0 2 1 / j o 0 4 8 2 5 2 w ;   K r i s t a p s o n s   J ,   2 0 0 3 ,   B A L T I C   R   D   S Y S T E M S   T ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M u s t   U ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 6 ,   P 2 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 0 1 6 - 1 ;   N i i n e m e t s   U ,   1 9 9 9 ,   N E W   P H Y T O L ,   V 1 4 4 ,   P 3 5 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 6 9 - 8 1 3 7 . 1 9 9 9 . 0 0 4 6 6 . x ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   R A I D A L   M . ,   2 0 0 4 ,   P H Y S   R E V   L E T T ,   V 9 3 ;   T i i t s   M ,   2 0 0 8 ,   I N N O V A T I O N - A B I N G D O N ,   V 2 1 ,   P 6 5 ,   D O I   1 0 . 1 0 8 0 / 1 3 5 1 1 6 1 0 8 0 2 0 0 2 2 5 4 	 1 4 	 1 4 	 1 4 	 0 	 4 	 E S T O N I A N   A C A D E M Y   P U B L I S H E R S 	 T A L L I N N 	 6   K O H T U ,   T A L L I N N   1 0 1 3 0 ,   E S T O N I A 	 1 7 3 6 - 6 0 4 6 	 	 	 P   E S T   A C A D   S C I 	 P .   E s t .   A c a d .   S c i . 	 	 2 0 0 8 	 5 7 	 4 	 	 	 	 	 2 5 5 	 2 6 4 	 	 1 0 . 3 1 7 6 / p r o c . 2 0 0 8 . 4 . 0 8 	 	 1 0 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 3 8 7 Y V 	 W O S : 0 0 0 2 6 1 9 8 8 4 0 0 0 0 8 	 	 
 
 J 	 B e n d e r s ,   J ;   N i j h o l t ,   J ;   H e u s i n k v e l d ,   S 	 	 	 	 B e n d e r s ,   J o s ;   N i j h o l t ,   J u r r i a a n ;   H e u s i n k v e l d ,   S t e f a n 	 	 	 U s i n g   p r i n t   m e d i a   i n d i c a t o r s   i n   m a n a g e m e n t   f a s h i o n   r e s e a r c h 	 Q U A L I T Y   &   Q U A N T I T Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o g r a p h i c   m e t h o d ;   o r g a n i z a t i o n   c o n c e p t s ;   m a n a g e m e n t   f a s h i o n s 	 R E C E P T I O N ;   C O V E R A G E 	 Q u a n t i t a t i v e   e m p i r i c a l   r e s e a r c h   i n t o   ' m a n a g e m e n t   f a s h i o n s '   o r   ' o r g a n i z a t i o n   c o n c e p t s '   i s   d o m i n a t e d   b y   s t u d i e s   u s i n g   p r i n t   m e d i a   i n d i c a t o r s   ( P M I ) .   S u c h   r e s e a r c h   b u i l d s   o n   t h e   s i m p l e   p r e m i s e   t h a t   t h e   n u m b e r   o f   p u b l i c a t i o n s   o n   a n   o r g a n i z a t i o n   c o n c e p t   i n   t h e   c o u r s e   o f   t i m e   r e f l e c t s   m a n a g e r i a l   i n t e r e s t   i n   t h i s   c o n c e p t .   H o w e v e r ,   w h i l s t   P M I   m a y   b e   f r u i t f u l l y   u s e d   t o   s t u d y   m a n a g e m e n t   f a s h i o n s ,   t h i s   u s e   i s   l e s s   s t r a i g h t f o r w a r d   t h a n   a p p e a r s   c o m m o n l y   a s s u m e d .   W e   a i m   t o   f u l f i l   t h e   n e e d   f o r   a   m e t h o d o l o g i c a l   p a p e r   d i s c u s s i n g   t h e   p o s s i b i l i t i e s   a n d   l i m i t a t i o n s   o f   u s i n g   P M I .   T h e r e b y   w e   d r a w   o n   i n s i g h t s   f r o m   b i b l i o m e t r i c s   a n d   m a n a g e m e n t   f a s h i o n   r e s e a r c h ,   i n c l u d i n g   o u r   o w n   o n g o i n g   r e s e a r c h . 	 R a d b o u d   U n i v   N i j m e g e n ,   N i j m e g e n   S c h   M a n a g e m e n t ,   N L - 6 5 0 0   H K   N i j m e g e n ,   N e t h e r l a n d s 	 B e n d e r s ,   J   ( r e p r i n t   a u t h o r ) ,   R a d b o u d   U n i v   N i j m e g e n ,   N i j m e g e n   S c h   M a n a g e m e n t ,   P O B   9 1 0 8 ,   N L - 6 5 0 0   H K   N i j m e g e n ,   N e t h e r l a n d s . 	 j . b e n d e r s @ f m . r u . n l 	 B E N D E R S ,   J O S / B - 5 9 5 5 - 2 0 0 8 ;   N i j h o l t ,   J u r r i a a n / B - 6 4 1 5 - 2 0 0 8 ;   H e u s i n k v e l d ,   S t e f a n / F - 7 1 1 0 - 2 0 1 1 	 B E N D E R S ,   J O S / 0 0 0 0 - 0 0 0 3 - 1 6 9 6 - 1 4 4 X ;   	 	 	 A b r a h a m s o n   E ,   1 9 9 6 ,   A C A D   M A N A G E   R E V ,   V 2 1 ,   P 2 5 4 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 9 6 . 9 6 0 2 1 6 1 5 7 2 ;   A b r a h a m s o n   E ,   1 9 9 9 ,   A D M I N   S C I   Q U A R T ,   V 4 4 ,   P 7 0 8 ,   D O I   1 0 . 2 3 0 7 / 2 6 6 7 0 5 3 ;   B A R L E Y   S R ,   1 9 8 8 ,   A D M I N   S C I   Q U A R T ,   V 3 3 ,   P 2 4 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 8 5 4 ;   B e n d e r s   J ,   2 0 0 1 ,   O R G A N I Z A T I O N ,   V 8 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 0 1 8 1 0 0 3 ;   B e n d e r s   J ,   2 0 0 0 ,   N E W   T E C H   W O R K   E M P L O Y ,   V 1 5 ,   P 5 0 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 0 0 5 X . 0 0 0 6 4 ;   B E N D E R S   J ,   2 0 0 5 ,   O R G A N I S A T I O N S F O R S C H U ,   P 3 3 5 ;   B O O G A A R D   M ,   1 9 9 7 ,   H O L L A N D   M A N A G E M E N T   R ,   V 5 6 ,   P 7 1 ;   B R A A M   G ,   2 0 0 1 ,   A C C O U N T I N G ,   V 1 0 5 ,   P 4 0 5 ;   C a r s o n   P P ,   2 0 0 0 ,   A C A D   M A N A G E   J ,   V 4 3 ,   P 1 1 4 3 ,   D O I   1 0 . 2 3 0 7 / 1 5 5 6 3 4 2 ;   C l a r k   T ,   2 0 0 4 ,   O R G A N I Z A T I O N ,   V 1 1 ,   P 2 9 7 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 0 4 0 3 0 6 5 9 ;   D E S T R I C K E R   U ,   1 9 9 8 ,   I N F O R M   T O D A Y ,   V 1 5 ,   P 1 2 ;   D i n g   Y ,   2 0 0 1 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 7 ,   P 8 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 0 ) 0 0 0 5 1 - 0 ;   E c c l e s   R . G . ,   1 9 9 2 ,   H Y P E   R E D I S C O V E R I N G   E ;   F i n c h a m   R ,   2 0 0 3 ,   E U R O P E A N   A C C O U N T I N G ,   V 1 2 ,   P 7 8 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 6 3 8 1 8 0 3 1 0 0 0 1 6 2 8 4 6 4 ;   G I L L   J ,   1 9 9 3 ,   J   M A N A G E   S T U D ,   V 3 0 ,   P 2 8 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 1 9 9 3 . t b 0 0 3 0 5 . x ;   G i r o u x   H ,   2 0 0 6 ,   J   M A N A G E   S T U D ,   V 4 3 ,   P 1 2 2 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 4 8 6 . 2 0 0 6 . 0 0 6 2 3 . x ;   G u n t e r   B . ,   2 0 0 0 ,   M E D I A   R E S   M E T H O D S ;   H e u s i n k v e l d   S ,   2 0 0 1 ,   I N F O R M   M A N A G E ,   V 3 8 ,   P 2 3 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 2 0 6 ( 0 0 ) 0 0 0 6 9 - 0 ;   H E U S I N K V E L D   S ,   2 0 0 0 ,   C E M P   C   R O L   M E D   C O N S ;   H U T C H I N S   J W ,   1 9 8 5 ,   D I S C O U R S E   C O M M U N I C A T ,   P 5 0 ;   J a c s o   P ,   1 9 9 7 ,   D A T A B A S E ,   V 2 0 ,   P 8 4 ;   J o n e s   M . ,   2 0 0 0 ,   R E E N G I N E E R I N G   R E V O L U ,   P 5 0 ;   K i e s e r   A ,   1 9 9 7 ,   O R G A N I Z A T I O N ,   V 4 ,   P 4 9 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 9 7 4 1 0 0 4 ;   K r i p p e n d o r f f   K . ,   1 9 8 0 ,   C O N T E N T   A N A L ;   L A W   J ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 3 ,   P 4 1 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 9 8 0 7 ;   N I J H O L T   J ,   2 0 0 5 ,   T I J D S C H R I F T   A R B E I D S V ,   V 2 0 ,   P 5 1 ;   O j a l a   M ,   2 0 0 2 ,   O N L I N E ,   V 2 6 ,   P 6 1 ;   O r t m a n n   G . ,   1 9 9 5 ,   F O R M E N   P R O D U K T I O N ;   P a s c a l e   R   T ,   1 9 9 0 ,   M A N A G I N G   E D G E   S U C C E S ;   P o n z i   L J ,   2 0 0 2 ,   I N F O R M   R E S ,   V 8 ;   R e a d   E J ,   2 0 0 0 ,   L I B R   C O M P U T ,   V 1 9 ,   P 1 1 8 ;   S w a n   J ,   2 0 0 4 ,   O R G A N I Z A T I O N ,   V 1 1 ,   P 3 0 7 ,   D O I   1 0 . 1 1 7 7 / 1 3 5 0 5 0 8 4 0 4 0 3 0 3 8 2 	 3 2 	 1 4 	 1 4 	 1 	 1 4 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 0 3 3 - 5 1 7 7 	 	 	 Q U A L   Q U A N T 	 Q u a l .   Q u a n t . 	 D E C 	 2 0 0 7 	 4 1 	 6 	 	 	 	 	 8 1 5 	 8 2 9 	 	 1 0 . 1 0 0 7 / s 1 1 1 3 5 - 0 0 6 - 9 0 2 7 - 5 	 	 1 5 	 S o c i a l   S c i e n c e s ,   I n t e r d i s c i p l i n a r y ;   S t a t i s t i c s   &   P r o b a b i l i t y 	 S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s ;   M a t h e m a t i c s 	 2 2 8 T S 	 W O S : 0 0 0 2 5 0 7 5 6 1 0 0 0 0 3 	 	 
 
 J 	 W e n ,   H C ;   H o ,   Y S ;   J i a n ,   W S ;   L i ,   H C ;   H s u ,   Y H E 	 	 	 	 W e n ,   H s y i e n - C h i a ;   H o ,   Y u h - S h a n ;   J i a n ,   W e n - S h a n ;   L i ,   H s i e n - C h a n g ;   H s u ,   Y i - H s i n   E l s a 	 	 	 S c i e n t i f i c   p r o d u c t i o n   o f   e l e c t r o n i c   h e a l t h   r e c o r d   r e s e a r c h ,   1 9 9 1 - 2 0 0 5 	 C O M P U T E R   M E T H O D S   A N D   P R O G R A M S   I N   B I O M E D I C I N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 e l e c t r o n i c   h e a l t h   r e c o r d s   ( E H R s ) ;   b i b l i o m e t r i c s ;   s c i e n c e   c i t a t i o n   i n d e x   ( S C I ) 	 M E D I C A L - R E C O R D S ;   C A R E 	 P u r p o s e :   T h e   i n c r e a s i n g   n u m b e r s   o f   p u b l i c a t i o n s   o n   e l e c t r o n i c   h e a l t h   r e c o r d   ( E H R )   i n d i c a t e   i t s   i n c r e a s i n g   i m p o r t a n c e   i n   t h e   w o r l d .   T h i s   s t u d y   a t t e m p t e d   t o   q u a n t i f y   t h e   s c i e n t i f i c   p r o d u c t i o n   o f   E H R   r e s e a r c h   a r t i c l e s ,   a n d   h o w   t h e y   h a v e   c h a n g e d   o v e r   t i m e ,   i n   a n   e f f o r t   t o   i n v e s t i g a t e   c h a n g e s   i n   t h e   t r e n d s   c i t e d   i n   t h e s e   c r i t i c a l   e v a l u a t i o n s .   M e t h o d :   T h e   a r t i c l e s   w e r e   b a s e d   o n   t h e   s c i e n c e   c i t a t i o n   i n d e x   ( S C I )   f r o m   1 9 9 1   t o   2 0 0 5 .   A   d e s c r i p t i v e   s t u d y   w a s   p e r f o r m e d   u s i n g   t h e   1 8 0 3   d o c u m e n t s   p u b l i s h e d   i n   t h e   S C I   f r o m   3 9   c o u n t r i e s   i n   A m e r i c a ,   E u r o p e ,   A f r i c a ,   A s i a ,   a n d   O c e a n i a .   T h e   e v a l u a t i o n   w a s   b a s e d   o n   p a r a m e t e r s   i n c l u d i n g   d o c u m e n t   t y p e ,   l a n g u a g e ,   f i r s t   a u t h o r ' s   c o u n t r y   o f   o r i g i n ,   n u m b e r   o f   c i t a t i o n s   a n d   c i t a t i o n s   p e r   p u b l i c a t i o n .   R e s u l t s :   O f   a l l   p u b l i c a t i o n s ,   1 4 5 5   ( 8 0 . 7 % )   w e r e   a r t i c l e s ,   f o l l o w e d   b y   m e e t i n g   a b s t r a c t s   w h i c h   r e p r e s e n t e d   a b o u t   o n e - t e n t h   o f   a l l   t y p e s   o f   E H R   p u b l i c a t i o n s .   N u m b e r s   o f   p u b l i s h e d   a r t i c l e s   h a v e   s i g n i f i c a n t l y   i n c r e a s e d   w h e n   c o m p a r e d   b y   e a c h   5 - y e a r   p e r i o d .   M o s t   a r t i c l e s   w e r e   p u b l i s h e d   i n   E n g l i s h   ( 9 8 % )   a n d   w e r e   f r o m   t h e   r e g i o n   o f   A m e r i c a   ( 5 7 % ) .   T h e   t o p   1 0   o f   t h e   3 7 4   j o u r n a l s   a c c o u n t e d   f o r   4 1 %   o f   t h e   n u m b e r   o f   p u b l i s h e d   a r t i c l e s .   T h e   U S   d o m i n a t e s   p u b l i c a t i o n   p r o d u c t i o n   ( 5 7 % )   w i t h   a   c u m u l a t i v e   i m p a c t   f a c t o r   ( I F )   o f   2 2 2 7   a n d   f o l l o w e d   b y   t h e   U K   ( 8 . 5 % ,   w i t h   a   c u m u l a t i v e   I F   o f   2 5 7 . 0 )   a n d   t h e   N e t h e r l a n d s   ( 7 . 8 % ,   w i t h   a   c u m u l a t i v e   I F   o f   2 1 1 . 1 ) .   A n   a n a l y s i s   o f   t h e   n u m b e r   o f   a r t i c l e s   r e l a t e d   t o   p o p u l a t i o n   r e v e a l e d   a   h i g h   p u b l i c a t i o n   o u t p u t   f o r   r e l a t i v e   s m a l l   c o u n t r i e s   l i k e   S w i t z e r l a n d ,   t h e   N e t h e r l a n d s ,   a n d   N o r w a y .   C o n c l u s i o n s :   R e s e a r c h   p r o d u c t i o n   i n   E H R   s h o w e d   a   c o n s i d e r a b l e   i n c r e a s e   d u r i n g   1 9 9 1 - 2 0 0 5 .   T h e   p r o d u c t i o n   w a s   d o m i n a t e d   b y   a r t i c l e s ,   t h o s e   f r o m   t h e   U S ,   a n d   t h o s e   p u b l i s h e d   i n   E n g l i s h .   T h e   p r o d u c t i o n   c a m e   f r o m   m a n y   c o u n t r i e s ,   d e n o t i n g   t h e   d e v o t i o n   t o   t h i s   f i e l d   i n   d i f f e r e n t   a r e a s   a r o u n d   t h e   w o r l d .   ( c )   2 0 0 7   E l s e v i e r   I r e l a n d   L t d .   A l l   r i g h t s   r e s e r v e d . 	 T a i p e i   M e d   U n i v ,   S c h   H l t h   C a r e   A d m ,   T a i p e i ,   T a i w a n ;   T a i p e i   M e d   U n i v ,   S c h   P u b l   H l t h ,   T a i p e i ,   T a i w a n ;   N a t l   Y a n g   M i n g   U n i v ,   I n s t   P u b l   H l t h ,   T a i p e i   1 1 2 ,   T a i w a n 	 H s u ,   Y H E   ( r e p r i n t   a u t h o r ) ,   2 5 0   W u   H s i n   S t ,   T a i p e i   1 1 0 1 4 ,   T a i w a n . 	 e l s a h s u @ t m u . e d u . t w 	 H o ,   Y u h - S h a n / C - 8 6 2 4 - 2 0 0 9 	 	 	 	 * C E N T R   I N T   A G ,   2 0 0 6 ,   W O R L D   F A C T B   P O P ;   C h a s s i n   M R ,   1 9 9 8 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 8 0 ,   P 1 0 0 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 8 0 . 1 1 . 1 0 0 0 ;   C h a u d h r y   B . ,   2 0 0 6 ,   A N N   I N T E R N   M E D ,   V 1 4 4 ,   p E 1 2 ;   D A V I S   L S ,   1 9 7 0 ,   C O M P U T   B I O M E D   R E S ,   V 3 ,   P 5 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 1 0 - 4 8 0 9 ( 7 0 ) 9 0 0 1 5 - 7 ;   F i g u e r e d o   E ,   2 0 0 3 ,   A C T A   A N A E S T H   S C A N D ,   V 4 7 ,   P 3 7 8 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 0 5 . x ;   I n s t i t u t e   o f   M e d i c i n e ,   2 0 0 1 ,   C R O S S   Q U A L   C H A S M   N E W ;   * I   M E D ,   2 0 0 3 ,   L E T T   R E P   K E Y   C A P   E L ;   * I   S C I   I N F ,   2 0 0 5 ,   J   C I T   R E P ;   L I T Z E L M A N   D K ,   1 9 9 3 ,   J   G E N   I N T E R N   M E D ,   V 8 ,   P 3 1 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 6 0 0 1 4 4 ;   M I C H E L L E   D ,   2 0 0 3 ,   J   A M   H L T H   I N F O R M   M A N ,   V 7 4 ,   P 5 9 ;   M o n   D o n a l d   T ,   2 0 0 4 ,   J   A H I M A ,   V 7 5 ,   P 7 4 ;   M o n   D o n a l d   T ,   2 0 0 4 ,   J   A H I M A ,   V 7 5 ,   P 5 4 ;   S M I T H   M F ,   2 0 0 4 ,   E   H L T H   R O A D M   2 1   C E N T ;   W A E G E M A N N   C P ,   S T A T U S   R E P O R T   2 0 0 2   E ;   W a n g   S J ,   2 0 0 3 ,   A M   J   M E D ,   V 1 1 4 ,   P 3 9 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 9 3 4 3 ( 0 3 ) 0 0 0 5 7 - 3 ;   2 0 0 6 ,   M E D   R E C O R D S   I   7   A N N 	 1 6 	 1 4 	 1 4 	 3 	 1 1 	 E L S E V I E R   I R E L A N D   L T D 	 C L A R E 	 E L S E V I E R   H O U S E ,   B R O O K V A L E   P L A Z A ,   E A S T   P A R K   S H A N N O N ,   C O ,   C L A R E ,   0 0 0 0 0 ,   I R E L A N D 	 0 1 6 9 - 2 6 0 7 	 	 	 C O M P U T   M E T H   P R O G   B I O 	 C o m p u t .   M e t h .   P r o g r a m s   B i o m e d . 	 M A Y 	 2 0 0 7 	 8 6 	 2 	 	 	 	 	 1 9 1 	 1 9 6 	 	 1 0 . 1 0 1 6 / j . c m p b . 2 0 0 7 . 0 2 . 0 0 2 	 	 6 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   C o m p u t e r   S c i e n c e ,   T h e o r y   &   M e t h o d s ;   E n g i n e e r i n g ,   B i o m e d i c a l ;   M e d i c a l   I n f o r m a t i c s 	 C o m p u t e r   S c i e n c e ;   E n g i n e e r i n g ;   M e d i c a l   I n f o r m a t i c s 	 1 6 4 W U 	 W O S : 0 0 0 2 4 6 2 6 6 3 0 0 0 1 0 	 1 7 4 0 0 3 2 8 	 
 
 J 	 G u e r r e r o - B o t e ,   V P ;   Z a p i c o - A l o n s o ,   F ;   E s p i n o s a - C a l v o ,   M E ;   C r i s o s t o m o ,   R G ;   d e   M o y a - A n e g o n ,   F 	 	 	 	 G u e r r e r o - B o t e ,   V i c e n t e   P . ;   Z a p i c o - A l o n s o ,   F e l i p e ;   E s p i n o s a - C a l v o ,   M a r i a   E u g e n i a ;   G o m e z   C r i s o s t o m o ,   R o c i o ;   d e   M o y a - A n e g o n ,   F e l i x 	 	 	 B i n a r y   P a t h f i n d e r :   A n   i m p r o v e m e n t   t o   t h e   P a t h f i n d e r   a l g o r i t h m 	 I N F O R M A T I O N   P R O C E S S I N G   &   M A N A G E M E N T 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 P F N E T s ;   s o c i a l   n e t w o r k s ;   c i t a t i o n   a n a l y s i s ;   i n f o r m a t i o n   v i s u a l i z a t i o n 	 C O C I T A T I O N ;   N E T W O R K S 	 T h e   P a t h f i n d e r   a l g o r i t h m   i s   w i d e l y   u s e d   t o   p r u n e   s o c i a l   n e t w o r k s .   T h e   p r u n i n g   m a i n t a i n s   t h e   g e o d e s i c   d i s t a n c e s   b e t w e e n   n o d e s .   I t   h a s   s h o w n   i t s e l f   t o   b e   v e r y   u s e f u l   i n   t h e   a n a l y s i s   o f ,   a m o n g s t   o t h e r s ,   c i t a t i o n s   i n   B I S   ( b i b l i o m e t r i c s ,   i n f o r m e t r i c s ,   a n d   s c i e n t o m e t r i c s ) .   I t   h a s   e v e n   b e e n   p r o p o s e d   f o r   t h e   o n l i n e   d i s p l a y   o f   t h e   s e a r c h   r e s u l t s   i n   a n   i n f o r m a t i o n   r e t r i e v a l   s y s t e m .   H o w e v e r ,   i t s   g r e a t   t i m e   a n d   s p a c e   c o m p l e x i t y   l i m i t s   i t s   u s e   i n   r e a l - t i m e   a p p l i c a t i o n s   a n d   i n   n e t w o r k s   o f   a n y   c o n s i d e r a b l e   s i z e .   T h e   p r e s e n t   w o r k   d e s c r i b e s   a n   i m p r o v e d   a l g o r i t h m   w i t h   c o n s i d e r a b l y   r e d u c e d   t i m e   a n d   s p a c e   c o m p l e x i t y .   I t s   l o w e r   e x e c u t i o n   c o s t s   t h u s   i n c r e a s e   i t s   a p p l i c a b i l i t y   b o t h   i n   r e a l   t i m e   a n d   t o   l a r g e   n e t w o r k s .   ( c )   2 0 0 6   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 U n i v   E x t r e m a d u r a ,   F a c   L i b   &   I n f o r m a t   S c i ,   A n t i g u o   H o s p   M i l i t a r ,   B a d a j o z   0 6 0 7 1 ,   S p a i n ;   U n i v   G r a n a d a ,   L i b   &   I n f o r m a t   S c i   F a c ,   G r a n a d a   1 8 0 7 1 ,   S p a i n 	 G u e r r e r o - B o t e ,   V P   ( r e p r i n t   a u t h o r ) ,   U n i v   E x t r e m a d u r a ,   F a c   L i b   &   I n f o r m a t   S c i ,   A n t i g u o   H o s p   M i l i t a r ,   P l a z a   I b n   M a r w a n   S - N ,   B a d a j o z   0 6 0 7 1 ,   S p a i n . 	 g u e r r e r o @ u n e x . e s ;   f z a p a l o @ a l c a z a b a . u n e x . e s ;   m e e s p c a l @ a l c a z a b a . u n e x . e s ;   m r g o m c r i @ a l c a z a b a . u n e x . e s ;   f e l i x @ u g r . e s 	 M o y a   A n e g o n ,   F e l i x / C - 4 0 0 4 - 2 0 0 9 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / E - 7 5 4 6 - 2 0 1 6 	 M o y a   A n e g o n ,   F e l i x / 0 0 0 0 - 0 0 0 2 - 0 2 5 5 - 8 6 2 8 ;   G u e r r e r o - B o t e ,   V i c e n t e   P . / 0 0 0 0 - 0 0 0 3 - 4 8 2 1 - 9 7 6 8 	 	 	 B U Z Y D L O W S K I   J W ,   2 0 0 0 ,   T H E S I S   D R E X E L   U ;   C h e n   C ,   1 9 9 9 ,   I N F O R M   V I S U A L I Z A T I O N ;   C h e n   C M ,   1 9 9 8 ,   I N T E R A C T   C O M P U T ,   V 1 0 ,   P 1 0 7 ,   D O I   1 0 . 1 0 1 6 / S 0 9 5 3 - 5 4 3 8 ( 9 8 ) 0 0 0 1 5 - 0 ;   C h e n   C M ,   2 0 0 1 ,   C O M P U T E R ,   V 3 4 ,   P 6 5 ,   D O I   1 0 . 1 1 0 9 / 2 . 9 1 0 8 9 5 ;   C h e n   G T ,   2 0 0 3 ,   R A I R O - O P E R   R E S ,   V 3 7 ,   P 1 7 9 ,   D O I   1 0 . 1 0 5 1 / r o : 2 0 0 3 0 2 0 ;   D e a r h o l t   D .   W . ,   1 9 9 0 ,   P A T H F I N D E R   A S S   N E T W O ,   P 1 ;   L i n   X ,   2 0 0 3 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 9 ,   P 6 8 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 0 2 ) 0 0 0 3 7 - 7 ;   M o y a - A n e g o n   F ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 1 2 9 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 7 3 6 8 . 3 1 2 1 7 . 3 4 ;   M o y a - A n e g o n   F . ,   2 0 0 5 ,   I N F O R M   P R O C E S S I N G   M A ,   V 4 1 ,   P 1 5 2 0 ;   S C H V A N E V E L D T   R W ,   1 9 8 8 ,   C O M P U T   M A T H   A P P L ,   V 1 5 ,   P 3 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 8 9 8 - 1 2 2 1 ( 8 8 ) 9 0 2 2 1 - 0 ;   S C H V A N E V E L D T   R W ,   1 9 9 9 ,   P A T H F I N D E R   A S S   N E T W O ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 4 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 2 8 	 1 2 	 1 4 	 1 7 	 2 	 1 5 	 P E R G A M O N - E L S E V I E R   S C I E N C E   L T D 	 O X F O R D 	 T H E   B O U L E V A R D ,   L A N G F O R D   L A N E ,   K I D L I N G T O N ,   O X F O R D   O X 5   1 G B ,   E N G L A N D 	 0 3 0 6 - 4 5 7 3 	 	 	 I N F O R M   P R O C E S S   M A N A G 	 I n f .   P r o c e s s .   M a n a g e . 	 D E C 	 2 0 0 6 	 4 2 	 6 	 	 	 	 	 1 4 8 4 	 1 4 9 0 	 	 1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 1 5 	 	 7 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 6 2 T I 	 W O S : 0 0 0 2 3 8 9 6 7 1 0 0 0 0 9 	 	 
 
 J 	 K o s t o f f ,   R N ;   d e l   R i o ,   J A ;   C o r t e s ,   H D ;   S m i t h ,   C ;   S m i t h ,   A ;   W a g n e r ,   C ;   L e y d e s d o r f f ,   L ;   K a r y p i s ,   G ;   M a l p o h l ,   G ;   T s h i t e y a ,   R 	 	 	 	 K o s t o f f ,   R N ;   d e l   R i o ,   J A ;   C o r t e s ,   H D ;   S m i t h ,   C ;   S m i t h ,   A ;   W a g n e r ,   C ;   L e y d e s d o r f f ,   L ;   K a r y p i s ,   G ;   M a l p o h l ,   G ;   T s h i t e y a ,   R 	 	 	 T h e   s t r u c t u r e   a n d   i n f r a s t r u c t u r e   o f   M e x i c o ' s   s c i e n c e   a n d   t e c h n o l o g y 	 T E C H N O L O G I C A L   F O R E C A S T I N G   A N D   S O C I A L   C H A N G E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 M e x i c o ;   s c i e n c e   a n d   t e c h n o l o g y ;   b i b l i o m e t r i c s ;   c o m p u t a t i o n a l   l i n g u i s t i c s ;   c o r e   c o m p e t e n c i e s ;   r e s e a r c h   e v a l u a t i o n ;   f a c t o r   a n a l y s i s ;   c o n c e p t   c l u s t e r i n g ;   d o c u m e n t   c l u s t e r i n g ;   d a t a   c o m p r e s s i o n ;   n e t w o r k   a n a l y s i s ;   L e x i m a n c e r ;   C L U T O ;   g r e e d y   s t r i n g   t i l i n g 	 D A T A B A S E   T O M O G R A P H Y ;   T E C H N I C A L   I N T E L L I G E N C E ;   B I B L I O M E T R I C S ;   C I T A T I O N ;   P R O G R A M S ;   R O A D M A P S ;   T R E N D S 	 T h e   s t r u c t u r e   a n d   i n f r a s t r u c t u r e   o f   t h e   M e x i c a n   t e c h n i c a l   l i t e r a t u r e   w a s   d e t e r m i n e d .   A   r e p r e s e n t a t i v e   d a t a b a s e   o f   t e c h n i c a l   a r t i c l e s   w a s   e x t r a c t e d   f r o m   t h e   S c i e n c e   C i t a t i o n   I n d e x   f o r   t h e   y e a r   2 0 0 2 ,   w i t h   e a c h   a r t i c l e   c o n t a i n i n g   a t   l e a s t   o n e   a u t h o r   w i t h   a   M e x i c a n   a d d r e s s .   M a n y   d i f f e r e n t   m a n u a l   a n d   s t a t i s t i c a l   c l u s t e r i n g   m e t h o d s   w e r e   u s e d   t o   i d e n t i f y   t h e   s t r u c t u r e   o f   t h e   t e c h n i c a l   l i t e r a t u r e   ( e s p e c i a l l y   t h e   s c i e n c e   a n d   t e c h n o l o g y   c o r e   c o m p e t e n c i e s ) .   O n e   o f   t h e   p e r v a s i v e   t e c h n i c a l   t o p i c s   i d e n t i f i e d   f r o m   t h e   c l u s t e r i n g ,   t h i n   f i l m s   r e s e a r c h ,   w a s   a n a l y z e d   f u r t h e r   u s i n g   b i b l i o m e t r i c s ,   i n   o r d e r   t o   i d e n t i f y   t h e   i n f r a s t r u c t u r e   o f   t h i s   t e c h n o l o g y .   P u b l i s h e d   b y   E l s e v i e r   I n c . 	 O f f   N a v a l   R e s ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A ;   U n i v   N a c l   A u t o n o m a   M e x i c o ,   C t r   I n v e s t   &   E n e r g i a ,   T e m i x c o ,   M o r e l o s ,   M e x i c o ;   B o o z   A l l e n   H a m i l t o n ,   B e t h e s d a ,   M D   U S A ;   U n i v   Q u e e n s l a n d ,   B r i s b a n e ,   Q l d ,   A u s t r a l i a ;   U n i v   A m s t e r d a m ,   A m s t e r d a m ,   N e t h e r l a n d s ;   U n i v   M i n n e s o t a ,   M i n n e a p o l i s ,   M N   5 5 4 5 5   U S A ;   U n i v   K a r l s r u h e ,   D - 7 6 1 2 8   K a r l s r u h e ,   G e r m a n y ;   D D L   O M N I   E n g n   L L C ,   M c l e a n ,   V A   2 2 1 0 2   U S A 	 O f f   N a v a l   R e s ,   8 0 0   N   Q u i n c y   S t ,   A r l i n g t o n ,   V A   2 2 2 1 7   U S A . 	 k o s t o f r @ o n r . n a v y . m i l 	 d e l   R i o   P o r t i l l a ,   J e s u s   A n t o n i o / C - 2 1 2 5 - 2 0 0 9 ;   C o r t e s ,   H e c t o r / D - 1 7 4 9 - 2 0 1 1 ;   L e y d e s d o r f f ,   L o e t / E - 2 9 0 3 - 2 0 1 0 ;   W a g n e r ,   C a r o l i n e / A - 7 1 7 0 - 2 0 1 2 	 d e l   R i o   P o r t i l l a ,   J e s u s   A n t o n i o / 0 0 0 0 - 0 0 0 1 - 6 1 8 0 - 0 6 0 8 ;   L e y d e s d o r f f ,   L o e t / 0 0 0 0 - 0 0 0 2 - 7 8 3 5 - 3 0 9 8 ;   	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   B e n e d e t t o   D ,   2 0 0 2 ,   P H Y S   R E V   L E T T ,   V 8 8 ,   D O I   1 0 . 1 1 0 3 / P h y s R e v L e t t . 8 8 . 0 4 8 7 0 2 ;   B o s t i a n   C W ,   2 0 0 0 ,   S P A C E   C O M M U N ,   V 1 6 ,   P 9 7 ;   C A M P B E L L   R ,   1 9 8 5 ,   S O V I E T   S C I   T E C H N O L O G ;   C u t t i n g   D .   R . ,   1 9 9 2 ,   P   1 5   A N N   I N T   A C M   S I G ,   P 3 1 8 ,   D O I   D O I   1 0 . 1 1 4 5 / 1 3 3 1 6 0 . 1 3 3 2 1 4 ;   D A V I D S O N   R C ,   1 9 9 0 ,   J A P A N E S E   M A G N E T I C   C O ;   D E L R I O   J A ,   2 0 0 2 ,   A D V   C O M P L E X   S Y S T ,   V 5 ,   P 1 9 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 9 5 2 5 9 0 2 0 0 0 5 2 3 ;   D U N C A N   L M ,   1 9 8 8 ,   S O V I E T   I O N O S P H E R I C   M ;   G a r c i a   E .   O . ,   2 0 0 2 ,   R e v i s t a   E s p a n o l a   d e   D o c u m e n t a c i o n   C i e n t i f i c a ,   V 2 5 ,   P 4 6 7 ;   G A R F I E L D   E ,   1 9 8 5 ,   J   C H E M   I N F   C O M P   S C I ,   V 2 5 ,   P 1 7 0 ,   D O I   1 0 . 1 0 2 1 / c i 0 0 0 4 7 a 0 0 7 ;   G R A Y   R M ,   1 9 9 3 ,   N O N U S   D A T A   C O M P R E S S I ;   G u h a   S ,   1 9 9 8 ,   P   A C M   S I G M O D   I N T   C   M ,   P 7 3 ,   D O I   1 0 . 1 1 4 5 / 2 7 6 3 0 4 . 2 7 6 3 1 2 ;   H E A R S T   M A ,   2 0 0 0 ,   N A T U R A L   L A N G U A G E   I N F ;   H u t u b e s s y   R C W ,   2 0 0 2 ,   I N T   J   T E C H N O L   A S S E S S ,   V 1 8 ,   P 6 9 0 ;   K a r y p i s   G . ,   C L U T O   C L U S T E R I N G   T O O ;   K A R Y P I S   G ,   1 9 9 9 ,   I E E E   C O M P U T ,   V 3 2 ,   P 6 8 ,   D O I   D O I   1 0 . 1 1 0 9 / 2 . 7 8 1 6 3 7 ;   K L I N G E R   A ,   1 9 9 0 ,   S O V I E T   I M A G E   P A T T E R N ;   K o s t o f f   R N ,   2 0 0 4 ,   I N T   J   B I F U R C A T   C H A O S ,   V 1 4 ,   P 6 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 1 2 7 4 0 4 0 0 9 0 8 9 ;   K o s t o f f   R N ,   2 0 0 4 ,   F R A C T A L S ,   V 1 2 ,   P 1 ,   D O I   1 0 . 1 1 4 2 / S 0 2 1 8 3 4 8 X 0 4 0 0 2 3 4 3 ;   K o s t o f f   R N ,   2 0 0 4 ,   J   A M   S O C   M A S S   S P E C T R ,   V 1 5 ,   P 2 8 1 ,   D O I   1 0 . 1 0 1 6 / j . j a s m s . 2 0 0 3 . 1 1 . 0 1 0 ;   K o s t o f f   R N ,   2 0 0 3 ,   M E D   H Y P O T H E S E S ,   V 6 1 ,   P 2 6 5 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 9 8 7 7 ( 0 3 ) 0 0 1 6 7 - 1 ;   K o s t o f f   R N ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 9 8 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 9 3 ;   K o s t o f f   R N ,   2 0 0 2 ,   J   P O W E R   S O U R C E S ,   V 1 1 0 ,   P 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 8 - 7 7 5 3 ( 0 2 ) 0 0 2 3 3 - 1 ;   K o s t o f f   R N ,   2 0 0 1 ,   A N A L   C H E M ,   V 7 3 ,   p 3 7 0 A ,   D O I   1 0 . 1 0 2 1 / a c 0 1 2 4 7 2 h ;   K o s t o f f   R N ,   2 0 0 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 2 ,   P 1 1 4 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 1 8 1 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   A I R C R A F T ,   V 3 7 ,   P 7 2 7 ,   D O I   1 0 . 2 5 1 4 / 2 . 2 6 5 9 ;   K o s t o f f   R N ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 2 ;   K o s t o f f   R N ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 6 4 ;   K o s t o f f   R N ,   1 9 9 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 4 ,   P 6 9 ,   D O I   1 0 . 1 0 1 6 / S 0 3 0 6 - 4 5 7 3 ( 9 7 ) 0 0 0 6 6 - 6 ;   K o s t o f f   R N ,   2 0 0 0 ,   J   C H E M   I N F   C O M P   S C I ,   V 4 0 ,   P 1 9 ,   D O I   1 0 . 1 0 2 1 / c i 9 9 0 0 4 5 n ;   K o s t o f f   R N ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 4 2 7 ;   K O S T O F F   R N ,   I N   P R E S S   J A S I S T ,   V 5 6 ;   K O S T O F F   R N ,   S C I   T E C H N O L O G Y   T E X T ;   K O S T O F F   R N ,   2 0 0 3 ,   E N C Y   L I B   I N F O R M A T I O N ,   V 4 ,   P 2 7 8 9 ;   L A N Z E R O T T I   L J ,   1 9 8 6 ,   F A S A C T A R 3 0 6 0 ;   L E N E M A N   B ,   1 9 8 4 ,   R E V   E T U D   C O M P   E S T - Q ,   V 1 5 ,   P 7 5 ,   D O I   1 0 . 3 4 0 6 / r e c e o . 1 9 8 4 . 2 4 8 0 ;   L E Y D E S D O R F F   L ,   1 9 8 9 ,   R E S   P O L I C Y ,   V 1 8 ,   P 2 0 9 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 8 9 ) 9 0 0 1 6 - 4 ;   L E Y D E S D O R F F   L ,   2 0 0 3 ,   A N N   M   S O C   S O C   S T U D   S ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M c I n t i r e   L V ,   2 0 0 3 ,   T I S S U E   E N G ,   V 9 ,   P 3 ,   D O I   1 0 . 1 0 8 9 / 1 0 7 6 3 2 7 0 3 7 6 2 6 8 7 4 8 3 ;   M o o n e y   B ,   1 9 9 6 ,   M A R   T E C H N O L   S O C   J ,   V 3 0 ,   P 7 1 ;   O r t e g a   J L ,   2 0 0 3 ,   S C I E N T O M E T R I C S ,   V 5 8 ,   P 4 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 2 0 1 0 1 3 7 3 8 ;   P r e c h e l t   L ,   2 0 0 2 ,   J   U N I V E R S   C O M P U T   S C I ,   V 8 ,   P 1 0 1 6 ;   R A S M U S S E N   E ,   1 9 9 2 ,   I N F O R M A T I O N   R E T R I E V A ;   S A L T O N   G ,   1 9 8 3 ,   I N T R O   M O D E R N   I N F O R M A ;   S P E N C E R   W J ,   1 9 8 9 ,   C H I N E S E   M I C R O E L E C T R O ;   S T A R E S   P ,   1 9 8 5 ,   D A E D A L U S ,   V 1 1 4 ,   P 1 2 7 ;   S t e i n b a c h   M i c h a e l ,   2 0 0 0 ,   0 0 0 3 4   U   M I N N   D E P   C O M ;   W A G N E R   C S ,   2 0 0 2 ,   T E C H N O L O G Y   U S E   P R O D U ;   W A G N E R   C S ,   2 0 0 4 ,   I N   P R E S S   I N T   J   T E C H N ;   W h i t e   H D ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 1 2 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 2 5 ;   W I L L E T T   P ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 7 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 7 - 1 ;   W I S E   M J ,   1 9 9 2 ,   S T R I N G   S I M I L A R I T Y   V I ;   Z a m i r   O . ,   1 9 9 8 ,   P r o c e e d i n g s   o f   t h e   2 1 s t   A n n u a l   I n t e r n a t i o n a l   A C M   S I G I R   C o n f e r e n c e   o n   R e s e a r c h   a n d   D e v e l o p m e n t   i n   I n f o r m a t i o n   R e t r i e v a l ,   P 4 6 ,   D O I   1 0 . 1 1 4 5 / 2 9 0 9 4 1 . 2 9 0 9 5 6 	 5 4 	 1 4 	 1 7 	 1 	 2 0 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 4 0 - 1 6 2 5 	 1 8 7 3 - 5 5 0 9 	 	 T E C H N O L   F O R E C A S T   S O C 	 T e c h n o l .   F o r e c a s t .   S o c .   C h a n g . 	 S E P 	 2 0 0 5 	 7 2 	 7 	 	 	 	 	 7 9 8 	 8 1 4 	 	 1 0 . 1 0 1 6 / j . t e c h f o r e . 2 0 0 5 . 0 2 . 0 0 1 	 	 1 7 	 B u s i n e s s ;   P l a n n i n g   &   D e v e l o p m e n t 	 B u s i n e s s   &   E c o n o m i c s ;   P u b l i c   A d m i n i s t r a t i o n 	 9 5 6 M N 	 W O S : 0 0 0 2 3 1 3 0 4 1 0 0 0 0 4 	 	 
 
 J 	 J o n e s ,   A W 	 	 	 	 J o n e s ,   A W 	 	 	 C r e m e   d e   l a   c r e m e   i n   f o r e n s i c   s c i e n c e   a n d   l e g a l   m e d i c i n e   -   T h e   m o s t   h i g h l y   c i t e d   a r t i c l e s ,   a u t h o r s   a n d   j o u r n a l s   1 9 8 1 - 2 0 0 3 	 I N T E R N A T I O N A L   J O U R N A L   O F   L E G A L   M E D I C I N E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 b i b l i o m e t r i c s ;   c i t a t i o n s ;   i m p a c t   f a c t o r s ;   f o r e n s i c   s c i e n c e ;   j o u r n a l s ;   l e g a l   m e d i c i n e 	 I M P A C T   F A C T O R S ;   C I T A T I O N - C L A S S I C S ;   I N D I C A T O R S ;   S C I E N T I S T S ;   Q U A L I T Y 	 T h e   i m p o r t a n c e   a n d   p r e s t i g e   o f   a   s c i e n t i f i c   j o u r n a l   i s   i n c r e a s i n g l y   b e i n g   j u d g e d   b y   t h e   n u m b e r   o f   t i m e s   t h e   a r t i c l e s   i t   p u b l i s h e s   a r e   c i t e d   o r   r e f e r e n c e d   i n   a r t i c l e s   p u b l i s h e d   i n   o t h e r   s c i e n t i f i c   j o u r n a l s .   C i t a t i o n   c o u n t i n g   i s   a l s o   u s e d   t o   a s s e s s   t h e   m e r i t s   o f   i n d i v i d u a l   s c i e n t i s t s   w h e n   a c a d e m i c   p r o m o t i o n   a n d   t e n u r e   a r e   d e c i d e d .   W i t h   t h e   h e l p   o f   T h o m s o n ,   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n   ( T h o m s o n   I S I )   a   c i t a t i o n   d a t a b a s e   w a s   c r e a t e d   f o r   s i x   l e a d i n g   f o r e n s i c   s c i e n c e   a n d   l e g a l   m e d i c i n e   j o u r n a l s .   T h i s   d a t a b a s e   w a s   u s e d   t o   d e t e r m i n e   t h e   m o s t   h i g h l y   c i t e d   a r t i c l e s ,   a u t h o r s ,   j o u r n a l s   a n d   t h e   m o s t   p r o l i f i c   a u t h o r s   o f   a r t i c l e s   i n   t h e   f o r e n s i c   s c i e n c e s .   T h e   f o r e n s i c   s c i e n c e   a n d   l e g a l   m e d i c i n e   j o u r n a l s   e v a l u a t e d   w e r e :   J o u r n a l   o f   F o r e n s i c   S c i e n c e s   ( J F S ) ,   F o r e n s i c   S c i e n c e   I n t e r n a t i o n a l   ( F S I ) ,   I n t e r n a t i o n a l   J o u r n a l   o f   L e g a l   M e d i c i n e   ( I J L M ) ,   M e d i c i n e ,   S c i e n c e   a n d   t h e   L a w   ( M S L ) ,   A m e r i c a n   J o u r n a l   o f   F o r e n s i c   M e d i c i n e   a n d   P a t h o l o g y   ( A J F M P ) ,   a n d   S c i e n c e   a n d   J u s t i c e   ( S & J ) .   T h e   r e s u l t i n g   f o r e n s i c s   d a t a b a s e   c o n t a i n e d   1 4 , 2 1 0   p a p e r s   p u b l i s h e d   b e t w e e n   1 9 8 1   a n d   2 0 0 3 .   T h i s   i n - d e p t h   b i b l i o m e t r i c   a n a l y s i s   h a s   i d e n t i f i e d   t h e   c r e m e   d e   l a   c r e m e   i n   f o r e n s i c   s c i e n c e   a n d   l e g a l   m e d i c i n e   i n   a   q u a n t i t a t i v e   a n d   o b j e c t i v e   w a y   b y   c i t a t i o n   a n a l y s i s   w i t h   f o c u s   o n   a r t i c l e s ,   a u t h o r s   a n d   j o u r n a l s 	 L i n k o p i n g   U n i v   H o s p ,   D e p t   F o r e n s   T o x i c o l ,   S - 5 8 1 8 5   L i n k o p i n g ,   S w e d e n 	 J o n e s ,   A W   ( r e p r i n t   a u t h o r ) ,   L i n k o p i n g   U n i v   H o s p ,   D e p t   F o r e n s   T o x i c o l ,   S - 5 8 1 8 5   L i n k o p i n g ,   S w e d e n . 	 w a y n e . j o n e s @ R M V . s e 	 J o n e s ,   A l a n / C - 2 2 0 2 - 2 0 0 8 	 	 	 	 A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   C O L E   S ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 9 ;   C r o n i n   B l a i s e ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S   R O L ;   C R O N I N   B . ,   2 0 0 0 ,   A S I S   M O N O G R A P H   S E R I E ;   F o s t e r   K e n n e t h ,   1 9 9 9 ,   J U D G I N G   S C I   S C I   K N O W ;   G a r f i e l d   E ,   1 9 9 6 ,   L I B R   Q U A R T ,   V 6 6 ,   P 4 4 9 ;   G A R F I E L D   E ,   1 9 8 7 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 5 7 ,   P 5 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 5 7 . 1 . 5 2 ;   G A R F I E L D   E ,   1 9 6 4 ,   S C I E N C E ,   V 1 4 4 ,   P 6 4 9 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 4 4 . 3 6 1 9 . 6 4 9 ;   G A R F I E L D   E ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 6 9 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 6 9 a 0 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G ;   G r i n n e l l   F . ,   1 9 9 2 ,   S C I   A T T I T U D E ;   H A M I L T O N   D P ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 9 8 6 4 0 9 ;   H A M I L T O N   D P ,   1 9 9 0 ,   S C I E N C E ,   V 2 5 0 ,   P 1 1 3 1 ;   H o r t o n   R ,   1 9 9 8 ,   L A N C E T ,   V 3 5 2 ,   P 8 9 2 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 0 0 3 0 - X ;   J o n e s   A .   H . ,   2 0 0 0 ,   E T H I C A L   I S S U E S   B I O M E ;   J o n e s   A W ,   2 0 0 3 ,   F O R E N S I C   S C I   I N T ,   V 1 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 3 7 9 - 0 7 3 8 ( 0 3 ) 0 0 0 4 2 - 2 ;   J O N E S   A W ,   1 9 9 5 ,   J   F O R E N S I C   S C I ,   V 4 0 ,   P 5 2 9 ;   J o n e s   A W ,   1 9 9 6 ,   A L C O H O L   A L C O H O L I S M ,   V 3 1 ,   P 1 1 ;   J o n e s   A W ,   1 9 9 8 ,   J   F O R E N S I C   S C I ,   V 4 3 ,   P 4 3 9 ;   K i n g   D A ,   2 0 0 4 ,   N A T U R E ,   V 4 3 0 ,   P 3 1 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 0 3 1 1 a ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   L a w r e n c e   P A ,   2 0 0 3 ,   N A T U R E ,   V 4 2 2 ,   P 2 5 9 ,   D O I   1 0 . 1 0 3 8 / 4 2 2 2 5 9 a ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   T R E N D S   B I O C H E M   S C I ,   V 1 4 ,   P 8 ,   D O I   1 0 . 1 0 1 6 / 0 9 6 8 - 0 0 0 4 ( 8 9 ) 9 0 0 7 7 - 7 ;   O P T H O F   T ,   2 0 0 1 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ;   R e y n o l d s   T M ,   2 0 0 4 ,   J   C L I N   P A T H O L ,   V 5 7 ,   P 4 2 6 ,   D O I   1 0 . 1 1 3 6 / j c p . 2 0 0 3 . 0 1 2 3 5 1 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S i n d e r m a n n   C .   J . ,   2 0 0 1 ,   W I N N I N G   G A M E S   S C I   P L ;   T e r a j i m a   K ,   2 0 0 3 ,   A C T A   A N A E S T H   S C A N D ,   V 4 7 ,   P 6 5 5 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 2 0 0 3 . 0 0 1 3 7 . x ;   W i l l i a m s   G ,   1 9 9 8 ,   B R I T   M E D   J ,   V 3 1 6 ,   P 1 0 7 9 ;   W u   R ,   2 0 0 4 ,   N A T U R E ,   V 4 2 8 ,   P 2 0 6 ,   D O I   1 0 . 1 0 3 8 / 4 2 8 2 0 6 a 	 3 1 	 1 4 	 1 5 	 0 	 5 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T R E E T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 9 3 7 - 9 8 2 7 	 	 	 I N T   J   L E G A L   M E D 	 I n t .   J .   L e g a l   M e d . 	 M A R 	 2 0 0 5 	 1 1 9 	 2 	 	 	 	 	 5 9 	 6 5 	 	 1 0 . 1 0 0 7 / s 0 0 4 1 4 - 0 0 4 - 0 5 1 2 - x 	 	 7 	 M e d i c i n e ,   L e g a l 	 L e g a l   M e d i c i n e 	 9 0 3 K V 	 W O S : 0 0 0 2 2 7 4 2 5 6 0 0 0 0 1 	 1 5 6 4 5 2 9 8 	 
 
 J 	 K a l t e n b o r n ,   K F ;   K u h n ,   K 	 	 	 	 K a l t e n b o r n ,   K F ;   K u h n ,   K 	 	 	 T h e   j o u r n a l   i m p a c t   f a c t o r   a s   a   p a r a m e t e r   f o r   t h e   e v a l u a t i o n   o f   r e s e a r c h e r s   a n d   r e s e a r c h 	 R E V I S T A   E S P A N O L A   D E   E N F E R M E D A D E S   D I G E S T I V A S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 i m p a c t   f a c t o r ;   r e s e a r c h ;   e v a l u a t i o n ;   b i b l i o m e t r i c s . ;   c o m m u n i c a t i o n   m e d i a 	 S C I E N C E - C I T A T I O N - I N D E X ;   S C I E N T I F I C   J O U R N A L S ;   R E S E A R C H   P E R F O R M A N C E ;   M E D I C A L   J O U R N A L S ;   G E R M A N ;   B I A S ;   P U B L I C A T I O N ;   I N D I C A T O R S ;   R A T E S ;   D A T A B A S E S 	 T h e   j o u r n a l   i m p a c t   f a c t o r   ( I F ) ,   w h i c h   i s   p u b l i s h e d   a n n u a l l y   b y   t h e   I n s t i t u t e   f o r   S c i e n t i f i c   I n f o r m a t i o n ( R )   ( U S A ) ,   i s   m e a n w h i l e   i n   w i d e s p r e a d   u s e   a s   a   s c i e n t o m e t r i c   p a r a m e t e r   f o r   t h e   e v a l u a t i o n   o f   r e s e a r c h   a n d   r e s e a r c h e r s   i n   G e r m a n y   a n d   o t h e r   E u r o p e a n   c o u n t r i e s .   T h e   p r e s e n t   a r t i c l e   s u b j e c t s   t h e   I F   t o   c r i t i c a l   a n a l y s i s .   I t   f i r s t   d e a l s   w i t h   p r o c e s s e s   o f   p r o d u c t i o n ,   t r a n s f e r ,   a n d   u s e   o f   m e d i c a l   k n o w l e d g e ,   b e c a u s e   t h e   I F   i n t e r v e n e s   i n   t h e s e   p r o c e s s e s   o n   a c c o u n t   o f   i t s   r e f l e x i v i t y .   S e c o n d a r y   e f f e c t s   o f   t h e   I F   r e s u l t i n g   f r o m   i t s   r e f l e x i v i t y   a r e   d i s c u s s e d   w i t h   t h e   f o c u s   o n   t h e   l e v e l   o f   t h e   a u t h o r ,   t h e   j o u r n a l   a n d   t h e   m e d i c a l   d i s c i p l i n e   a s   w e l l   a s   o n   s o c i a l   k n o w l e d g e   p r o c e s s e s   i n   s o c i e t y .   I n   a d d i t i o n ,   t h e   e x t e n t   t o   w h i c h   t h e   I F   i s   a p p r o p r i a t e   f o r   e v a l u a t i n g   t h e   q u a l i t y   o f   a   s p e c i f i c   a r t i c l e ,   o f   a   j o u r n a l   o r   o f   i n d i v i d u a l   a n d   c o l l e c t i v e   r e s e a r c h   a c h i e v e m e n t s   i s   d i s c u s s e d .   T h e   p r e s e n t   a r t i c l e   c a l l s   f o r   a )   r e s e a r c h   e v a l u a t i o n   i n   a c c o r d a n c e   w i t h   t h e   r e c o m m e n d a t i o n s   o f   t h e   D e u t s c h e   F o r s c h u n g s g r e m e i n s c h a f t   ( G e r m a n   R e s e a r c h   C o u n c i l ,   D F G )   a n d   o f   t h e   A r b e i t s g e m e i n s c h a f t   d e r   W i s s e n s c h a f t l i c h e n   M e d i z i n i s c h e n   F a c h g e s e l i s c h a f t e n   ( A s s o c i a t i o n   o f   t h e   S c i e n t i f i c   M e d i c a l   S o c i e t i e s ,   A W M F ) ;   a n d   b )   f o r   m o r e   i n t e n s i v e   o c c u p a t i o n   w i t h   a n d   o r g a n i z a t i o n   o f   m e d i c a l   k n o w l e d g e   p r o c e s s e s . 	 U n i v   M a r b u r g ,   F a c h b e r e i c h   M e d   &   K l i n i k u m ,   I n s t   M e d   I n f o r m a t ,   D - 3 5 0 3 7   M a r b u r g ,   G e r m a n y 	 K a l t e n b o r n ,   K F   ( r e p r i n t   a u t h o r ) ,   U n i v   M a r b u r g ,   F a c h b e r e i c h   M e d   &   K l i n i k u m ,   I n s t   M e d   I n f o r m a t ,   B u n s e n s t r   3 ,   D - 3 5 0 3 7   M a r b u r g ,   G e r m a n y . 	 k a l t e n b o @ m a i l e r . u n i - m a r b u r g . d e 	 	 	 	 	 A b t   H A ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 8 ,   P 6 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 0 3 1 8 3 7 9 ;   A d a m   D ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 2 6 ;   A d a m s   K M ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 6 0 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 5 - 1 ;   A L E W E L L   K ,   1 9 8 8 ,   E V A L U A T I O N   F O R S C H U N G ,   P 4 1 ;   B a d d e l e y   A ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 9 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 4 - X ;   B a r n a b y   D P ,   1 9 9 8 ,   A N N   E M E R G   M E D ,   V 3 1 ,   P 7 8 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 6 - 0 6 4 4 ( 9 8 ) 7 0 2 8 5 - 9 ;   B A U I N   S ,   1 9 9 1 ,   I N D I K A T O R E N   W I S S E N S C ,   P 9 1 ;   B e c k   U . ,   1 9 9 4 ,   R E F L E X I V E   M O D E R N I Z A T ;   B e l l e r   F K ,   1 9 9 9 ,   G E B U R T S H   F R A U E N H E I L K ,   V 5 9 ,   p M 5 3 ;   B l o c h   S ,   2 0 0 1 ,   A U S T   N Z   J   P S Y C H I A T ,   V 3 5 ,   P 5 6 3 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 6 1 4 . 2 0 0 1 . 0 0 9 1 8 . x ;   B L O I S   M S ,   1 9 8 4 ,   I N F O R M A T I O N   M E D   N A T U ;   B o n i t z   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 0 8 5 1 0 3 9 8 ;   B o r d o n s   M ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 0 4 0 7 8 7 6 ;   B o u r d i e u   P . ,   1 9 8 8 ,   H O M O   A C A D E M I C U S ;   B o u r k e   P ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 7 ,   P 4 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 2 5 9 ;   B R A H L E R   E ,   2 0 0 4 ,   S O Z   P R A V E N T I V M E D ,   V 4 9 ,   P 1 0 ;   B r a u n   T . ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 5 1 ;   B R O D Y   S ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 1 3 0 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 5 ) 9 1 9 0 4 - X ;   B U S S   K P ,   2 0 0 1 ,   N E U E   F O R M E N   W I S S E N S E ,   P 1 2 3 ;   C A L Z A   L ,   1 9 9 5 ,   N A T U R E ,   V 3 7 4 ,   P 4 9 2 ,   D O I   1 0 . 1 0 3 8 / 3 7 4 4 9 2 a 0 ;   C a s s i e r   M ,   2 0 0 2 ,   I N T   S O C   S C I   J ,   V 5 4 ,   P 8 3 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 2 4 5 1 . 0 0 3 6 1 ;   C a v a l l i   F ,   1 9 9 9 ,   A N N   O N C O L ,   V 1 0 ,   P 1 4 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 3 9 0 9 1 4 5 9 2 ;   C u r t i   M ,   2 0 0 1 ,   H A E M A T O L O G I C A ,   V 8 6 ,   P 1 0 1 5 ;   d e   M a r c h i   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 9 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 0 5 8 1 8 6 3 5 ;   D e c k e r   O ,   2 0 0 1 ,   Z   K L I N   P S Y C H O L   P S Y C H ,   V 4 9 ,   P 2 3 5 ;   D i c k   W ,   2 0 0 0 ,   A N A E S T H E S I S T ,   V 4 9 ,   P 3 7 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 0 1 0 0 7 0 1 0 4 ;   D i x o n   A K ,   2 0 0 0 ,   C L I N   R A D I O L ,   V 5 5 ,   P 4 1 4 ;   D e u t s c h e   F o r s c h u n g s g e m e i n s c h a f t ,   1 9 9 8 ,   E M P F   K O M M   S E L B S T K   W I ;   E g g e r   M ,   1 9 9 7 ,   L a n c e t ,   V 3 5 0 ,   P 3 2 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 7 ) 0 2 4 1 9 - 7 ;   E i c h   P ,   1 9 9 8 ,   P n e u m o l o g i e ,   V 5 2 ,   P 1 8 1 ;   E Y S E N B A C H   G ,   2 0 0 1 ,   M O D E R N E   G E S U N D H E I T S K ,   P 2 0 5 ;   F a s s o u l a k i   A ,   2 0 0 0 ,   B R I T   J   A N A E S T H ,   V 8 4 ,   P 2 6 6 ;   F a s s o u l a k i   A ,   2 0 0 1 ,   C A N   J   A N A E S T H ,   V 4 8 ,   P 9 5 3 ;   F i n z e n   A ,   1 9 9 8 ,   M E D   W E L T ,   V 4 9 ,   P 1 2 8 ;   F i n z e n   A ,   1 9 9 6 ,   P S Y C H I A T   P R A X ,   V 2 3 ,   P 1 ;   F I N Z E N   A ,   1 9 9 7 ,   S O Z I A L P S Y C H I A T R I S C H E ,   V 2 7 ,   P 1 0 ;   F I S C H   R ,   1 9 8 8 ,   E V A L U A T I O N   F O R S C H U N G ,   P 1 3 ;   F L E C K   L ,   1 9 9 4 ,   E N T S E H U N G   E N T W I C K L U G ;   F L E C K   L ,   1 9 8 3 ,   E R F A H R U G   T A T S A C H E   G E ;   F O S T E R   W R ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 1 3 0 1 ;   F R O M M E L   C ,   1 9 9 8 ,   W O R K S H   L E I S T   F O R S C H ,   V 2 8 ,   P 1 2 2 ;   F r o m t e r   E ,   1 9 9 9 ,   D t s c h   M e d   W o c h e n s c h r ,   V 1 2 4 ,   P 9 1 0 ;   G a l l a g h e r   E J ,   1 9 9 8 ,   A N N   E M E R G   M E D ,   V 3 1 ,   P 8 3 ,   D O I   1 0 . 1 0 1 6 / S 0 1 9 6 - 0 6 4 4 ( 9 8 ) 7 0 2 8 6 - 0 ;   G a n n o n   F ,   2 0 0 0 ,   E M B O   R E P ,   V 1 ,   P 2 9 3 ,   D O I   1 0 . 1 0 9 3 / e m b o - r e p o r t s / k v d 0 8 1 ;   G a r f i e l d   E ,   1 9 9 8 ,   U N F A L L C H I R U R G ,   V 1 0 1 ,   P 4 1 3 ;   G a r f i e l d   E ,   2 0 0 0 ,   C R O A T   M E D   J ,   V 4 1 ,   P 3 6 8 ;   G a r f i e l d   E ,   1 9 9 8 ,   R E V   I N V E S T   C L I N ,   V 5 0 ,   P 4 9 7 ;   G a r f i e l d   E ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 9 ;   G a r f i e l d   E ,   1 9 9 8 ,   S C I E N T I S T ,   V 1 2 ,   P 1 1 ;   G a r f i e l d   E ,   1 9 9 6 ,   B R I T   M E D   J ,   V 3 1 3 ,   P 4 1 1 ;   G a r f i e l d   E ,   1 9 9 4 ,   I M P A C T   F A C T O R ;   G A R F I E L D   E ,   1 9 9 1 ,   J O U R N A L O L O G Y   K E Y W O R D ,   P 1 8 5 ;   G E R O K   W ,   1 9 9 7 ,   M E D   P U B L I Z I S T I K   P R O B ,   P 1 ;   G I E S E L M A N N   G ,   1 9 9 8 ,   W O R K S H   L E I S T   F O R S C H ,   P 1 1 6 ;   G i l l i s   J M ,   1 9 9 9 ,   N A T   N E U R O S C I ,   V 2 ,   P 1 0 1 ,   D O I   1 0 . 1 0 3 8 / 5 6 5 6 ;   G i s v o l d   S E ,   1 9 9 9 ,   A C T A   A N A E S T H   S C A N D ,   V 4 3 ,   P 9 7 1 ,   D O I   1 0 . 1 0 3 4 / j . 1 3 9 9 - 6 5 7 6 . 1 9 9 9 . 4 3 1 0 0 1 . x ;   G l a n z e l   W ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 1 7 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 4 8 3 2 3 8 0 6 ;   G o l d e r   W ,   1 9 9 8 ,   R O F O - F O R T S C H R   R O N T G ,   V 1 6 9 ,   P 2 2 0 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 7 - 1 0 1 5 0 8 2 ;   G o l d s t e i n   J L ,   1 9 9 7 ,   J   C L I N   I N V E S T ,   V 9 9 ,   P 2 8 0 3 ,   D O I   1 0 . 1 1 7 2 / J C I 1 1 9 4 7 0 ;   G o w r i s h a n k a r   J ,   1 9 9 9 ,   N A T U R E ,   V 4 0 1 ,   P 3 2 1 ,   D O I   1 0 . 1 0 3 8 / 4 3 7 6 8 ;   G r a n g e   R I ,   1 9 9 9 ,   B J U   I N T ,   V 8 4 ,   P 6 0 1 ;   H A L L E R   U ,   1 9 9 9 ,   C H I R U R G   B D C ,   V 3 8 ,   P 3 9 ;   H A N S S O N   S ,   1 9 9 5 ,   L A N C E T ,   V 3 4 6 ,   P 9 0 6 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 9 5 ) 9 2 7 4 9 - 2 ;   H a r d e r   D R ,   2 0 0 0 ,   A M   J   P H Y S I O L - H E A R T   C ,   V 2 7 9 ,   p H 4 5 7 ;   H e c h t   F ,   1 9 9 8 ,   C A N C E R   G E N E T   C Y T O G E N ,   V 1 0 4 ,   P 7 7 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 5 - 4 6 0 8 ( 9 7 ) 0 0 4 5 9 - 7 ;   H e r f a r t h   C ,   1 9 9 6 ,   C H I R U R G ,   V 6 7 ,   P 2 9 7 ;   H o f b a u e r   R ,   2 0 0 1 ,   W I E N   K L I N   W O C H E N S C H R ,   V 1 1 3 ,   P 6 1 0 ;   H o o k   O ,   1 9 9 9 ,   S C A N D   J   R E H A B I L   M E D ,   V 3 1 ,   P 3 ;   H u r r e l m a n n   K . ,   2 0 0 1 ,   M O D E R N E   G E S U N D H E I T S K ;   J a c s o   P ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 2 - 6 ;   J a n s z   M C N ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 2 5 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 6 9 0 9 8 0 4 ;   J A N S Z   M C N ,   1 9 9 1 ,   I N D I K A T O R E N   W I S S E N S C ,   P 2 0 9 ;   J o s e p h   K S ,   1 9 9 9 ,   C A N   M E D   A S S O C   J ,   V 1 6 1 ,   P 9 7 7 ;   K A L T E N B O R N   K F ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 5 3 4 ;   K A L T E N B O R N   K F ,   2 0 0 1 ,   M O D E R N E   G E S U N D H E I T S K ,   P 3 6 ;   K A L T E N B O R N   K F ,   2 0 0 2 ,   Q U A L I T A T S M A N A G E M E N T ,   P 1 ;   K A L T E N B O R N   K F ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 1 3 7 ;   K A L T E N B O R N   K F ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 8 1 ;   K A L T E N B O R N   K F ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 1 ;   K i r o f f   G K ,   2 0 0 1 ,   A U S T   N Z   J   S U R G ,   V 7 1 ,   P 1 6 7 ,   D O I   1 0 . 1 0 4 6 / j . 1 4 4 0 - 1 6 2 2 . 2 0 0 1 . 0 2 0 5 8 . x ;   K o c h e n   M   M ,   1 9 9 8 ,   G e s u n d h e i t s w e s e n ,   V 6 0 ,   P 1 1 3 ;   K o l l e r   M ,   2 0 0 2 ,   C H I R U R G ,   V 7 3 ,   P 8 4 6 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 0 4 - 0 0 2 - 0 4 8 5 - 6 ;   K O L L E R   M ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N T ,   P 1 8 4 ;   L A N G E N B E C K   U ,   1 9 9 8 ,   M E D   G E N E T I K ,   V 1 0 ,   P 5 0 4 ;   L e h r l   S ,   2 0 0 0 ,   D E U T   M E D   W O C H E N S C H R ,   V 1 2 5 ,   P 1 1 0 9 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 0 - 7 5 7 1 ;   L e h r l   S ,   1 9 9 9 ,   S T R A H L E N T H E R   O N K O L ,   V 1 7 5 ,   P 1 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 7 4 2 3 5 6 ;   L E H R L   S ,   1 9 9 1 ,   S 2   M A S S   D U R C H S E T Z U N G ;   L E R C H   M ,   2 0 0 1 ,   M O D E R N E   G E S U N D H E I T S K ,   P 2 2 4 ;   L e w i s o n   G ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 4 6 0 8 7 8 5 ;   L E W I S O N   G ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 3 6 1 ;   L i n d n e r   U K ,   1 9 9 7 ,   U N F A L L C H I R U R G ,   V 1 0 0 ,   P 2 5 3 ;   L I N D N E R   U K ,   1 9 9 8 ,   W O R K S H   L E I S T   F O R S C H ,   P 7 5 ;   L o r e n z   W ,   1 9 9 8 ,   C H I R U R G ,   V 6 9 ,   P 3 2 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 0 4 0 0 5 0 4 2 1 ;   L o w y   C ,   1 9 9 7 ,   L A N C E T ,   V 3 5 0 ,   P 1 0 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 5 ) 6 4 0 9 1 - 3 ;   M a b e   M ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 1 4 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 2 0 9 1 3 1 2 4 ;   M a r x   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 5 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 9 8 9 1 1 7 9 2 ;   M A T T E R N   F ,   2 0 0 2 ,   I N F O R M A T I K   S P E K T R U M ,   V 2 5 ,   P 2 2 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 8 7 0 1 0 0 2 0 2 ;   M e e n e n   N   M ,   1 9 9 7 ,   U n f a l l c h i r u r g i e ,   V 2 3 ,   P 1 2 8 ;   M e r t o n   R .   K . ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ,   P 4 3 9 ;   M E T C A L F E   N B ,   1 9 9 5 ,   N A T U R E ,   V 3 7 6 ,   P 7 2 0 ,   D O I   1 0 . 1 0 3 8 / 3 7 6 7 2 0 b 0 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   M o e d   H F ,   1 9 9 9 ,   S C I E N T O M E T R I C S ,   V 4 6 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 6 1 3 ;   M o e d   H F ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 3 2 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 9 5 1 1 1 6 2 2 ;   M U H L B A C H E R   A ,   2 0 0 1 ,   M O D E R N E   G E S U N D H E I T S K ,   P 2 1 1 ;   N e b e l   B . ,   2 0 0 1 ,   I n f o r m a t i k   S p e k t r u m ,   V 2 4 ,   D O I   1 0 . 1 0 0 7 / s 0 0 2 8 7 0 1 0 0 1 7 0 ;   N i e t h a r d   F U ,   1 9 9 6 ,   Z   O R T H O P   G R E N Z G E B ,   V 1 3 4 ,   P 2 9 3 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 8 - 1 0 3 9 7 6 3 ;   N I T Z S C H E   J ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 7 1 ;   N I T Z S C H E   J ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 3 1 4 ;   N I T Z S H C E   J ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S S E N S ,   P 1 9 4 ;   N I T Z S H C E   J ,   2 0 0 1 ,   M E D   B I B L I O T H E K   I N F O R ,   V 1 ,   P 1 0 ;   N I T Z S H C E   J ,   2 0 0 1 ,   M E D   B I B L I O T H E K   I N F O R ,   V 1 ,   P 2 3 ;   O p t h o f   T ,   2 0 0 2 ,   C A R D I O V A S C   R E S ,   V 5 5 ,   P 2 1 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 0 2 ) 0 0 5 0 0 - X ;   O p t h o f   T ,   1 9 9 7 ,   C A R D I O V A S C   R E S ,   V 3 3 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 8 - 6 3 6 3 ( 9 6 ) 0 0 2 1 5 - 5 ;   P a n t e l   J ,   1 9 9 9 ,   N E R V E N A R Z T ,   V 7 0 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 1 5 0 0 5 0 4 3 5 ;   P e i p e r   M ,   1 9 9 7 ,   L a n g e n b e c k s   A r c h   C h i r   S u p p l   K o n g r e s s b d ,   V 1 1 4 ,   P 3 6 1 ;   P i t t l e r   M H ,   2 0 0 0 ,   J   C L I N   E P I D E M I O L ,   V 5 3 ,   P 4 8 5 ,   D O I   1 0 . 1 0 1 6 / S 0 8 9 5 - 4 3 5 6 ( 9 9 ) 0 0 2 2 0 - 6 ;   R a s p e   H ,   1 9 9 9 ,   M E D   K L I N ,   V 9 4 ,   P 7 0 2 ;   R a y   J ,   2 0 0 0 ,   A M   J   M E D ,   V 1 0 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 0 2 - 9 3 4 3 ( 0 0 ) 0 0 4 5 0 - 2 ;   R e e s   J ,   2 0 0 0 ,   L A N C E T ,   V 3 5 6 ,   P 8 4 9 ,   D O I   1 0 . 1 0 1 6 / S 0 1 4 0 - 6 7 3 6 ( 0 0 ) 0 2 6 6 6 - 0 ;   R e y - R o c h a   J ,   2 0 0 1 ,   C O R T E X ,   V 3 7 ,   P 5 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 0 - 9 4 5 2 ( 0 8 ) 7 0 6 0 3 - 8 ;   R o s t a m i - H o d j e g a n   A ,   2 0 0 1 ,   B R I T   J   C L I N   P H A R M A C O ,   V 5 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 3 6 5 - 2 1 2 5 . 2 0 0 1 . 0 1 3 4 9 . x ;   R o u s s e a u   R ,   2 0 0 1 ,   J   D O C ,   V 5 7 ,   P 3 4 9 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 0 8 6 ;   S a i z S a l i n a s   J I ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 b 0 ;   S c h e i d   D C ,   2 0 0 2 ,   F A M   M E D ,   V 3 4 ,   P 3 4 ;   S c h o o n b a e r t   D ,   1 9 9 8 ,   N A T U R E ,   V 3 9 1 ,   P 2 2 2 ,   D O I   1 0 . 1 0 3 8 / 3 4 5 1 9 ;   S C H W A R Z   I ,   1 9 9 9 ,   I N F O R M A T I O N S   W I S E N S T ,   P 2 0 7 ;   S e g l e n   P O ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 9 8 ;   S e g l e n   P O ,   1 9 9 8 ,   A C T A   O R T H O P   S C A N D ,   V 6 9 ,   P 2 2 4 ,   D O I   1 0 . 3 1 0 9 / 1 7 4 5 3 6 7 9 8 0 9 0 0 0 9 2 0 ;   S e g l e n   P O ,   1 9 9 7 ,   A L L E R G Y ,   V 5 2 ,   P 1 0 5 0 ,   D O I   1 0 . 1 1 1 1 / j . 1 3 9 8 - 9 9 9 5 . 1 9 9 7 . t b 0 0 1 7 5 . x ;   S e g l e n   P e r ,   1 9 9 1 ,   I N D I K A T O R E N   W I S S E N S C ,   P 7 2 ;   S m i t h   R ,   1 9 9 7 ,   B R I T   M E D   J ,   V 3 1 4 ,   P 4 6 3 ;   S t e g m a n n   J ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 8 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 6 2 8 1 5 7 8 8 ;   S t e g m a n n   J ,   1 9 9 7 ,   N A T U R E ,   V 3 9 0 ,   P 5 5 0 ,   D O I   1 0 . 1 0 3 8 / 3 7 4 6 3 ;   S T O S S E L   A ,   2 0 0 1 ,   M O D E R N E   G E S U N D H E I T S K ,   P 2 3 4 ;   T E S T A   J ,   2 0 0 1 ,   I S I   D A T A B A S E   J   S E L E C ;   v a n   D a l e n   H P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 0 ,   P 4 5 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 0 8 3 1 7 1 8 ;   V a n   L e e u w e n   T N ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 4 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 0 8 7 0 9 6 9 4 ;   v a n   L e e u w e n   T N ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 4 9 7 1 9 4 8 4 ;   v a n   L e e u w e n   T N ,   1 9 9 9 ,   J   I N F O R M   S C I ,   V 2 5 ,   P 4 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 9 0 2 5 0 0 6 0 5 ;   V I N K L E R   P ,   1 9 9 5 ,   S C I E N T O M E T R I C S ,   V 3 2 ,   P 1 0 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 8 7 ;   V i n k l e r   P ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 3 ,   P 2 6 7 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 6 0 7 2 6 5 3 2 ;   W a l t e r   S ,   2 0 0 1 ,   A U S T   N Z   J   P S Y C H I A T ,   V 3 5 ,   P 2 4 0 ;   W h i t e h o u s e   G ,   2 0 0 1 ,   B R I T   J   R A D I O L ,   V 7 4 ,   P 1 ;   W i l l i a m s o n   A   R ,   2 0 0 1 ,   T r e n d s   G e n e t ,   V 1 7 ,   P 6 7 0 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 8 - 9 5 2 5 ( 0 1 ) 0 2 4 9 1 - X ;   W i n k m a n n   G ,   2 0 0 0 ,   D E U T   M E D   W O C H E N S C H R ,   V 1 2 5 ,   P 1 1 3 3 ,   D O I   1 0 . 1 0 5 5 / s - 2 0 0 0 - 7 5 8 1 ;   W i n n a c k e r   E   L ,   2 0 0 0 ,   D t s c h   M e d   W o c h e n s c h r ,   V 1 2 5 ,   p A 1 8 ;   1 9 9 8 ,   N A T   N E U R O S C I ,   V 1 ,   P 6 4 1 ;   2 0 0 1 ,   L A N C E T ,   V 3 5 8 ,   P 1 5 6 3 	 1 4 8 	 1 4 	 1 6 	 1 	 1 1 	 A R A N   E D I C I O N E S ,   S   A 	 M A D R I D 	 C A S T E L L O ,   1 2 8 ,   1 O ,   2 8 0 0 6   M A D R I D ,   S P A I N 	 1 1 3 0 - 0 1 0 8 	 	 	 R E V   E S P   E N F E R M   D I G 	 R e v .   E s p .   E n f e r m .   D i g . 	 J U L 	 2 0 0 4 	 9 6 	 7 	 	 	 	 	 4 6 0 	 4 7 6 	 	 	 	 1 7 	 G a s t r o e n t e r o l o g y   &   H e p a t o l o g y 	 G a s t r o e n t e r o l o g y   &   H e p a t o l o g y 	 8 5 6 Q V 	 W O S : 0 0 0 2 2 4 0 6 0 6 0 0 0 0 4 	 	 
 
 J 	 O l u i c V u k o v i c ,   V 	 	 	 	 O l u i c V u k o v i c ,   V 	 	 	 B r a d f o r d ' s   d i s t r i b u t i o n :   F r o m   t h e   c l a s s i c a l   b i b l i o m e t r i c   ' ' l a w ' '   t o   t h e   m o r e   g e n e r a l   s t o c h a s t i c   m o d e l s 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 	 S T A T I O N A R Y   S C I E N T O M E T R I C   D I S T R I B U T I O N S ;   J O U R N A L   P R O D U C T I V I T Y   D I S T R I B U T I O N ;   S I M O N - Y U L E   A P P R O A C H ;   I N F O R M E T R I C   D I S T R I B U T I O N S ;   S C I E N T I F I C   P R O D U C T I V I T Y ;   D Y N A M I C   B E H A V I O R ;   T H E O R E T I C A L   F O U N D A T I O N ;   G R O O S   D R O O P ;   L O T K A   L A W ;   Z I P F S   L A W 	 T h e   s i g n i f i c a n t   q u a l i t a t i v e   s h i f t   f r o m   t h e   c o n v e n t i o n a l   c o n c e p t u a l   f r a m e w o r k   w i t h i n   w h i c h   t h e   B r a d f o r d   d i s t r i b u t i o n   h a s   u s u a l l y   b e e n   c o n s i d e r e d   b e g i n s   b y   a t t e m p t i n g   t o   b r i n g   i t   t o   a   p a r   w i t h   s o m e   w e l l - k n o w n   d i s t r i b u t i o n s   a n d   l a w s   w i t h i n   a n d   o u t s i d e   b i b l i o m e t r i c s .   T h i s   a r t i c l e   o u t l i n e s   s o m e   o f   t h e   i m p o r t a n t   t e n d e n c i e s   t h a t   h e l p e d   t h i s   d e v e l o p m e n t ,   f o c u s i n g   o n   t h o s e   o r i e n t e d   t o w a r d   m o r e   f u n d a m e n t a l   p r o b l e m s   s u c h   a s   t h e   i m p l e m e n t a t i o n   o f   g e n e r a l   m o d e l s   t h a t   c a n   e x p l a i n   t h e   p r o c e s s   b y   w h i c h   t h e   B r a d f o r d   a n d   t h e   r e l a t e d   d i s t r i b u t i o n s   a r e   g e n e r a t e d .   S h i f t i n g   o f   t h e   f o c u s   a n d   s c o p e   t o   t h e s e   i s s u e s   r e p r e s e n t s   a   s t r o n g   c u r r e n t   t e n d e n c y ,   t h o u g h   s o m e   o f   t h e   b a s i c   a s s u m p t i o n s   r e g a r d i n g   t h i s   h a d   b e e n   a d v a n c e d   a b o u t   5 0   y e a r s   a g o .   T h e   r e a s o n s   f o r   t h e i r   s l o w   i m p l e m e n t a t i o n   i n   t h e   r e s e a r c h   c o n c e p t s   a r e   a l s o   d i s c u s s e d . 	 	 O l u i c V u k o v i c ,   V   ( r e p r i n t   a u t h o r ) ,   P R O R E S   L T D , N O V A   C E S T A   2 8 , Z A G R E B   1 0 0 0 0 , C R O A T I A . 	 	 	 	 	 	 A J I F E R U K E   I ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 2 7 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 5 ) 4 2 : 4 < 2 7 9 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - O ;   A J I F E R U K E   I ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0   S ,   P 1 ;   A S A I   I ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 1 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 2 0 6 ;   B A S U   A ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 9 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 8 ) 4 3 : 7 < 4 9 4 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - F ;   B O O K S T E I N   A ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 7 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 7 ) 4 1 : 5 < 3 7 6 : : A I D - A S I 9 > 3 . 0 . C O ; 2 - E ;   B O O K S T E I N   A ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 3 6 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 7 ) 4 1 : 5 < 3 6 8 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - C ;   B O O K S T E I N   A ,   1 9 7 9 ,   C O L L E C T I O N   M A N A G E M E N ,   V 3 ,   P 1 5 1 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B R A G A   G M ,   1 9 7 8 ,   P   A M   S O C   I N F O R M   S C I ,   V 1 5 ,   P 5 1 ;   B R O O K E S   B C ,   1 9 6 8 ,   J   D O C ,   V 2 4 ,   P 2 4 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 5 7 ;   B R O O K E S   B C ,   1 9 8 1 ,   J   D O C ,   V 3 7 ,   P 7 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 0 8 ;   B R O O K E S   B C ,   1 9 6 9 ,   N A T U R E ,   V 2 2 4 ,   P 9 5 3 ,   D O I   1 0 . 1 0 3 8 / 2 2 4 9 5 3 a 0 ;   B R O O K E S   B C ,   1 9 8 4 ,   J   D O C ,   V 4 0 ,   P 1 2 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 6 1 ;   B R O O K E S   B C ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 1 0 4 ;   B R O O K E S   B C ,   1 9 7 7 ,   J   D O C ,   V 3 3 ,   P 1 8 0 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 4 1 ;   B R O O K E S   B C ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 2 9 ;   B R O O K E S   B C ,   1 9 8 2 ,   S T U D I E S   Z I P F S   L A W ,   P 6 5 ;   B R O O K S   T A ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 0 0 1 6 0 0 1 0 9 ;   B U R R E L L   Q ,   1 9 8 2 ,   J   D O C ,   V 3 8 ,   P 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 1 8 ;   B U R R E L L   Q ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 1 1 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 3 ;   B U R R E L L   Q L ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 1 6 4 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 4 ) 4 1 : 3 < 1 6 4 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - K ;   B U R R E L L   Q L ,   1 9 8 5 ,   J   D O C ,   V 4 1 ,   P 2 4 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 7 2 ;   B U R R E L L   Q L ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 6 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 0 3 ) 4 4 : 2 < 6 1 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - J ;   B U R R E L L   Q L ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 5 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 3 1 ;   B U R R E L L   Q L ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 9 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 9 - I ;   B U R R E L L   Q L ,   1 9 8 8 ,   J   D O C ,   V 4 4 ,   P 1 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 1 6 ;   B U R R E L L   Q L ,   1 9 8 2 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 4 5 ,   P 4 3 9 ,   D O I   1 0 . 2 3 0 7 / 2 9 8 2 0 9 6 ;   B U R R E L L   Q L ,   1 9 8 7 ,   J   D O C ,   V 4 3 ,   P 2 4 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 9 9 ;   B U R R E L L   Q L ,   1 9 9 1 ,   3   I N T   C   I N F   B A N G   I N D ;   E g g h e   L . ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ,   P 4 3 ;   B U R R E L L   Q L ,   1 9 9 1 ,   S C I E N T O M E T R I C S ,   V 2 1 ,   P 1 1 7 ;   C A N E   V R ,   1 9 7 7 ,   J   A P P L   P R O B A B ,   V 1 4 ,   P 4 7 5 ,   D O I   1 0 . 2 3 0 7 / 3 2 1 3 4 5 0 ;   C h a m p e r n o w n e   D G ,   1 9 5 3 ,   E C O N   J ,   V 6 3 ,   P 3 1 8 ,   D O I   1 0 . 2 3 0 7 / 2 2 2 7 1 2 7 ;   C H E N   Y S ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 4 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 1 ) 4 0 : 1 < 4 5 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - S ;   C H E N   Y S ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 3 7 0 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 6 ) 4 6 : 5 < 3 7 0 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - J ;   C H E N   Y S ,   1 9 8 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 5 ,   P 5 2 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 9 ) 9 0 0 2 3 - X ;   C H E N   Y S ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 5 3 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 3 8 - 8 ;   C H E N   Y S ,   1 9 9 3 ,   S C I E N T O M E T R I C S ,   V 2 8 ,   P 1 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 9 9 ;   C H E N   Y S ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 3 0 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 9 ) 3 7 : 5 < 3 0 7 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 8 ;   C H E N   Y S ,   1 9 9 2 ,   C Y B E R N E T I C A ,   V 3 5 ,   P 1 0 3 ;   C O C K S   T M ,   1 9 8 6 ,   J   I N F O R M   S C I ,   V 1 2 ,   P 4 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 6 0 1 2 0 0 1 0 8 ;   E g g h e   L ,   1 9 9 6 ,   M A T H   C O M P U T   M O D E L ,   V 2 3 ,   P 9 3 ,   D O I   1 0 . 1 0 1 6 / 0 8 9 5 - 7 1 7 7 ( 9 6 ) 0 0 0 0 5 - 2 ;   E G G H E   L ,   1 9 8 8 ,   J   D O C ,   V 4 4 ,   P 5 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 8 1 9 ;   E G G H E   L ,   1 9 9 0 ,   J   I N F O R M   S C I ,   V 1 6 ,   P 1 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 0 0 1 6 0 0 1 0 5 ;   E G G H E   L ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 4 ,   P 4 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 0 5 ;   E G G H E   L ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 6 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 1 0 ) 4 1 : 7 < 4 6 9 : : A I D - A S I 1 > 3 . 0 . C O ; 2 - P ;   E G G H E   L ,   1 9 8 5 ,   J   D O C ,   V 4 1 ,   P 1 7 3 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 8 0 ;   E G G H E   L ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 4 2 6 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 0 7 ) 4 6 : 6 < 4 2 6 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - B ;   E G G H E   L ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 9 7 ;   E g g h e   L ,   1 9 9 0 ,   I N T R O   I N F O R M E T R I C S   Q ;   F A I R T H O R . R A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 1 9 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 8 1 ;   F E D O R O W I C Z   J ,   1 9 8 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 3 ,   P 2 8 5 ;   F e l l e r   W ,   1 9 4 3 ,   A N N   M A T H   S T A T ,   V 1 4 ,   P 3 8 9 ,   D O I   1 0 . 1 2 1 4 / a o m s / 1 1 7 7 7 3 1 3 5 9 ;   G L A N Z E L   W ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 1 3 9 ;   G O O D   I J ,   1 9 5 3 ,   B I O M E T R I K A ,   V 4 0 ,   P 2 3 7 ,   D O I   1 0 . 2 3 0 7 / 2 3 3 3 3 4 4 ;   G r e e n w o o d   M ,   1 9 2 0 ,   J   R O Y   S T A T I S T   S O C     A ,   P 2 5 5 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 1 0 8 0 ;   G R O O S   O V ,   1 9 6 7 ,   A M   D O C ,   V 1 8 ,   P 4 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 8 0 1 0 8 ;   H A I G H T   F A ,   1 9 7 4 ,   J   M A T H   P S Y C H O L ,   V 1 1 ,   P 2 3 7 ,   D O I   1 0 . 1 0 1 6 / 0 0 2 2 - 2 4 9 6 ( 7 4 ) 9 0 0 2 0 - 0 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 8 0 0 3 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 1 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 1 0 5 9 ;   H A I T U N   S D ,   1 9 8 2 ,   S C I E N T O M E T R I C S ,   V 4 ,   P 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 4 4 8 ;   H A S P E R S   J H ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 3 ;   H E R D A N   G ,   1 9 6 1 ,   A P P L   S T A T ,   V 2 ,   P 6 5 ;   H I L L   B M ,   1 9 7 4 ,   J   A M   S T A T   A S S O C ,   V 6 9 ,   P 1 0 1 7 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 6 1 8 2 ;   H I L L   B M ,   1 9 7 0 ,   J   A M   S T A T   A S S O C ,   V 6 5 ,   P 1 2 2 0 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 4 2 8 8 ;   H U B E R T   J J ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 1 5 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 3 1 1 ;   H U B E R T   J J ,   1 9 8 1 ,   L I B R   T R E N D S ,   V 3 0 ,   P 6 5 ;   I R W I N   J O ,   1 9 6 8 ,   J   R   S T A T   S O C   S E R   A - G ,   V 1 3 1 ,   P 2 0 5 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 3 8 4 2 ;   I R W I N   J O ,   1 9 7 5 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 8 ,   P 2 0 4 ,   D O I   1 0 . 2 3 0 7 / 2 9 8 4 6 4 8 ;   I R W I N   J O ,   1 9 7 5 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 8 ,   P 3 7 4 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 4 5 8 2 ;   I R W I N   J O ,   1 9 7 5 ,   J   R O Y   S T A T   S O C   A   S T A ,   V 1 3 8 ,   P 1 8 ,   D O I   1 0 . 2 3 0 7 / 2 3 4 5 2 4 7 ;   I R W I N   J O ,   1 9 6 3 ,   J   R O Y A L   S T A T   S O C   A ,   V 2 6 ,   P 1 ;   K A N T O R   P B ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 2 0 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 4 0 9 ;   K A R M E S H U   N C ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 2 3 3 ;   K E N D A L L   D G ,   1 9 4 9 ,   J   R O Y   S T A T   S O C   B ,   V 1 1 ,   P 2 3 0 ;   K E N D A L L   M G ,   1 9 6 1 ,   J   R   S T A T   S O C   S E R   A - G ,   V 1 2 4 ,   P 1 ;   K E N D A L L   M G ,   1 9 6 0 ,   O P E R   R E S   Q U A R T ,   V 1 1 ,   P 3 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 7 1 7 7 ;   L e i m k u h l e r   F .   F . ,   1 9 8 8 ,   I n f o r m e t r i c s   8 7 / 8 8 .   S e l e c t   P r o c e e d i n g s   o f   t h e   F i r s t   I n t e r n a t i o n a l   C o n f e r e n c e   o n   B i b l i o m e t r i c s   a n d   T h e o r e t i c a l   A s p e c t s   o f   I n f o r m a t i o n   R e t r i e v a l ;   L E I M K U H L E R   F F ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 2 8 5 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 9 9 ;   L E I M K U H L E R   F F ,   1 9 6 7 ,   J   D O C ,   V 2 3 ,   P 1 9 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 4 3 0 ;   L o t k a   A .   J . ,   1 9 2 6 ,   J   W A S H I N G T O N   A C A D   S C ,   V 1 6 ,   P 3 1 7 ;   M A I A   M J F ,   1 9 8 4 ,   J   D O C ,   V 4 0 ,   P 2 0 6 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 7 6 5 ;   M A N D E L B R . B ,   1 9 6 5 ,   I E E E   T   C O M M U N   T E C H N ,   V C O 1 3 ,   P 7 1 ,   D O I   1 0 . 1 1 0 9 / T C O M . 1 9 6 5 . 1 0 8 9 0 9 0 ;   M A N D E L B R O T   B ,   1 9 6 1 ,   I N F O R M   C O N T R O L ,   V 4 ,   P 1 9 8 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 6 1 ) 8 0 0 0 8 - 9 ;   M a n d e l b r o t   B ,   1 9 5 9 ,   I N F O R M   C O N T R ,   V 2 ,   P 9 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 5 9 ) 9 0 0 9 8 - 1 ;   M A N D E L B R O T   B ,   1 9 5 3 ,   P   S   A P P L   C O M M   T H E O R ,   P 4 8 6 ;   M O R S E   P M ,   1 9 7 9 ,   O P E R   R E S ,   V 2 7 ,   P 1 8 7 ,   D O I   1 0 . 1 2 8 7 / o p r e . 2 7 . 1 . 1 8 7 ;   M O R S E   P M ,   1 9 8 1 ,   S C I E N T O M E T R I C S ,   V 3 ,   P 4 1 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 4 3 5 ;   M O R S E   P M ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 4 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 1 0 6 ;   M O R S E   P M ,   1 9 7 9 ,   O P E R   R E S ,   V 2 7 ,   P 6 9 3 ,   D O I   1 0 . 1 2 8 7 / o p r e . 2 7 . 4 . 6 9 3 ;   M O R S E   P M ,   1 9 6 8 ,   L I B R A R Y   E F F E C T I V E N E S ;   M o r s e   P .   M . ,   1 9 7 6 ,   C O L L E C T I O N   M A N A G E M E N ,   V 1 ,   P 4 7 ,   D O I   1 0 . 1 3 0 0 / J 1 0 5 v 0 1 n 0 3 _ 0 4 ;   N A R A N A N   S ,   1 9 7 0 ,   N A T U R E ,   V 2 2 7 ,   P 6 3 1 ,   D O I   1 0 . 1 0 3 8 / 2 2 7 6 3 1 a 0 ;   O L U I C V U K O V I C   V ,   1 9 9 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 6 ,   P 7 9 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 5 1 2 ) 4 6 : 1 0 < 7 9 8 : : A I D - A S I 1 8 > 3 . 0 . C O ; 2 - T ;   O L U I C V U K O V I C   V ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 4 1 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 0 7 ) 4 3 : 6 < 4 1 2 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - 2 ;   O L U I C V U K O V I C   V ,   1 9 9 1 ,   J   I N F O R M   S C I ,   V 1 7 ,   P 2 8 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 1 0 1 7 0 0 5 0 4 ;   O N E I L L   E T ,   1 9 7 3 ,   P   A M   S O C   I N F O R M   S C I ,   V 1 0 ,   P 1 7 7 ;   O R D   K ,   1 9 7 5 ,   S T A T   D I S T R I B U T I O N S   S ,   V 2 ,   P 1 ;   P A R E T O   V ,   1 9 9 5 ,   S T A T   D I S T R I B U T I O N S   S ,   V 2 ,   P 1 ;   P R A U N L I C H   P ,   1 9 7 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 9 ,   P 5 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 9 0 2 0 3 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   Q I U   L W ,   1 9 9 0 ,   S C I E N T O M E T R I C S ,   V 1 9 ,   P 2 2 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 9 5 3 4 9 ;   Q I U   L W ,   1 9 9 0 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 6 ,   P 6 5 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 0 ) 9 0 1 0 8 - E ;   R A O   I K R ,   1 9 8 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 1 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 1 0 2 0 8 ;   R A O   J K R ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0   S ,   P 2 5 1 ;   R O U S S E A U   R ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 1 9 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 4 ) 4 1 : 3 < 1 9 7 : : A I D - A S I 6 > 3 . 0 . C O ; 2 - X ;   R O U S S E A U   R ,   1 9 9 4 ,   I N F O R M   P R O C E S S   M A N A G ,   V 3 0 ,   P 2 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 4 ) 9 0 0 6 9 - 8 ;   S C H U B E R T   A ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 2 9 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 7 ) 4 0 : 4 < 2 9 1 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - W ;   S C H U B E R T   A ,   1 9 8 4 ,   S C I E N T O M E T R I C S ,   V 6 ,   P 1 4 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 7 5 9 ;   S H O K L E Y   W ,   1 9 5 7 ,   P   I R E ,   V 4 5 ,   P 2 7 9 ;   S I C H E L   H S ,   1 9 7 5 ,   J   A M   S T A T   A S S O C ,   V 7 0 ,   P 5 4 2 ,   D O I   1 0 . 2 3 0 7 / 2 2 8 5 9 3 0 ;   S I C H E L   H S ,   1 9 8 5 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 6 ,   P 3 1 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 6 0 5 0 6 ;   S I C H E L   H S ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 8 - H ;   S I M O N   H A ,   1 9 5 5 ,   B I O M E T R I K A ,   V 4 2 ,   P 4 2 5 ;   S I M O N   H A ,   1 9 6 1 ,   I N F O R M   C O N T R O L ,   V 4 ,   P 2 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 6 1 ) 8 0 0 0 9 - 0 ;   S i m o n   H . A . ,   1 9 6 0 ,   I N F O R M   C O N T R ,   V 3 ,   P 8 0 ,   D O I   1 0 . 1 0 1 6 / S 0 0 1 9 - 9 9 5 8 ( 6 0 ) 9 0 3 0 2 - 8 ;   S I M O N   H A ,   1 9 6 3 ,   B E H A V   S C I ,   V 1 7 ,   P 2 0 3 ;   T A B A H   A N ,   1 9 9 0 ,   I N F O R M E T R I C S   8 9   9 0 ,   P 2 8 1 ;   T A G U E   J ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 2 8 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 4 0 8 ;   V I C K E R Y   B C ,   1 9 4 8 ,   J   D O C ,   V 4 ,   P 1 9 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 1 3 3 ;   V L A C H Y   J ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 5 2 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 3 4 ;   V L A C H Y   J ,   1 9 8 0 ,   S C I   Y U G O S L ,   V 6 ,   P 1 5 5 ;   W I L K I N S O . E A ,   1 9 7 2 ,   J   D O C ,   V 2 8 ,   P 1 2 2 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 5 3 4 ;   W I L L I A M S   E B ,   1 9 4 3 ,   A N N   E U G E N ,   V 1 2 ,   P 1 4 3 ;   W I L L I S   J C ,   1 9 2 2 ,   P H I L O S   T   R O Y   S O C   B ,   V 2 1 3 ,   P 2 1 ;   Y A B L O N S K Y   A I ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 5 9 7 ;   Y u l e   G .   V . ,   1 9 2 4 ,   P h i l o s o p h i c a l   T r a n s a c t i o n s   o f   t h e   R o y a l   S o c i e t y   L o n d o n   B ,   V 2 1 3 ,   P 2 1 ;   Y U L E   G U ,   1 9 4 4 ,   A P P L   S T A T ,   V 2 ,   P 6 5 ;   Z I P F   G K ,   1 9 5 5 ,   B I O M E T R I K A ,   V 4 2 ,   P 4 2 5 	 1 2 9 	 1 4 	 1 4 	 1 	 3 	 J O H N   W I L E Y   &   S O N S   I N C 	 N E W   Y O R K 	 6 0 5   T H I R D   A V E ,   N E W   Y O R K ,   N Y   1 0 1 5 8 - 0 0 1 2 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 S E P 	 1 9 9 7 	 4 8 	 9 	 	 	 	 	 8 3 3 	 8 4 2 	 	 1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 0 9 ) 4 8 : 9 < 8 3 3 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - S 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 X R 1 1 6 	 W O S : A 1 9 9 7 X R 1 1 6 0 0 0 0 7 	 	 
 
 J 	 A l v a r e z ,   P ;   P u l g a r i n ,   A 	 	 	 	 A l v a r e z ,   P ;   P u l g a r i n ,   A 	 	 	 T h e   R a s c h   m o d e l .   M e a s u r i n g   t h e   i m p a c t   o f   s c i e n t i f i c   j o u r n a l s :   A n a l y t i c a l   c h e m i s t r y 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   P U B L I C A T I O N S ;   I N D I C A T O R S ;   T O O L 	 T h i s   a r t i c l e   f o c u s e s   o n   a   f r e s h   w a y   t o   d e t e r m i n e   a   r a n k i n g   o f   s c i e n c e   j o u r n a l s   a c c o r d i n g   t o   t h e   ' ' n u m b e r   o f   c i t a t i o n s - t o   a n d   i t e m s - p u b l i s h e d , ' '   d a t a   u s e d   b y   S C I   J C R   o f   I S I   t o   d e t e r m i n e   j o u r n a l   r a n k i n g   b y   ' ' i m p a c t   f a c t o r . ' '   T h i s   i s   t h e   f i r s t   a p p l i c a t i o n   o f   l a t e n t   t r a i t s   t h e o r y   t o   b i b l i o m e t r i c s .   ' ' I m p a c t ' '   i s   c o n s i d e r e d   a   l a t e n t   v a r i a b l e   d e f i n e d   b y   a   s e t   o f   i t e m s   ( o r   i n d i c a t o r s ) ,   c i t a t i o n s ,   a n d   s o u r c e s .   T h e   t h e o r e t i c a l   b a c k g r o u n d   i s   I t e m   R e s p o n s e   T h e o r y ,   w h i c h   s u g g e s t s   t h a t ,   i f   w e   c a n   u n d e r s t a n d   h o w   e a c h   i t e m   i n   a   s e t   o f   i t e m s   o p e r a t e s   w i t h   a n   o b j e c t ,   t h e n   w e   c a n   e s t i m a t e   a   m e a s u r e   f o r   t h e   o b j e c t .   T h e   R a s c h   m o d e l   i s   t h e   c o m m o n e s t   f o r m u l a t i o n   o f   t h a t   t h e o r y .   T h i s   t e c h n i q u e   i s   h e r e   a p p l i e d   t o   t h e   c i t a t i o n s   a n d   s o u r c e s   o f   4 3   A n a l y t i c a l   C h e m i s t r y   j o u r n a l s   ( o b j e c t s )   t o   p r o v i d e   a   R a s c h   m e a s u r e   f o r   t h e s e   j o u r n a l s   w h i c h   i s   c o m p a r e d   w i t h   t h e   c u r r e n t   ' ' i m p a c t   f a c t o r ' '   c o m p u t a t i o n . 	 U N I V   E X T R E M A D U R A , C T R   D O C U M E N T A T , B A D A J O Z , S P A I N 	 A l v a r e z ,   P   ( r e p r i n t   a u t h o r ) ,   U N I V   E X T R E M A D U R A , F A C   M A N A G E M E N T , B A D A J O Z , S P A I N . 	 	 	 P u l g a r i n   G u e r r e r o ,   A n t o n i o / 0 0 0 0 - 0 0 0 1 - 9 5 6 5 - 5 4 3 7 	 	 	 A L V A R E Z   P ,   1 9 9 3 ,   7   O B J   M E A S   W O R K S H   A T ;   A n d r i c h   D ,   1 9 8 8 ,   R A S C H   M O D E L   M E A S U R E M ;   A S A I   I ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 3 ;   B O O K S T E I N   A ,   1 9 7 6 ,   L I B R   Q U A R T ,   V 4 6 ,   P 4 1 6 ;   B r a d f o r d   S .   C . ,   1 9 3 4 ,   E N G I N E E R I N G - L O N D O N ,   V 1 3 7 ,   P 8 5 ;   B r a d f o r d   S C ,   1 9 4 8 ,   D O C U M E N T A T I O N ;   B R O O K E S   B C ,   1 9 7 3 ,   L I B R   T R E N D S ,   V 2 2 ,   P 1 8 ;   E a l e s   N .   B . ,   1 9 1 7 ,   S C I   P R O G R ,   V 1 1 ,   P 5 7 8 ;   C o l l i n s   H .   M . ,   1 9 8 2 ,   S C I   C O N T E X T   R E A D I N G S ;   C o o m b s   C .   H . ,   1 9 6 4 ,   T H E O R Y   D A T A ;   C r o n i n   B . ,   1 9 8 4 ,   C I T A T I O N   P R O C E S S ;   D U R A N D   D E ,   1 9 7 4 ,   A C A D   M A N A G E   J ,   V 1 7 ,   P 5 7 9 ,   D O I   1 0 . 2 3 0 7 / 2 5 4 6 6 2 ;   E G G H E   L ,   1 9 8 8 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 4 ,   P 5 6 7 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 8 8 ) 9 0 0 2 6 - X ;   E l k a n a   Y . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   E V E R E T T   J E ,   1 9 9 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 2 ,   P 4 0 5 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 1 0 7 ) 4 2 : 6 < 4 0 5 : : A I D - A S I 3 > 3 . 0 . C O ; 2 - W ;   F u s s l e r   H H ,   1 9 4 9 ,   L I B R   Q U A R T ,   V 1 9 ,   P 1 1 9 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 7 2 ,   C U R R   C O N T E N T S ,   V 1 5 ,   P 6 ;   G A R F I E L D   E ,   1 9 9 3 ,   S C I   J   C I T T A T I O N   R E P O ;   G I L B E R T   G N ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 3 7 ;   G O L D M A N   A ,   1 9 7 9 ,   J   M A R K E T I N G   R E S ,   V 1 6 ,   P 4 8 5 ,   D O I   1 0 . 2 3 0 7 / 3 1 5 0 8 0 9 ;   G R O S S   P L K ,   1 9 2 7 ,   S C I E N C E ,   V 6 6 ,   P 1 2 2 9 ;   H A M E L M A N   P W ,   1 9 7 3 ,   J   M A R K E T I N G   R E S ,   V 1 0 ,   P 2 1 5 ,   D O I   1 0 . 2 3 0 7 / 3 1 4 9 8 3 3 ;   H J E R P P E   R ,   1 9 8 0 ,   T R I T A L I B 2 9 1 3   R O Y A L   I ;   H u l m e   E . ,   1 9 2 3 ,   S T A T   B I B L I O   R E L A T I O N ;   K E N D A L L   M G ,   1 9 6 0 ,   O P E R   R E S   Q U A R T ,   V 1 1 ,   P 3 1 ,   D O I   1 0 . 2 3 0 7 / 3 0 0 7 1 7 7 ;   K I N G   J ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 2 6 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 5 0 1 ;   K O E N I G   M E D ,   1 9 8 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 4 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 4 0 2 0 7 ;   M A C R O B E R T S   M H ,   1 9 8 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 0 ,   P 3 4 2 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 9 0 9 ) 4 0 : 5 < 3 4 2 : : A I D - A S I 7 > 3 . 0 . C O ; 2 - U ;   M O E D   H F ,   1 9 8 3 ,   M E A S U R E M E N T   R E S   P E R F ;   N A R I N   F ,   1 9 7 7 ,   A N N U   R E V   I N F O R M   S C I ,   V 1 2 ,   P 3 5 ;   N a r i n   F . ,   1 9 7 6 ,   E V A L U A T I V E   B I B L I O M E T ;   P O R T E R   A L ,   1 9 8 8 ,   S C I E N T O M E T R I C S ,   V 1 3 ,   P 1 0 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 7 8 ;   P R I C E   D J D ,   1 9 7 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 2 7 ,   P 2 9 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 2 7 0 5 0 5 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a s c h   G . ,   1 9 6 0 ,   P R O B A B I L I S T I C   M O D E L S ;   S E N   B K ,   1 9 9 2 ,   J   D O C ,   V 4 8 ,   P 3 1 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 9 0 1 ;   S E N   B K ,   1 9 8 9 ,   J   D O C ,   V 4 5 ,   P 1 3 9 ;   S I M O N   H A ,   1 9 5 5 ,   B I O M E T R I K A ,   V 4 2 ,   P 4 2 5 ;   T O D O R O V   R ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 4 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 1 0 6 ;   V A N R A A N   A F J ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 1 ,   P 3 2 5 ;   V O C I N O   T ,   1 9 8 4 ,   A D M I N   S C I   Q U A R T ,   V 2 9 ,   P 4 3 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 0 7 9 ;   W E B E R   R P ,   1 9 8 1 ,   A C C O U N T   R E V ,   V 5 6 ,   P 5 9 6 ;   W e i n s t o c k   M . ,   1 9 7 1 ,   E N C Y   L I B R A R Y   I N F O R M A ,   V 5 ,   P 1 6 ;   W r i g h t   B .   D . ,   1 9 8 2 ,   R A T I N G   S C A L E   A N A L ;   W R I G H T   B D ,   1 9 7 8 ,   B E S T   T E S T   D E S I G N ;   W R I G H T   B D ,   1 9 9 1 ,   B I G S T E P S ;   Z I P F   G K ,   1 9 4 9 ,   H U M A N   B E H A V I O R   P R I N C 	 4 9 	 1 4 	 1 5 	 2 	 7 	 J O H N   W I L E Y   &   S O N S   I N C 	 N E W   Y O R K 	 6 0 5   T H I R D   A V E ,   N E W   Y O R K ,   N Y   1 0 1 5 8 - 0 0 1 2 	 0 0 0 2 - 8 2 3 1 	 	 	 J   A M   S O C   I N F O R M   S C I 	 J .   A m .   S o c .   I n f .   S c i . 	 J U N 	 1 9 9 6 	 4 7 	 6 	 	 	 	 	 4 5 8 	 4 6 7 	 	 	 	 1 0 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 U M 1 2 1 	 W O S : A 1 9 9 6 U M 1 2 1 0 0 0 0 6 	 	 
 
 J 	 S I T T I G ,   D F ;   K A A L A A S S I T T I G ,   J 	 	 	 	 S I T T I G ,   D F ;   K A A L A A S S I T T I G ,   J 	 	 	 A   Q U A N T I T A T I V E   R A N K I N G   O F   T H E   B I O M E D I C A L   I N F O R M A T I C S   S E R I A L S 	 M E T H O D S   O F   I N F O R M A T I O N   I N   M E D I C I N E 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C I T A T I O N   A N A L Y S I S ;   B I B L I O M E T R I C S ;   M E D I C A L   I N F O R M A T I C S ;   C O L L E C T I O N   D E V E L O P M E N T ;   S E R I A L   R A N K I N G 	 C I T A T I O N   A N A L Y S I S ;   C O L L E C T I O N   M A N A G E M E N T ;   J O U R N A L   D E S E L E C T I O N ;   S C I E N C E ;   L I B R A R Y ;   M E D I C I N E ;   I M P A C T ;   S E L E C T I O N ;   T O O L 	 W e   h a v e   d e v e l o p e d   a   q u a n t i t a t i v e   s e r i a l   r a n k i n g   s y s t e m   b a s e d   o n   m u l t i p l e   c i t a t i o n   a n a l y s i s   t e c h n i q u e s ,   l i b r a r y   u s e   s t a t i s t i c s ,   e x p e r t   o p i n i o n ,   a n d   s e l e c t e d   d i s t i n g u i s h i n g   p u b l i c a t i o n   c h a r a c t e r i s t i c s .   E v a l u a t i o n   c r i t e r i a   c a t e g o r i e s   i n c l u d e :   a v e r a g e   S c i e n c e   C i t a t i o n   I n d e x   ( I m p a c t   F a c t o r ,   I m m e d i a c y   I n d e x ,   T o t a l   c i t a t i o n s )   r a n k i n g s   f r o m   1 9 8 7   t o   1 9 9 2 ;   c i t a t i o n   s o u r c e   c o u n t s   o f   m u l t i p l e   ' ' c o r e ' '   b i o m e d i c a l   i n f o r m a t i c s   p u b l i c a t i o n s ;   a   q u e s t i o n n a i r e   s e n t   t o   A m e r i c a n   C o l l e g e   o f   M e d i c a l   I n f o r m a t i c s   F e l l o w s ;   p u b l i c a t i o n   d e l a y ;   d i s t i n g u i s h i n g   c h a r a c t e r i s t i c s   ( e .   g . ,   s u b s c r i p t i o n   c o s t ,   t o t a l   c i r c u l a t i o n ,   y e a r   e s t a b l i s h e d ,   p l a c e s   i n d e x e d ,   a f f i l i a t i o n   w i t h   a   p r o f e s s i o n a l   s o c i e t y ,   m a j o r   b i o m e d i c a l   r e s o u r c e   l i b r a r y   h o l d i n g s ) ;   a n d   t h e   t o t a l   n u m b e r   o f   i n t e r l i b r a r y   l o a n   r e q u e s t s   t o   t h e   U .   S .   N a t i o n a l   L i b r a r y   o f   M e d i c i n e .   T h e   t o p   s e r i a l s   w e r e   C o m p u t e r s   a n d   B i o m e d i c a l   R e s e a r c h ,   M D   C o m p u t i n g ,   M e t h o d s   o f   I n f o r m a t i o n   i n   M e d i c i n e ,   M e d i c a l   D e c i s i o n   M a k i n g   a n d   C o m p u t e r s   i n   B i o l o g y   a n d   M e d i c i n e . 	 	 S I T T I G ,   D F   ( r e p r i n t   a u t h o r ) ,   V A N D E R B I L T   U N I V , C T R   I N F O R M A T , E S K I N D   B I O M E D   L I B   4 1 2 , 2 2 0 9   G A R L A N D   A V E , N A S H V I L L E , T N   3 7 2 3 2 ,   U S A . 	 	 	 	 N L M   N I H   H H S   [ G 0 8 - L M 0 5 4 4 3 ,   R 2 9 - L M 0 5 2 4 ] 	 	 A N D E R S O N   A ,   1 9 9 1 ,   S C I E N C E                   0 5 0 3 ,   P 6 3 9 ;   A R E N A L E S   D ,   1 9 8 5 ,   A N A L   M E D   I N F O R M A T I C S ;   B E N S M A N   S J ,   1 9 8 5 ,   C O L L   R E S   L I B R ,   V 4 6 ,   P 1 3 ;   B L E E K E R   A ,   1 9 9 0 ,   B   M E D   L I B R   A S S O C ,   V 7 8 ,   P 3 4 5 ;   B O U R N E   J R ,   1 9 9 2 ,   Q U A L I T Y   T O O L S   S T U D Y ;   C H E N   C C ,   1 9 7 4 ,   S P E C   L I B R ,   V 6 5 ,   P 2 7 2 ;   C l a n c e y   W . ,   1 9 8 4 ,   R E A D I N G S   M E D   A R T I F I C ;   C O O P E R   G S ,   1 9 8 9 ,   J   G E N   I N T E R N   M E D ,   V 4 ,   P 2 3 2 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 5 9 9 5 3 0 ;   D E L L O N   A L ,   1 9 9 2 ,   P L A S T   R E C O N S T R   S U R G ,   V 9 0 ,   P 7 1 7 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 6 5 3 4 - 1 9 9 2 1 0 0 0 0 - 0 0 0 2 8 ;   D E U R E N B E R G   R ,   1 9 9 3 ,   B   M E D   L I B R   A S S O C ,   V 8 1 ,   P 3 1 6 ;   D H A W A N   S M ,   1 9 8 0 ,   J   D O C ,   V 3 6 ,   P 2 4 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 8 9 ;   D U N N   K ,   1 9 9 4 ,   P   S   C O M P U T E R   A P P L I C A ,   V 1 8 ,   P 1 0 8 ;   E L L W E I N   L B ,   1 9 8 9 ,   A C A D   M E D ,   V 6 4 ,   P 3 1 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 0 1 8 8 8 - 1 9 8 9 0 6 0 0 0 - 0 0 0 0 8 ;   E S T E I B A R   B A ,   1 9 9 2 ,   S E R I A L S   L I B R ,   V 2 3 ,   P 1 ;   F A N G   M L E ,   1 9 8 9 ,   B   M E D   L I B R   A S S O C ,   V 7 7 ,   P 2 0 5 ;   G A R F I E L D   E ,   1 9 8 6 ,   A N N   I N T E R N   M E D ,   V 1 0 5 ,   P 3 1 3 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G A R F I E L D   E ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 4 7 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 6 0 . 4 7 1 ;   G A R F I E L D   E ,   1 9 9 1 ,   S C I   J   C I T A T I O N   R E P O R ;   G O F F M A N   W ,   1 9 7 1 ,   J   A C M ,   V 1 8 ,   P 1 7 3 ,   D O I   1 0 . 1 1 4 5 / 3 2 1 6 3 7 . 3 2 1 6 4 0 ;   G r e e n e s   R A ,   1 9 8 7 ,   P   S   C O M P   A P P L   M E D   C A ,   P 4 1 1 ;   H A M I L T O N   D P ,   1 9 9 1 ,   S C I E N C E ,   V 2 5 1 ,   P 2 5 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 9 8 6 4 0 9 ;   H A M I L T O N   D P ,   1 9 9 0 ,   S C I E N C E ,   V 2 5 0 ,   P 1 3 3 1 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 2 2 5 5 9 0 2 ;   H A Y N E S   R B ,   1 9 9 3 ,   A N N     I N T E R N   M E D   S 6 ,   V 1 1 6 ;   H U N T   R K ,   1 9 9 0 ,   B   M E D   L I B R   A S S O C ,   V 7 8 ,   P 4 5 ;   K e n d a l l   M .   G . ,   1 9 9 0 ,   R A N K   C O R R E L A T I O N   M E T ;   K I M   M T ,   1 9 9 1 ,   C O L L   R E S   L I B R ,   V 5 2 ,   P 2 4 ;   K O H L   D F ,   1 9 8 5 ,   C O L L   R E S   L I B R ,   V 4 6 ,   P 4 0 ;   K O H L E R   C O ,   1 9 8 7 ,   M E D   I N F O R M ,   V 1 2 ,   P 5 3 ;   K U H L E M E I E R   K V ,   1 9 9 2 ,   A R C H   P H Y S   M E D   R E H A B ,   V 7 3 ,   P 1 2 6 ;   L A C R O I X   E M ,   1 9 9 4 ,   B   M E D   L I B R   A S S O C ,   V 8 2 ,   P 3 6 3 ;   L o t k a   J .   A . ,   1 9 2 6 ,   J   W A S H   A C A D   S C I ,   V 1 6 ,   P 2 1 7 ;   M C C A I N   K W ,   1 9 9 2 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 4 ,   P 2 2 3 ;   M C C U N N E Y   R J ,   1 9 9 2 ,   J   O C C U P   E N V I R O N   M E D ,   V 3 4 ,   P 2 7 9 ,   D O I   1 0 . 1 0 9 7 / 0 0 0 4 3 7 6 4 - 1 9 9 2 0 3 0 0 0 - 0 0 0 1 2 ;   M O R R I L L   T C ,   1 9 9 1 ,   C I T A T I O N   C O U N T I N G ,   P 1 5 9 9 ;   M U N D Y   D J ,   1 9 8 4 ,   A N N   I N T E R N   M E D ,   V 1 0 0 ,   P 6 1 ;   P A N D I T   I ,   1 9 9 3 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 5 ,   P 1 8 5 ;   P E N D L E B U R Y   D ,   1 9 9 3 ,   S C I E N T I S T               0 8 2 3 ;   P i r s i g   R . ,   1 9 7 4 ,   Z E N   A R T   M O T O R C Y C L E   M ;   P R I C E   D J D ,   1 9 8 9 ,   L I T T L E   S C I   B I G   S C I ,   P 1 6 1 ;   P Y L E   K I ,   1 9 8 8 ,   M E D   D E C I S   M A K I N G ,   V 8 ,   P 1 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 2 7 2 9 8 9 X 8 8 0 0 8 0 0 3 0 2 ;   R O L A N D   C G ,   1 9 7 5 ,   N E W   E N G L   J   M E D ,   V 2 9 2 ,   P 2 7 3 ;   S A F R A N   C ,   1 9 9 4 ,   M   D   C O M P U T ,   V 1 1 ,   P 1 5 5 ;   S C A L E S   P A ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 1 7 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 1 2 ;   S H O R T L I F F E   E H ,   1 9 9 0 ,   M E D   I N F O R M A T I C S   C O M P ;   S I N G L E T O N   A ,   1 9 7 6 ,   J   D O C ,   V 3 2 ,   P 2 5 8 ,   D O I   1 0 . 1 1 0 8 / e b 0 2 6 6 2 8 ;   T A U B E S   G ,   1 9 9 3 ,   S C I E N C E ,   V 2 6 0 ,   P 8 8 4 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 8 4 9 3 5 1 6 ;   V A N B E M M E L   J H ,   1 9 9 2 ,   Y B   M E D   I N F O R M A T I C S ;   W A L L A C E   D P ,   1 9 8 9 ,   L I B R   I N F O R M   S C I   R E S ,   V 1 1 ,   P 5 9 ;   W E I S H E I T   R A ,   1 9 8 4 ,   R A N K I N G   J ,   P 3 1 3 ;   Y O U N G   H ,   1 9 8 3 ,   A L A   G L O S S A R Y   L I B R A R Y ;   1 9 9 4 ,   L I S T   J   I N D E X E D   I N D E X ;   1 9 9 3 ,   U L R I C H S   I N T   P E R I O D I C ;   1 9 9 4 ,   S E R I A L S   D I C T   I N T   R E F ;   [ A n o n y m o u s ] ,   1 9 7 7 ,   W E B S T E R S   N E W   C O L L E G I ;   1 9 9 3 ,   M E D   H E A L T H C A R E   B O O K S ;   1 9 9 1 ,   I N D E X   M E D ;   1 9 9 3 ,   E X P L A N A T I O N   C O N T E N T S 	 5 8 	 1 4 	 1 4 	 0 	 6 	 F   K   S C H A T T A U E R   V E R L A G   G M B H 	 S T U T T G A R T 	 P   O   B O X   1 0   4 5   4 5 ,   L E N Z H A L D E   3 ,   D - 7 0 0 4 0   S T U T T G A R T ,   G E R M A N Y 	 0 0 2 6 - 1 2 7 0 	 	 	 M E T H O D   I N F O R M   M E D 	 M e t h o d s   I n f .   M e d . 	 S E P 	 1 9 9 5 	 3 4 	 4 	 	 	 	 	 3 9 7 	 4 1 0 	 	 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 C o m p u t e r   S c i e n c e ;   H e a l t h   C a r e   S c i e n c e s   &   S e r v i c e s ;   M e d i c a l   I n f o r m a t i c s 	 R Y 8 3 2 	 W O S : A 1 9 9 5 R Y 8 3 2 0 0 0 1 1 	 7 4 7 6 4 7 1 	 
 
 J 	 G A R G ,   K C ;   D U T T ,   B 	 	 	 	 G A R G ,   K C ;   D U T T ,   B 	 	 	 B I B L I O M E T R I C S   O F   I N D I A N   S C I E N C E   A S   R E F L E C T E D   T H R O U G H   S C I E N C E - C I T A T I O N - I N D E X 	 J O U R N A L   O F   S C I E N T I F I C   &   I N D U S T R I A L   R E S E A R C H 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 E P O N Y M I C   R O U T E ;   I M M O R T A L I T Y ;   P E R I P H E R Y ;   C O U N T R I E S ;   N A M E 	 A n a l y s i s   o f   p a p e r s   p u b l i s h e d   b y   t h e   I n d i a n   s c i e n t i s t s   i n   I n d i a n   a n d   o v e r s e a s   j o u r n a l s   i s   g i v e n .   A n a l y s i s   o f   t h e   1 2 1 5 6   p a p e r s   i n c l u d e d   i n   t h e   c o r p o r a t e   a u t h o r   i n d e x   o f   t h e   S c i e n c e   C i t a t i o n   I n d e x   ( S C I )   f o r   1 9 8 7   i n d i c a t e s   t h a t   a   l a r g e   p o r t i o n   ( 4 5 % )   o f   t h e   I n d i a n   s c i e n t i f i c   o u t p u t   w a s   f r o m   2 6   i n s t i t u t i o n s .   O u t   o f   t h e s e   i n s t i t u t i o n s   a l s o ,   o n l y   1 1   c o n t r i b u t e d   3 4 1 4   ( 2 8 % )   p a p e r s .   H o w e v e r ,   t h e   s c i e n t i f i c   a c t i v i t y   i s   w i d e l y   s c a t t e r e d .   T h e r e   i s   n o t   m u c h   v a r i a t i o n   i n   t h e   s c i e n t i f i c   o u t p u t   o f   d i f f e r e n t   d i s c i p l i n e s   e x c e p t   m a t h e m a t i c a l   s c i e n c e s   w h e r e   t h e   r e s e a r c h   o u t p u t   a p p e a r s   t o   b e   q u i t e   l o w .   I t   i s   p o i n t e d   o u t   t h a t   t h e   p a p e r s   p u b l i s h e d   b y   t h e   I n d i a n   r e s e a r c h e r s   a p p e a r e d   i n   1 4 4 2   j o u r n a l s ,   o f   w h i c h   1 1   a r e   t h e   I n d i a n   j o u r n a l s   w h i l e   t h e   r e s t   a r e   p u b l i s h e d   f r o m   t h e   U S A ,   t h e   U K ,   t h e   N e t h e r l a n d s ,   G e r m a n y ,   S w i t z e r l a n d ,   S w e d e n ,   e t c .   P h y s i c a l   s c i e n c e s ,   i n o r g a n i c   c h e m i s t r y ,   n e u r o s c i e n c e s ,   b i o c h e m i s t r y   a n d   m o l e c u l a r   b i o l o g y   a p p e a r   t o   b e   t h e   s t r o n g   a r e a s   o f   I n d i a n   s c i e n c e .   1 2 %   o f   t h e   r e s e a r c h   p a p e r s   h a v e   b e e n   p u b l i s h e d   i n   j o u r n a l s   w i t h   i m p a c t   f a c t o r   ( I F )   >   2 ,   w h i l e   o n l y   1 %   a p p e a r e d   i n   t h e   j o u r n a l s   h a v i n g   I F   >   4 . 	 	 G A R G ,   K C   ( r e p r i n t   a u t h o r ) ,   N A T L   I N S T   S C I   T E C H N O L   &   D E V   S T U D I E S , D R   K   S   K R I S H N A N   M A R G , N E W   D E L H I   1 1 0 0 1 2 , I N D I A . 	 	 	 	 	 	 A L K H A R A F I   F ,   1 9 8 7 ,   J   I N F O R M   S C I ,   V 1 3 ,   P 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 7 0 1 3 0 0 1 0 6 ;   A R U N A C H A L A M   S ,   1 9 8 6 ,   J   I N F O R M   S C I ,   V 1 2 ,   P 1 0 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 6 0 1 2 0 0 3 0 3 ;   A R U N A C H A L A M   S ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 3 0 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 0 5 5 ;   A R U N A C H A L A M   S ,   1 9 8 8 ,   J   S C I   I N D   R E S   I N D I A ,   V 4 7 ,   P 3 5 9 ;   G A R F I E L D   E ,   1 9 8 3 ,   C U R R   C O N T E N T S ,   P 5 ;   G a r g   K .   C . ,   1 9 8 9 ,   I n t e r n a t i o n a l   I n f o r m a t i o n ,   C o m m u n i c a t i o n   a n d   E d u c a t i o n ,   V 8 ;   K R A U S K O P F   M ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 1 9 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 4 1 ;   M E H R O T R A   R ,   1 9 8 4 ,   C U R R   S C I   I N D I A ,   V 5 3 ,   P 6 8 4 ;   M E N D E Z   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 1 0 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 6 0 4 2 ;   M O R A V A C S I K   M J ,   1 9 8 5 ,   J U L   P H I L   W O R K S H   D I S C ;   R A B K I N   Y M ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 2 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 3 1 0 ;   V E L H O   L ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 7 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 0 9 ;   Y U T H A V O N G   Y ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 1 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 3 7 	 1 3 	 1 4 	 1 4 	 1 	 2 	 C O U N C I L   S C I E N T I F I C   I N D U S T R I A L   R E S E A R C H 	 N E W   D E L H I 	 P U B L   &   I N F O   D I R E C T O R A T E ,   N E W   D E L H I   1 1 0 0 1 2 ,   I N D I A 	 0 0 2 2 - 4 4 5 6 	 	 	 J   S C I   I N D   R E S   I N D I A 	 J .   S c i .   I n d .   R e s . 	 A P R 	 1 9 9 2 	 5 1 	 4 	 	 	 	 	 3 2 9 	 3 4 0 	 	 	 	 1 2 	 E n g i n e e r i n g ,   M u l t i d i s c i p l i n a r y 	 E n g i n e e r i n g 	 H Q 2 7 0 	 W O S : A 1 9 9 2 H Q 2 7 0 0 0 0 0 3 	 	 
 
 J 	 T h e l w a l l ,   M ;   M a f l a h i ,   N 	 	 	 	 T h e l w a l l ,   M i k e ;   M a f l a h i ,   N a b e i l 	 	 	 A r e   S c h o l a r l y   A r t i c l e s   D i s p r o p o r t i o n a t e l y   R e a d   i n   T h e i r   O w n   C o u n t r y ?   A n   A n a l y s i s   o f   M e n d e l e y   R e a d e r s 	 J O U R N A L   O F   T H E   A S S O C I A T I O N   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s 	 S C I E N T I F I C   C O L L A B O R A T I O N ;   S E L F - C I T A T I O N S ;   P A T T E R N S ;   I M P A C T ;   S C I E N C E ;   I N D I C A T O R S ;   M E T R I C S ;   E U R O P E ;   S C O P U S ;   U S A G E 	 I n t e r n a t i o n a l   c o l l a b o r a t i o n   t e n d s   t o   r e s u l t   i n   m o r e   h i g h l y   c i t e d   r e s e a r c h   a n d ,   p a r t l y   a s   a   r e s u l t   o f   t h i s ,   m a n y   r e s e a r c h   f u n d i n g   s c h e m e s   a r e   s p e c i f i c a l l y   i n t e r n a t i o n a l   i n   s c o p e .   N e v e r t h e l e s s ,   i t   i s   n o t   c l e a r   w h e t h e r   t h i s   c i t a t i o n   a d v a n t a g e   i s   t h e   r e s u l t   o f   h i g h e r   q u a l i t y   r e s e a r c h   o r   d u e   t o   o t h e r   f a c t o r s ,   s u c h   a s   a   l a r g e r   a u d i e n c e   f o r   t h e   p u b l i c a t i o n s .   T o   t e s t   w h e t h e r   t h e   a p p a r e n t   a d v a n t a g e   o f   i n t e r n a t i o n a l l y   c o l l a b o r a t i v e   r e s e a r c h   m a y   b e   d u e   t o   a d d i t i o n a l   i n t e r e s t   i n   a r t i c l e s   f r o m   t h e   c o u n t r i e s   o f   t h e   a u t h o r s ,   t h i s   a r t i c l e   a s s e s s e s   t h e   e x t e n t   t o   w h i c h   t h e   n a t i o n a l   a f f i l i a t i o n s   o f   t h e   a u t h o r s   o f   a r t i c l e s   a f f e c t   t h e   n a t i o n a l   a f f i l i a t i o n s   o f   t h e i r   M e n d e l e y   r e a d e r s .   B a s e d   o n   E n g l i s h - l a n g u a g e   W e b   o f   S c i e n c e   a r t i c l e s   i n   1 0   f i e l d s   f r o m   s c i e n c e ,   m e d i c i n e ,   s o c i a l   s c i e n c e ,   a n d   t h e   h u m a n i t i e s ,   t h e   r e s u l t s   o f   s t a t i s t i c a l   m o d e l s   c o m p a r i n g   a u t h o r   a n d   r e a d e r   a f f i l i a t i o n s   s u g g e s t   t h a t ,   i n   m o s t   f i e l d s ,   M e n d e l e y   u s e r s   a r e   d i s p r o p o r t i o n a t e l y   r e a d e r s   o f   a r t i c l e s   a u t h o r e d   f r o m   w i t h i n   t h e i r   o w n   c o u n t r y .   I n   a d d i t i o n ,   t h e r e   a r e   s e v e r a l   c a s e s   i n   w h i c h   M e n d e l e y   u s e r s   f r o m   c e r t a i n   c o u n t r i e s   t e n d   t o   i g n o r e   a r t i c l e s   f r o m   s p e c i f i c   o t h e r   c o u n t r i e s ,   a l t h o u g h   i t   i s   n o t   c l e a r   w h e t h e r   t h i s   r e f l e c t s   n a t i o n a l   b i a s e s   o r   d i f f e r e n t   n a t i o n a l   s p e c i a l i s m s   w i t h i n   a   f i e l d .   I n   c o n c l u s i o n ,   r e s e a r c h   f u n d e r s   s h o u l d   n o t   i n c e n t i v i z e   i n t e r n a t i o n a l   c o l l a b o r a t i o n   o n   t h e   b a s i s   t h a t   i t   i s ,   i n   g e n e r a l ,   h i g h e r   q u a l i t y   b e c a u s e   i t s   h i g h e r   i m p a c t   m a y   b e   p r i m a r i l y   d u e   t o   i t s   l a r g e r   a u d i e n c e .   M o r e o v e r ,   a u t h o r s   s h o u l d   g u a r d   a g a i n s t   n a t i o n a l   b i a s e s   i n   t h e i r   r e a d i n g   t o   s e l e c t   o n l y   t h e   b e s t   a n d   m o s t   r e l e v a n t   p u b l i c a t i o n s   t o   i n f o r m   t h e i r   r e s e a r c h . 	 [ T h e l w a l l ,   M i k e ;   M a f l a h i ,   N a b e i l ]   W o l v e r h a m p t o n   U n i v ,   S t a t   C y b e r m e t r   R e s   G r p ,   S c h   M a t h   &   C o m p   S c i ,   W o l v e r h a m p t o n   W V 1   1 L Y ,   W   M i d l a n d s ,   E n g l a n d 	 T h e l w a l l ,   M   ( r e p r i n t   a u t h o r ) ,   W o l v e r h a m p t o n   U n i v ,   S t a t   C y b e r m e t r   R e s   G r p ,   S c h   M a t h   &   C o m p   S c i ,   W u l f r u n a   S t ,   W o l v e r h a m p t o n   W V 1   1 L Y ,   W   M i d l a n d s ,   E n g l a n d . 	 m . t h e l w a l l @ w l v . a c . u k ;   N . M a f l a h i @ w l v . a c . u k 	 	 	 A C U M E N   ( A c a d e m i c   C a r e e r s   U n d e r s t o o d   t h r o u g h   M e a s u r e m e n t   a n d   N o r m s )   p r o j e c t ,   u n d e r   t h e   S e v e n t h   F r a m e w o r k   P r o g r a m   o f   t h e   E u r o p e a n   U n i o n   [ 2 6 6 6 3 2 ] 	 T h i s   p a p e r   i s   s u p p o r t e d   b y   A C U M E N   ( A c a d e m i c   C a r e e r s   U n d e r s t o o d   t h r o u g h   M e a s u r e m e n t   a n d   N o r m s )   p r o j e c t ,   g r a n t   a g r e e m e n t   n u m b e r   2 6 6 6 3 2 ,   u n d e r   t h e   S e v e n t h   F r a m e w o r k   P r o g r a m   o f   t h e   E u r o p e a n   U n i o n . 	 A r c h a m b a u l t   E ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 6 2 ;   B a e r l o c h e r   M O ,   2 0 0 7 ,   J   I N V E S T   M E D ,   V 5 5 ,   P 1 7 4 ,   D O I   1 0 . 2 3 1 0 / 6 6 5 0 . 2 0 0 7 . 0 6 0 4 4 ;   B a r -   I l a n   J . ,   2 0 1 2 ,   A C M   W E B   S C I   C   2 0 1 2   W ;   B o l l e n   J ,   2 0 0 8 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 9 ,   P 1 3 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 7 4 6 ;   B o n i t z   M ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 4 0 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 8 9 ;   B o t e   G . ,   2 0 1 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 6 4 ,   P 3 9 2 ;   C r o n i n   B ,   2 0 0 4 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 5 ,   P 1 6 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 3 5 3 ;   D e   M o y a - A n e g o n   F ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 3 ,   P 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 8 1 - 4 ;   D i d e g a h   F ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 8 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 8 . 0 0 6 ;   D i d e g a h   F ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 5 1 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 4 . 0 0 3 ;   D u i n   D ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 5 0 9 4 3 ;   F r a n c e s c h e t   M ,   2 0 1 0 ,   J   I N F O R M E T R ,   V 4 ,   P 5 4 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 6 . 0 0 3 ;   G a z n i   A ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 3 2 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 8 8 ;   G i b b o n s   M . ,   1 9 9 4 ,   N E W   P R O D U C T I O N   K N O W L ;   G l a n z e l   W ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 1 ,   P 3 9 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 4 5 1 1 7 . 1 3 3 4 8 . b 1 ;   G l a n z e l   W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 0 5 1 2 6 2 8 1 4 5 ;   G u n n   W . ,   2 0 1 3 ,   I N F O R M   S T A N D A R D S   Q ,   V 2 5 ,   P 3 3 ;   H e n n i n g   V . ,   2 0 0 8 ,   I E E E   4   I N T   C   E S C I E N C ,   P 3 2 7 ,   D O I   D O I   1 0 . 1 1 0 9 / E S C I E N C E 2 0 0 8 . 1 2 8 ;   H i l b e   J M ,   2 0 1 1 ,   N E G A T I V E   B I N O M I A L   R E ;   H o e k m a n   J ,   2 0 1 0 ,   R E S   P O L I C Y ,   V 3 9 ,   P 6 6 2 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 1 . 0 1 2 ;   J a f f e   A .   B . ,   1 9 9 9 ,   E C   I N N O V A T I O N   N E W   T E ,   V 8 ,   P 1 0 5 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 3 8 5 9 9 9 0 0 0 0 0 0 0 6 ;   K A T Z   J S ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 0 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   K a t z   J S ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 4 0 ,   P 5 4 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 2 9 9 ;   K a t z   J .   S . ,   2 0 0 0 ,   S C I   P U B L   P O L I C Y ,   V 2 7 ,   P 2 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 3 0 0 7 8 1 7 8 2 1 5 6 ;   K u r t z   M J ,   2 0 1 0 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 4 ,   P 3 ;   B a r r a n t e s   B S L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 4 8 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 8 2 ;   L a n c h o - B a r r a n t e s   B S ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 8 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 9 7 - 3 ;   L a s t h i o t a k i s   H . ,   2 0 1 3 ,   J   H I G H E R   E D   P O L I C Y   M ,   V 3 5 ,   P 6 1 2 ;   L i   X . ,   2 0 1 2 ,   1 7   I N T   C   S C I   T E C H N   I ,   P 5 4 1 ;   L i   X D ,   2 0 1 1 ,   S O I L   C O N T A M I N A T I O N ,   P 1 ,   D O I   1 0 . 1 0 9 7 / B R S . 0 b 0 1 3 e 3 1 8 2 0 5 6 2 0 a ;   L i a n g   L M ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 5 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 2 8 - 0 ;   L U U K K O N E N   T ,   1 9 9 2 ,   S C I   T E C H N O L   H U M   V A L ,   V 1 7 ,   P 1 0 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 2 2 4 3 9 9 2 0 1 7 0 0 1 0 6 ;   M a t t h i e s s e n   C W ,   1 9 9 9 ,   U R B A N   S T U D ,   V 3 6 ,   P 4 5 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 4 2 0 9 8 9 9 3 4 7 5 ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M E R T O N   R K ,   1 9 8 8 ,   I S I S ,   V 7 9 ,   P 6 0 6 ,   D O I   1 0 . 1 0 8 6 / 3 5 4 8 4 8 ;   M o e d   H F ,   2 0 0 5 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 6 ,   P 1 0 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 0 0 ;   M o h a m m a d i   E . ,   J   A M   S O C   I N F O R M   S C I ;   P e r s s o n   O ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 4 2 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 8 4 . 3 5 4 9 8 . 7 d ;   P e r s s o n   O ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 3 ,   P 3 9 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 0 7 - 0 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P r i e m   J . ,   2 0 1 0 ,   1   M O N D A Y ,   V 1 5 ;   P r i e m   J . ,   2 0 1 1 ,   A L T M E T R I C S   M A N I F E S T O ;   Q i n   J ,   1 9 9 7 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 8 ,   P 8 9 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 7 1 0 ) 4 8 : 1 0 < 8 9 3 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - X ;   S c h l o g l   C ,   2 0 1 3 ,   P R O   I N T   C O N F   S C I   I N F ,   P 6 2 6 ;   S c h l o e g l   C ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 2 0 ;   S u d   P . ,   J   A S S   I N F O R M   S C I   T E C ;   T h e l w a l l   M ,   2 0 1 3 ,   P L O S   O N E ,   V 8 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 6 4 8 4 1 ;   T o r r e s - S a l i n a s   D ,   2 0 1 3 ,   C O M U N I C A R ,   P 5 3 ,   D O I   1 0 . 3 9 1 6 / C 4 1 - 2 0 1 3 - 0 5 ;   V a n   R a a n   A F J ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 2 ,   P 4 2 3 ;   V a n   L e e u w e n   T .   N . ,   2 0 1 1 ,   R E S   E V A L U A T ,   V 9 ,   P 1 5 5 ;   W a l l a c e   M L ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 3 3 3 3 9 ;   W u c h t y   S ,   2 0 0 7 ,   S C I E N C E ,   V 3 1 6 ,   P 1 0 3 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 1 3 6 0 9 9 ;   Z a h e d i   Z . ,   2 0 1 3 ,   A L M   W O R K S H   S A N   F R A N C ;   Z a h e d i   Z . ,   2 0 1 3 ,   P   1 4   I N T   S O C   S C I   I N F ,   V 1 ,   P 8 7 6 ;   Z a u g g   H . ,   2 0 1 1 ,   T E C H T R E N D S ,   V 5 5 ,   P 3 2 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 1 5 2 8 - 0 1 1 - 0 4 6 7 - Y 	 5 6 	 1 3 	 1 3 	 7 	 4 3 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 2 3 3 0 - 1 6 3 5 	 2 3 3 0 - 1 6 4 3 	 	 J   A S S O C   I N F   S C I   T E C H 	 	 J U N 	 2 0 1 5 	 6 6 	 6 	 	 	 	 	 1 1 2 4 	 1 1 3 5 	 	 1 0 . 1 0 0 2 / a s i . 2 3 2 5 2 	 	 1 2 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C I 1 B Y 	 W O S : 0 0 0 3 5 4 4 7 6 6 0 0 0 0 3 	 	 
 
 J 	 G u t i e r r e z ,   F R S ;   B e a l l ,   J ;   F o r e r o ,   D A 	 	 	 	 G u t i e r r e z ,   F r e d y   R .   S . ;   B e a l l ,   J e f f r e y ;   F o r e r o ,   D i e g o   A . 	 	 	 S p u r i o u s   a l t e r n a t i v e   i m p a c t   f a c t o r s :   T h e   s c a l e   o f   t h e   p r o b l e m   f r o m   a n   a c a d e m i c   p e r s p e c t i v e 	 B I O E S S A Y S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 b i b l i o m e t r i c s ;   s c i e n c e   m e t r i c s ;   s c i e n t i f i c   p u b l i s h i n g 	 	 	 [ G u t i e r r e z ,   F r e d y   R .   S . ;   F o r e r o ,   D i e g o   A . ]   U n i v   A n t o n i o   N a r i n o ,   S c h   M e d ,   B i o m e d   S c i   R e s   G r p ,   B o g o t a ,   C o l o m b i a ;   [ B e a l l ,   J e f f r e y ]   U n i v   C o l o r a d o ,   A u r a r i a   L i b ,   D e n v e r ,   C O   8 0 2 0 2   U S A 	 G u t i e r r e z ,   F R S   ( r e p r i n t   a u t h o r ) ,   U n i v   A n t o n i o   N a r i n o ,   S c h   M e d ,   B i o m e d   S c i   R e s   G r p ,   B o g o t a ,   C o l o m b i a . 	 f r e d s a l a z a r @ u a n . e d u . c o ;   d i e g o . f o r e r o @ u a n . e d u . c o 	 F o r e r o ,   D i e g o / A - 9 3 0 5 - 2 0 0 8 ;   G u t i e r r e z ,   F r e d y   R S / C - 3 9 1 1 - 2 0 0 9 ;   	 F o r e r o ,   D i e g o / 0 0 0 0 - 0 0 0 1 - 9 1 7 5 - 3 3 6 3 ;   G u t i e r r e z ,   F r e d y   R S / 0 0 0 0 - 0 0 0 1 - 9 8 7 3 - 8 3 4 2 ;   B e a l l ,   J e f f r e y / 0 0 0 0 - 0 0 0 1 - 9 0 1 2 - 5 3 3 0 	 V C T I - U A N 	 W o r k   i n   t h e   l a b o r a t o r i e s   o f   F . R . S . G .   a n d   D . A . F .   i s   s u p p o r t e d   b y   r e s e a r c h   g r a n t s   f r o m   V C T I - U A N . 	 B e a l l   J ,   2 0 1 2 ,   N A T U R E ,   V 4 8 9 ,   P 1 7 9 ,   D O I   1 0 . 1 0 3 8 / 4 8 9 1 7 9 a ;   B o h a n n o n   J ,   2 0 1 3 ,   S C I E N C E ,   V 3 4 2 ,   P 6 0 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 3 4 2 . 6 1 5 4 . 6 0 ;   B u t l e r   D ,   2 0 1 3 ,   N A T U R E ,   V 4 9 5 ,   P 4 3 3 ,   D O I   1 0 . 1 0 3 8 / 4 9 5 4 3 3 a ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   L a a k s o   M ,   2 0 1 1 ,   P L O S   O N E ,   V 6 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 2 0 9 6 1 ;   P r i e m   J ,   2 0 1 2 ,   P L O S   O N E ,   V 7 ,   D O I   1 0 . 1 3 7 1 / j o u r n a l . p o n e . 0 0 4 8 7 5 3 ;   S a x e n a   A ,   2 0 1 2 ,   J   P H A R M   P H A R M A C O T H E R ,   V 4 ,   P 1 2 5 ;   W a g e r   E ,   2 0 1 3 ,   J   G L O B   H L T H ,   V 3 ;   X i a   J F ,   2 0 1 5 ,   J   A S S O C   I N F   S C I   T E C H ,   V 6 6 ,   P 1 4 0 6 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 3 2 6 5 	 1 0 	 1 3 	 1 3 	 2 	 1 7 	 W I L E Y - B L A C K W E L L 	 H O B O K E N 	 1 1 1   R I V E R   S T ,   H O B O K E N   0 7 0 3 0 - 5 7 7 4 ,   N J   U S A 	 0 2 6 5 - 9 2 4 7 	 1 5 2 1 - 1 8 7 8 	 	 B I O E S S A Y S 	 B i o e s s a y s 	 M A Y 	 2 0 1 5 	 3 7 	 5 	 	 	 	 	 4 7 4 	 4 7 6 	 	 1 0 . 1 0 0 2 / b i e s . 2 0 1 5 0 0 0 1 1 	 	 3 	 B i o c h e m i s t r y   &   M o l e c u l a r   B i o l o g y ;   B i o l o g y 	 B i o c h e m i s t r y   &   M o l e c u l a r   B i o l o g y ;   L i f e   S c i e n c e s   &   B i o m e d i c i n e   -   O t h e r   T o p i c s 	 C H 3 E T 	 W O S : 0 0 0 3 5 3 9 1 1 2 0 0 0 0 5 	 2 5 7 3 1 1 4 9 	 
 
 J 	 W e r n e r ,   R 	 	 	 	 W e r n e r ,   R e i n h a r d 	 	 	 T h e   f o c u s   o n   b i b l i o m e t r i c s   m a k e s   p a p e r s   l e s s   u s e f u l 	 N A T U R E 	 	 	 E n g l i s h 	 E d i t o r i a l   M a t e r i a l 	 	 	 	 	 	 	 	 	 L e i b n i z   U n i v   H a n n o v e r ,   H a n o v e r ,   N H   0 3 7 5 5   U S A 	 W e r n e r ,   R   ( r e p r i n t   a u t h o r ) ,   L e i b n i z   U n i v   H a n n o v e r ,   H a n o v e r ,   N H   0 3 7 5 5   U S A . 	 r e i n h a r d . w e r n e r @ i t p . u n i - h a n n o v e r . d e 	 	 	 	 	 	 0 	 1 3 	 1 3 	 3 	 3 5 	 N A T U R E   P U B L I S H I N G   G R O U P 	 L O N D O N 	 M A C M I L L A N   B U I L D I N G ,   4   C R I N A N   S T ,   L O N D O N   N 1   9 X W ,   E N G L A N D 	 0 0 2 8 - 0 8 3 6 	 1 4 7 6 - 4 6 8 7 	 	 N A T U R E 	 N a t u r e 	 J A N   1 5 	 2 0 1 5 	 5 1 7 	 7 5 3 4 	 	 	 	 	 2 4 5 	 2 4 5 	 	 	 	 1 	 M u l t i d i s c i p l i n a r y   S c i e n c e s 	 S c i e n c e   &   T e c h n o l o g y   -   O t h e r   T o p i c s 	 A Y 8 N K 	 W O S : 0 0 0 3 4 7 8 1 0 3 0 0 0 0 4 	 2 5 5 9 2 4 9 8 	 
 
 J 	 G a g o l e w s k i ,   M ;   M e s i a r ,   R 	 	 	 	 G a g o l e w s k i ,   M a r e k ;   M e s i a r ,   R a d k o 	 	 	 M o n o t o n e   m e a s u r e s   a n d   u n i v e r s a l   i n t e g r a l s   i n   a   u n i f o r m   f r a m e w o r k   f o r   t h e   s c i e n t i f i c   i m p a c t   a s s e s s m e n t   p r o b l e m 	 I N F O R M A T I O N   S C I E N C E S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 U n i v e r s a l   i n t e g r a l ;   M o n o t o n e   m e a s u r e s ;   A g g r e g a t i o n ;   I n d i c e s   o f   s c i e n t i f i c   i m p a c t ;   B i b l i o m e t r i c s ;   h - i n d e x 	 H - I N D E X ;   H I R S C H - I N D E X ;   O U T P U T 	 T h e   C h o q u e t ,   S u g e n o ,   a n d   S h i l k r e t   i n t e g r a l s   w i t h   r e s p e c t   t o   m o n o t o n e   m e a s u r e s ,   a s   w e l l   a s   t h e i r   g e n e r a l i z a t i o n   -   t h e   u n i v e r s a l   i n t e g r a l ,   s t a n d   f o r   a   u s e f u l   t o o l   i n   d e c i s i o n   s u p p o r t   s y s t e m s .   I n   t h i s   p a p e r   w e   p r o p o s e   a   g e n e r a l   c o n s t r u c t i o n   m e t h o d   f o r   a g g r e g a t i o n   o p e r a t o r s   t h a t   m a y   b e   u s e d   i n   a s s e s s i n g   o u t p u t   o f   s c i e n t i s t s .   W e   s h o w   t h a t   t h e   m o s t   o f t e n   c u r r e n t l y   u s e d   i n d i c e s   o f   b i b l i o m e t r i c   i m p a c t ,   l i k e   H i r s c h ' s   h ,   W o e g i n g e r ' s   w ,   E g g h e ' s   g ,   K o s m u l s k i ' s   M A X P R O D ,   a n d   s i m i l a r   c o n s t r u c t i o n s ,   m a y   b e   o b t a i n e d   b y   m e a n s   o f   o u r   f r a m e w o r k .   M o r e o v e r ,   t h e   m o d e l   e a s i l y   l e a d s   t o   s o m e   n e w ,   v e r y   i n t e r e s t i n g   f u n c t i o n s .   ( C )   2 0 1 3   E l s e v i e r   I n c .   A l l   r i g h t s   r e s e r v e d . 	 [ G a g o l e w s k i ,   M a r e k ]   P o l i s h   A c a d   S c i ,   S y s t   R e s   I n s t ,   P L - 0 1 4 4 7   W a r s a w ,   P o l a n d ;   [ G a g o l e w s k i ,   M a r e k ]   W a r s a w   U n i v   T e c h n o l ,   F a c   M a t h   &   I n f o r m a t   S c i ,   P L - 0 0 6 6 2   W a r s a w ,   P o l a n d ;   [ M e s i a r ,   R a d k o ]   S l o v a k   U n i v   T e c h n o l   B r a t i s l a v a ,   F a c   C i v i l   E n g n ,   D e p t   M a t h ,   B r a t i s l a v a   8 1 3 6 8 ,   S l o v a k i a ;   [ M e s i a r ,   R a d k o ]   D i v   U n i v   O s t r a v a   I R A F M ,   N a t l   S u p e r c o m p   C t r   I T 4 I n n o v a t ,   O s t r a v a   7 0 1 0 3   1 ,   C z e c h   R e p u b l i c 	 G a g o l e w s k i ,   M   ( r e p r i n t   a u t h o r ) ,   P o l i s h   A c a d   S c i ,   S y s t   R e s   I n s t ,   U l   N e w e l s k a   6 ,   P L - 0 1 4 4 7   W a r s a w ,   P o l a n d . 	 g a g o l e w s @ i b s p a n . w a w . p l ;   m e s i a r @ m a t h . s k 	 M e s i a r ,   R a d k o / G - 6 8 5 1 - 2 0 1 4 ;   G a g o l e w s k i ,   M a r e k / C - 3 5 7 5 - 2 0 1 2 ;   K r u z l i k ,   P e t e r / B - 7 8 7 7 - 2 0 1 2 	 G a g o l e w s k i ,   M a r e k / 0 0 0 0 - 0 0 0 3 - 0 6 3 7 - 6 0 2 8 ;   K r u z l i k ,   P e t e r / 0 0 0 0 - 0 0 0 2 - 7 9 9 1 - 4 1 2 5 	 E u r o p e a n   U n i o n   f r o m   r e s o u r c e s   o f   t h e   E u r o p e a n   S o c i a l   F u n d   [ U D A - P O K L . 0 4 . 0 1 . 0 1 - 0 0 - 0 5 1 / 1 0 - 0 0 ] ;   F o u n d a t i o n   f o r   P o l i s h   S c i e n c e ;   R e s e a r c h   a n d   D e v e l o p m e n t   f o r   I n n o v a t i o n s   O p e r a t i o n a l   P r o g r a m   [ C Z . 1 . 0 5 / 1 . 1 . 0 0 / 0 2 . 0 0 7 0 ] ;   S t r u c t u r a l   F o u n d s   o f   E u r o p e   U n i o n ;   m e a n s   o f   s t a t e   b u d g e t   o f   t h e   C z e c h   R e p u b l i c 	 T h e   c o n t r i b u t i o n   o f   M .   G a g o l e w s k i   w a s   p a r t i a l l y   s u p p o r t e d   b y   t h e   E u r o p e a n   U n i o n   f r o m   r e s o u r c e s   o f   t h e   E u r o p e a n   S o c i a l   F u n d ,   P r o j e c t   P O   K L   " I n f o r m a t i o n   t e c h n o l o g i e s :   R e s e a r c h   a n d   t h e i r   i n t e r d i s c i p l i n a r y   a p p l i c a t i o n s " ,   A g r e e m e n t   U D A - P O K L . 0 4 . 0 1 . 0 1 - 0 0 - 0 5 1 / 1 0 - 0 0 ,   a n d   b y   t h e   F N P   S T A R T   S c h o l a r s h i p   f r o m   t h e   F o u n d a t i o n   f o r   P o l i s h   S c i e n c e . ;   T h e   c o n t r i b u t i o n   o f   R .   M e s i a r   h a s   b e e n   d o n e   i n   c o n n e c t i o n   w i t h   p r o j e c t   A P V V - 0 0 7 3 - 1 0   a n d   a l s o   w i t h   I T 4 I n n o v a t i o n s   C e n t e r   o f   E x c e l l e n c e ,   R e g .   N o .   C Z . 1 . 0 5 / 1 . 1 . 0 0 / 0 2 . 0 0 7 0   s u p p o r t e d   b y   R e s e a r c h   a n d   D e v e l o p m e n t   f o r   I n n o v a t i o n s   O p e r a t i o n a l   P r o g r a m   f i n a n c e d   b y   S t r u c t u r a l   F o u n d s   o f   E u r o p e   U n i o n   a n d   f r o m   t h e   m e a n s   o f   s t a t e   b u d g e t   o f   t h e   C z e c h   R e p u b l i c . 	 A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   B e l i a k o v   G ,   2 0 1 1 ,   F U Z Z Y   S E T   S Y S T ,   V 1 6 7 ,   P 1 0 1 ,   D O I   1 0 . 1 0 1 6 / j . f s s . 2 0 1 0 . 0 8 . 0 1 1 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B r a s - A m o r o s   M ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 4 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 1 . 0 0 1 ;   C h o q u e t   G . ,   1 9 5 3 ,   A N N   I   F O U R I E R   G R E N O B ,   V 5 ,   P 1 3 1 ,   D O I   D O I   1 0 . 5 8 0 2 / A I F . 5 3 ;   E g g h e   L . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 8 ;   F r a n c e s c h i n i   F ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 0 8 . 0 0 3 ;   F r a n c e s c h i n i   F ,   2 0 0 9 ,   Q U A L   R E L I A B   E N G   I N T ,   V 2 5 ,   P 9 8 7 ,   D O I   1 0 . 1 0 0 2 / q r e . 1 0 1 6 ;   G a g o l e w s k i   M ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 5 6 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 5 . 0 0 1 ;   G a g o l e w s k i   M ,   2 0 1 1 ,   I N T   J   A P P R O X   R E A S O N ,   V 5 2 ,   P 1 3 1 2 ,   D O I   1 0 . 1 0 1 6 / j . i j a r . 2 0 1 1 . 0 1 . 0 1 0 ;   G a g o l e w s k i   M ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 6 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 2 5 3 - y ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K l e m e n t   E P ,   2 0 1 0 ,   I E E E   T   F U Z Z Y   S Y S T ,   V 1 8 ,   P 1 7 8 ,   D O I   1 0 . 1 1 0 9 / T F U Z Z . 2 0 0 9 . 2 0 3 9 3 6 7 ;   K o s m u l s k i   M . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 4 ;   K o s m u l s k i   M . ,   2 0 0 7 ,   C Y B E R M E T R I C S ,   P 1 1 ;   M e s i a r   R ,   2 0 1 3 ,   I N T   J   A P P R O X   R E A S O N ,   V 5 4 ,   P 1 2 5 2 ,   D O I   1 0 . 1 0 1 6 / j . i j a r . 2 0 1 3 . 0 2 . 0 0 1 ;   Q u e s a d a   A ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 4 1 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 2 6 - x ;   Q u e s a d a   A ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 1 . 0 0 2 ;   R o u s s e a u   R ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 3 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 7 . 0 0 1 ;   S c h r e i b e r   M ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 2 7 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 5 7 ;   S H I L K R E T   N . ,   1 9 7 1 ,   I N D A G   M A T H ,   V 8 ,   P 1 0 9 ,   D O I   D O I   1 0 . 1 0 1 6 / S 1 3 8 5 - 7 2 5 8 ( 7 1 ) 8 0 0 1 7 - 3 ;   S u g e n o   M . ,   1 9 7 4 ,   T H E S I S   T O K Y O   I   T E C H N ;   T o r r a   V ,   2 0 0 8 ,   I E E E   T   F U Z Z Y   S Y S T ,   V 1 6 ,   P 7 9 5 ,   D O I   1 0 . 1 1 0 9 / T F U Z Z . 2 0 0 7 . 8 9 6 3 2 7 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 3 6 4 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 5 . 0 0 2 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 2 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 8 . 0 9 . 0 0 1 ;   W o e g i n g e r   G J ,   2 0 0 8 ,   M A T H   S O C   S C I ,   V 5 6 ,   P 2 2 4 ,   D O I   1 0 . 1 0 1 6 / j . m a t h s o c s c i . 2 0 0 8 . 0 3 . 0 0 1 	 2 6 	 1 3 	 1 3 	 3 	 2 3 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 0 0 2 0 - 0 2 5 5 	 1 8 7 2 - 6 2 9 1 	 	 I N F O R M   S C I E N C E S 	 I n f .   S c i . 	 A P R   1 	 2 0 1 4 	 2 6 3 	 	 	 	 	 	 1 6 6 	 1 7 4 	 	 1 0 . 1 0 1 6 / j . i n s . 2 0 1 3 . 1 2 . 0 0 4 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s 	 C o m p u t e r   S c i e n c e 	 A B 6 S I 	 W O S : 0 0 0 3 3 1 9 1 9 4 0 0 0 1 1 	 	 
 
 J 	 V e n a b l e ,   G T ;   K h a n ,   N R ;   T a y l o r ,   D R ;   T h o m p s o n ,   C J ;   M i c h a e l ,   L M ;   K l i m o ,   P 	 	 	 	 V e n a b l e ,   G a r r e t t   T . ;   K h a n ,   N i c k a l u s   R . ;   T a y l o r ,   D o u g l a s   R . ;   T h o m p s o n ,   C l i n t o n   J . ;   M i c h a e l ,   L .   M a d i s o n ;   K l i m o ,   P a u l ,   J r . 	 	 	 A   C o r r e l a t i o n   B e t w e e n   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   F u n d i n g   a n d   B i b l i o m e t r i c s   i n   N e u r o s u r g e r y 	 W O R L D   N E U R O S U R G E R Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   C i t a t i o n s ;   C o n t e m p o r a r y   h - i n d e x ;   F u n d i n g ;   g - I n d e x ;   h - I n d e x ;   N e u r o s u r g e r y ;   N I H ;   m - Q u o t i e n t 	 H - I N D E X ;   G O O G L E   S C H O L A R ;   I M P A C T ;   P R O D U C T I V I T Y ;   S C I E N C E ;   S C O P U S ;   W E B 	 O B J E C T I V E :   T h e   r e l a t i o n s h i p   b e t w e e n   m e t r i c s ,   s u c h   a s   t h e   h - i n d e x ,   a n d   t h e   a b i l i t y   o f   r e s e a r c h e r s   t o   g e n e r a t e   f u n d i n g   h a s   n o t   b e e n   p r e v i o u s l y   i n v e s t i g a t e d   i n   n e u r o s u r g e r y .   T h i s   s t u d y   w a s   p e r f o r m e d   t o   d e t e r m i n e   w h e t h e r   a   c o r r e l a t i o n   e x i s t s   b e t w e e n   b i b l i o m e t r i c s   a n d   N a t i o n a l   I n s t i t u t e s   o f   H e a l t h   ( N I H )   f u n d i n g   d a t a   a m o n g   a c a d e m i c   n e u r o s u r g e o n s .   M E T H O D S :   T h e   h - i n d e x ,   m - q u o t i e n t ,   g - i n d e x ,   a n d   c o n t e m p o r a r y   h - i n d e x   w e r e   d e t e r m i n e d   f o r   1 2 2 5   a c a d e m i c   n e u r o s u r g e o n s   f r o m   9 9   ( o f   1 0 1 )   d e p a r t m e n t s .   T w o   d a t a b a s e s   w e r e   u s e d   t o   c r e a t e   t h e   c i t a t i o n   p r o f i l e s ,   G o o g l e   S c h o l a r   a n d   S c o p u s .   T h e   N I H   R e s e a r c h   P o r t f o l i o   O n l i n e   R e p o r t i n g   T o o l s   E x p e n d i t u r e s   a n d   R e p o r t s   t o o l   w a s   a c c e s s e d   t o   o b t a i n   c a r e e r   g r a n t   f u n d i n g   a m o u n t ,   g r a n t   n u m b e r ,   y e a r   o f   f i r s t   g r a n t   a w a r d ,   a n d   c a l e n d a r   y e a r   o f   g r a n t   f u n d i n g .   R E S U L T S :   O f   t h e   1 2 2 5   a c a d e m i c   n e u r o s u r g e o n s ,   1 8 2   ( 1 5 % )   h a d   a t   l e a s t   1   g r a n t   w i t h   a   f u l l y   r e p o r t e d   N I H   a w a r d   p r o f i l e .   B i b l i o m e t r i c   i n d i c e s   w e r e   a l l   s i g n i f i c a n t l y   h i g h e r   f o r   t h o s e   w i t h   N I H   f u n d i n g   c o m p a r e d   t o   t h o s e   w i t h o u t   N I H   f u n d i n g   ( P < . 0 0 1 ) .   T h e   c o n t e m p o r a r y   h - i n d e x   w a s   f o u n d   t o   b e   s i g n i f i c a n t l y   p r e d i c t i v e   o f   N I H   f u n d i n g   ( P < . 0 0 1 ) .   A l l   b i b l i o m e t r i c   i n d i c e s   w e r e   s i g n i f i c a n t l y   a s s o c i a t e d   w i t h   t h e   t o t a l   n u m b e r   o f   g r a n t s ,   t o t a l   a w a r d   a m o u n t ,   y e a r   o f   f i r s t   g r a n t ,   a n d   d u r a t i o n   o f   g r a n t s   i n   c a l e n d a r   y e a r s   ( b i v a r i a t e   c o r r e l a t i o n ,   P < . 0 0 1 )   e x c e p t   f o r   t h e   a s s o c i a t i o n   o f   m - q u o t i e n t   w i t h   y e a r   o f   f i r s t   g r a n t   ( P   =   . 1 8 4 ) .   C O N C L U S I O N S :   B i b l i o m e t r i c   i n d i c e s   a r e   h i g h e r   f o r   t h o s e   w i t h   N I H   f u n d i n g   c o m p a r e d   t o   t h o s e   w i t h o u t ,   b u t   o n l y   t h e   c o n t e m p o r a r y   h - i n d e x   w a s   s h o w n   t o   b e   p r e d i c t i v e   o f   N I H   f u n d i n g .   A m o n g   n e u r o s u r g e o n s   w i t h   N I H   f u n d i n g ,   h i g h e r   b i b l i o m e t r i c   s c o r e s   w e r e   a s s o c i a t e d   w i t h   g r e a t e r   t o t a l   a m o u n t   o f   f u n d i n g ,   n u m b e r   o f   g r a n t s ,   d u r a t i o n   o f   g r a n t s ,   a n d   e a r l i e r   a c q u i s i t i o n   o f   t h e i r   f i r s t   g r a n t . 	 [ V e n a b l e ,   G a r r e t t   T . ;   T a y l o r ,   D o u g l a s   R . ]   U n i v   T e n n e s s e e ,   C o l l   M e d ,   H l t h   S c i   C t r ,   M e m p h i s ,   T N   U S A ;   [ K h a n ,   N i c k a l u s   R . ;   M i c h a e l ,   L .   M a d i s o n ;   K l i m o ,   P a u l ,   J r . ]   U n i v   T e n n e s s e e ,   H l t h   S c i   C t r ,   D e p t   N e u r o s u r g ,   M e m p h i s ,   T N   3 8 1 5 2   U S A ;   [ T h o m p s o n ,   C l i n t o n   J . ]   G e o r g e   W a s h i n g t o n   U n i v ,   S c h   P u b l   H l t h   &   H l t h   S e r v ,   W a s h i n g t o n ,   D C   U S A ;   [ M i c h a e l ,   L .   M a d i s o n ;   K l i m o ,   P a u l ,   J r . ]   S e m m e s   M u r p h e y   N e u r o l   &   S p i n e   I n s t ,   M e m p h i s ,   T N   U S A ;   [ K l i m o ,   P a u l ,   J r . ]   L e   B o n h e u r   C h i l d r e n s   H o s p ,   L e   B o n h e u r   N e u r o s c i   I n s t ,   M e m p h i s ,   T N   U S A 	 K l i m o ,   P   ( r e p r i n t   a u t h o r ) ,   U n i v   T e n n e s s e e ,   H l t h   S c i   C t r ,   D e p t   N e u r o s u r g ,   M e m p h i s ,   T N   3 8 1 5 2   U S A . 	 p k l i m o @ s e m m e s - m u r p h e y . c o m 	 	 	 	 	 A l o n s o   S ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 4 . 0 0 1 ;   A o u n   S G ,   2 0 1 3 ,   W O R L D   N E U R O S U R G ,   V 8 0 ,   p E 8 5 ,   D O I   1 0 . 1 0 1 6 / j . w n e u . 2 0 1 2 . 0 1 . 0 5 2 ;   A t a s o y l u   A A ,   2 0 0 3 ,   J   G E N   I N T E R N   M E D ,   V 1 8 ,   P 7 1 1 ,   D O I   1 0 . 1 0 4 6 / j . 1 5 2 5 - 1 4 9 7 . 2 0 0 3 . 1 0 4 2 5 . x ;   B a k k a l b a s i   N i s a ,   2 0 0 6 ,   B i o m e d   D i g i t   L i b r ,   V 3 ,   P 7 ,   D O I   1 0 . 1 1 8 6 / 1 7 4 2 - 5 5 8 1 - 3 - 7 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B o r n m a n n   L . ,   2 0 0 8 ,   E T H I C S   S C I   E N V   P O L I T ,   V 8 ,   P 9 3 ,   D O I   D O I   1 0 . 3 3 5 4 / E S E P 0 0 0 8 4 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 3 4 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 1 . 0 0 6 ;   C a m p b e l l   P G ,   2 0 1 1 ,   J   N E U R O S U R G ,   V 1 1 5 ,   P 3 8 0 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 1 . 3 . J N S 1 0 1 1 7 6 ;   C h e e k   J ,   2 0 0 6 ,   Q U A L   H E A L T H   R E S ,   V 1 6 ,   P 4 2 3 ,   D O I   1 0 . 1 1 7 7 / 1 0 4 9 7 3 2 3 0 5 2 8 5 7 0 1 ;   C o l a c o   M ,   2 0 1 3 ,   J   U R O L O G Y ,   V 1 9 0 ,   P 9 9 9 ,   D O I   1 0 . 1 0 1 6 / j . j u r o . 2 0 1 3 . 0 2 . 3 1 8 6 ;   D e   G r o o t e   S L ,   2 0 1 2 ,   N U R S   O U T L O O K ,   V 6 0 ,   P 3 9 1 ,   D O I   1 0 . 1 0 1 6 / j . o u t l o o k . 2 0 1 2 . 0 4 . 0 0 7 ;   E g g h e   L . ,   2 0 0 6 ,   I S S I   N E W S L E T T E R ,   V 2 ,   P 8 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   H a r z i n g   A . W . ,   2 0 1 0 ,   P U B L I S H   P E R I S H   B O O K ;   H i c k s   D ,   2 0 0 4 ,   R E S   E V A L U A T I O N ,   V 1 3 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   K a l r a   R R ,   2 0 1 3 ,   J   N E U R O S U R G - P E D I A T R ,   V 1 2 ,   P 2 6 2 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 3 . 6 . P E D S 1 3 1 1 2 ;   K h a n   N i c k a l u s ,   2 0 1 3 ,   W o r l d   N e u r o s u r g ,   V 8 0 ,   P 7 5 9 ,   D O I   1 0 . 1 0 1 6 / j . w n e u . 2 0 1 3 . 0 7 . 0 1 0 ;   K h a n   N i c k a l u s   R ,   2 0 1 3 ,   W o r l d   N e u r o s u r g ,   V 8 0 ,   P 7 6 6 ,   D O I   1 0 . 1 0 1 6 / j . w n e u . 2 0 1 3 . 0 7 . 0 1 1 ;   K u l k a r n i   A V ,   2 0 0 9 ,   J A M A - J   A M   M E D   A S S O C ,   V 3 0 2 ,   P 1 0 9 2 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 0 0 9 . 1 3 0 7 ;   L e e   J ,   2 0 0 9 ,   J   N E U R O S U R G ,   V 1 1 1 ,   P 3 8 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 0 8 . 1 0 . J N S 0 8 9 7 8 ;   M o e d   H F ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 3 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 1 - 5 ;   N o r u z i   A ,   2 0 0 5 ,   L I B R I ,   V 5 5 ,   P 1 7 0 ,   D O I   1 0 . 1 5 1 5 / L I B R . 2 0 0 5 . 1 7 0 ;   P o n c e   F A ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 4 4 7 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 3 . J N S 1 0 3 2 ;   R e z e k   I ,   2 0 1 1 ,   A C A D   R A D I O L ,   V 1 8 ,   P 1 3 3 7 ,   D O I   1 0 . 1 0 1 6 / j . a c r a . 2 0 1 1 . 0 6 . 0 1 7 ;   S a h e l   J A ,   2 0 1 1 ,   S C I   T R A N S L   M E D ,   V 3 ,   D O I   1 0 . 1 1 2 6 / s c i t r a n s l m e d . 3 0 0 2 2 4 9 ;   S i d i r o p o u l o s   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 2 5 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 2 2 - z ;   S p e a r m a n   C M ,   2 0 1 0 ,   J   N E U R O S U R G ,   V 1 1 3 ,   P 9 2 9 ,   D O I   1 0 . 3 1 7 1 / 2 0 1 0 . 4 . J N S 0 9 1 8 4 2 ;   S v i d e r   P F ,   2 0 1 3 ,   L A R Y N G O S C O P E ,   V 1 2 3 ,   P 1 1 8 ,   D O I   1 0 . 1 0 0 2 / l a r y . 2 3 6 5 9 	 2 9 	 1 3 	 1 5 	 1 	 2 2 	 E L S E V I E R   S C I E N C E   I N C 	 N E W   Y O R K 	 3 6 0   P A R K   A V E   S O U T H ,   N E W   Y O R K ,   N Y   1 0 0 1 0 - 1 7 1 0   U S A 	 1 8 7 8 - 8 7 5 0 	 1 8 7 8 - 8 7 6 9 	 	 W O R L D   N E U R O S U R G 	 W o r l d   N e u r o s u r g . 	 M A R - A P R 	 2 0 1 4 	 8 1 	 3 - 4 	 	 	 	 	 4 6 8 	 4 7 2 	 	 1 0 . 1 0 1 6 / j . w n e u . 2 0 1 3 . 1 1 . 0 1 3 	 	 5 	 C l i n i c a l   N e u r o l o g y ;   S u r g e r y 	 N e u r o s c i e n c e s   &   N e u r o l o g y ;   S u r g e r y 	 A G 7 E P 	 W O S : 0 0 0 3 3 5 5 8 1 2 0 0 0 1 8 	 2 4 2 3 9 7 3 7 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 A r e   t h e   a u t h o r s   o f   h i g h l y   c i t e d   a r t i c l e s   a l s o   t h e   m o s t   p r o d u c t i v e   o n e s ? 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   R e s e a r c h   e v a l u a t i o n ;   R e s e a r c h   p r o d u c t i v i t y ;   T o p   s c i e n t i s t s ;   H i g h l y   c i t e d   a r t i c l e s ;   U n i v e r s i t y 	 B I B L I O M E T R I C   I N D I C A T O R S ;   R E S E A R C H   P E R F O R M A N C E ;   C I T A T I O N   A N A L Y S I S ;   T O P ;   I N D E X ;   U N I V E R S I T I E S ;   S C I E N T I S T S ;   E X C E L L E N C E ;   F I E L D ;   S C I E N C E S 	 E v e r   m o r e   f r e q u e n t l y ,   g o v e r n m e n t s   h a v e   d e c i d e d   t o   i m p l e m e n t   p o l i c y   m e a s u r e s   i n t e n d e d   t o   f o s t e r   a n d   r e w a r d   e x c e l l e n c e   i n   s c i e n t i f i c   r e s e a r c h .   T h i s   i s   i n   f a c t   t h e   i n t e n d e d   p u r p o s e   o f   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s .   T h e s e   a r e   t y p i c a l l y   b a s e d   o n   t h e   a n a l y s i s   o f   t h e   q u a l i t y   o f   t h e   b e s t   r e s e a r c h   p r o d u c t s ;   h o w e v e r ,   a   d i f f e r e n t   a p p r o a c h   t o   a n a l y s i s   a n d   i n t e r v e n t i o n   i s   b a s e d   o n   t h e   m e a s u r e   o f   p r o d u c t i v i t y   o f   t h e   i n d i v i d u a l   s c i e n t i s t s ,   m e a n i n g   t h e .   o v e r a l l   i m p a c t   o f   t h e i r   e n t i r e   s c i e n t i f i c   p r o d u c t i o n   o v e r   t h e   p e r i o d   u n d e r   o b s e r v a t i o n .   T h i s   w o r k   a n a l y z e s   t h e   c o n v e r g e n c e   o f   t h e   t w o   a p p r o a c h e s ,   a s k i n g   i f   a n d   t o   w h a t   m e a s u r e   t h e   m o s t   p r o d u c t i v e   s c i e n t i s t s   a c h i e v e   h i g h l y   c i t e d   a r t i c l e s ;   o r   v i c e   v e r s a ,   w h a t   s h a r e   o f   h i g h l y   c i t e d   a r t i c l e s   i s   a c h i e v e d   b y   s c i e n t i s t s   t h a t   a r e   " n o n - t o p "   f o r   p r o d u c t i v i t y .   T o   d o   t h i s   w e   u s e   b i b l i o m e t r i c   i n d i c a t o r s ,   a p p l i e d   t o   t h e   2 0 0 4 - 2 0 0 8   p u b l i c a t i o n s   a u t h o r e d   b y   a c a d e m i c s   o f   I t a l i a n   u n i v e r s i t i e s   a n d   i n d e x e d   i n   t h e   W e b   o f   S c i e n c e .   ( C )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   N a t l   R e s   C o u n c i l   I t a l y ,   C N R ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y ;   [ C i c e r o ,   T i n d a r o ]   I t a l i a n   N a t l   A g c y   E v a l u a t   U n i v   &   R e s   I n s t   A N V U R ,   R o m e ,   I t a l y ;   [ D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   D e p t   M a n a g e m e n t   &   E n g n ,   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   N a t l   R e s   C o u n c i l   I t a l y ,   C N R ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 0 7 ,   C U R R   S C I   I N D I A ,   V 9 3 ,   P 7 6 2 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 2 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 1 . 0 1 3 ;   A b r a m o   G ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 9 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 1 . 0 0 3 ;   A b r a m o   G ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 4 7 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 3 . 0 0 5 ;   A b r a m o   G ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 1 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 1 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 6 ,   P 6 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 2 8 4 - 7 ;   A b r a m o   G ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 1 3 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 2 1 3 1 - 7 ;   A b r a m o   G ,   2 0 0 9 ,   E V A L U A T I O N   R E V ,   V 3 3 ,   P 1 5 9 ,   D O I   1 0 . 1 1 7 7 / 0 1 9 3 8 4 1 X 0 8 3 2 2 8 7 1 ;   B a c c i n i   A ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 7 2 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 7 . 0 0 9 ;   B l a n d   J M ,   2 0 0 0 ,   B R I T   M E D   J ,   V 3 2 0 ,   P 1 4 6 8 ,   D O I   1 0 . 1 1 3 6 / b m j . 3 2 0 . 7 2 4 7 . 1 4 6 8 ;   B o r n m a n n   L . ,   2 0 0 7 ,   I N T   J   S C I E N T O M E T R I C S ,   V 1 1 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 5 4 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 1 1 ;   B u t l e r   L ,   2 0 0 7 ,   S C I   P U B L   P O L I C Y ,   V 3 4 ,   P 5 6 5 ,   D O I   D O I   1 0 . 3 1 5 2 / 0 3 0 2 3 4 2 0 7 X 2 5 4 4 0 4 ;   C h o   K .   W . ,   2 0 1 2 ,   M E M   C O G N I T I O N ,   V 4 0 ,   P 1 1 3 2 ;   C o s t a s   R ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 6 6 2 ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   E g g h e   L ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 9 ,   P 1 3 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 4 4 - 7 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G e u n a   A ,   2 0 0 3 ,   M I N E R V A ,   V 4 1 ,   P 2 7 7 ,   D O I   1 0 . 1 0 2 3 / B : M I N E . 0 0 0 0 0 0 5 1 5 5 . 7 0 8 7 0 . b d ;   G L A N Z E L   W ,   1 9 8 8 ,   J   I N F O R M   S C I ,   V 1 4 ,   P 1 2 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 8 0 1 4 0 0 2 0 8 ;   G o o d a l l   A H ,   2 0 0 6 ,   J   D O C ,   V 6 2 ,   P 3 8 8 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 6 1 0 6 6 6 5 2 9 ;   H e n n e s s e y   K ,   2 0 0 9 ,   C U A J - C A N   U R O L   A S S O C ,   V 3 ,   P 2 9 3 ;   H i c k s   D ,   2 0 1 2 ,   R E S   P O L I C Y ,   V 4 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 9 . 0 0 7 ;   H i r s c h   J E ,   2 0 0 5 ,   P   N A T L   A C A D   S C I   U S A ,   V 1 0 2 ,   P 1 6 5 6 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 0 5 0 7 6 5 5 1 0 2 ;   I o a n n i d i s   J P A ,   2 0 1 0 ,   F A S E B   J ,   V 2 4 ,   P 4 6 3 5 ,   D O I   1 0 . 1 0 9 6 / f j . 1 0 - 1 6 2 9 7 4 ;   K h a n   M A ,   2 0 1 2 ,   S C I   T O T A L   E N V I R O N ,   V 4 3 1 ,   P 1 2 2 ,   D O I   1 0 . 1 0 1 6 / j . s c i t o t e n v . 2 0 1 2 . 0 5 . 0 3 5 ;   M O E D   H F ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 7 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 5 ;   P r p i c   K ,   2 0 1 1 ,   P U B L I C   U N D E R S T   S C I ,   V 2 0 ,   P 7 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 3 6 6 2 5 1 0 3 6 6 3 6 3 ;   S h a p i r o   F r e d   R . ,   1 9 9 1 ,   Y A L E   L A W   J ,   V 1 0 0 ,   P 1 4 4 9 ,   D O I   1 0 . 2 3 0 7 / 7 9 6 6 9 6 ;   S i l v e r s i d e s   A ,   2 0 1 0 ,   C A N   M E D   A S S O C   J ,   V 1 8 2 ,   p E 3 5 ,   D O I   1 0 . 1 5 0 3 / c m a j . 1 0 9 - 3 1 1 4 ;   T A T E   R F ,   1 9 5 4 ,   A N N   M A T H   S T A T ,   V 2 5 ,   P 6 0 3 ,   D O I   1 0 . 1 2 1 4 / a o m s / 1 1 7 7 7 2 8 7 3 0 ;   T i j s s e n   R J W ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 9 1 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 6 9 0 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   Z i t t   M ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 3 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 2 1 8 - y 	 3 5 	 1 3 	 1 4 	 3 	 3 2 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 1 8 7 5 - 5 8 7 9 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 J A N 	 2 0 1 4 	 8 	 1 	 	 	 	 	 8 9 	 9 7 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 1 0 . 0 1 1 	 	 9 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 A B 4 P H 	 W O S : 0 0 0 3 3 1 7 7 1 9 0 0 0 0 9 	 	 
 
 J 	 X u ,   L ;   M a r i n o v a ,   D 	 	 	 	 X u ,   L i ;   M a r i n o v a ,   D o r a 	 	 	 R e s i l i e n c e   t h i n k i n g :   a   b i b l i o m e t r i c   a n a l y s i s   o f   s o c i o - e c o l o g i c a l   r e s e a r c h 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B i b l i o m e t r i c s ;   S u s t a i n a b i l i t y ;   R e s i l i e n c e ;   S o c i o - e c o l o g i c a l   s y s t e m s 	 G L O B A L   E N V I R O N M E N T A L - C H A N G E ;   S O C I A L - E C O L O G I C A L   S Y S T E M S ;   G O O G L E - S C H O L A R ;   T R A N S F O R M A B I L I T Y ;   A D A P T A B I L I T Y 	 R e s i l i e n c e   t h i n k i n g   i s   a   r i s i n g   t o p i c   i n   e n v i r o n m e n t a l   s c i e n c e s   a n d   s u s t a i n a b i l i t y   d i s c o u r s e .   I n   t h i s   p a p e r ,   a   b i b l i o m e t r i c   m e t h o d   i s   u s e d   t o   a n a l y s e   t h e   t r e n d s   i n   r e s i l i e n c e   r e s e a r c h   i n   t h e   c o n t e x t s   o f   e c o l o g i c a l ,   e c o n o m i c ,   s o c i a l ,   a n d   i n t e g r a t e d   s o c i o - e c o l o g i c a l   s y s t e m s .   B a s e d   o n   9 1 9   c i t e d   p u b l i c a t i o n s   i n   E n g l i s h   w h i c h   a p p e a r e d   b e t w e e n   1 9 7 3   a n d   2 0 1 1 ,   t h e   a n a l y s i s   c o v e r s   t h e   f o l l o w i n g   i s s u e s :   g e n e r a l   s t a t i s t i c a l   d e s c r i p t i o n ,   i n f l u e n t i a l   j o u r n a l   o u t l e t s   a n d   t o p   c i t e d   a r t i c l e s ,   g e o g r a p h i c   d i s t r i b u t i o n   o f   r e s i l i e n c e   p u b l i c a t i o n s   a n d   c o v e r e d   c a s e   s t u d i e s ,   n a t i o n a l   i m p o r t a n c e   o f   r e s i l i e n c e   r e s e a r c h e r s   a n d   l e a d i n g   r e s e a r c h   o r g a n i s a t i o n s   b y   c o u n t r y .   T h e   f i n d i n g s   s h o w   t h a t   r e s i l i e n c e   t h i n k i n g   c o n t i n u e s   t o   d o m i n a t e   e n v i r o n m e n t a l   s c i e n c e s   a n d   h a s   e x p e r i e n c e d   a   d r a m a t i c   i n c r e a s e   s i n c e   i t s   i n t r o d u c t i o n   i n   1 9 7 3 .   M o r e   r e c e n t l y ,   n e w   i n t e r e s t   h a s   e m e r g e d   f o r   b r o a d e n i n g   t h e   s c o p e   a n d   a p p l y i n g   t h e   c o n c e p t   t o   s o c i o - e c o n o m i c   s y s t e m s   a n d   s u s t a i n a b i l i t y   s c i e n c e .   T h e   p a p e r   a l s o   s h o w s   t h a t   r e s i l i e n c e   r e s e a r c h   o v e r a l l   i s   d o m i n a t e d   b y   U S A ,   A u s t r a l i a ,   U K   a n d   S w e d e n ,   a n d   m a k e s   t h e   c a s e   f o r   t h e   n e e d   t o   e x p a n d   t h i s   w o r k   f u r t h e r   i n   t h e   u r g e n t   n e e d   f o r   p r a c t i c a l l y   o r i e n t e d   s o l u t i o n s   t h a t   w o u l d   h e l p   a r r e s t   f u r t h e r   e c o l o g i c a l   d e t e r i o r a t i o n . 	 [ X u ,   L i ;   M a r i n o v a ,   D o r a ]   C u r t i n   U n i v ,   C u r t i n   U n i v   S u s t a i n a b i l   P o l i c y   C U S P   I n s t ,   P e r t h ,   W A   6 8 4 5 ,   A u s t r a l i a 	 M a r i n o v a ,   D   ( r e p r i n t   a u t h o r ) ,   C u r t i n   U n i v ,   C u r t i n   U n i v   S u s t a i n a b i l   P o l i c y   C U S P   I n s t ,   P e r t h ,   W A   6 8 4 5 ,   A u s t r a l i a . 	 l i x u c u s p @ g m a i l . c o m ;   D . M a r i n o v a @ c u r t i n . e d u . a u 	 X u ,   L i / G - 3 3 9 5 - 2 0 1 4 ;   M a r i n o v a ,   D o r a / H - 2 0 9 3 - 2 0 1 3 	 X u ,   L i / 0 0 0 0 - 0 0 0 2 - 5 5 8 0 - 8 7 7 4 ;   M a r i n o v a ,   D o r a / 0 0 0 0 - 0 0 0 1 - 5 1 2 5 - 8 8 7 8 	 A u s t r a l i a n   R e s e a r c h   C o u n c i l 	 W e   w o u l d   l i k e   t o   t h a n k   D r .   R o m a n   T r u b k a   a n d   C o l e   H e n d r i g a n   f o r   t h e i r   a s s i s t a n c e   w i t h   G I S   m a p p i n g   a n d   h e l p f u l   s u g g e s t i o n s .   T h e   s e c o n d   a u t h o r   a l s o   a c k n o w l e d g e s   t h e   f i n a n c i a l   a s s i s t a n c e   b y   t h e   A u s t r a l i a n   R e s e a r c h   C o u n c i l .   W e   a r e   a l s o   t h a n k f u l   t o   t h e   J o u r n a l ' s   E d i t o r   a n d   r e f e r e e s   f o r   h e l p f u l   a n d   c o n s t r u c t i v e   c o m m e n t s   w h i c h   i m p r o v e d   t h e   q u a l i t y   o f   t h e   p a p e r . 	 A d g e r   N W ,   2 0 0 5 ,   S C I E N C E ,   V 3 0 9 ,   P 1 0 3 6 ,   D O I   D O I   1 0 . 1 1 2 6 / S C I E N C E . 1 1 1 2 1 2 2 ;   A d g e r   W N ,   2 0 0 0 ,   P R O G   H U M   G E O G ,   V 2 4 ,   P 3 4 7 ,   D O I   1 0 . 1 1 9 1 / 0 3 0 9 1 3 2 0 0 7 0 1 5 4 0 4 6 5 ;   A g u i l l o   I F ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 1 ,   P 3 4 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 8 2 - 8 ;   B j u r s t r o m   A ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 5 2 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 6 - 3 ;   B u r n s   M . ,   2 0 0 8 ,   E X P L O R I N G   S U S T A I N A B I ;   C O L E   J R ,   1 9 7 2 ,   S C I E N C E ,   V 1 7 8 ,   P 3 6 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 7 8 . 4 0 5 9 . 3 6 8 ;   E l s e v i e r ,   2 0 1 2 ,   S C I V E R S E   O P   A C C   S C I ;   F a l a g a s   M E ,   2 0 0 8 ,   F A S E B   J ,   V 2 2 ,   P 3 3 8 ,   D O I   1 0 . 1 0 9 6 / f j . 0 7 - 9 4 9 2 L S F ;   F o l k e   C ,   2 0 0 3 ,   P H I L O S   T   R O Y   S O C   B ,   V 3 5 8 ,   P 2 0 2 7 ,   D O I   1 0 . 1 0 9 8 / r s t b . 2 0 0 3 . 1 3 8 5 ;   F o l k e   C ,   2 0 0 2 ,   A M B I O ,   V 3 1 ,   P 4 3 7 ,   D O I   1 0 . 1 6 3 9 / 0 0 4 4 - 7 4 4 7 ( 2 0 0 2 ) 0 3 1 [ 0 4 3 7 : R A S D B A ] 2 . 0 . C O ; 2 ;   F o l k e   C ,   2 0 0 6 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 6 ,   P 2 5 3 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 6 . 0 4 . 0 0 2 ;   F o l k e   C ,   2 0 1 0 ,   E C O L   S O C ,   V 1 5 ;   G o o g l e   S c h o l a r ,   S T A N D   S H O U L D   G I A N T S ;   H a r z i n g   A W ,   2 0 1 3 ,   S C I E N T O M E T R I C S ,   V 9 4 ,   P 2 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 3 8 - 1 ;   H o l l i n g   C . S . ,   1 9 7 3 ,   A n n u a l   R e v   E c o l   S y s t ,   V 4 ,   P 1 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . e s . 0 4 . 1 1 0 1 7 3 . 0 0 0 2 4 5 ;   J a n s s e n   M A ,   2 0 0 6 ,   G L O B A L   E N V I R O N   C H A N G ,   V 1 6 ,   P 2 4 0 ,   D O I   1 0 . 1 0 1 6 / j . g l o e n v c h a . 2 0 0 6 . 0 4 . 0 0 1 ;   J a p p e   A ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 6 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 7 6 - 1 ;   L u d w i g   D ,   2 0 0 1 ,   A N N U   R E V   E C O L   S Y S T ,   V 3 2 ,   P 4 8 1 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . e c o l s y s . 3 2 . 0 8 1 5 0 1 . 1 1 4 1 1 6 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M a r i n o v a   D . ,   2 0 0 5 ,   R A T I O N A L I T Y   U N C E R T A I ,   P 2 7 5 ;   M c M i c h a e l   A J ,   2 0 0 3 ,   S C I E N C E ,   V 3 0 2 ,   P 1 9 1 9 ;   P e r r i n g s   C ,   1 9 9 8 ,   E N V I R O N   R E S O U R   E C O N ,   V 1 1 ,   P 5 0 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 8 2 5 5 6 1 4 2 7 6 ;   Q u e n t a l   N ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 0 ,   P 3 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 3 3 - 4 ;   R e s i l i e n c e   A l l i a n c e ,   2 0 0 2 ,   R E S ;   R o s e   A . Z . ,   2 0 0 7 ,   E N V   H A Z A R D S ,   V 7 ,   P 3 8 3 ,   D O I   D O I   1 0 . 1 0 1 6 / J . E N V H A Z . 2 0 0 7 . 1 0 . 0 0 1 ;   S m a l l   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 3 0 5 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 3 4 3 7 6 . 5 5 8 0 0 . 1 8 ;   T h o m p s o n   R e u t e r s ,   2 0 1 2 ,   W E B   K N O W L ;   T r o e l l   M ,   2 0 0 5 ,   E C O L   S O C ,   V 1 0 ;   V e u g e l e r s   R ,   2 0 1 0 ,   S C I E N T O M E T R I C S ,   V 8 2 ,   P 4 3 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 0 0 4 5 - 7 ;   W a l k e r   B ,   2 0 0 4 ,   E C O L   S O C ,   V 9 ;   W a l k e r   B ,   2 0 1 0 ,   E N V I R O N   R E S O U R   E C O N ,   V 4 5 ,   P 1 8 3 ,   D O I   1 0 . 1 0 0 7 / s 1 0 6 4 0 - 0 0 9 - 9 3 1 1 - 7 ;   Y a n g   K . ,   2 0 0 6 ,   6 9   A N N   M   A M   S O C   I N F 	 3 2 	 1 3 	 1 4 	 8 	 7 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 S E P 	 2 0 1 3 	 9 6 	 3 	 	 	 	 	 9 1 1 	 9 2 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 3 - 0 9 5 7 - 0 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 2 0 5 I L 	 W O S : 0 0 0 3 2 3 4 3 7 4 0 0 0 1 7 	 	 
 
 J 	 A b r a m o ,   G ;   C i c e r o ,   T ;   D ' A n g e l o ,   C A 	 	 	 	 A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a 	 	 	 N a t i o n a l   p e e r - r e v i e w   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s   f o r   t h e   h a r d   s c i e n c e s   c a n   b e   a   c o m p l e t e   w a s t e   o f   m o n e y :   t h e   I t a l i a n   c a s e 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 R e v i e w 	 	 	 	 	 	 R e s e a r c h   e v a l u a t i o n ;   B i b l i o m e t r i c s ;   V T R ;   R a n k i n g ;   P r o d u c t i v i t y ;   U n i v e r s i t i e s 	 B I B L I O M E T R I C   I N D I C A T O R S ;   R A N K I N G 	 T h e r e   h a s   b e e n   a m p l e   d e m o n s t r a t i o n   t h a t   b i b l i o m e t r i c s   i s   s u p e r i o r   t o   p e e r - r e v i e w   f o r   n a t i o n a l   r e s e a r c h   a s s e s s m e n t   e x e r c i s e s   i n   t h e   h a r d   s c i e n c e s .   I n   t h i s   p a p e r   w e   e x a m i n e   t h e   I t a l i a n   c a s e ,   t a k i n g   t h e   2 0 0 1 - 2 0 0 3   u n i v e r s i t y   p e r f o r m a n c e   r a n k i n g s   l i s t   b a s e d   o n   b i b l i o m e t r i c s   a s   b e n c h m a r k .   W e   c o m p a r e   t h e   a c c u r a c y   o f   t h e   f i r s t   n a t i o n a l   e v a l u a t i o n   e x e r c i s e ,   c o n d u c t e d   e n t i r e l y   b y   p e e r - r e v i e w ,   t o   o t h e r   r a n k i n g s   l i s t s   p r e p a r e d   a t   z e r o   c o s t ,   b a s e d   o n   i n d i c a t o r s   i n d i r e c t l y   l i n k e d   t o   p e r f o r m a n c e   o r   a v a i l a b l e   o n   t h e   I n t e r n e t .   T h e   r e s u l t s   s h o w   t h a t ,   f o r   t h e   h a r d   s c i e n c e s ,   t h e   c o s t s   o f   c o n d u c t i n g   t h e   I t a l i a n   e v a l u a t i o n   o f   r e s e a r c h   i n s t i t u t i o n s   c o u l d   h a v e   b e e n   c o m p l e t e l y   a v o i d e d . 	 [ A b r a m o ,   G i o v a n n i ]   N a t l   R e s   C o u n c i l   I t a l y ,   I n s t   S y s t   A n a l   &   C o m p   S c i   I A S I   C N R ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   C i c e r o ,   T i n d a r o ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   D e p t   M a n a g e m e n t ,   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r , D e p t   M a n a g e m e n ,   I - 0 0 1 3 3   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D i p a r t i m e n t o   I n g n   I m p r e s a ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r , D e p t   M a n a g e m e n ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 g i o v a n n i . a b r a m o @ u n i r o m a 2 . i t ;   t i n d a r o . c i c e r o @ u n i r o m a 2 . i t ;   d a n g e l o @ d i i . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 ;   	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 ;   C i c e r o ,   T i n d a r o / 0 0 0 0 - 0 0 0 3 - 1 9 2 6 - 8 3 1 7 	 	 	 A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 9 2 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 5 9 - x ;   A b r a m o   G ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 7 ,   P 4 9 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 3 5 2 - 7 ;   A k s n e s   D W ,   2 0 0 4 ,   R E S   E V A L U A T ,   V 1 3 ,   P 3 3 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 4 7 8 1 7 7 6 5 6 3 ;   B o r n m a n n   L ,   2 0 1 2 ,   J   I N F O R M E T R ,   V 6 ,   P 3 3 6 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 1 1 . 0 0 2 ;   C o h e n   J ,   1 9 8 8 ,   S T A T   P O W E R   A N A L   B E H A ;   D ' A n g e l o   C A ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 2 5 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 6 0 ;   F r a n c e s c h e t   M ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 2 7 5 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 0 . 1 2 . 0 0 2 ;   G u i s a n   M .   C . ,   2 0 0 5 ,   R E G I O N A L   S E C T O R A L   E C ,   V 5 ,   P 3 5 ;   H O R R O B I N   D F ,   1 9 9 0 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 6 3 ,   P 1 4 3 8 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 6 3 . 1 0 . 1 4 3 8 ;   M a c R o b e r t s   M H ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 4 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 4 ;   M e h o   L I ,   2 0 0 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 1 ,   P 1 2 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 2 0 0 0 ) 5 1 : 2 < 1 2 3 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - N ;   M o e d   H F ,   2 0 0 2 ,   N A T U R E ,   V 4 1 5 ,   P 7 3 1 ;   M o x h a m   H . ,   1 9 9 2 ,   S C I   T E C H N O L O G Y   P O L I C ,   V 5 ,   P 7 ;   O p p e n h e i m   C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 7 7 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 7 ;   O p p e n h e i m   C . ,   2 0 0 3 ,   J   D O C ,   V 5 6 ,   P 7 0 9 ;   P e n d l e b u r y   D A ,   2 0 0 9 ,   A R C H   I M M U N O L   T H E R   E X ,   V 5 7 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 0 0 0 0 5 - 0 0 9 - 0 0 0 8 - y ;   R i n i a   E J ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 2 6 - 2 ;   S e r e n k o   A ,   2 0 1 1 ,   J   I N F O R M E T R ,   V 5 ,   P 6 2 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 1 . 0 6 . 0 0 2 ;   T h o m a s   P R ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 1 ,   P 3 3 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 9 0 5 0 ;   V a n   R a a n   A F J ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 3 3 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 8 - 6 ;   V a n   R a a n   A F J ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 7 ,   P 4 9 1 ,   D O I   1 0 . 1 5 5 6 / S c i e n t . 6 7 . 2 0 0 6 . 3 . 1 0 ;   V T R ,   2 0 0 6 ,   3   Y E A R   R E S   E V   2 0 0 1   2 	 2 3 	 1 3 	 1 3 	 0 	 4 6 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 1 3 	 9 5 	 1 	 	 	 	 	 3 1 1 	 3 2 4 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 7 5 - 6 	 	 1 4 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 0 5 D O 	 W O S : 0 0 0 3 1 6 0 4 6 0 0 0 0 2 0 	 	 
 
 J 	 M i l o j e v i c ,   S ;   L e y d e s d o r f f ,   L 	 	 	 	 M i l o j e v i c ,   S t a s a ;   L e y d e s d o r f f ,   L o e t 	 	 	 I n f o r m a t i o n   m e t r i c s   ( i M e t r i c s ) :   a   r e s e a r c h   s p e c i a l t y   w i t h   a   s o c i o - c o g n i t i v e   i d e n t i t y ? 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 S c i e n t o m e t r i c s ;   B i b l i o m e t r i c s ;   I n f o r m e t r i c s 	 S C I E N T I F I C   F I E L D S ;   C I T A T I O N   I N D E X E S ;   S C I E N C E ;   S C I E N T O M E T R I C S ;   B I B L I O M E T R I C S ;   I N F O R M E T R I C S ;   C O M M U N I C A T I O N ;   J O U R N A L S ;   L I B R A R Y ;   T E C H N O L O G Y 	 " B i b l i o m e t r i c s " ,   " s c i e n t o m e t r i c s " ,   " i n f o r m e t r i c s " ,   a n d   " w e b o m e t r i c s "   c a n   a l l   b e   c o n s i d e r e d   a s   m a n i f e s t a t i o n s   o f   a   s i n g l e   r e s e a r c h   a r e a   w i t h   s i m i l a r   o b j e c t i v e s   a n d   m e t h o d s ,   w h i c h   w e   c a l l   " i n f o r m a t i o n   m e t r i c s "   o r   i M e t r i c s .   T h i s   s t u d y   e x p l o r e s   t h e   c o g n i t i v e   a n d   s o c i a l   d i s t i n c t n e s s   o f   i M e t r i c s   w i t h   r e s p e c t   t o   t h e   g e n e r a l   i n f o r m a t i o n   s c i e n c e   ( I S ) ,   f o c u s i n g   o n   a   c o r e   o f   r e s e a r c h e r s ,   s h a r e d   v o c a b u l a r y   a n d   l i t e r a t u r e / k n o w l e d g e   b a s e .   O u r   a n a l y s i s   i n v e s t i g a t e s   t h e   s i m i l a r i t i e s   a n d   d i f f e r e n c e s   b e t w e e n   f o u r   d o c u m e n t   s e t s .   T h e   d o c u m e n t   s e t s   a r e   d r a w n   f r o m   t h r e e   c o r e   j o u r n a l s   f o r   i M e t r i c s   r e s e a r c h   ( S c i e n t o m e t r i c s ,   J o u r n a l   o f   t h e   A m e r i c a n   S o c i e t y   f o r   I n f o r m a t i o n   S c i e n c e   a n d   T e c h n o l o g y ,   a n d   J o u r n a l   o f   I n f o r m e t r i c s ) .   W e   s p l i t   J A S I S T   i n t o   d o c u m e n t   s e t s   c o n t a i n i n g   i M e t r i c s   a n d   g e n e r a l   I S   a r t i c l e s .   T h e   v o l u m e   o f   p u b l i c a t i o n s   i n   t h i s   r e p r e s e n t a t i o n   o f   t h e   s p e c i a l t y   h a s   i n c r e a s e d   r a p i d l y   d u r i n g   t h e   l a s t   d e c a d e .   A   c o r e   o f   r e s e a r c h e r s   t h a t   p r e d o m i n a n t l y   f o c u s   o n   i M e t r i c s   t o p i c s   c a n   t h u s   b e   i d e n t i f i e d .   T h i s   c o r e   g r o u p   h a s   d e v e l o p e d   a   s h a r e d   v o c a b u l a r y   a s   e x h i b i t e d   i n   h i g h   s i m i l a r i t y   o f   t i t l e   w o r d s   a n d   o n e   t h a t   s h a r e s   a   k n o w l e d g e   b a s e .   T h e   r e s e a r c h   f r o n t   o f   t h i s   f i e l d   m o v e s   f a s t e r   t h a n   t h e   r e s e a r c h   f r o n t   o f   i n f o r m a t i o n   s c i e n c e   i n   g e n e r a l ,   b r i n g i n g   i t   c l o s e r   t o   P r i c e ' s   d r e a m . 	 [ M i l o j e v i c ,   S t a s a ]   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A ;   [ L e y d e s d o r f f ,   L o e t ]   U n i v   A m s t e r d a m ,   A m s t e r d a m   S c h   C o m m u n   R e s   A S C o R ,   N L - 1 0 1 2   C X   A m s t e r d a m ,   N e t h e r l a n d s 	 M i l o j e v i c ,   S   ( r e p r i n t   a u t h o r ) ,   I n d i a n a   U n i v ,   S c h   L i b   &   I n f o r m a t   S c i ,   B l o o m i n g t o n ,   I N   4 7 4 0 5   U S A . 	 s m i l o j e v @ i n d i a n a . e d u ;   l o e t @ l e y d e s d o r f f . n e t 	 L e y d e s d o r f f ,   L o e t / E - 2 9 0 3 - 2 0 1 0 	 L e y d e s d o r f f ,   L o e t / 0 0 0 0 - 0 0 0 2 - 7 8 3 5 - 3 0 9 8 	 	 	 A h l g r e n   P ,   2 0 0 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 4 ,   P 5 5 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 1 0 2 4 2 ;   A l m i n d   T C ,   1 9 9 7 ,   J   D O C ,   V 5 3 ,   P 4 0 4 ,   D O I   1 0 . 1 1 0 8 / E U M 0 0 0 0 0 0 0 0 0 7 2 0 5 ;   A s t r o m   F ,   2 0 0 2 ,   E M E R G I N G   F R A M E W O R K S ,   P 1 8 5 ;   B a r - I l a n   J ,   2 0 0 8 ,   J   I N F O R M E T R ,   V 2 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 7 . 1 1 . 0 0 1 ;   B o r n e r   K ,   2 0 1 2 ,   U N D E R S T   C O M P L E X   S Y S T ,   P 3 ,   D O I   1 0 . 1 0 0 7 / 9 7 8 - 3 - 6 4 2 - 2 3 0 6 8 - 4 _ 1 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o y a c k   K .   W . ,   2 0 1 1 ,   1 3   C   I N T   S O C   S C I   I N F ,   V I ,   P 1 2 3 ;   B R O A D U S   R N ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 7 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 8 0 ;   C O U R T I A L   J P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 2 5 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 8 7 5 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   D e   B e l l i s   N . ,   2 0 0 9 ,   B I B L I O M E T R I C S   C I T A T I ;   d e   S o l l a   P r i c e ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   P r i c e   D .   J .   d e   S o l l a ,   1 9 7 8 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 7 ;   P r i c e   D .   J .   d e   S o l l a ,   1 9 7 0 ,   C O M M U N I C A T I O N   S C I   E N ,   P 3 ;   E g g h e   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 1 ;   E g g h e   L . ,   1 9 8 8 ,   I N F O R M E T R I C S   8 7   8 8 ;   E l k a n a   Y . ,   1 9 7 8 ,   M E T R I C   S C I   A D V E N T   S C ;   G A R F I E L D   E ,   1 9 5 5 ,   S C I E N C E ,   V 1 2 2 ,   P 1 0 8 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 2 2 . 3 1 5 9 . 1 0 8 ;   G A R F I E L D   E ,   1 9 6 3 ,   A M   D O C ,   V 1 4 ,   P 2 8 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 5 0 9 0 1 4 0 4 0 5 ;   G L A N Z E L   W ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 0 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 7 ;   H e s s   D . ,   1 9 9 7 ,   S C I   S T U D I E S   A D V   I N T R ;   H o o d   W W ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 2 ,   P 2 9 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 7 9 1 9 9 2 4 3 4 2 ;   J a n s s e n s   F ,   2 0 0 6 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 2 ,   P 1 6 1 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 6 . 0 3 . 0 2 5 ;   L a w   J . ,   1 9 7 6 ,   P E R S P E C T I V E S   E M E R G E N ,   P 1 2 3 ;   L e y d e s d o r f f   L ,   1 9 9 7 ,   S C I E N T O M E T R I C S ,   V 3 8 ,   P 1 5 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 6 1 1 2 9 ;   L E Y D E S D O R F F   L ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 3 3 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 5 8 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 4 - z ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 8 ,   P 2 5 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 4 0 6 ;   L u c i o - A r i a s   D ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 4 8 8 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 9 9 ;   L u c i o - A r i a s   D ,   2 0 0 9 ,   J   I N F O R M E T R ,   V 3 ,   P 2 6 1 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 0 9 . 0 3 . 0 0 3 ;   M i l o j e v i c   S ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 1 9 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 6 0 2 ;   M i n g u i l l o   D ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 7 7 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 8 2 ;   M o y a - A n e g o n   F ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 6 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 5 9 2 2 6 ;   M u l l i n s   N .   C . ,   1 9 7 2 ,   M I N E R V A ,   V 1 0 ,   P 5 2 ;   P e r i t z   B C ,   2 0 0 2 ,   S C I E N T O M E T R I C S ,   V 5 4 ,   P 2 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 6 0 1 8 0 1 3 0 9 6 ;   P R I C E   D J D ,   1 9 6 5 ,   S C I E N C E ,   V 1 4 9 ,   P 5 1 0 ;   P R I T C H A R . A ,   1 9 6 9 ,   J   D O C ,   V 2 5 ,   P 3 4 8 ;   S E G L E N   P O ,   1 9 9 2 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 3 ,   P 6 2 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 2 1 0 ) 4 3 : 9 < 6 2 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - 0 ;   S E N G U P T A   I N ,   1 9 9 2 ,   L I B R I ,   V 4 2 ,   P 7 5 ,   D O I   1 0 . 1 5 1 5 / l i b r . 1 9 9 2 . 4 2 . 2 . 7 5 ;   S p i e g e l - R o s i n g   I . ,   1 9 7 7 ,   S C I   T E C H N O L O G Y   S O C   C ;   T A G U E S U T C L I F F E   J ,   1 9 9 2 ,   I N F O R M   P R O C E S S   M A N A G ,   V 2 8 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 6 - 4 5 7 3 ( 9 2 ) 9 0 0 8 7 - G ;   V a n   d e n   B e s s e l a a r   P ,   2 0 0 1 ,   S C I E N T O M E T R I C S ,   V 5 1 ,   P 4 4 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 1 2 7 1 4 0 2 0 4 5 3 ;   v a n   d e n   B e s s e l a a r   P ,   2 0 0 0 ,   S C I E N T O M E T R I C S ,   V 4 7 ,   P 1 6 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 6 8 6 1 2 3 9 1 7 ;   V a n   D e n   B e s s e l a a r   P ,   2 0 0 6 ,   S C I E N T O M E T R I C S ,   V 6 8 ,   P 3 7 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 6 - 0 1 1 8 - 9 ;   V a n   N o o r d e n   R ,   2 0 1 0 ,   N A T U R E ,   V 4 6 5 ,   P 8 6 4 ,   D O I   1 0 . 1 0 3 8 / 4 6 5 8 6 4 a ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W O U T E R S   P ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 5 6 0 	 4 7 	 1 3 	 1 3 	 5 	 7 8 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 1 3 	 9 5 	 1 	 	 	 	 	 1 4 1 	 1 5 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 6 1 - z 	 	 1 7 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 0 5 D O 	 W O S : 0 0 0 3 1 6 0 4 6 0 0 0 0 1 1 	 	 
 
 J 	 B o r n m a n n ,   L ;   W i l l i a m s ,   R 	 	 	 	 B o r n m a n n ,   L u t z ;   W i l l i a m s ,   R i c h a r d 	 	 	 H o w   t o   c a l c u l a t e   t h e   p r a c t i c a l   s i g n i f i c a n c e   o f   c i t a t i o n   i m p a c t   d i f f e r e n c e s ?   A n   e m p i r i c a l   e x a m p l e   f r o m   e v a l u a t i v e   i n s t i t u t i o n a l   b i b l i o m e t r i c s   u s i n g   a d j u s t e d   p r e d i c t i o n s   a n d   m a r g i n a l   e f f e c t s 	 J O U R N A L   O F   I N F O R M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 E v a l u a t i v e   b i b l i o m e t r i c s ;   P r a c t i c a l   s i g n i f i c a n c e ;   H i g h l y - c i t e d   p a p e r s ;   A v e r a g e   a d j u s t e d   p r e d i c t i o n s ;   A v e r a g e   m a r g i n a l   e f f e c t s ;   A d j u s t e d   p r e d i c t i o n s   a t   r e p r e s e n t a t i v e   v a l u e s ;   M a r g i n a l   e f f e c t s   a t   r e p r e s e n t a t i v e   v a l u e s 	 J O U R N A L   I M P A C T ;   P U B L I C A T I O N ;   I N D I C A T O R S 	 E v a l u a t i v e   b i b l i o m e t r i c s   i s   c o n c e r n e d   w i t h   c o m p a r i n g   r e s e a r c h   u n i t s   b y   u s i n g   s t a t i s t i c a l   p r o c e d u r e s .   A c c o r d i n g   t o   W i l l i a m s   ( 2 0 1 2 )   a n   e m p i r i c a l   s t u d y   s h o u l d   b e   c o n c e r n e d   w i t h   t h e   s u b s t a n t i v e   a n d   p r a c t i c a l   s i g n i f i c a n c e   o f   t h e   f i n d i n g s   a s   w e l l   a s   t h e   s i g n   a n d   s t a t i s t i c a l   s i g n i f i c a n c e   o f   e f f e c t s .   I n   t h i s   s t u d y   w e   w i l l   e x p l a i n   w h a t   a d j u s t e d   p r e d i c t i o n s   a n d   m a r g i n a l   e f f e c t s   a r e   a n d   h o w   u s e f u l   t h e y   a r e   f o r   i n s t i t u t i o n a l   e v a l u a t i v e   b i b l i o m e t r i c s .   A s   a n   i l l u s t r a t i o n ,   w e   w i l l   c a l c u l a t e   a   r e g r e s s i o n   m o d e l   u s i n g   p u b l i c a t i o n s   ( a n d   c i t a t i o n   d a t a )   p r o d u c e d   b y   f o u r   u n i v e r s i t i e s   i n   G e r m a n - s p e a k i n g   c o u n t r i e s   f r o m   1 9 8 0   t o   2 0 1 0 .   W e   w i l l   s h o w   h o w   t h e s e   p r e d i c t i o n s   a n d   e f f e c t s   c a n   b e   e s t i m a t e d   a n d   p l o t t e d ,   a n d   h o w   t h i s   m a k e s   i t   f a r   e a s i e r   t o   g e t   a   p r a c t i c a l   f e e l   f o r   t h e   s u b s t a n t i v e   m e a n i n g   o f   r e s u l t s   i n   e v a l u a t i v e   b i b l i o m e t r i c   s t u d i e s .   A n   a d d e d   b e n e f i t   o f   t h i s   a p p r o a c h   i s   t h a t   i t   m a k e s   i t   f a r   e a s i e r   t o   e x p l a i n   r e s u l t s   o b t a i n e d   v i a   s o p h i s t i c a t e d   s t a t i s t i c a l   t e c h n i q u e s   t o   a   b r o a d e r   a n d   s o m e t i m e s   n o n - t e c h n i c a l   a u d i e n c e .   W e   w i l l   f o c u s   p a r t i c u l a r l y   o n   A v e r a g e   A d j u s t e d   P r e d i c t i o n s   ( A A P s ) ,   A v e r a g e   M a r g i n a l   E f f e c t s   ( A M E s ) ,   A d j u s t e d   P r e d i c t i o n s   a t   R e p r e s e n t a t i v e   V a l u e s   ( A P R V s )   a n d   M a r g i n a l   E f f e c t s   a t   R e p r e s e n t a t i v e   V a l u e s   ( M E R V s ) .   ( c )   2 0 1 3   E l s e v i e r   L t d .   A l l   r i g h t s   r e s e r v e d . 	 [ B o r n m a n n ,   L u t z ]   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y ;   [ W i l l i a m s ,   R i c h a r d ]   U n i v   N o t r e   D a m e ,   D e p t   S o c i o l ,   N o t r e   D a m e ,   I N   4 6 5 5 6   U S A 	 B o r n m a n n ,   L   ( r e p r i n t   a u t h o r ) ,   A d m   H e a d q u a r t e r s   M a x   P l a n c k   S o c ,   D i v   S c i   &   I n n o v a t   S t u d i e s ,   H o f g a r t e n s t r   8 ,   D - 8 0 5 3 9   M u n i c h ,   G e r m a n y . 	 b o r n m a n n @ g v . m p g . d e ;   R i c h a r d . A . W i l l i a m s . 5 @ N D . E d u 	 B o r n m a n n ,   L u t z / A - 3 9 2 6 - 2 0 0 8 	 B o r n m a n n ,   L u t z / 0 0 0 0 - 0 0 0 3 - 0 8 1 0 - 7 0 9 1 	 	 	 A l d r i c h   J .   H . ,   1 9 8 4 ,   L I N E A R   P R O B A B I L I T Y   L ,   V 0 7 - 0 4 5 ;   A m e r i c a n   P s y c h o l o g i c a l   A s s o c i a t i o n ,   2 0 0 9 ,   P U B L   M A N   A M   P S Y C H   A S ;   B e r r y   W .   D . ,   1 9 8 5 ,   M U L T I P L E   R E G R E S S I O N ;   B o r n m a n n   L . ,   J   A M   S O C   I N   I N   P R E S S ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 4 ,   P 5 8 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 9 2 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 1 5 8 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 1 0 . 0 0 1 ;   B o r n m a n n   L ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 8 9 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 8 . 0 0 2 ;   B o r n m a n n   L ,   2 0 1 1 ,   J   R   S T A T   S O C   A   S T A T ,   V 1 7 4 ,   P 8 5 7 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 9 8 5 X . 2 0 1 1 . 0 0 6 8 9 . x ;   G a r f i e l d   E ,   2 0 0 6 ,   J A M A - J   A M   M E D   A S S O C ,   V 2 9 5 ,   P 9 0 ,   D O I   1 0 . 1 0 0 1 / j a m a . 2 9 5 . 1 . 9 0 ;   H a r d i n   J a m e s   W . ,   2 0 1 2 ,   G E N   L I N E A R   M O D E L S   E X ;   H o s m e r   D W ,   2 0 0 0 ,   A P P L   L O G I S T I C   R E G R E S ;   L e v y   P ,   2 0 0 8 ,   S A M P L I N G   P O P U L A T I O N ;   L o n g   J S ,   2 0 0 6 ,   R E G R E S S I O N   M O D E L S   C A ;   L o z a n o   G A ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 1 4 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 3 1 ;   M a r x   W ,   2 0 1 1 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 2 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 4 7 9 ;   M i t c h e l l   M .   N . ,   2 0 1 2 ,   I N T E R P R E T I N G   V I S U A L I ;   O r g a n i s a t i o n   f o r   E c o n o m i c   C o - o p e r a t i o n   a n d   D e v e l o p m e n t ,   2 0 0 7 ,   R E V   F I E L D   S C I   T E C H N ;   R a b e - H e s k e t h   S ,   2 0 0 4 ,   H D B   S T A T   A N A L   U S I N G ;   S c h n e i d e r   J W ,   2 0 1 3 ,   J   I N F O R M E T R ,   V 7 ,   P 5 0 ,   D O I   1 0 . 1 0 1 6 / j . j o i . 2 0 1 2 . 0 8 . 0 0 5 ;   S C H U B E R T   A ,   1 9 8 6 ,   S C I E N T O M E T R I C S ,   V 9 ,   P 2 8 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 2 4 9 ;   S C I m a g o   R e s e a c h   G r o u p ,   2 0 1 2 ,   S I R   W O R L D   R E P   2 0 1 2 ;   v a n   R a a n   A F J ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 2 ,   P 4 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 7 4 7 - 0 ;   V i n k l e r   P ,   2 0 1 0 ,   C H A N D O S   I N F   P R O F   S E R ,   P 1 ,   D O I   1 0 . 1 5 3 3 / 9 7 8 1 7 8 0 6 3 0 2 5 0 ;   W a l t m a n   L ,   2 0 1 2 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 3 ,   P 2 4 1 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 2 7 0 8 ;   W i l l i a m s   R ,   2 0 1 2 ,   S T A T A   J ,   V 1 2 ,   P 3 0 8 	 2 6 	 1 3 	 1 3 	 2 	 2 5 	 E L S E V I E R   S C I E N C E   B V 	 A M S T E R D A M 	 P O   B O X   2 1 1 ,   1 0 0 0   A E   A M S T E R D A M ,   N E T H E R L A N D S 	 1 7 5 1 - 1 5 7 7 	 	 	 J   I N F O R M E T R 	 J .   I n f o r m e t r . 	 	 2 0 1 3 	 7 	 2 	 	 	 	 	 5 6 2 	 5 7 4 	 	 1 0 . 1 0 1 6 / j . j o i . 2 0 1 3 . 0 2 . 0 0 5 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 1 3 6 P Y 	 W O S : 0 0 0 3 1 8 3 7 7 1 0 0 0 3 3 	 	 
 
 J 	 G u n d o l f ,   K ;   F i l s e r ,   M 	 	 	 	 G u n d o l f ,   K a t h e r i n e ;   F i l s e r ,   M a t t h i a s 	 	 	 M a n a g e m e n t   R e s e a r c h   a n d   R e l i g i o n :   A   C i t a t i o n   A n a l y s i s 	 J O U R N A L   O F   B U S I N E S S   E T H I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 M a n a g e m e n t   r e l i g i o n ;   B i b l i o m e t r i c s ;   C i t a t i o n   a n a l y s i s ;   C o n t e n t   a n a l y s i s 	 A U T H O R   C O C I T A T I O N   A N A L Y S I S ;   I N T E L L E C T U A L   S T R U C T U R E ;   B U S I N E S S   E T H I C S ;   S P I R I T U A L I T Y ;   O R G A N I Z A T I O N S ;   L E A D E R S H I P ;   F I E L D ;   W O R K 	 R e s e a r c h   o n   m a n a g e m e n t   w i t h   r e g a r d   t o   r e l i g i o n   b e c a m e   a   g r o w i n g   f i e l d   o f   i n t e r e s t   i n   t h e   l a s t   d e c a d e s .   N e v e r t h e l e s s ,   t h e   i m p a c t   o f   r e l i g i o n   o n   a c t o r ' s   e c o n o m i c   b e h a v i o r   i s   a l s o   a n   o l d   r e s e a r c h   t o p i c ,   a s   t h e   w r i t i n g s   o f   M a x   W e b e r   ( T h e   p r o t e s t a n t   e t h i c   a n d   t h e   s p i r i t   o f   c a p i t a l i s m ,   A l l e n   a n d   U n w i n ,   L o n d o n ,   1 9 3 0 )   u n d e r l i n e .   T h e   p u r p o s e   o f   t h i s   c o n t r i b u t i o n   i s   t o   h i g h l i g h t   t h e   d e v e l o p m e n t s   o f   t h i s   t o p i c   a n d   t o   g u i d e   s c h o l a r s   t o   i d e n t i f y   p o s s i b l e   g a p s .   T h e   s t r u c t u r i n g   a n d   i n v e s t i g a t i o n   o n   t h i s   t o p i c   w i l l   h e l p   u s   t o   a d v a n c e   a n d   b e t t e r   u n d e r s t a n d   p a s t   r e s e a r c h ,   w h i l e   l e a d i n g   t o   s o m e   f u r t h e r   r e f l e c t i o n s .   W e   c o n d u c t   a   c i t a t i o n   a n a l y s i s   o f   2 1 5   a r t i c l e s   a n d   7 , 9 6 8   c i t e d   r e f e r e n c e s   t o   e x a m i n e   t h e   c i t a t i o n   s t r u c t u r e   a n d   m a k e   o u t   t h e   m o s t - i n f l u e n t i a l   p u b l i c a t i o n s   t h a t   h a v e   s h a p e d   r e s e a r c h   m o s t   s o   f a r .   O n   t h e   b a s i s   o f   t h e   a n a l y s i s   i t   i s   t o   b e   a s s u m e d   t h a t   t h r e e   r e s e a r c h   s t r e a m s   a f f e c t   p r o g r e s s :   B e s t   p r a c t i c e s   r e g a r d i n g   p e r f o r m a n c e   i s s u e s ,   r e l i g i o n   a t   w o r k   a s   w e l l   a s   r e l i g i o n ,   a n d   p e r s o n a l   e t h i c s .   F i n a l l y ,   t h e   p u b l i c a t i o n s   t h a t   e a c h   t o p i c - c l u s t e r s   c o n t a i n s   a r e   r e f l e c t e d   a n d   d i s c u s s e d   t o   a c h i e v e   a   s t r u c t u r a l   o v e r v i e w   o f   t h e   s t a t e   o f   t h e   a r t   o f   r e s e a r c h . 	 [ G u n d o l f ,   K a t h e r i n e ;   F i l s e r ,   M a t t h i a s ]   M o n t p e l l i e r   R e s   M a n a g e m e n t ,   G r p   S u p   C o   M o n t p e l l i e r   B u s i n e s s   S c h ,   F - 3 4 1 8 5   M o n t p e l l i e r ,   F r a n c e 	 G u n d o l f ,   K   ( r e p r i n t   a u t h o r ) ,   M o n t p e l l i e r   R e s   M a n a g e m e n t ,   G r p   S u p   C o   M o n t p e l l i e r   B u s i n e s s   S c h ,   2 3 0 0   A v e   M o u l i n s ,   F - 3 4 1 8 5   M o n t p e l l i e r ,   F r a n c e . 	 k . g u n d o l f @ s u p c o - m o n t p e l l i e r . f r ;   m . f i l s e r @ s u p c o - m o n t p e l l i e r . f r 	 	 	 	 	 A c e d o   F J ,   2 0 0 5 ,   I N T   B U S   R E V ,   V 1 4 ,   P 6 1 9 ,   D O I   1 0 . 1 0 1 6 / j . i b u s r e v . 2 0 0 5 . 0 5 . 0 0 3 ;   A s h m o s   D P ,   2 0 0 0 ,   J   M A N A G E   I N Q U I R Y ,   V 9 ,   P 1 3 4 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 0 9 2 0 0 8 ;   B u r n s   J . ,   1 9 7 8 ,   L E A D E R S H I P ;   C a l k i n s   M . ,   2 0 0 0 ,   J   B U S   E T H I C S ,   V 2 3 ,   P 3 3 9 ;   C a s h   K C ,   2 0 0 0 ,   A C A D   M A N A G E   E X E C ,   V 1 4 ,   P 1 2 4 ;   C a s i l l a s   J ,   2 0 0 7 ,   F A M   B U S   R E V ,   V 2 0 ,   P 1 4 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 7 4 1 - 6 2 4 8 . 2 0 0 7 . 0 0 0 9 2 . x ;   C a v a l c a n t i   T V ,   2 0 0 7 ,   E C O N   T H E O R ,   V 3 2 ,   P 1 0 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 9 9 - 0 0 6 - 0 1 8 1 - 8 ;   C a v a n a g h   G F ,   1 9 9 9 ,   J   O R G A N   C H A N G E   M A N A G ,   V 1 2 ,   P 1 8 6 ,   D O I   1 0 . 1 1 0 8 / 0 9 5 3 4 8 1 9 9 1 0 2 7 3 7 9 3 ;   C h a p p e l l   T . ,   1 9 9 3 ,   S O U L   B U S I N E S S   M A N A G I ;   D e l b e c q   A L ,   2 0 0 0 ,   J   M A N A G E   I N Q U I R Y ,   V 9 ,   P 1 1 7 ,   D O I   1 0 . 1 1 7 7 / 1 0 5 6 4 9 2 6 0 0 9 2 0 0 5 ;   D o d d   S .   D . ,   1 9 9 8 ,   E N T R E P   T H E O R Y   P R A C T ,   V 2 3 ,   P 7 1 ;   F r y   L W ,   2 0 0 3 ,   L E A D E R S H I P   Q U A R T ,   V 1 4 ,   P 6 9 3 ,   D O I   1 0 . 1 0 1 6 / j . l e a q u a . 2 0 0 3 . 0 9 . 0 0 1 ;   G A R F I E L D   E ,   1 9 7 9 ,   S C I E N T O M E T R I C S ,   V 1 ,   P 3 5 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 9 3 0 6 ;   G i a c a l o n e   R A ,   2 0 0 3 ,   J   B U S   E T H I C S ,   V 4 6 ,   P 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 4 7 6 7 5 1 1 4 5 8 ;   G u n t h e r   M ,   2 0 0 1 ,   F O R T U N E ,   V 1 4 4 ,   P 5 8 ;   H A M I D   S ,   1 9 9 3 ,   A B A C U S ,   V 2 9 ,   P 1 3 1 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 6 7 - 6 2 8 1 . 1 9 9 3 . t b 0 0 4 2 7 . x ;   H a n s e n   B ,   2 0 0 8 ,   B U S   H I S T ,   V 5 0 ,   P 7 1 4 ,   D O I   1 0 . 1 0 8 0 / 0 0 0 7 6 7 9 0 8 0 2 4 2 0 2 5 2 ;   H i l l   J o h n   S ,   2 0 0 7 ,   J   A S I A   P A C I F I C   B U S I N ,   V 8 ,   P 5 9 ,   D O I   1 0 . 1 3 0 0 / J 0 9 8 v 0 8 n 0 2 _ 0 4 ;   H o f s t e d e   G ,   1 9 8 0 ,   C U L T U R E S   C O N S E Q U E N C E ;   H o f s t e d e   G . ,   1 9 9 1 ,   C U L T U R E S   O R G   S O F T W A R ;   K e n n e d y   E J ,   1 9 9 8 ,   J   B U S   E T H I C S ,   V 1 7 ,   P 1 6 3 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 5 7 4 7 5 1 1 1 1 6 ;   L A A B S   J J ,   1 9 9 5 ,   P E R S   J ,   V 7 4 ,   P 6 0 ;   L e o n i d o u   L C ,   2 0 1 0 ,   J   I N T   M A N A G ,   V 1 6 ,   P 7 8 ,   D O I   1 0 . 1 0 1 6 / j . i n t m a n . 2 0 0 9 . 0 6 . 0 0 1 ;   L i   J .   T . ,   2 0 0 2 ,   A S I A   P A C I F I C   J   M A N A G ,   V 1 9 ,   P 8 7 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 1 4 8 9 1 6 2 4 0 1 8 ;   L i   N ,   2 0 0 8 ,   J   B U S   E T H I C S ,   V 8 0 ,   P 7 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 0 7 - 9 4 6 8 - 3 ;   M i t r o f f   I .   I . ,   1 9 9 9 ,   S P I R I T U A L   A U D I T   C O R P ;   M S R ,   2 0 0 0 ,   D O M   S T A T ;   N a s h   L . ,   1 9 9 4 ,   B E L I E V E R S   B U S I N E S S ;   N e r u r   S P ,   2 0 0 8 ,   S T R A T E G   M A N A G E   J ,   V 2 9 ,   P 3 1 9 ,   D O I   1 0 . 1 0 0 2 / s m j . 6 5 9 ;   P r e v o t   F ,   2 0 1 0 ,   R E S   C O M P E T E N C E   B A S E D ,   P 2 3 1 ;   R a m a s a m y   B ,   2 0 1 0 ,   J   B U S   E T H I C S ,   V 9 1 ,   P 6 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 1 0 - 0 5 6 8 - 0 ;   R o t h   S . ,   2 0 0 4 ,   M A R K E T I N G   Z F P ,   V 2 6 ,   P 1 4 1 ;   S c h a f f e r   U . ,   2 0 0 6 ,   Z   B E T R I E B S W I R T ,   V 7 6 ,   P 3 9 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 5 7 3 - 0 0 6 - 0 0 1 9 - 7 ;   S e n g e   P . ,   1 9 9 0 ,   5   D I S C I P L I N E   A R T   P R A ;   S I K E R   L V ,   1 9 9 1 ,   J   B U S   E T H I C S ,   V 1 0 ,   P 8 1 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 8 3 6 9 8 ;   S m a l l   H .   G . ,   1 9 7 8 ,   J   D O C ,   V 3 6 ,   P 1 8 3 ;   T R E V I N O   L K ,   1 9 8 6 ,   A C A D   M A N A G E   R E V ,   V 1 1 ,   P 6 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 3 1 3 ;   V o e t h   M . ,   2 0 0 6 ,   M A R K E T I N G   Z F P ,   V 1 ,   P 7 ;   W e a v e r   G R ,   2 0 0 2 ,   A C A D   M A N A G E   R E V ,   V 2 7 ,   P 7 7 ,   D O I   1 0 . 2 3 0 7 / 4 1 3 4 3 7 0 ;   W e b e r   M . ,   1 9 3 0 ,   P R O T E S T A N T   E T H I C   S P I 	 4 0 	 1 3 	 1 3 	 5 	 5 9 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 6 7 - 4 5 4 4 	 	 	 J   B U S   E T H I C S 	 J .   B u s .   E t h i c s 	 J A N 	 2 0 1 3 	 1 1 2 	 1 	 	 	 	 	 1 7 7 	 1 8 5 	 	 1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 1 2 - 1 2 4 0 - 7 	 	 9 	 B u s i n e s s ;   E t h i c s 	 B u s i n e s s   &   E c o n o m i c s ;   S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 0 6 9 B N 	 W O S : 0 0 0 3 1 3 4 1 0 0 0 0 0 1 3 	 	 
 
 J 	 T e i x e i r a ,   A A C ;   M o t a ,   L 	 	 	 	 T e i x e i r a ,   A u r o r a   A .   C . ;   M o t a ,   L u i s a 	 	 	 A   b i b l i o m e t r i c   p o r t r a i t   o f   t h e   e v o l u t i o n ,   s c i e n t i f i c   r o o t s   a n d   i n f l u e n c e   o f   t h e   l i t e r a t u r e   o n   u n i v e r s i t y - i n d u s t r y   l i n k s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 U n i v e r s i t y - i n d u s t r y   l i n k s ;   E n t r e p r e n e u r i a l   u n i v e r s i t i e s ;   T e c h n o l o g y   t r a n s f e r ;   U n i v e r s i t y   s p i n   o f f s ;   B i b l i o m e t r i c s 	 R E S E A R C H - A N D - D E V E L O P M E N T ;   B A Y H - D O L E   A C T ;   T E C H N O L O G Y - T R A N S F E R ;   E N T R E P R E N E U R I A L   O R I E N T A T I O N ;   R E S E A R C H   C O L L A B O R A T I O N S ;   G O V E R N M E N T   R E L A T I O N S ;   K N O W L E D G E   E X C H A N G E ;   N E T W O R K   A N A L Y S I S ;   U S   U N I V E R S I T I E S ;   L I F E   S C I E N C E S 	 T h e   s t u d y   o f   u n i v e r s i t y - i n d u s t r y   ( U - I )   r e l a t i o n s   h a s   b e e n   t h e   f o c u s   o f   g r o w i n g   i n t e r e s t   i n   t h e   l i t e r a t u r e .   H o w e v e r ,   t o   d a t e ,   a   q u a n t i t a t i v e   o v e r v i e w   o f   t h e   e x i s t i n g   l i t e r a t u r e   i n   t h i s   f i e l d   h a s   y e t   t o   b e   a c c o m p l i s h e d .   T h i s   s t u d y   i n t e n d s   t o   f i l l   t h i s   g a p   t h r o u g h   t h e   u s e   o f   b i b l i o m e t r i c   t e c h n i q u e s .   B y   u s i n g   t h r e e   d i f f e r e n t   y e t   i n t e r r e l a t e d   d a t a b a s e s - a   d a t a b a s e   c o n t a i n i n g   t h e   a r t i c l e s   p u b l i s h e d   o n   U - I   l i n k s ,   w h i c h   e n c o m p a s s   5 3 4   a r t i c l e s   p u b l i s h e d   b e t w e e n   1 9 8 6   a n d   2 0 1 1 ;   a   ' r o o t s '   d a t a b a s e ,   w h i c h   e n c o m p a s s e s   o v e r   2 0 , 0 0 0   r e f e r e n c e s   t o   t h e   a r t i c l e s   p u b l i s h e d   o n   U - I   r e l a t i o n s ;   a n d   a   ' i n f l u e n c e s '   d a t a b a s e   w h i c h   i n c l u d e s   m o r e   t h a n   1 5 , 0 0 0   s t u d i e s   t h a t   c i t e d   t h e   a r t i c l e s   p u b l i s h e d   o n   U - I   r e l a t i o n s - w e   o b t a i n e d   t h e   f o l l o w i n g   r e s u l t s :   ( 1 )   ' A c a d e m i c   s p i n   o f f s ' ,   ' S c i e n t i f i c   a n d   t e c h n o l o g i c a l   p o l i c i e s '   a n d   ( t o   a   g r e a t e r   e x t e n t )   ' K n o w l e d g e   T r a n s f e r   C h a n n e l s '   a r e   t o p i c s   i n   d e c l i n e ;   ( 2 )   ' C h a r a c t e r i s t i c s   o f   u n i v e r s i t i e s ,   f i r m s   a n d   s c i e n t i s t s ' ,   a l o n g   w i t h   ' R e g i o n a l   s p i l l o v e r s ' ,   s h o w   r e m a r k a b l e   g r o w t h ,   a n d   ' M e a s u r e s   a n d   i n d i c a t o r s '   c a n   b e   c o n s i d e r e d   a n   e m e r g e n t   t o p i c ;   ( 3 )   c l e a r   t e n d e n c y   t o w a r d s   ' e m p i r i c a l '   w o r k s ,   a l t h o u g h   ' a p p r e c i a t i v e   a n d   e m p i r i c a l '   p a p e r s   c o n s t i t u t e   t h e   b u l k   o f   t h i s   l i t e r a t u r e ;   ( 4 )   t h e   m u l t i d i s c i p l i n a r y   n a t u r e   o f   t h e   i n t e l l e c t u a l   r o o t s   o f   t h e   U - I   l i t e r a t u r e - a n   i n t e r e s t i n g   b l e n d i n g   o f   n e o c l a s s i c a l   e c o n o m i c s   ( f o c u s e d   o n   l i c e n s i n g ,   k n o w l e d g e   t r a n s f e r   a n d   h i g h - t e c h   e n t r e p r e n e u r s h i p )   a n d   h e t e r o d o x   a p p r o a c h e s   ( m a i n l y   r e l a t e d   t o   s y s t e m s   o f   i n n o v a t i o n )   i s   o b s e r v e d   i n   t e r m s   o f   i n t e l l e c t u a l   r o o t s ;   ( 5 )   t h e   i n f l u e n c e   o f   t h e   U - I   l i t e r a t u r e   i s   l a r g e l y   c o n c e n t r a t e d   o n   t h e   i n d u s t r i a l i z e d   w o r l d   a n d   o n   t h e   r e s e a r c h   a r e a   o f   i n n o v a t i o n   a n d   t e c h n o l o g y   ( i . e . ,   s o m e   ' s c i e n t i f i c   e n d o g a m y '   i s   o b s e r v e d ) . 	 [ T e i x e i r a ,   A u r o r a   A .   C . ]   U n i v   P o r t o ,   C E F   U P ,   F a c   E c o n ,   I N E S C   T E C , O B E G E F ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l 	 T e i x e i r a ,   A A C   ( r e p r i n t   a u t h o r ) ,   U n i v   P o r t o ,   C E F   U P ,   F a c   E c o n ,   I N E S C   T E C , O B E G E F ,   R u a   D r   R o b e r t o   F r i a s ,   P - 4 2 0 0 4 6 4   O p o r t o ,   P o r t u g a l . 	 a t e i x e i r a @ f e p . u p . p t 	 T e i x e i r a ,   A u r o r a / B - 5 8 5 9 - 2 0 0 9 	 T e i x e i r a ,   A u r o r a / 0 0 0 0 - 0 0 0 2 - 3 1 9 1 - 5 2 1 7 	 	 	 A b r a m o   G ,   2 0 1 2 ,   S C I E N T O M E T R I C S ,   V 9 1 ,   P 9 5 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 5 7 7 - 5 ;   A b r a m o   G ,   2 0 0 9 ,   T E C H N O V A T I O N ,   V 2 9 ,   P 4 9 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 8 . 1 1 . 0 0 3 ;   A g r a w a l   A ,   2 0 0 1 ,   I N T   J   M A N A G   R E V ,   V 3 ,   P 2 8 5 ,   D O I   1 0 . 1 1 1 1 / 1 4 6 8 - 2 3 7 0 . 0 0 0 6 9 ;   A n d e r s o n   T R ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 3 0 6 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 6 . 1 0 . 0 0 3 ;   A u d r e t s c h   D B ,   1 9 9 6 ,   A M   E C O N   R E V ,   V 8 6 ,   P 6 4 1 ;   B a i n s   W . ,   2 0 0 5 ,   J   C O M M E R C I A L   B I O T E C H ,   V 1 1 ,   P 3 5 3 ,   D O I   1 0 . 1 0 5 7 / p a l g r a v e . j c b . 3 0 4 0 1 3 7 ;   B a l c o n i   M ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 6 1 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 1 8 ;   B e k k e r s   R ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 1 8 3 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 7 . 0 0 7 ;   B e r c o v i t z   J . ,   2 0 0 6 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 3 1 ,   P 1 7 5 ,   D O I   D O I   1 0 . 1 0 0 7 / S 1 0 9 6 1 - 0 0 5 - 5 0 2 9 - Z ;   B r e z n i t z   S M ,   2 0 0 8 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 5 ,   P 1 2 9 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 8 8 5 . 2 0 0 8 . 0 0 2 9 0 . x ;   B r o s t r o m   A ,   2 0 0 9 ,   I N D   I N N O V ,   V 1 6 ,   P 5 9 ,   D O I   1 0 . 1 0 8 0 / 1 3 6 6 2 7 1 0 9 0 2 7 2 8 0 7 6 ;   C a n t n e r   U ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 4 6 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 1 . 0 0 2 ;   C o c c i a   M ,   2 0 0 4 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 6 ,   P 3 1 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 3 2 0 0 0 1 7 5 4 9 0 ;   C o h e n   W M ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 1 . 1 4 2 7 3 ;   C o l y v a s   J ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 6 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 6 1 . 1 4 2 7 2 ;   C r o w e   J A ,   2 0 0 9 ,   R U R A L   S O C I O L ,   V 7 4 ,   P 4 9 8 ;   C r u z   S C S ,   2 0 1 0 ,   R E G   S T U D ,   V 4 4 ,   P 1 2 6 3 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 9 0 3 2 3 4 6 7 0 ;   D e c t e r   M o i r a   H ,   2 0 0 9 ,   E d u c a t i o n   +   T r a i n i n g ,   V 5 1 ,   P 6 2 4 ,   D O I   1 0 . 1 1 0 8 / 0 0 4 0 0 9 1 0 9 1 1 0 0 5 1 9 0 ;   D i   G r e g o r i o   D ,   2 0 0 3 ,   R E S   P O L I C Y ,   V 3 2 ,   P 2 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 2 ) 0 0 0 9 7 - 5 ;   D u   Y X ,   2 0 1 2 ,   C H I N A   E C O N   R E V ,   V 2 3 ,   P 7 4 3 ,   D O I   1 0 . 1 0 1 6 / j . c h i e c o . 2 0 1 2 . 0 4 . 0 0 9 ;   E d l e r   J ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 7 9 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 3 . 0 0 3 ;   E t z k o w i t z   H ,   2 0 0 0 ,   R E S   P O L I C Y ,   V 2 9 ,   P 1 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 0 5 5 - 4 ;   E t z k o w i t z   H ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 8 2 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 3 - 6 ;   F a b r i z i o   K R ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 5 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 0 . 0 2 3 ;   F a g e r b e r g   J ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 2 1 8 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 1 2 . 0 0 6 ;   F i l a t o t c h e v   I ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 4 5 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 1 . 0 0 3 ;   F i n i   R ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 1 1 1 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 5 . 0 1 3 ;   F l e m i n g   L . ,   2 0 0 4 ,   S M A L L   W O R L D S   I   U N P U B ;   F o n t a n a   R ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 3 0 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 1 2 . 0 0 1 ;   G a r f i e l d   E . ,   1 9 9 4 ,   C U R R E N T   C O N T E N T S ,   V 1 5 ;   G i u l i a n i   E ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 9 0 6 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 9 . 0 2 . 0 0 6 ;   G o y a l   S ,   2 0 0 6 ,   J   P O L I T   E C O N ,   V 1 1 4 ,   P 4 0 3 ,   D O I   1 0 . 1 0 8 6 / 5 0 0 9 9 0 ;   G r a n d i   A ,   2 0 0 3 ,   S M A L L   B U S   E C O N ,   V 2 1 ,   P 3 2 9 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 6 1 7 1 2 0 6 0 6 2 ;   G u b e l i   M . H . ,   2 0 0 5 ,   E U R O P E A N   J   I N N O V A T I O ,   V 8 ,   P 2 6 9 ,   D O I   1 0 . 1 1 0 8 / 1 4 6 0 1 0 6 0 5 1 0 6 1 0 1 5 3 ;   G u l b r a n d s e n   M ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 0 . 0 9 . 0 0 7 ;   H e m m e r t   M ,   2 0 0 8 ,   H I T O T S U B   J   E C O N ,   V 4 9 ,   P 1 6 3 ;   H e n d e r s o n   R ,   1 9 9 8 ,   R E V   E C O N   S T A T ,   V 8 0 ,   P 1 1 9 ,   D O I   1 0 . 1 1 6 2 / 0 0 3 4 6 5 3 9 8 5 5 7 2 2 1 ;   J o h a n s s o n   M . ,   2 0 0 5 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 3 0 ,   P 2 7 1 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 5 - 0 9 3 0 - z ;   K i n s e l l a   R ,   1 9 9 7 ,   T E C H N O V A T I O N ,   V 1 7 ,   P 2 4 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 6 ) 0 0 1 1 4 - 9 ;   K l i n c e w i c z   K ,   2 0 1 1 ,   I N T   J   T E C H N O L   M A N A G E ,   V 5 3 ,   P 1 6 1 ,   D O I   1 0 . 1 5 0 4 / I J T M . 2 0 1 1 . 0 3 8 5 8 9 ;   K o s c h a t z k y   K ,   2 0 1 0 ,   S E R V   I N D   J ,   V 3 0 ,   P 6 8 5 ,   D O I   1 0 . 1 0 8 0 / 0 2 6 4 2 0 6 0 8 0 2 2 5 3 8 8 4 ;   F r a n k   M . ,   2 0 0 9 ,   S C I   P U B L   P O L I C Y ,   V 3 6 ,   P 1 3 9 ;   L a m   A ,   2 0 0 5 ,   I N D   R E L A T ,   V 4 4 ,   P 2 4 2 ;   L e e   K J ,   2 0 1 0 ,   T E C H N O L   A N A L   S T R A T E G ,   V 2 2 ,   P 1 8 9 ,   D O I   1 0 . 1 0 8 0 / 0 9 5 3 7 3 2 0 9 0 3 4 9 8 5 3 8 ;   L e e   Y S ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 8 4 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 5 ) 0 0 8 5 7 - 8 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 2 0 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 2 0 0 - y ;   L h u i l l e r y   S ,   2 0 0 9 ,   R E S   P O L I C Y ,   V 3 8 ,   P 4 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 9 . 0 0 2 ;   L i n d e l o f   P ,   2 0 0 3 ,   S M A L L   B U S   E C O N ,   V 2 0 ,   P 2 4 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 8 6 1 8 2 3 4 9 3 ;   L i n d e l o f   P . ,   2 0 0 4 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 9 ,   P 3 1 1 ,   D O I   [ 1 0 . 1 0 2 3 / B : J O T T . 0 0 0 0 0 3 4 1 2 5 . 2 9 9 7 9 . a e ,   D O I   1 0 . 1 0 2 3 / B : J 0 T T . 0 0 0 0 0 3 4 1 2 5 . 2 9 9 7 9 . A E ] ;   L i n k   A N ,   2 0 0 8 ,   I E E E   T   E N G   M A N A G E ,   V 5 5 ,   P 5 ,   D O I   1 0 . 1 1 0 9 / T E M . 2 0 0 7 . 9 1 2 8 1 1 ;   L o c k e t t   A ,   2 0 0 3 ,   S M A L L   B U S   E C O N ,   V 2 0 ,   P 1 8 5 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 2 2 2 2 0 2 1 6 9 7 2 ;   L u b a n g o   L M ,   2 0 0 7 ,   T E C H N O V A T I O N ,   V 2 7 ,   P 7 8 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 0 7 . 0 5 . 0 1 3 ;   M a r s i l i   O ,   2 0 0 2 ,   I N D   C O R P   C H A N G E ,   V 1 1 ,   P 7 9 1 ,   D O I   1 0 . 1 0 9 3 / i c c / 1 1 . 4 . 7 9 1 ;   M a r t i n e l l i   A ,   2 0 0 8 ,   J   T E C H N O L   T R A N S F E R ,   V 3 3 ,   P 2 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 7 - 9 0 3 1 - 5 ;   M e y e r - K r a h m e r   F ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 4 - 8 ;   M o n j o n   S ,   2 0 0 3 ,   I N T   J   I N D   O R G A N ,   V 2 1 ,   P 1 2 5 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 7 - 7 1 8 7 ( 0 3 ) 0 0 0 8 2 - 1 ;   M o w e r y   D C ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 9 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 9 ) 0 0 1 0 0 - 6 ;   M u e l l e r   P ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 4 9 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 2 3 ;   N a r i n   F ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 7 ) 0 0 0 1 3 - 9 ;   N e l s o n   R . R . ,   1 9 9 3 ,   N A T L   I N N O V A T I O N   S Y S T ;   N e l s o n   R . R . ,   1 9 8 2 ,   E V O L U T I O N A R Y   T H E O R Y ;   O ' S h e a   R P ,   2 0 0 5 ,   R E S   P O L I C Y ,   V 3 4 ,   P 9 9 4 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 5 . 0 5 . 0 1 1 ;   O l d s   K ,   2 0 0 7 ,   W O R L D   D E V ,   V 3 5 ,   P 9 5 9 ,   D O I   1 0 . 1 0 1 6 / j . w o r l d d e v . 2 0 0 6 . 0 5 . 0 1 4 ;   O w e n - S m i t h   J ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 2 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 2 4 . 1 4 2 7 5 ;   P a r k   H W ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 1 ,   P 1 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 9 - 2 1 1 9 - y ;   P a z o s   D .   R . ,   2 0 1 0 ,   R E V   G A L E G A   E C ,   V 1 0 ,   P 1 ;   P i n h e i r o   L . ,   2 0 1 0 ,   P O R T U G U E S E   J   M A N A G E M ,   V 1 5 ,   P 1 ;   P l e w a   C a r o l i n ,   2 0 0 7 ,   J o u r n a l   o f   S e r v i c e s   M a r k e t i n g ,   V 2 1 ,   P 3 7 0 ,   D O I   1 0 . 1 1 0 8 / 0 8 8 7 6 0 4 0 7 1 0 7 7 3 6 7 9 ;   P o w e r s   J B ,   2 0 0 5 ,   J   B U S   V E N T U R I N G ,   V 2 0 ,   P 2 9 1 ,   D O I   1 0 . 1 0 1 6 / j . j b u s v e n t . 2 0 0 3 . 1 2 . 0 0 8 ;   P u g a t c h ,   2 0 1 1 ,   J   C O M M E R C I A L   B I O T E C H ,   V 1 7 ,   P 3 0 8 ;   R a m o s - V i e l b a   I . ,   2 0 0 9 ,   S C I E N T O M E T R I C S ,   V 8 4 ,   P 1 5 8 8 ;   V e r a   E R ,   2 0 0 6 ,   C O M P   E D U C ,   V 4 2 ,   P 4 0 5 ,   D O I   1 0 . 1 0 8 0 / 0 3 0 5 0 0 6 0 6 0 0 8 7 6 7 2 3 ;   R O S E N B E R G   N ,   1 9 9 4 ,   R E S   P O L I C Y ,   V 2 3 ,   P 3 2 3 ,   D O I   1 0 . 1 0 1 6 / 0 0 4 8 - 7 3 3 3 ( 9 4 ) 9 0 0 4 2 - 6 ;   R o t h a e r m e l   F T ,   2 0 0 7 ,   I N D   C O R P   C H A N G E ,   V 1 6 ,   P 6 9 1 ,   D O I   1 0 . 1 0 9 3 / i c c / d t m 0 2 3 ;   S a l t e r   A J ,   2 0 0 1 ,   R E S   P O L I C Y ,   V 3 0 ,   P 5 0 9 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 0 ) 0 0 0 9 1 - 3 ;   S a n t o r o   M D ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 1 1 6 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 9 0 - 1 ;   S c h a r t i n g e r   D ,   2 0 0 2 ,   R E S   P O L I C Y ,   V 3 1 ,   P 3 0 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 0 1 ) 0 0 1 1 1 - 1 ;   S h a n e   S ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 5 4 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 1 5 4 . 1 4 2 8 0 ;   S h a n e   S ,   2 0 0 4 ,   J   B U S   V E N T U R I N G ,   V 1 9 ,   P 1 2 7 ,   D O I   1 0 . 1 0 1 6 / S 0 8 8 3 - 9 0 2 6 ( 0 2 ) 0 0 1 1 4 - 3 ;   S i e g e l   D . S . ,   2 0 0 3 ,   J   H I G H   T E C H N O L O G Y   M A ,   V 1 4 ,   P 1 1 1 ,   D O I   D O I   1 0 . 1 0 1 6 / S 1 0 4 7 - 8 3 1 0 ( 0 3 ) 0 0 0 0 7 - 5 ;   S i l v a   E s t e r   G ,   2 0 0 8 ,   S t r u c t u r a l   C h a n g e   a n d   E c o n o m i c   D y n a m i c s ,   V 1 9 ,   P 2 7 3 ,   D O I   1 0 . 1 0 1 6 / j . s t r u e c o . 2 0 0 8 . 0 2 . 0 0 1 ;   S i l v a   S T ,   2 0 0 9 ,   J   E V O L   E C O N ,   V 1 9 ,   P 6 0 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 9 1 - 0 0 8 - 0 1 2 1 - 9 ;   S m a l l   H ,   1 9 9 9 ,   J   A M   S O C   I N F O R M   S C I ,   V 5 0 ,   P 7 9 9 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 9 ) 5 0 : 9 < 7 9 9 : : A I D - A S I 9 > 3 . 3 . C O ; 2 - 7 ;   S w a n n   G .   M .   P . ,   2 0 0 2 ,   I N N O V A T I V E   B U S I N E S S ;   T e i x e i r a   A A C ,   2 0 1 1 ,   S C I E N T O M E T R I C S ,   V 8 9 ,   P 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 1 - 0 4 4 5 - 3 ;   T i j s s e n   R J W ,   2 0 0 6 ,   R E S   P O L I C Y ,   V 3 5 ,   P 1 5 6 9 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 6 . 0 9 . 0 2 5 ;   T o d o r o v i c   Z W ,   2 0 1 1 ,   T E C H N O V A T I O N ,   V 3 1 ,   P 1 2 8 ,   D O I   1 0 . 1 0 1 6 / j . t e c h n o v a t i o n . 2 0 1 0 . 1 0 . 0 0 9 ;   V a n   L o o y   B ,   2 0 1 1 ,   R E S   P O L I C Y ,   V 4 0 ,   P 5 5 3 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 1 1 . 0 2 . 0 0 1 ;   W e i n t r a u b   R . ,   2 0 0 2 ,   E C   M A T H   S C I ;   W r i g h t   M ,   2 0 0 4 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 9 ,   P 2 3 5 ,   D O I   D O I   1 0 . 1 0 2 3 / B : J O T T . 0 0 0 0 0 3 4 1 2 1 . 0 2 5 0 7 . F 3 ;   W r i g h t   M ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 1 2 0 5 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 4 . 0 2 1 ;   W u   W . ,   2 0 0 9 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 3 5 ,   P 2 0 3 ;   X i w e i   Z . ,   2 0 0 7 ,   T E C H N O L   S O C ,   V 2 9 ,   P 3 1 7 ,   D O I   1 0 . 1 0 1 6 / j . t e c h s o c . 2 0 0 7 . 0 4 . 0 0 8 ;   Y u s u f   S ,   2 0 0 8 ,   R E S   P O L I C Y ,   V 3 7 ,   P 1 1 6 7 ,   D O I   1 0 . 1 0 1 6 / j . r e s p o l . 2 0 0 8 . 0 4 . 0 1 1 ;   Z u c c a l a   A ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 1 5 2 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 5 6 ;   Z u c k e r   L G ,   1 9 9 8 ,   A M   E C O N   R E V ,   V 8 8 ,   P 2 9 0 ;   Z u c k e r   L G ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 3 8 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 1 3 8 . 1 4 2 7 4 ;   Z u c k e r   L G ,   1 9 9 6 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 3 ,   P 1 2 7 0 9 ,   D O I   1 0 . 1 0 7 3 / p n a s . 9 3 . 2 3 . 1 2 7 0 9 	 9 8 	 1 3 	 1 4 	 1 6 	 1 4 1 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 D E C 	 2 0 1 2 	 9 3 	 3 	 	 	 	 	 7 1 9 	 7 4 3 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 2 - 0 8 2 3 - 5 	 	 2 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 0 3 5 R D 	 W O S : 0 0 0 3 1 0 9 6 4 5 0 0 0 0 9 	 	 
 
 J 	 C a l a b r e t t a ,   G ;   D u r i s i n ,   B ;   O g l i e n g o ,   M 	 	 	 	 C a l a b r e t t a ,   G i u l i a ;   D u r i s i n ,   B o r i s ;   O g l i e n g o ,   M a r c o 	 	 	 U n c o v e r i n g   t h e   I n t e l l e c t u a l   S t r u c t u r e   o f   R e s e a r c h   i n   B u s i n e s s   E t h i c s :   A   J o u r n e y   T h r o u g h   t h e   H i s t o r y ,   t h e   C l a s s i c s ,   a n d   t h e   P i l l a r s   o f   J o u r n a l   o f   B u s i n e s s   E t h i c s 	 J O U R N A L   O F   B U S I N E S S   E T H I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 B u s i n e s s   e t h i c s ;   C o r p o r a t e   s o c i a l   r e s p o n s i b i l i t y ;   E t h i c a l   d e c i s i o n   m a k i n g ;   B i b l i o m e t r i c s ;   L i t e r a t u r e   r e v i e w 	 C O R P O R A T E   S O C I A L - R E S P O N S I B I L I T Y ;   P R O D U C T - I N N O V A T I O N - M A N A G E M E N T ;   D E C I S I O N - M A K I N G ;   C O C I T A T I O N   A N A L Y S I S ;   F I N A N C I A L   P E R F O R M A N C E ;   E M P I R I C A L - E X A M I N A T I O N ;   A U T H O R   C O C I T A T I O N ;   O R G A N I Z A T I O N S ;   B E H A V I O R ;   M O D E L 	 A f t e r   a l m o s t   3 0   y e a r s   o f   p u b l i c a t i o n s ,   J o u r n a l   o f   B u s i n e s s   E t h i c s   ( J B E )   h a s   a c h i e v e d   t h e   p o s i t i o n   o f   m a i n   m a r k e t p l a c e   f o r   b u s i n e s s   e t h i c s   d i s c u s s i o n   a n d   k n o w l e d g e   g e n e r a t i o n .   G i v e n   t h e   l a r g e   a m o u n t   o f   k n o w l e d g e   p r o d u c e d ,   a n   a s s e s s m e n t   o f   t h e   s t a t e   o f   t h e   a r t   c o u l d   b e n e f i t   b o t h   t h e   c o n s t r u c t i v e   d e v e l o p m e n t   o f   t h e   d i s c i p l i n e   a n d   t h e   f u r t h e r   g r o w t h   o f   t h e   j o u r n a l   i t s e l f .   A s   t h e   e v o l u t i o n   o f   a   d i s c i p l i n e   i s   s e t   t o   b e   r e f l e c t e d   i n   t h e   e v o l u t i o n   o f   i t s   l e a d i n g   j o u r n a l ,   w e   a t t e m p t   t o   c h a r a c t e r i z e   c h a n g e s   i n   t h e   i n t e l l e c t u a l   s t r u c t u r e   o f   b u s i n e s s   e t h i c s   t h r o u g h   a   b i b l i o m e t r i c   a n a l y s i s   o f   a r t i c l e s   p u b l i s h e d   i n   J B E .   S p e c i f i c a l l y ,   w e   c o n d u c t   a   k n o w l e d g e - s t o c k   a n a l y s i s   t o   a s s e s s   t h e   e v o l u t i o n ,   m a j o r   t r e n d s ,   a n d   c u r r e n t   s t a t e   o f   t h e   j o u r n a l .   A d d i t i o n a l l y ,   w e   u s e   c i t a t i o n   a n d   c o - c i t a t i o n   a n a l y s i s   t o   p r o v i d e   a n   a c c u r a t e   d e s c r i p t i o n   o f   t h e   c o n t e n t   a n d   t h e   a d v a n c e m e n t   o f   r e s e a r c h   i n   b u s i n e s s   e t h i c s .   T h r o u g h   t h e   r e s u l t s   o f   o u r   a n a l y s i s ,   w e   a r e   a b l e   t o :   ( 1 )   p i n p o i n t   t h e   c h a r a c t e r i s t i c s   o f   t h e   g r o w i n g   s t o c k   o f   k n o w l e d g e   p u b l i s h e d   b y   J B E   o v e r   t h e   y e a r s ;   ( 2 )   i d e n t i f y   t h e   m o s t   i n f l u e n t i a l   w o r k s   o n   b u s i n e s s   e t h i c s   r e s e a r c h ;   a n d   ( 3 )   d e t e c t   t h e   f o r m a t i o n   a n d   e v o l u t i o n   o f   s c h o o l s   o f   t h o u g h t   i n   b u s i n e s s   e t h i c s . 	 [ C a l a b r e t t a ,   G i u l i a ]   B I   N o r w e g i a n   B u s i n e s s   S c h ,   D e p t   M k t ,   N - 0 4 8 4   O s l o ,   N o r w a y ;   [ D u r i s i n ,   B o r i s ]   B o c c o n i   U n i v ,   D e p t   M a n a g e m e n t   &   T e c h n o l ,   I - 2 0 1 3 6   M i l a n ,   I t a l y ;   [ O g l i e n g o ,   M a r c o ]   M c K i n s e y   &   C o   I t a l y ,   I - 2 0 1 2 2   M i l a n ,   I t a l y 	 C a l a b r e t t a ,   G   ( r e p r i n t   a u t h o r ) ,   B I   N o r w e g i a n   B u s i n e s s   S c h ,   D e p t   M k t ,   N y d a l s v e i e n   3 7 ,   N - 0 4 8 4   O s l o ,   N o r w a y . 	 g i u l i a . c a l a b r e t t a @ b i . n o ;   b o r i s . d u r i s i n @ s d a b o c c o n i . i t ;   M a r c o _ O g l i e n g o @ m c k i n s e y . c o m 	 	 	 	 	 A l b r e c h t   C ,   2 0 1 0 ,   J   B U S   E T H I C S ,   V 9 5 ,   P 2 2 7 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 0 9 - 0 3 5 6 - x ;   A r i s t o t l e ,   1 9 8 0 ,   N I C H O M A C H E A N   E T H I C S ;   A U P P E R L E   K E ,   1 9 8 5 ,   A C A D   M A N A G E   J ,   V 2 8 ,   P 4 4 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 6 2 1 0 ;   B a r r y   V .   E . ,   1 9 7 9 ,   M O R A L   I S S U E S   B U S I N E S ;   B a r t u n e k   J M ,   2 0 0 6 ,   A C A D   M A N A G E   J ,   V 4 9 ,   P 9 ;   B a u m g a r t n e r   H ,   2 0 0 3 ,   J   M A R K E T I N G ,   V 6 7 ,   P 1 2 3 ,   D O I   1 0 . 1 5 0 9 / j m k g . 6 7 . 2 . 1 2 3 . 1 8 6 1 0 ;   B a u m h a r t   R . C . ,   1 9 6 1 ,   H A R V A R D   B U S   R E V ,   V 3 9 ,   P 6 ;   B e a u c h a m p   T . L . ,   1 9 7 9 ,   E T H I C A L   T H E O R Y   B U S I N ;   B i e m a n s   W ,   2 0 0 7 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 4 ,   P 1 9 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 5 4 0 - 5 8 8 5 . 2 0 0 7 . 0 0 2 4 5 . x ;   B i e m a n s   W ,   2 0 1 0 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 7 ,   P 4 6 1 ;   B O M M E R   M ,   1 9 8 7 ,   J   B U S   E T H I C S ,   V 6 ,   P 2 6 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 8 2 9 3 6 ;   B o w i e   N o r m a n ,   1 9 8 2 ,   B U S I N E S S   E T H I C S ;   B o y d   B K ,   2 0 0 5 ,   S T R A T E G I C   M A N A G E   J ,   V 2 6 ,   P 8 4 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 4 7 7 ;   B R E N N E R   S N ,   1 9 7 7 ,   H A R V A R D   B U S   R E V ,   V 5 5 ,   P 5 7 ;   B U R T   R S ,   1 9 7 7 ,   S O C   F O R C E S ,   V 5 6 ,   P 1 0 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 7 4 1 6 ;   C A R R   A Z ,   1 9 6 8 ,   H A R V A R D   B U S   R E V ,   V 4 6 ,   P 1 4 3 ;   C a r r o l l   A . ,   1 9 8 9 ,   B U S I N E S S   S O C   E T H I C S ;   C A R R O L L   A B ,   1 9 7 5 ,   B U S   H O R I Z O N S ,   V 1 8 ,   P 7 5 ,   D O I   1 0 . 1 0 1 6 / 0 0 0 7 - 6 8 1 3 ( 7 5 ) 9 0 0 7 2 - 5 ;   C A R R O L L   A r c h i e .   B .   A ,   1 9 7 9 ,   A C A D   M A N A G E   R E V ,   P 4 9 7 ,   D O I   D O I   1 0 . 5 4 6 5 / A M R . 1 9 7 9 . 4 4 9 8 2 9 6 ;   C A V A N A G H   G F ,   1 9 8 1 ,   A C A D   M A N A G E   R E V ,   V 6 ,   P 3 6 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 3 7 2 ;   C H O N K O   L B ,   1 9 8 5 ,   J   B U S   R E S ,   V 1 3 ,   P 3 3 9 ,   D O I   1 0 . 1 0 1 6 / 0 1 4 8 - 2 9 6 3 ( 8 5 ) 9 0 0 0 6 - 2 ;   C o l l i n s   D ,   2 0 0 0 ,   J   B U S   E T H I C S ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 2 3 / A : 1 0 0 6 3 5 8 1 0 4 0 9 8 ;   C o l q u i t t   J A ,   2 0 0 7 ,   A C A D   M A N A G E   J ,   V 5 0 ,   P 1 2 8 1 ;   C R A N E   D ,   1 9 6 7 ,   A M   S O C I O L ,   V 2 ,   P 1 9 5 ;   C r a n e   D . ,   1 9 7 2 ,   I N V I S I B L E   C O L L   D I F F U ;   C U L N A N   M J ,   1 9 8 7 ,   M I S   Q U A R T ,   V 1 1 ,   P 3 4 1 ,   D O I   1 0 . 2 3 0 7 / 2 4 8 6 8 0 ;   C U L N A N   M J ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 5 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 5 3 : : A I D - A S I 1 3 > 3 . 0 . C O ; 2 - E ;   D e   G e o r g e   R . ,   1 9 8 2 ,   B U S I N E S S   E T H I C S ;   D e   G e o r g e   R .   T . ,   2 0 0 5 ,   P   A C C   C O R P ;   D i o d a t o   V .   P ,   1 9 9 4 ,   D I C T   B I B L I O M E T R I C S ;   D O N A L D S O N   T ,   1 9 9 4 ,   A C A D   M A N A G E   R E V ,   V 1 9 ,   P 2 5 2 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 7 0 5 ;   D O N A L D S O N   T ,   1 9 9 5 ,   A C A D   M A N A G E   R E V ,   V 2 0 ,   P 6 5 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 9 5 . 9 5 0 3 2 7 1 9 9 2 ;   D o n a l d s o n   T . ,   1 9 8 9 ,   E T H I C S   I N T   B U S I N E S S ;   D o n a l d s o n   T . ,   1 9 8 3 ,   E T H I C A L   I S S U E S   B U S I N ;   D o n a l d s o n   T . ,   1 9 8 2 ,   C O R P O R A T I O N S   M O R A L I T ;   D o n a l d s o n   T . ,   1 9 9 9 ,   T I E S   B I N D   S O C I A L   C O N ;   D u r i s i n   B ,   2 0 1 0 ,   J   P R O D   I N N O V A T   M A N A G ,   V 2 7 ,   P 4 3 7 ;   E t z i o n   D ,   2 0 0 7 ,   J   M A N A G E ,   V 3 3 ,   P 6 3 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 7 3 0 2 5 5 3 ;   E w i n g   D . ,   1 9 7 7 ,   F R E E D O M   I N S I D E   O R G   B ;   F E R R E L L   O C ,   1 9 7 8 ,   J   M A R K E T I N G ,   V 4 2 ,   P 6 9 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 0 5 3 7 ;   F E R R E L L   O C ,   1 9 8 5 ,   J   M A R K E T I N G ,   V 4 9 ,   P 8 7 ,   D O I   1 0 . 2 3 0 7 / 1 2 5 1 6 1 8 ;   F r a e d r i c h   J . ,   1 9 8 9 ,   J   M A C R O M A R K E T I N G ,   V 9 ,   P 5 5 ,   D O I   [ 1 0 . 1 1 7 7 / 0 2 7 6 1 4 6 7 8 9 0 0 9 0 0 2 0 7 ,   D O I   1 0 . 1 1 7 7 / 0 2 7 6 1 4 6 7 8 9 0 0 9 0 0 2 0 7 ] ;   F O R D   R C ,   1 9 9 4 ,   J   B U S   E T H I C S ,   V 1 3 ,   P 2 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 7 4 8 2 0 ;   F O R S Y T H   D R ,   1 9 8 0 ,   J   P E R S   S O C   P S Y C H O L ,   V 3 9 ,   P 1 7 5 ,   D O I   1 0 . 1 0 3 7 / / 0 0 2 2 - 3 5 1 4 . 3 9 . 1 . 1 7 5 ;   F R E E M A N   E . ,   1 9 8 4 ,   S T R A T E G I C   M A N A G E M E N T ;   F r i e d m a n   M . ,   1 9 7 0 ,   N Y   T I M E S   M A G A Z I   0 9 1 3 ;   F r i e d m a n   M . ,   1 9 6 2 ,   C A P I T A L I S M   F R E E D O M ;   F R I T Z S C H E   D J ,   1 9 8 4 ,   A C A D   M A N A G E   J ,   V 2 7 ,   P 1 6 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 5 9 6 4 ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G i l l i g a n   C . ,   1 9 8 2 ,   D I F F E R E N T   V O I C E ;   G O O D P A S T E R   K E ,   1 9 8 2 ,   H A R V A R D   B U S   R E V ,   V 6 0 ,   P 1 3 2 ;   G r i f f i n   J .   J . ,   1 9 9 7 ,   B U S   S O C ,   V 3 6 ,   P 5 ,   D O I   [ 1 0 . 1 1 7 7 / 0 0 0 7 6 5 0 3 9 7 0 3 6 0 0 1 0 2 ,   D O I   1 0 . 1 1 7 7 / 0 0 0 7 6 5 0 3 9 7 0 3 6 0 0 1 0 2 ] ;   H a i r   J ,   1 9 9 2 ,   M U L T I V A R I A T E   D A T A   A N ;   H e g a r t y   H   W ,   1 9 7 8 ,   J   A P P L   P S Y C H O L ,   V 6 3 ,   P 4 5 1 ;   H E G A R T Y   W H ,   1 9 7 9 ,   J   A P P L   P S Y C H O L ,   V 6 4 ,   P 3 3 1 ;   H O F F M A N   D L ,   1 9 9 3 ,   J   C O N S U M   R E S ,   V 1 9 ,   P 5 0 5 ,   D O I   1 0 . 1 0 8 6 / 2 0 9 3 1 9 ;   H o f s t e d e   G . ,   1 9 8 0 ,   C U L T U R A L   C O N S E Q U E N C E ;   H u n t   S .   D . ,   1 9 8 6 ,   J   M A C R O M A R K E T I N G ,   V 6 ,   P 5 ,   D O I   1 0 . 1 1 7 7 / 0 2 7 6 1 4 6 7 8 6 0 0 6 0 0 1 0 3 ;   H u n t   S .   D . ,   1 9 9 3 ,   E T H I C S   M A R K E T I N G ,   P 7 7 5 ;   J a c k a l l   R ,   1 9 8 8 ,   M O R A L   M A Z E S   W O R L D   C O ;   J E N S E N   M C ,   1 9 7 6 ,   J   F I N A N C   E C O N ,   V 3 ,   P 3 0 5 ,   D O I   1 0 . 1 0 1 6 / 0 3 0 4 - 4 0 5 X ( 7 6 ) 9 0 0 2 6 - X ;   J O N E S   T M ,   1 9 9 1 ,   A C A D   M A N A G E   R E V ,   V 1 6 ,   P 3 6 6 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 8 6 7 ;   K I D W E L L   J M ,   1 9 8 7 ,   J   B U S   E T H I C S ,   V 6 ,   P 4 8 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 8 3 2 9 1 ;   K i s h - G e p h a r t   J J ,   2 0 1 0 ,   J   A P P L   P S Y C H O L ,   V 9 5 ,   P 1 ,   D O I   1 0 . 1 0 3 7 / a 0 0 1 7 1 0 3 ;   K o h l b e r g   L . ,   1 9 8 1 ,   E S S A Y S   M O R A L   D E V ,   V I ;   K o h l b e r g   L . ,   1 9 6 9 ,   H D B   S O C I A L I Z A T I O N   T H ;   M a   Z . ,   2 0 1 0 ,   J   B U S   E T H I C S ,   V 9 5 ,   P 2 5 5 ;   M a c h o l d   S ,   2 0 0 8 ,   J   B U S   E T H I C S ,   V 8 1 ,   P 6 6 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 0 7 - 9 5 3 9 - 5 ;   M C C A I N   K W ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 4 3 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 9 ) 4 1 : 6 < 4 3 3 : : A I D - A S I 1 1 > 3 . 0 . C O ; 2 - Q ;   M C C A I N   K W ,   1 9 8 6 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 7 ,   P 1 1 1 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 8 6 0 5 ) 3 7 : 3 < 1 1 1 : : A I D - A S I 2 > 3 . 0 . C O ; 2 - D ;   M c W i l l i a m s   A ,   2 0 0 0 ,   S T R A T E G I C   M A N A G E   J ,   V 2 1 ,   P 6 0 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 0 2 6 6 ( 2 0 0 0 0 5 ) 2 1 : 5 < 6 0 3 : : A I D - S M J 1 0 1 > 3 . 3 . C O ; 2 - V ;   M i t c h e l l   R K ,   1 9 9 7 ,   A C A D   M A N A G E   R E V ,   V 2 2 ,   P 8 5 3 ,   D O I   1 0 . 2 3 0 7 / 2 5 9 2 4 7 ;   M u r p h y   P .   E . ,   1 9 8 1 ,   M A R K E T I N G   E T H I C S   R E V ,   P 2 5 1 ;   N u n n a l l y   J ,   1 9 7 8 ,   P S Y C H O M E T R I C   T H E O R Y ;   O ' F a l l o n   M J ,   2 0 0 5 ,   J   B U S   E T H I C S ,   V 5 9 ,   P 3 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 0 5 - 2 9 2 9 - 7 ;   O r l i t z k y   M ,   2 0 0 3 ,   O R G A N   S T U D ,   V 2 4 ,   P 4 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 0 3 0 2 4 0 0 3 9 1 0 ;   P a s a d e o s   Y ,   1 9 9 8 ,   J   A D V E R T I S I N G ,   V 2 7 ,   P 5 3 ;   P e t e r s   T . ,   1 9 8 2 ,   S E A R C H   E X C E L L E N C E ;   P F E F F E R   J ,   1 9 7 7 ,   S O C   F O R C E S ,   V 5 5 ,   P 9 3 8 ,   D O I   1 0 . 2 3 0 7 / 2 5 7 7 5 6 3 ;   P i l k i n g t o n   A ,   1 9 9 9 ,   I N T   J   O P E R   P R O D   M A N ,   V 1 9 ,   P 7 ,   D O I   1 0 . 1 1 0 8 / 0 1 4 4 3 5 7 9 9 1 0 2 4 4 1 8 8 ;   D e   S o l l a   P r i c e   D . J . ,   1 9 6 3 ,   L I T T L E   S C I   B I G   S C I ;   R a m o s - R o d r i g u e z   A R ,   2 0 0 4 ,   S T R A T E G I C   M A N A G E   J ,   V 2 5 ,   P 9 8 1 ,   D O I   1 0 . 1 0 0 2 / s m j . 3 9 7 ;   R a w l s   J ,   1 9 7 1 ,   T H E O R Y   J U S T I C E ;   R E I D E N B A C H   R E ,   1 9 9 0 ,   J   B U S   E T H I C S ,   V 9 ,   P 6 3 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 0 3 8 3 3 9 1 ;   R e s t   J ,   1 9 7 9 ,   D E V   J U D G I N G   M O R A L   I S ;   R e s t   J . ,   1 9 8 6 ,   M O R A L   D E V   A D V   R E S   T H ;   R o g e r s   R .   C . ,   1 9 8 9 ,   J   A P P L   P S Y C H O L ,   V 7 4 ,   P 6 3 6 ;   R o k e a c h   M . ,   1 9 7 3 ,   N A T U R E   H U M A N   V A L U E S ;   S c h e i n   E . H ,   1 9 8 5 ,   O R G   C U L T U R E   L E A D E R S H ;   S o l o m o n   R .   C . ,   1 9 9 2 ,   E T H I C S   E X C E L L E N C E ;   S t o n e   C .   D . ,   1 9 7 5 ,   W H E R E   T H E   L A W   E N D S ;   S U T T O N   R I ,   1 9 9 5 ,   A D M I N   S C I   Q U A R T ,   V 4 0 ,   P 3 7 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 3 7 8 8 ;   T a h a i   A ,   1 9 9 9 ,   S T R A T E G I C   M A N A G E   J ,   V 2 0 ,   P 2 7 9 ;   T e n b r u n s e l   A E ,   2 0 0 8 ,   A C A D   M A N A G   A N N ,   V 2 ,   P 5 4 5 ,   D O I   1 0 . 1 0 8 0 / 1 9 4 1 6 5 2 0 8 0 2 2 1 1 6 7 7 ;   T r e v i n o   L K ,   2 0 0 6 ,   J   M A N A G E ,   V 3 2 ,   P 9 5 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 4 9 2 0 6 3 0 6 2 9 4 2 5 8 ;   T R E V I N O   L K ,   1 9 8 6 ,   A C A D   M A N A G E   R E V ,   V 1 1 ,   P 6 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 3 1 3 ;   T r e v i n o   L ,   1 9 9 0 ,   R E S   O R G   C H A N G E   D E V ,   P 1 9 5 ;   U S D I K E N   B ,   1 9 9 5 ,   O R G A N   S T U D ,   V 1 6 ,   P 5 0 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 7 0 8 4 0 6 9 5 0 1 6 0 0 3 0 6 ;   V a n   L i e d e k e r k e   L . ,   2 0 0 8 ,   J   B U S   E T H I C S ,   P 2 7 3 ;   V e l a s q u e z   M . ,   1 9 8 2 ,   B U S I N E S S   E T H I C S   C O N C ;   V I C T O R   B ,   1 9 8 8 ,   A D M I N   S C I   Q U A R T ,   V 3 3 ,   P 1 0 1 ,   D O I   1 0 . 2 3 0 7 / 2 3 9 2 8 5 7 ;   W A R T I C K   S L ,   1 9 8 5 ,   A C A D   M A N A G E   R E V ,   V 1 0 ,   P 7 5 8 ,   D O I   1 0 . 2 3 0 7 / 2 5 8 0 4 4 ;   W H I T E   H D ,   1 9 8 1 ,   J   A M   S O C   I N F O R M   S C I ,   V 3 2 ,   P 1 6 3 ,   D O I   1 0 . 1 0 0 2 / a s i . 4 6 3 0 3 2 0 3 0 2 ;   W h i t e   H D ,   1 9 9 8 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 9 ,   P 3 2 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 8 0 4 0 1 ) 4 9 : 4 < 3 2 7 : : A I D - A S I 4 > 3 . 0 . C O ; 2 - 4 ;   W O O D   D J ,   1 9 9 1 ,   A C A D   M A N A G E   R E V ,   V 1 6 ,   P 6 9 1 ,   D O I   1 0 . 5 4 6 5 / A M R . 1 9 9 1 . 4 2 7 9 6 1 6 	 1 0 5 	 1 3 	 1 4 	 9 	 5 5 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 6 7 - 4 5 4 4 	 1 5 7 3 - 0 6 9 7 	 	 J   B U S   E T H I C S 	 J .   B u s .   E t h i c s 	 D E C 	 2 0 1 1 	 1 0 4 	 4 	 	 	 	 	 4 9 9 	 5 2 4 	 	 1 0 . 1 0 0 7 / s 1 0 5 5 1 - 0 1 1 - 0 9 2 4 - 8 	 	 2 6 	 B u s i n e s s ;   E t h i c s 	 B u s i n e s s   &   E c o n o m i c s ;   S o c i a l   S c i e n c e s   -   O t h e r   T o p i c s 	 8 5 6 E M 	 W O S : 0 0 0 2 9 7 6 2 0 2 0 0 0 0 5 	 	 
 
 J 	 M c C a i n ,   K W 	 	 	 	 M c C a i n ,   K a t h e r i n e   W . 	 	 	 E p o n y m y   a n d   O b l i t e r a t i o n   b y   I n c o r p o r a t i o n :   T h e   C a s e   o f   t h e   " N a s h   E q u i l i b r i u m " 	 J O U R N A L   O F   T H E   A M E R I C A N   S O C I E T Y   F O R   I N F O R M A T I O N   S C I E N C E   A N D   T E C H N O L O G Y 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 	 C I T A T I O N   C O N T E X T   A N A L Y S I S ;   S C I E N T I F I C   L I T E R A T U R E ;   S O C I A L - S C I E N C E ;   B I G   S C I E N C E ;   G A M E - T H E O R Y ;   P A T T E R N S ;   A R T I C L E S ;   I N T E R D I S C I P L I N A R I T Y ;   D I F F U S I O N ;   B I B L I O M E T R I C S 	 I n   o r d e r   t o   e x a m i n e   t h e   p h e n o m e n a   o f   e p o n y m y   a n d   O b l i t e r a t i o n   b y   I n c o r p o r a t i o n   a t   b o t h   t h e   a g g r e g a t e   a n d   i n d i v i d u a l   s u b j e c t   l e v e l ,   t h e   l i t e r a t u r e   r e l a t i n g   t o   t h e   g a m e - t h e o r e t i c   c o n c e p t   o f   t h e   N a s h   E q u i l i b r i u m   w a s   s t u d i e d   o v e r   t h e   p e r i o d   1 9 5 0 - 2 0 0 8 .   A l m o s t   5 , 3 0 0   b i b l i o g r a p h i c   d a t a b a s e   r e c o r d s   f o r   p u b l i c a t i o n s   e x p l i c i t l y   c i t i n g   a t   l e a s t   o n e   o f   t w o   p a p e r s   b y   J o h n   N a s h   a n d / o r   u s i n g   t h e   p h r a s e   " N a s h   E q u i l i b r i u m / N a s h   E q u i l i b r i a "   w e r e   r e t r i e v e d   f r o m   t h e   W e b   o f   S c i e n c e   a n d   v a r i o u s   s u b j e c t - r e l a t e d   d a t a b a s e s .   B r e a d t h   o f   i n f l u e n c e   i s   d e m o n s t r a t e d   b y   t h e   w i d e   v a r i e t y   o f   s u b j e c t   a r e a s   i n   w h i c h   N a s h   E q u i l i b r i u m - r e l a t e d   p u b l i c a t i o n s   o c c u r ,   i n c l u d i n g   i n   t h e   n a t u r a l   a n d   s o c i a l   s c i e n c e s ,   h u m a n i t i e s ,   l a w ,   a n d   m e d i c i n e .   F i f t y   p e r c e n t   o f   a l l   i t e m s   h a v e   b e e n   p u b l i s h e d   s i n c e   2 0 0 2 ,   s u g g e s t i n g   t h a t   N a s h ' s   p a p e r s   h a v e   e x p e r i e n c e d   " d e l a y e d   r e c o g n i t i o n . "   A   d e g r e e   o f   O b l i t e r a t i o n   b y   I n c o r p o r a t i o n   i s   o b s e r v e d   i n   t h a t   i m p l i c i t   c i t a t i o n s   ( u s e   o f   t h e   p h r a s e   w i t h o u t   c i t a t i o n )   i n c r e a s e d   o v e r   t h e   t i m e   p e r i o d   s t u d i e d ,   a l t h o u g h   t h e   p r o p o r t i o n   o f   a l l   c i t a t i o n s   t h a t   a r e   i m p l i c i t   h a s   r e m a i n e d   r e l a t i v e l y   s t a b l e   d u r i n g   t h e   m o s t   r e c e n t   d e c a d e   w i t h   a n   a n n u a l   r a t e   o f   b e t w e e n   6 0 %   a n d   7 0 % ;   s u b j e c t   a r e a s   v a r y   i n   t h e i r   l e v e l   o f   o b l i t e r a t i o n . 	 D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A 	 M c C a i n ,   K W   ( r e p r i n t   a u t h o r ) ,   D r e x e l   U n i v ,   C o l l   I n f o r m a t   S c i   &   T e c h n o l ,   3 1 4 1   C h e s t n u t   S t ,   P h i l a d e l p h i a ,   P A   1 9 1 0 4   U S A . 	 K a t e . M c C a i n @ i s c h o o l . d r e x e l . e d u 	 	 	 	 	 A n s e l i n   L . ,   1 9 8 8 ,   S P A T I A L   E C O N O M E T R I C S ;   A V E R S A   E S ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 8 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 5 6 ;   B a s s e c o u l a r d   E ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 0 ,   P 8 5 9 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 0 3 1 5 - 1 ;   B E A V E R   D D ,   1 9 7 6 ,   S O C   S T U D   S C I ,   V 6 ,   P 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 6 0 0 6 0 0 1 0 5 ;   B o r g m a n   C L ,   2 0 0 2 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 6 ,   P 3 ;   B o r n m a n n   L ,   2 0 0 8 ,   J   D O C ,   V 6 4 ,   P 4 5 ,   D O I   1 0 . 1 1 0 8 / 0 0 2 2 0 4 1 0 8 1 0 8 4 4 1 5 0 ;   C O L E   J R ,   2 0 0 0 ,   W E B   K N O W L E D G E   F E S T S C ,   P 2 8 1 ;   C o s t a s   R ,   2 0 1 0 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 1 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 2 4 4 ;   C O Z Z E N S   S E ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 5 ,   P 4 3 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 0 6 4 ;   C R O N I N   B ,   1 9 9 4 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 5 ,   P 5 3 7 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 4 0 8 ) 4 5 : 7 < 5 3 7 : : A I D - A S I 8 > 3 . 0 . C O ; 2 - Q ;   D I O D A T O   V ,   1 9 8 4 ,   L I B R   I N F O R M   S C I   R E S ,   V 6 ,   P 3 8 3 ;   D o l f s m a   W ,   2 0 1 0 ,   J   E V O L   E C O N ,   V 2 0 ,   P 6 4 5 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 9 1 - 0 1 0 - 0 1 7 2 - 6 ;   F u r n e r   J ,   2 0 0 3 ,   J   L I B R   I N F   S C I ,   V 3 5 ,   P 1 8 9 ,   D O I   1 0 . 1 1 7 7 / 0 9 6 1 0 0 0 6 0 3 3 5 3 0 0 6 ;   G A R F I E L D   E ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 4 8 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 1 6 3 ;   G A R F I E L D   E ,   1 9 9 3 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 4 ,   P 2 9 8 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 3 0 6 ) 4 4 : 5 < 2 9 8 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - A ;   G A R F I E L D   E ,   1 9 7 5 ,   C U R R E N T   C O N T E N T S ;   G a r f i e l d   E . ,   1 9 7 9 ,   C I T A T I O N   I N D E X I N G   I T ;   G I L B E R T   G N ,   1 9 7 7 ,   S O C   S T U D   S C I ,   V 7 ,   P 1 1 3 ;   G r u p p   H ,   2 0 0 3 ,   R E S   E V A L U A T ,   V 1 2 ,   P 2 0 5 ,   D O I   1 0 . 3 1 5 2 / 1 4 7 1 5 4 4 0 3 7 8 1 7 7 6 5 8 2 ;   K e l l y   W a l t ,   1 9 7 2 ,   W E   H A V E   M E T   E N E M Y   H E ;   K E L L Y   W ,   1 9 7 0 ,   I M P O L L U T A B L E   P O G O ;   L E D E R B E R G   J ,   1 9 7 2 ,   N A T U R E ,   V 2 3 9 ,   P 2 3 4 ,   D O I   1 0 . 1 0 3 8 / 2 3 9 2 3 4 a 0 ;   L E O N A R D   R J ,   1 9 9 4 ,   E C O N   J ,   V 1 0 4 ,   P 4 9 2 ,   D O I   1 0 . 2 3 0 7 / 2 2 3 4 6 2 7 ;   L e v i t t   J M ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 7 ,   P 4 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 9 4 6 - y ;   L E W O N T I N   R C ,   1 9 8 5 ,   C U R R E N T   C O N T E N T S ;   L e y d e s d o r f f   L ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 3 9 1 ;   L e y d e s d o r f f   L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 1 ,   P 3 9 1 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 6 9 4 - z ;   L u c e   R D ,   1 9 5 7 ,   G A M E S   D E C I S I O N S   I N T R ;   M a r t e n s   B V D ,   2 0 0 6 ,   J   A M   S O C   I N F   S C I   T E C ,   V 5 7 ,   P 3 3 0 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 0 2 8 5 ;   M c C a i n   K W ,   2 0 0 6 ,   J   I N F   S C I ,   V 3 2 ,   P 2 7 7 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 0 6 0 6 4 3 9 7 ;   M C C A I N   K W ,   1 9 9 4 ,   K N O W L E D G E ,   V 1 5 ,   P 2 8 5 ;   M C C A I N   K W ,   1 9 8 9 ,   S C I E N T O M E T R I C S ,   V 1 7 ,   P 1 2 7 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 7 7 2 9 ;   M C C A I N   K W ,   2 0 0 9 ,   A S I S T   2 0 1 0   O C T   2 2   2 7 ;   M C C A I N   K W ,   2 0 1 1 ,   R H E T O R I C A L   F U N   U N P U B ;   M C C A I N   K W ,   2 0 1 1 ,   N O N E P O N Y M O U S   O   U N P U B ;   M c C a i n   R .   A . ,   2 0 1 0 ,   G A M E   T H E O R Y   N O N T E C H N ;   M E R T O N   R K ,   1 9 6 8 ,   S C I E N C E ,   V 1 5 9 ,   P 5 6 ,   D O I   1 0 . 1 1 2 6 / s c i e n c e . 1 5 9 . 3 8 1 0 . 5 6 ;   M E R T O N   R K ,   1 9 8 8 ,   I S I S ,   V 7 9 ,   P 6 0 6 ,   D O I   1 0 . 1 0 8 6 / 3 5 4 8 4 8 ;   M e r t o n   R K ,   1 9 7 3 ,   S O C I O L O G Y   S C I   T H E O R E ,   P 2 6 7 ;   M e r t o n   R .   K . ,   1 9 6 5 ,   S H O U L D E R S   G I A N T S   S H A ,   P 2 1 8 ;   M e s s e r i   P . ,   1 9 7 8 ,   1 9 7 8   A N N   M   A M   S O C   A S ;   M i l l e r   J a m e s   H . ,   2 0 0 3 ,   G A M E   T H E O R Y   W O R K   U S E ;   M o e d   H . ,   2 0 0 5 ,   C I T A T I O N   A N A L   R E S   E V ;   M o u l i n   H . ,   1 9 8 2 ,   G A M E   T H E O R Y   S O C I A L   S ;   M y e r s o n   R B ,   1 9 9 9 ,   J   E C O N   L I T ,   V 3 7 ,   P 1 0 6 7 ,   D O I   1 0 . 1 2 5 7 / j e l . 3 7 . 3 . 1 0 6 7 ;   N A S H   J ,   1 9 5 1 ,   A N N   M A T H ,   V 5 4 ,   P 2 6 8 ;   N A S H   J F ,   1 9 5 0 ,   P   N A T L   A C A D   S C I   U S A ,   V 3 6 ,   P 4 8 ,   D O I   1 0 . 1 0 7 3 / p n a s . 3 6 . 1 . 4 8 ;   N a s h   J ,   1 9 5 3 ,   E C O N O M E T R I C A ,   V 2 1 ,   P 1 2 8 ,   D O I   1 0 . 2 3 0 7 / 1 9 0 6 9 5 1 ;   N I C O L A I S E N   J ,   2 0 0 8 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 2 ,   P 6 0 9 ;   O E H L E R   K ,   1 9 9 0 ,   H I S T   P O L I T   E C O N ,   V 2 2 ,   P 1 0 1 ;   O R A N D   A M ,   1 9 9 2 ,   H I S T   P O L I T   E C O N ,   V 2 4 ,   P 1 7 7 ;   O R O M A N E R   M ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 7 ,   P 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 2 0 1 3 6 ;   P O R T E R   A L ,   1 9 8 5 ,   S C I E N T O M E T R I C S ,   V 8 ,   P 1 6 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 9 3 4 ;   P o r t e r   A L ,   2 0 0 7 ,   S C I E N T O M E T R I C S ,   V 7 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 0 0 - 5 ;   P o u n d s t o n e   W . ,   1 9 9 2 ,   P R I S O N E R S   D I L E M M A ;   d e   S o l l a   P r i c e   D e r e k   J . ,   1 9 6 5 ,   L I T T L E   S C I   B I G   S C I ;   R A P O P O R T   A ,   1 9 6 2 ,   B E H A V   S C I ,   V 7 ,   P 1 ;   R i d e r   R o b i n   E ,   1 9 9 2 ,   H I S T   G A M E   T H E O R Y ,   P 2 2 5 ;   R i k e r   W i l l i a m   H ,   1 9 9 2 ,   H I S T   G A M E   T H E O R Y ,   p [ 2 0 7 ,   2 1 8 ] ;   S a r a f o g l o u   N ,   2 0 0 8 ,   A N N   R E G I O N A L   S C I ,   V 4 2 ,   P 4 8 7 ,   D O I   1 0 . 1 0 0 7 / s 0 0 1 6 8 - 0 0 7 - 0 1 6 2 - 2 ;   S c h w a r t z   C A ,   1 9 9 7 ,   C O L L   R E S   L I B R ,   V 5 8 ,   P 1 9 ;   S I G M U N D   K ,   2 0 1 0 ,   M A T H   E V E R Y W H E R E ,   P 1 8 5 ;   S m a l l   H ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 6 0 ,   P 7 1 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 2 7 3 1 0 . 6 8 3 9 3 . b c ;   S m a l l   H ,   1 9 9 8 ,   S C I E N T O M E T R I C S ,   V 4 3 ,   P 1 4 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 4 5 8 4 0 3 ;   S m a l l   H . ,   1 9 8 0 ,   S C I E N T O M E T R I C S ,   V 2 ,   P 2 7 0 ;   S M A L L   H G ,   1 9 7 8 ,   S O C   S T U D   S C I ,   V 8 ,   P 3 2 7 ,   D O I   1 0 . 1 1 7 7 / 0 3 0 6 3 1 2 7 7 8 0 0 8 0 0 3 0 5 ;   S M I T H   J M ,   1 9 7 3 ,   N A T U R E ,   V 2 4 6 ,   P 1 5 ,   D O I   1 0 . 1 0 3 8 / 2 4 6 0 1 5 a 0 ;   S O U T H E R N   E M ,   1 9 7 5 ,   J   M O L   B I O L ,   V 9 8 ,   P 5 0 3 ,   D O I   1 0 . 1 0 1 6 / S 0 0 2 2 - 2 8 3 6 ( 7 5 ) 8 0 0 8 3 - 0 ;   S T E R N   R E ,   1 9 9 0 ,   J   A M   S O C   I N F O R M   S C I ,   V 4 1 ,   P 1 9 3 ,   D O I   1 0 . 1 0 0 2 / ( S I C I ) 1 0 9 7 - 4 5 7 1 ( 1 9 9 0 0 4 ) 4 1 : 3 < 1 9 3 : : A I D - A S I 5 > 3 . 0 . C O ; 2 - B ;   S t i g l e r   S M ,   1 9 8 0 ,   T   N E W   Y O R K   A C A D   S C I ,   V 3 9 ,   P 1 4 7 ,   D O I   [ D O I   1 0 . 1 1 1 1 / J . 2 1 6 4 - 0 9 4 7 . 1 9 8 0 . T B 0 2 7 7 5 . X ,   1 0 . 1 1 1 1 / j . 2 1 6 4 - 0 9 4 7 . 1 9 8 0 . t b 0 2 7 7 5 . x ] ;   S Z A V A K O V A T S   E ,   1 9 9 4 ,   J   I N F O R M   S C I ,   V 2 0 ,   P 5 5 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 9 4 0 2 0 0 0 1 0 7 ;   T H O M A S   K S ,   1 9 9 2 ,   S C I E N T O M E T R I C S ,   V 2 4 ,   P 4 0 5 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 5 1 0 3 8 ;   v a n   R a a n   A F J ,   2 0 0 4 ,   S C I E N T O M E T R I C S ,   V 5 9 ,   P 4 6 7 ,   D O I   1 0 . 1 0 2 3 / B : S C I E . 0 0 0 0 0 1 8 5 4 3 . 8 2 4 4 1 . f 1 ;   M o r g e n s t e r n   O ,   1 9 4 7 ,   T H E O R Y   G A M E S   E C   B E H A ;   M o r g e n s t e r n   O . ,   1 9 5 3 ,   T H E O R Y   G A M E S   E C   B E H A ;   v o n   N e u m a n n   J . ,   1 9 4 4 ,   T H E O R Y   G A M E S   E C   B E H A ;   W H I T E   H D ,   1 9 8 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 2 4 ,   P 1 1 9 ;   W i l s o n   C S ,   1 9 9 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 3 4 ,   P 1 0 7 ;   W o u t e r s   P . ,   1 9 9 9 ,   T H E S I S   U   A M S T E R D A M ;   Z U C K E R M A N   H ,   1 9 8 7 ,   S C I E N T O M E T R I C S ,   V 1 2 ,   P 3 2 9 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 6 6 7 5 ;   2 0 1 0 ,   H I S T C I T E 	 8 1 	 1 3 	 1 3 	 4 	 1 9 	 W I L E Y - B L A C K W E L L 	 M A L D E N 	 C O M M E R C E   P L A C E ,   3 5 0   M A I N   S T ,   M A L D E N   0 2 1 4 8 ,   M A   U S A 	 1 5 3 2 - 2 8 8 2 	 	 	 J   A M   S O C   I N F   S C I   T E C 	 J .   A m .   S o c .   I n f .   S c i .   T e c h n o l . 	 J U L 	 2 0 1 1 	 6 2 	 7 	 	 	 	 	 1 4 1 2 	 1 4 2 4 	 	 1 0 . 1 0 0 2 / a s i . 2 1 5 3 6 	 	 1 3 	 C o m p u t e r   S c i e n c e ,   I n f o r m a t i o n   S y s t e m s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 8 1 S L 	 W O S : 0 0 0 2 9 1 9 5 3 8 0 0 0 1 6 	 	 
 
 J 	 G u n s ,   R ;   L i u ,   Y X ;   M a h b u b a ,   D 	 	 	 	 G u n s ,   R a f ;   L i u ,   Y u   X i a n ;   M a h b u b a ,   D i l r u b a 	 	 	 Q - m e a s u r e s   a n d   b e t w e e n n e s s   c e n t r a l i t y   i n   a   c o l l a b o r a t i o n   n e t w o r k :   a   c a s e   s t u d y   o f   t h e   f i e l d   o f   i n f o r m e t r i c s 	 S C I E N T O M E T R I C S 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 C o - a u t h o r   c o l l a b o r a t i v e   n e t w o r k ;   G l o b a l i z a t i o n ;   G l o b a l   Q - m e a s u r e ;   L o c a l   Q - m e a s u r e ;   B e t w e e n n e s s ;   E x t e r n a l   i n t e r - g r o u p   g e o d e s i c ;   I n t e r n a l   i n t e r - g r o u p   g e o d e s i c ;   E v o l v e m e n t   o f   n e t w o r k 	 D I S A M B I G U A T I O N 	 W e   s t u d y   g l o b a l   a n d   l o c a l   Q - m e a s u r e s ,   a s   w e l l   a s   b e t w e e n n e s s   c e n t r a l i t y ,   a s   i n d i c a t o r s   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   r e s e a r c h .   A f t e r   a   b r i e f   r e v i e w   o f   t h e i r   d e f i n i t i o n s ,   w e   i n t r o d u c e   t h e   c o n c e p t s   o f   e x t e r n a l   a n d   i n t e r n a l   i n t e r - g r o u p   g e o d e s i c s .   T h e s e   c o n c e p t s   a r e   a p p l i e d   t o   a   c o l l a b o r a t i o n   n e t w o r k   o f   1 1 2 9   r e s e a r c h e r s   f r o m   d i f f e r e n t   c o u n t r i e s ,   w h i c h   i s   b a s e d   o n   p u b l i c a t i o n s   i n   b i b l i o m e t r i c s ,   i n f o r m e t r i c s ,   w e b o m e t r i c s ,   a n d   s c i e n t o m e t r i c s   ( B I W S   i n   s h o r t )   f r o m   t h e   p e r i o d   1 9 9 0 - 2 0 0 9 .   I t   i s   t h u s   i l l u s t r a t e d   h o w   i n t e r n a t i o n a l   c o l l a b o r a t i o n   ( a m o n g   a u t h o r s   f r o m   d i f f e r e n t   c o u n t r i e s )   i n   B I W S   i s   c a r r i e d   o u t .   O u r   r e s u l t s   s u g g e s t   t h a t   a v e r a g e   s c o r e s   f o r   l o c a l   Q - m e a s u r e s   a r e   t y p i c a l l y   h i g h e r ,   i n d i c a t i n g   a   r e l a t i v e l y   l o w   d e g r e e   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   B I W S .   T h e   d o m i n a t i n g   f o r m   o f   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i s   b i l a t e r a l ,   w h e r e a s   m u l t i l a t e r a l   c o l l a b o r a t i o n   i s   r e l a t i v e l y   r a r e   i n   t h e   f i e l d   o f   B I W S .   W e   a l s o   i d e n t i f y   a n d   v i s u a l i z e   t h e   m o s t   i m p o r t a n t   g l o b a l   a n d   l o c a l   a c t o r s .   D i v i d i n g   t h e   e n t i r e   p e r i o d   i n   f o u r   5 - y e a r   p e r i o d s ,   i t   i s   f o u n d   t h a t   m o s t   i n t e r n a t i o n a l   c o l l a b o r a t i o n   i n   t h e   f i e l d   h a s   h a p p e n e d   i n   t h e   l a s t   t i m e   s l i c e   ( 2 0 0 5 - 2 0 0 9 ) .   A   c o m p a r i s o n   o f   t h e   d i f f e r e n t   t i m e   s l i c e s   r e v e a l s   t h e   n o n - l i n e a r   g r o w t h   o f   t h e   i n d i c a t o r s   s t u d i e d   a n d   t h e   i n t e r n a t i o n a l   e x p a n s i o n   o f   t h e   f i e l d . 	 [ L i u ,   Y u   X i a n ]   L i b   T o n g j i   U n i v ,   S h a n g h a i   2 0 0 0 9 2 ,   P e o p l e s   R   C h i n a ;   [ G u n s ,   R a f ;   L i u ,   Y u   X i a n ]   U n i v   A n t w e r p ,   I B W ,   B - 2 0 0 0   A n t w e r p ,   B e l g i u m ;   [ M a h b u b a ,   D i l r u b a ]   A s i a n   U n i v   W o m e n ,   C h i t t a g o n g   4 0 0 0 ,   B a n g l a d e s h 	 L i u ,   Y X   ( r e p r i n t   a u t h o r ) ,   L i b   T o n g j i   U n i v ,   E l e c t   R e a d i n g   R o o m , S i p i n g   S t   1 2 3 9 ,   S h a n g h a i   2 0 0 0 9 2 ,   P e o p l e s   R   C h i n a . 	 r a f . g u n s @ u a . a c . b e ;   y x l i u @ l i b . t o n g j i . e d u . c n ;   d i l r u b a . m a h b u b a @ a u w . e d u . b d 	 G u n s ,   R a f / D - 6 7 6 2 - 2 0 1 2 ;   M a h b u b a ,   D i l r u b a / S - 5 7 3 1 - 2 0 1 6 ;   	 G u n s ,   R a f / 0 0 0 0 - 0 0 0 3 - 3 1 2 9 - 0 3 3 0 ;   L i u ,   Y u x i a n / 0 0 0 0 - 0 0 0 1 - 9 2 9 4 - 9 1 9 X ;   M a h b u b a ,   D i l r u b a / 0 0 0 0 - 0 0 0 2 - 6 6 9 3 - 6 9 6 6 	 	 	 B O R N E R   K ,   2 0 0 9 ,   P   I S S I   2 0 0 9   1 2   I N T   C ,   P 6 1 9 ;   B r a n d e s   U ,   2 0 0 1 ,   J   M A T H   S O C I O L ,   V 2 5 ,   P 1 6 3 ;   B r a n d e s   U ,   2 0 0 8 ,   S O C   N E T W O R K S ,   V 3 0 ,   P 1 3 6 ,   D O I   1 0 . 1 0 1 6 / j . s o c n e t . 2 0 0 7 . 1 1 . 0 0 1 ;   C h e n   L ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 4 ,   P 5 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 8 - 0 1 0 3 - 6 ;   E g g h e   L ,   2 0 0 5 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 1 ,   P 1 3 1 1 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 5 . 0 3 . 0 1 1 ;   E v e r e t t   M G ,   1 9 9 9 ,   J   M A T H   S O C I O L ,   V 2 3 ,   P 1 8 1 ;   F l o m   P .   L . ,   2 0 0 4 ,   C O N N E C T I O N S ,   V 2 6 ,   P 6 2 ;   F R E E M A N   L C ,   1 9 7 7 ,   S O C I O M E T R Y ,   V 4 0 ,   P 3 5 ,   D O I   1 0 . 2 3 0 7 / 3 0 3 3 5 4 3 ;   G i r v a n   M ,   2 0 0 2 ,   P   N A T L   A C A D   S C I   U S A ,   V 9 9 ,   P 7 8 2 1 ,   D O I   1 0 . 1 0 7 3 / p n a s . 1 2 2 6 5 3 7 9 9 ;   G U N S   R ,   2 0 0 9 ,   P   I S S I   2 0 0 9   1 2   I N T   C ,   P 1 3 1 ;   G u n s   R . ,   2 0 1 0 ,   G E O M A T I C S   I N F O R M   S C I ,   V 3 5 ,   P 1 1 2 ;   K a n g   I S ,   2 0 0 9 ,   I N F O R M   P R O C E S S   M A N A G ,   V 4 5 ,   P 8 4 ,   D O I   1 0 . 1 0 1 6 / j . i p m . 2 0 0 8 . 0 6 . 0 0 6 ;   L e y d e s d o r f f   L ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 1 3 2 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 0 2 4 ;   M c P h e r s o n   M ,   2 0 0 1 ,   A N N U   R E V   S O C I O L ,   V 2 7 ,   P 4 1 5 ,   D O I   1 0 . 1 1 4 6 / a n n u r e v . s o c . 2 7 . 1 . 4 1 5 ;   O t t e   E ,   2 0 0 2 ,   J   I N F O R M   S C I ,   V 2 8 ,   P 4 4 1 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 0 2 7 6 2 2 0 2 1 2 3 ;   R o u s s e a u   R . ,   2 0 0 5 ,   P   6 8   A S I S T   C ,   V 4 2 ,   P 6 7 5 ;   R o u s s e a u   R ,   2 0 0 8 ,   S C I E N T O M E T R I C S ,   V 7 5 ,   P 5 7 5 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 7 - 1 7 7 2 - 2 ;   S m a l h e i s e r   N R ,   2 0 0 9 ,   A N N U   R E V   I N F O R M   S C I ,   V 4 3 ,   P 2 8 7 ;   W a s s e r m a n   S ,   1 9 9 4 ,   S O C I A L   N E T W O R K   A N A L ;   Y a n   E J ,   2 0 0 9 ,   J   A M   S O C   I N F   S C I   T E C ,   V 6 0 ,   P 2 1 0 7 ,   D O I   1 0 . 1 0 0 2 / a s i . 2 1 1 2 8 	 2 0 	 1 3 	 1 3 	 4 	 4 4 	 S P R I N G E R 	 D O R D R E C H T 	 V A N   G O D E W I J C K S T R A A T   3 0 ,   3 3 1 1   G Z   D O R D R E C H T ,   N E T H E R L A N D S 	 0 1 3 8 - 9 1 3 0 	 1 5 8 8 - 2 8 6 1 	 	 S C I E N T O M E T R I C S 	 S c i e n t o m e t r i c s 	 A P R 	 2 0 1 1 	 8 7 	 1 	 	 	 	 	 1 3 3 	 1 4 7 	 	 1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 1 0 - 0 3 3 2 - 3 	 	 1 5 	 C o m p u t e r   S c i e n c e ,   I n t e r d i s c i p l i n a r y   A p p l i c a t i o n s ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 C o m p u t e r   S c i e n c e ;   I n f o r m a t i o n   S c i e n c e   &   L i b r a r y   S c i e n c e 	 7 2 5 S H 	 W O S : 0 0 0 2 8 7 6 6 5 9 0 0 0 1 0 	 	 
 
 J 	 A b r a m o ,   G ;   D ' A n g e l o ,   C A ;   D i   C o s t a ,   F ;   S o l a z z i ,   M 	 	 	 	 A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ;   S o l a z z i ,   M a r c o 	 	 	 T h e   r o l e   o f   i n f o r m a t i o n   a s y m m e t r y   i n   t h e   m a r k e t   f o r   u n i v e r s i t y - i n d u s t r y   r e s e a r c h   c o l l a b o r a t i o n 	 J O U R N A L   O F   T E C H N O L O G Y   T R A N S F E R 	 	 	 E n g l i s h 	 A r t i c l e 	 	 	 	 	 	 U n i v e r s i t y - i n d u s t r y   c o l l a b o r a t i o n ;   G e o g r a p h i c a l   p r o x i m i t y ;   I n f o r m a t i o n   a s y m m e t r y ;   B i b l i o m e t r i c s ;   C o - a u t h o r s h i p ;   I t a l y 	 R E S E A R C H - A N D - D E V E L O P M E N T ;   I N N O V A T I O N ;   P R O X I M I T Y ;   C O M M U N I C A T I O N ;   T E C H N O L O G I E S ;   I M P A C T 	 T h i s   s t u d y   c o n c e r n s   t h e   m a r k e t   f o r   r e s e a r c h   c o l l a b o r a t i o n   b e t w e e n   i n d u s t r y   a n d   u n i v e r s i t i e s .   I t   p r e s e n t s   a n   a n a l y s i s   o f   t h e   p o p u l a t i o n   o f   a l l   I t a l i a n   u n i v e r s i t y - i n d u s t r y   c o l l a b o r a t i o n s   t h a t   r e s u l t e d   i n   a t   l e a s t   o n e   i n t e r n a t i o n a l   s c i e n t i f i c   p u b l i c a t i o n   b e t w e e n   2 0 0 1   a n d   2 0 0 3 .   U s i n g   s p a t i a l   a n d   b i b l i o m e t r i c   a n a l y s i s   r e l a t i n g   t o   s c i e n t i f i c   o u t p u t   o f   u n i v e r s i t y   r e s e a r c h e r s ,   t h e   s t u d y   s h o w s   t h e   i m p o r t a n c e   o f   g e o g r a p h i c   p r o x i m i t y   i n   c o m p a n i e s '   c h o i c e s   o f   u n i v e r s i t y   p a r t n e r .   T h e   a n a l y s i s   a l s o   r e v e a l s   i n e f f i c i e n c y   i n   t h e   m a r k e t :   i n   a   l a r g e   p r o p o r t i o n   o f   c a s e s   p r i v a t e   c o m p a n i e s   c o u l d   h a v e   c h o s e n   m o r e   q u a l i f i e d   r e s e a r c h   p a r t n e r s   i n   u n i v e r s i t i e s   l o c a t e d   c l o s e r   t o   t h e   p l a c e   o f   b u s i n e s s . 	 [ A b r a m o ,   G i o v a n n i ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   N a t l   R e s   C o u n c i l   I t a l y ,   I - 0 0 1 3 3   R o m e ,   I t a l y ;   [ A b r a m o ,   G i o v a n n i ;   D ' A n g e l o ,   C i r i a c o   A n d r e a ;   D i   C o s t a ,   F l a v i a ;   S o l a z z i ,   M a r c o ]   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   D e p t   M a n a g e m e n t ,   L a b   S t u d i e s   R e s   &   T e c h n o l   T r a n s f e r ,   I - 0 0 1 3 3   R o m e ,   I t a l y 	 A b r a m o ,   G   ( r e p r i n t   a u t h o r ) ,   U n i v   R o m a   T o r   V e r g a t a ,   S c h   E n g n ,   N a t l   R e s   C o u n c i l   I t a l y ,   V i a   P o l i t e c n   1 ,   I - 0 0 1 3 3   R o m e ,   I t a l y . 	 a b r a m o @ d i s p . u n i r o m a 2 . i t ;   d a n g e l o @ d i s p . u n i r o m a 2 . i t 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / J - 8 1 6 2 - 2 0 1 2 	 D ' A N G E L O ,   C i r i a c o   A n d r e a / 0 0 0 0 - 0 0 0 2 - 6 9 7 7 - 6 6 1 1 	 	 	 A B R A M O   G ,   2 0 0 8 ,   T E C H N O V A T I O   I N   P R E S S ;   A b r a m o   G ,   2 0 0 8 ,   R E S   E V A L U A T ,   V 1 7 ,   P 1 1 1 ,   D O I   1 0 . 3 1 5 2 / 0 9 5 8 2 0 2 0 8 X 2 8 0 9 1 6 ;   A n t o n e l l i   C ,   2 0 0 0 ,   R E G   S T U D ,   V 3 4 ,   P 5 3 5 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 0 5 0 0 8 5 6 5 7 ;   A r u n d e l   A . ,   2 0 0 4 ,   E C   I N N O V A T I O N   N E W   T E ,   V 1 3 ,   P 5 5 9 ,   D O I   D O I   1 0 . 1 0 8 0 / 1 0 4 3 8 5 9 0 9 2 0 0 0 2 3 4 3 1 1 ;   B o s c h m a   R A ,   2 0 0 5 ,   R E G   S T U D ,   V 3 9 ,   P 6 1 ,   D O I   1 0 . 1 0 8 0 / 0 0 3 4 3 4 0 0 5 2 0 0 0 3 2 0 8 8 7 ;   C a i r n c r o s s   F r a n c e s ,   1 9 9 7 ,   D E A T H   D I S T A N C E   C O M M U ;   C o h e n   W M ,   2 0 0 2 ,   M A N A G E   S C I ,   V 4 8 ,   P 1 ,   D O I   1 0 . 1 2 8 7 / m n s c . 4 8 . 1 . 1 . 1 4 2 7 3 ;   * E C   C O M M   E U R   C O M M ,   1 9 9 5 ,   6 8 8   C O M   E C   C O M M   E U R ;   G l a n z e l   W ,   2 0 0 4 ,   H A N D B O O K   O F   Q U A N T I T A T I V E   S C I E N C E   A N D   T E C H N O L O G Y   R E S E A R C H :   T H E   U S E   O F   P U B L I C A T I O N   A N D   P A T E N T   S T A T I S T I C S   I N   S T U D I E S   O F   S & T   S Y S T E M S ,   P 2 5 7 ;   H a l l o w e l l   E M ,   1 9 9 9 ,   H A R V A R D   B U S   R E V ,   V 7 7 ,   P 5 8 ;   H A N D Y   C ,   1 9 9 5 ,   H A R V A R D   B U S   R E V ,   V 7 3 ,   P 4 0 ;   J A F F E   A B ,   1 9 9 3 ,   Q   J   E C O N ,   V 1 0 8 ,   P 5 7 7 ,   D O I   1 0 . 2 3 0 7 / 2 1 1 8 4 0 1 ;   J A F F E   A B ,   1 9 8 9 ,   A M   E C O N   R E V ,   V 7 9 ,   P 9 5 7 ;   K A T Z   J S ,   1 9 9 4 ,   S C I E N T O M E T R I C S ,   V 3 1 ,   P 3 1 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 0 1 8 1 0 0 ;   K a t z   J S ,   1 9 9 7 ,   R E S   P O L I C Y ,   V 2 6 ,   P 1 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 9 1 7 - 1 ;   L a n g   W . ,   2 0 0 5 ,   R E G   S T U D   A S S   I N T   C   R ;   L A U D E L   G ,   2 0 0 1 ,   P   8   I N T   C   S C I   I N F   S Y ,   V 1 ,   P 3 6 9 ;   L e e   Y .   S . ,   2 0 0 0 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 5 ,   P 1 1 1 ,   D O I   D O I   1 0 . 1 0 2 3 / A : 1 0 0 7 8 9 5 3 2 2 0 4 2 ;   L i n d e l o f   P . ,   2 0 0 4 ,   J   T E C H N O L O G Y   T R A N S F E ,   V 2 9 ,   P 3 1 1 ,   D O I   [ 1 0 . 1 0 2 3 / B : J O T T . 0 0 0 0 0 3 4 1 2 5 . 2 9 9 7 9 . a e ,   D O I   1 0 . 1 0 2 3 / B : J 0 T T . 0 0 0 0 0 3 4 1 2 5 . 2 9 9 7 9 . A E ] ;   M a g g i o n i   M .   A . ,   2 0 0 7 ,   A P P L   E V O L U T I O N A R Y   E C ;   M a n s f i e l d   E ,   1 9 9 6 ,   R E S   P O L I C Y ,   V 2 5 ,   P 1 0 4 7 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 6 ) 0 0 8 9 3 - 1 ;   M e l i n   G ,   1 9 9 6 ,   S C I E N T O M E T R I C S ,   V 3 6 ,   P 3 6 3 ,   D O I   1 0 . 1 0 0 7 / B F 0 2 1 2 9 6 0 0 ;   M e y e r - K r a h m e r   F ,   1 9 9 8 ,   R E S   P O L I C Y ,   V 2 7 ,   P 8 3 5 ,   D O I   1 0 . 1 0 1 6 / S 0 0 4 8 - 7 3 3 3 ( 9 8 ) 0 0 0 9 4 - 8 ;   M o e d   H F ,   1 9 9 6 ,   N A T U R E ,   V 3 8 1 ,   P 1 8 6 ,   D O I   1 0 . 1 0 3 8 / 3 8 1 1 8 6 a 0 ;   O l s o n   G M ,   2 0 0 0 ,   H U M - C O M P U T   I N T E R A C T ,   V 1 5 ,   P 1 3 9 ,   D O I   1 0 . 1 2 0 7 / S 1 5 3 2 7 0 5 1 H C I 1 5 2 3 _ 4 ;   P o n d   R ,   2 0 0 7 ,   P A P   R E G   S C I ,   V 8 6 ,   P 4 2 3 ,   D O I   1 0 . 1 1 1 1 / j . 1 4 3 5 - 5 9 5 7 . 2 0 0 7 . 0 0 1 2 6 . x ;   P r a b h u   G N ,   1 9 9 9 ,   T E C H N O V A T I O N ,   V 1 9 ,   P 4 9 5 ,   D O I   1 0 . 1 0 1 6 / S 0 1 6 6 - 4 9 7 2 ( 9 8 ) 0 0 1 2 5 - 4 ;   R o b e r t s   J ,   2 0 0 0 ,   T E C H N O L   A N A L   S T R A T E G ,   V 1 2 ,   P 4 2 9 ,   D O I   1 0 . 1 0 8 0 / 7 1 3 6 9 8 4 9 9 ;   S H A P I R O   C ,   2 0 0 2 ,   I N F O R M   R U L E S   S T R A T E G ;   S U B R A M A N Y A M   K ,   1 9 8 3 ,   J   I N F O R M   S C I ,   V 6 ,   P 3 3 ,   D O I   1 0 . 1 1 7 7 / 0 1 6 5 5 5 1 5 8 3 0 0 6 0 0 1 0 5 ;   T o w n s e n d   A .   M . ,   1 9 9 8 ,   A C A D   M A N A G E M E N T   E X E C ,   V 1 2 ,   P 1 7 ,   D O I   D O I   1 0 . 5 4 6 5 / A M E . 1 9 9 8 . 1 1 0 9 0 4 7 ;   * V T R   C I V R ,   2 0 0 6 ,   V T R   2 0 0 1   2 0 0 3   R I S   V A ;   W e i n g a r t   P ,   2 0 0 5 ,   S C I E N T O M E T R I C S ,   V 6 2 ,   P 1 1 7 ,   D O I   1 0 . 1 0 0 7 / s 1 1 1 9 2 - 0 0 5 - 0 0 0 7 - 7 	 3 3 	 1 3 	 1 3 	 2 	 3 1 	 S P R I N G E R 	 N E W   Y O R K 	 2 3 3   S P R I N G   S T ,   N E W   Y O R K ,   N Y   1 0 0 1 3   U S A 	 0 8 9 2 - 9 9 1 2 	 	 	 J   T E C H N O L   T R A N S F E R 	 J .   T e c h n o l .   T r a n s f . 	 F E B 	 2 0 1 1 	 3 6 	 1 	 	 	 	 	 8 4 	 1 0 0 	 	 1 0 . 1 0 0 7 / s 1 0 9 6 1 - 0 0 9 - 9 1 3 1 - 5 	 	 1 7 	 E n g i n e e r i n g ,   I n d u s t r i a l ;   M a n a g e m e n t 	 E n g i n e e r i n g ;   B u s i n e s s   &   E c o n o m i c s 	 7 0 9 U F 	 W O S : 0 0 0 2 8 6 4 6 6 2 0 0 0 0 5 	 	 
 
 